Selon Cloudflare, les agents d’IA sont la nouvelle norme, c’est pourquoi l’entreprise mise sur le Markdown pour une meilleure exploration du contenu web.
Cloudflare reconnaît le passage des moteurs de recherche classiques aux agents d’IA en proposant automatiquement les sites web dans le langage de balisage markdown. Ainsi, les machines peuvent traiter le contenu web de manière plus efficace et plus correcte.
Du SEO à la découverte par l’IA
Auparavant, vous deviez être visible en ligne en attirant des visiteurs humains vers votre site web via le SEO et les moteurs de recherche. Aujourd’hui, la tendance se déplace de plus en plus vers les robots d’exploration et les agents d’IA. Ces systèmes ne gèrent pas de manière optimale les pages HTML remplies de scripts, de navigation et de mise en forme. Selon Cloudflare, cela nécessite une approche fondamentalement différente : donner la priorité aux agents.
Pourquoi le markdown fait la différence
Le Markdown est plus compact que l’HTML. Un simple titre ne coûte que quelques tokens en markdown, alors que le même contenu en HTML utilise beaucoup plus d’espace de tokens en raison des balises et de la mise en forme. Cloudflare indique qu’un article de blog en markdown peut consommer jusqu’à 80 % de tokens en moins que sa version HTML. Cela permet un traitement plus économique, plus rapide et plus précis pour les systèmes d’IA.
Avec Markdown for Agents, Cloudflare peut désormais convertir directement les pages HTML en markdown. Pour ce faire, les agents d’IA n’ont qu’à envoyer un en-tête Accept: text/markdown. Le réseau Cloudflare récupère le HTML à la source, le convertit automatiquement et renvoie une version markdown, incluant un en-tête indiquant le nombre estimé de tokens.
Contrôle via les Content Signals
Les réponses en markdown contiennent par défaut des Content Signals qui indiquent si le contenu peut être utilisé pour l’entraînement de l’IA, la recherche ou les applications d’agents. Ainsi, les créateurs de contenu conservent un meilleur contrôle sur la manière dont leurs informations sont exploitées, tandis que les systèmes d’IA obtiennent des précisions sur les utilisations autorisées.
Markdown for Agents est disponible en version bêta gratuite pour les clients Pro, Business et Enterprise de Cloudflare. Pour les organisations qui souhaitent rester visibles dans un web piloté par l’IA, il s’agit d’une première étape concrète vers un contenu non seulement lisible par les humains, mais aussi utilisable de manière optimale par les machines.