Aller au contenu
Waseit
← Tous les articles
AEOGEO

1 227 requêtes vers llms.txt, zéro robot d'IA : il n'y a pas de fichier à poser

Les robots d'IA prennent des milliers de pages pour un visiteur renvoyé, et le fichier censé leur parler n'est lu par aucun d'eux. Ce que disent les mesures publiées.

0 sur 1 227

les requêtes vers llms.txt venant d'un robot des grands laboratoires, dans une étude de journaux serveur

3 septembre 20269 min de lecture
Dans cet article
  1. L'échange est déséquilibré, et il se chiffre
  2. Le fichier que personne ne lit
  3. Ce que Google en dit, officiellement
  4. Pourquoi il n'y a pas de fichier à poser
  5. Ce que cela change

Réponse courte : on ne configure pas sa visibilité dans les réponses d'IA. Deux mesures le disent ensemble. D'un côté, les robots des grands modèles prennent des centaines à des milliers de pages pour chaque visiteur qu'ils renvoient. De l'autre, le fichier llms.txt que le métier s'est mis à poser à la racine des sites n'est demandé par aucun robot des grands laboratoires, et Google déclare l'ignorer. Il n'y a pas de porte de service : ce qui se joue se joue dans le corpus.

3 389 : 1

les pages prises par le robot de Mistral pour un visiteur renvoyé (Cloudflare Radar, juillet 2026)

aucune

corrélation mesurée entre publier llms.txt et être cité, sur environ 300 000 domaines

Il n'y a pas de fichier à poser à la racine pour exister dans une réponse d'IA. La visibilité se gagne dans le corpus, elle ne se déclare pas.

L'échange est déséquilibré, et il se chiffre

Cloudflare publie un indicateur simple et brutal : le rapport entre le nombre de pages qu'une plateforme d'IA vient lire sur un site et le nombre de visiteurs qu'elle lui renvoie. La définition est mécanique. On compte les requêtes HTML venant des agents d'une plateforme, et on les divise par les requêtes HTML dont l'en-tête d'origine porte le nom de cette plateforme.

Pages lues pour un visiteur renvoyé, relevé sur Cloudflare Radar, fenêtre de 28 jours close le 21 juillet 2026. Un rapport se lit comme un instantané : il bouge vite.
PlateformePages prises pour un visiteur renvoyé
Mistral3 389 : 1
Anthropic2 237 : 1
OpenAI (GPTBot)217 : 1
DuckDuckGo2,5 : 1

L'ordre de grandeur compte plus que la décimale, et il a beaucoup bougé en 2026 : le rapport d'Anthropic se comptait en dizaines de milliers au premier trimestre avant de tomber à quelques milliers l'été. La direction est la bonne, le déséquilibre reste entier. Pour un site, cela veut dire que la lecture par les machines est déjà la norme, pendant que la visite humaine qui la payait devient l'exception.

Une précision que Cloudflare apporte elle-même et que la reprise oublie souvent : le trafic renvoyé par l'application native de Claude ne porte pas d'en-tête d'origine. Ces renvois-là sont donc invisibles au dénominateur, et Cloudflare écrit que ses rapports peuvent surestimer le déséquilibre, sans pouvoir dire de combien. Le sens du constat tient ; sa précision, non.

Le fichier que personne ne lit

Devant ce déséquilibre, le métier a proposé une réponse simple : llms.txt, un fichier posé à la racine du site pour dire aux modèles quoi lire et comment. L'idée est séduisante. Elle a un défaut : les robots ne le demandent pas.

Une étude de journaux serveur menée de septembre 2025 à avril 2026 sur environ 900 domaines a relevé 1 227 requêtes vers ces fichiers, et pas une seule provenant d'un robot vérifié des grands laboratoires - ni GPTBot, ni ClaudeBot, ni PerplexityBot, ni Google-Extended. Les demandeurs étaient un agrégateur commercial de données pour 794 requêtes, soit 64,7 %, et des navigateurs humains pour 392, soit 31,9 %. Autrement dit : ceux qui lisent le fichier sont ceux qui vendent des outils autour, et les curieux.

Le taux d'adoption, lui, dépend entièrement de qui l'on regarde, et c'est pourquoi on lit tout et son contraire.

Taux d'adoption de llms.txt selon l'échantillon. Le même objet mesuré sur quatre populations donne quatre réponses : citer un seul de ces chiffres induit en erreur.
Échantillon mesuréAdoption
Panel de 218 hôtes orientés développeurs (août 2026)51,8 %
Top 1 000 Tranco, racines joignables (juin 2026)15,8 %
Environ 300 000 domaines (novembre 2025)10,13 %
Top 1 000 Tranco, ensemble (juin 2026)8,7 %

Et sur la question qui décide de tout, l'étude de corrélation menée sur environ 300 000 domaines ne trouve aucune association mesurable entre publier ce fichier et être cité par les modèles. Retirer la variable améliorait même la justesse du modèle statistique, ce qui est la façon polie de dire qu'elle apportait du bruit.

Ce que Google en dit, officiellement

La position n'est pas ambiguë. La documentation de Google, mise à jour en juin 2026, indique que le fichier n'a aucun effet, ni positif ni négatif, sur le classement dans la recherche ou dans les AI Overviews, et que la recherche l'ignore simplement. L'équipe Chrome a de son côté ajouté en mai 2026 un contrôle llms.txt à Lighthouse, mais rangé dans les audits de navigation agentique et non dans les audits SEO, et il ne signale qu'une erreur serveur, jamais un fichier absent.

Ce classement en dit long : le fichier est traité comme un objet destiné à des agents qui parcourent le web pour un utilisateur, pas comme un signal de référencement. Le poser ne coûte presque rien et ne fait pas de mal. Il ne faut simplement pas en attendre une visibilité.

Pourquoi il n'y a pas de fichier à poser

Les deux mesures se répondent. Les modèles lisent massivement le web ouvert, y compris vos pages, et ils le font sans passer par une porte que vous auriez ouverte. Ce qu'ils retiennent de vous ne vient donc pas d'une déclaration faite à la racine de votre domaine, mais de ce qui se dit de vous à travers un corpus que vous ne contrôlez pas.

C'est l'exact prolongement de ce que montre la comparaison entre moteurs : ils ne lisent pas les mêmes sources, et ils s'accordent pourtant bien davantage sur les noms qu'ils recommandent. Un fichier de configuration ne peut rien contre cela, dans un sens comme dans l'autre. Ce qui pèse est la cohérence de ce qui est écrit sur vous, partout, et la possibilité pour une machine de l'attribuer.

  • Un rapport de collecte est un instantané, pas une constante.

    Les chiffres de Cloudflare bougent d'un mois à l'autre et ont chuté d'un ordre de grandeur au cours de 2026. Comparer un relevé de juillet à un relevé de mars n'a pas de sens, et nous ne les avons pas mesurés nous-mêmes.

  • Cloudflare avertit que ses propres rapports peuvent surestimer le déséquilibre.

    Les renvois de l'application native de Claude n'envoient pas d'en-tête d'origine et manquent donc au dénominateur. L'entreprise le dit et précise qu'elle ignore l'ampleur du biais : nous reprenons l'avertissement avec le chiffre.

  • L'étude des journaux serveur est petite.

    1 227 requêtes sur environ 900 domaines : c'est assez pour constater qu'aucun robot des grands laboratoires ne s'y présente, ce n'est pas assez pour affirmer qu'aucun ne le fera jamais, ni pour parler au nom de tout le web.

  • Les taux d'adoption ne sont pas comparables entre eux.

    De 8,7 % à 51,8 % selon l'échantillon, pour le même objet : la différence tient à la population observée, pas à une évolution. Un article qui n'en cite qu'un seul, sans dire lequel, ne vous apprend rien.

Ce que cela change

Ne comptez pas sur un fichier.

Poser llms.txt est peu coûteux et sans danger, mais aucune mesure publiée ne le relie à une citation. Ce n'est pas un levier de visibilité, c'est au mieux une politesse envers des agents qui n'existent pas encore.

Lisez vos propres journaux.

Vous saurez en une requête quels robots viennent chez vous, à quelle fréquence, et ce qu'ils demandent. C'est la seule donnée de ce dossier que vous pouvez produire vous-même, et elle vaut mieux qu'une moyenne mondiale.

Décidez ce que vous laissez prendre.

Le rapport entre pages lues et visiteurs renvoyés est une négociation, pas une fatalité. Autoriser, ralentir ou bloquer un agent est une décision commerciale qui vous appartient, et qui se prend robot par robot.

Mesurez la citation, pas la conformité.

Avoir coché les cases techniques ne dit rien de votre présence dans une réponse. La question utile reste : votre nom sort-il, sur quel moteur, et à côté de qui.

Questions fréquentes

Faut-il quand même publier un fichier llms.txt ?
Vous pouvez, cela ne nuit pas et le coût est proche de zéro. Mais aucune mesure publiée ne montre d'effet sur la citation : une étude portant sur environ 300 000 domaines ne trouve aucune association, et Google indique depuis juin 2026 que le fichier n'a aucun effet sur le classement ni sur les AI Overviews. Publiez-le si vous voulez documenter votre site pour de futurs agents, pas pour gagner en visibilité.
Dois-je bloquer les robots d'IA ?
C'est une décision commerciale, pas technique, et elle se prend robot par robot. Les rapports publiés montrent des écarts considérables entre plateformes, de quelques milliers de pages prises pour un visiteur renvoyé à un rapport proche de l'équilibre. Bloquer protège vos pages mais vous retire aussi des réponses où vos concurrents resteront. Regardez d'abord vos journaux, puis tranchez source par source.
Si le fichier ne sert à rien, qu'est-ce qui marche ?
Ce que les mesures désignent, c'est la cohérence de ce qui se dit de vous là où les moteurs lisent réellement, et la possibilité pour une machine d'attribuer une affirmation à une source. Les leviers testés dans la recherche sur l'optimisation pour moteurs génératifs sont éditoriaux : citer des sources, rapporter des propos, avancer des chiffres, écrire clairement. Rien qui se pose à la racine d'un domaine.