Réponses des IA

llms.txt ou robots.txt : à quoi sert chaque fichier, lequel faut-il ?

Mis à jour le · Éditeur: AMA CLASS, K.K. (en anglais)

En bref

robots.txt contrôle les URL que les robots d’exploration peuvent récupérer, et les moteurs de recherche l’utilisent depuis des années. llms.txt est une proposition plus récente : un résumé de votre site en Markdown pour les outils d’IA. Google indique que la recherche Google n’utilise pas llms.txt : il n’aide ni ne nuit à votre visibilité dans Google. Vérifiez d’abord robots.txt. Considérer llms.txt comme facultatif est notre avis.

Ce que fait robots.txt

robots.txt est un fichier texte placé à la racine de votre site, par exemple https://www.example.com/robots.txt. Selon Google, il indique aux robots d’exploration les URL auxquelles ils peuvent accéder et sert surtout à gérer le trafic des robots.

Ce n’est pas un moyen d’exclure une page de Google. Google renvoie pour cela à noindex ou à une protection par mot de passe, car une URL bloquée peut tout de même apparaître si d’autres sites pointent vers elle. Google précise aussi que les robots sérieux respectent les règles, mais que d’autres peuvent ne pas le faire.

Ce qu’est llms.txt

llms.txt est une proposition publiée sur llmstxt.org en septembre 2024. Elle décrit un fichier Markdown qui donne aux outils d’IA un guide court et choisi de votre site. La seule partie obligatoire est un titre principal avec le nom du site. Parmi les parties facultatives : un résumé d’une ligne et des listes de liens.

La proposition reste ouverte aux contributions : lisez-la comme une suggestion en discussion plutôt que comme une norme établie. C’est notre lecture.

Ce qui distingue les deux fichiers

La proposition llms.txt elle-même dit que les deux fichiers ont des rôles différents. robots.txt indique quel accès automatisé est acceptable. llms.txt est fait pour être lu à la demande, quand un outil d’IA a besoin d’informations pour aider un utilisateur.

  • robots.txt : des règles d’accès. Lu par les robots des moteurs de recherche et de l’IA. Une erreur peut empêcher les moteurs d’explorer votre site
  • llms.txt : un résumé du contenu. Non utilisé par la recherche Google. Une erreur signifie surtout un résumé périmé
  • Sitemap : la liste des pages que vous voulez faire trouver. La proposition précise qu’un sitemap ne peut pas remplir le rôle de llms.txt

Ce que Google dit de llms.txt

Le guide de Google sur les fonctionnalités d’IA générative indique qu’il n’est pas nécessaire de créer de nouveaux fichiers lisibles par les machines, des fichiers texte pour l’IA ou du Markdown pour apparaître dans la recherche Google, car celle-ci ne les utilise pas. Il ajoute que créer un fichier llms.txt pour d’autres services ne pose pas de problème, et que cela ne nuira ni n’aidera à votre visibilité ou à votre classement dans la recherche Google.

Pour être éligible aux fonctionnalités d’IA de la recherche Google, une page doit, selon Google, être indexée et pouvoir s’afficher avec un extrait, et le site ne doit pas être exclu dans le paramètre de contrôle de l’IA générative dans la recherche de la Search Console.

Ce que vous pouvez vérifier aujourd’hui

L’ordre est notre recommandation. Un seul point aujourd’hui suffit.

  • Ouvrez votresite.fr/robots.txt et cherchez « Disallow: / » sous « User-agent: * ». Vérifiez aussi s’il existe un groupe propre à Googlebot : Google applique le groupe correspondant le plus précis. Demandez à la personne qui gère le site pourquoi un blocage inattendu existe avant de le modifier
  • Recherchez le nom de votre entreprise et vérifiez que vos pages apparaissent
  • Si vous voulez tout de même un llms.txt, gardez-le cohérent avec vos pages et décidez qui le met à jour

Notre propre site n’a pas de llms.txt au 8 novembre 2026. Nous en ajouterons un si un service sur lequel nous nous appuyons le demande dans sa documentation officielle.

Notre place dans tout cela

Get1pct est un service qui envoie jusqu’à trois corrections concrètes les jours où des idées pertinentes sont disponibles, y compris des vérifications comme celles-ci. Il ne peut pas promettre une place dans les réponses des IA. Consultez les indications de cette page pour connaître la disponibilité et les conditions actuelles. Vous pouvez aussi laisser votre adresse e-mail pour recevoir une seule notification de disponibilité.

Sources