llms.txt
llms.txt est une norme proposée pour un fichier Markdown à la racine d'un site web (/llms.txt) qui donne aux modèles d'IA un aperçu court et structuré du site et des liens vers son contenu le plus utile.
llms.txt est un fichier texte brut au format Markdown qu'un site web place à sa racine, par exemple example.com/llms.txt. L'idée est d'offrir aux modèles de langage un résumé clair du contenu du site et une liste organisée de ses pages les plus importantes, sans les menus, scripts et publicités qui rendent les pages web normales difficiles à traiter. Le format a été proposé en 2024 par Jeremy Howard de Answer.AI et a depuis été adopté par de nombreux sites de documentation et entreprises de logiciels.
Ce que contient le fichier
La proposition décrit une structure simple :
- Un titre avec le nom du site ou du projet.
- Un court résumé dans un bloc de citation expliquant ce que le site offre.
- Paragraphes supplémentaires facultatifs avec un contexte clé.
- Sections avec des listes de liens vers des pages importantes, chacune avec une brève description.
Certains sites publient également un llms-full.txt fichier contenant le texte intégral de leur documentation dans un seul document, afin qu'un outil d'IA puisse tout charger en une seule fois.
Ça marche ?
C'est là qu'il faut gérer les attentes. llms.txt est une proposition communautaire, pas une norme web officielle, et les grands fournisseurs de recherche IA n'ont pas confirmé qu'ils l'utilisent pour choisir ou classer les sources. Google a déclaré ne pas utiliser llms.txt pour la recherche ou les AI Overviews. En pratique, le fichier est surtout utile pour les outils de développement et les assistants de codage qui sont orientés vers la documentation, et pour les agents IA à qui il est explicitement demandé de le lire.
Ce n'est pas non plus un moyen de contrôler l'accès. llms.txt ne bloque ni n'autorise les robots d'exploration. Cela reste le rôle de robots.txt.
Devriez-vous en ajouter un ?
Pour la plupart des sites, c'est un ajout à faible effort et à faible risque. Si vous gérez un produit logiciel, une API ou un site riche en connaissances, un llms.txt peut faciliter la tâche des outils d'IA pour trouver les bonnes pages. Pour un site d'entreprise ou d'éditeur typique, l'effet sur la visibilité dans les réponses de l'IA est probablement faible. Votre temps est mieux dépensé pour l'explorabilité, un contenu clair et des mentions sur des sites de confiance.
Conseils si vous en créez un
- Restez bref et concentrez-vous sur les pages qui répondent à de vraies questions.
- Utilisez des textes de lien descriptifs et des descriptions d'une ligne.
- Mettez-le à jour lorsque vous ajoutez ou supprimez du contenu important.
- Assurez-vous que les pages liées sont accessibles aux robots d'exploration et ne sont pas bloquées dans robots.txt.
Erreurs courantes
Traiter llms.txt comme un facteur de classement, y copier un sitemap entier, ou l'utiliser pour tenter de diriger les outils d'IA avec des allégations promotionnelles.
Questions sur llms.txt
À quoi sert llms.txt ?
Il fournit aux outils d'IA un résumé court et structuré d'un site web et des liens vers ses pages clés en Markdown, ce qui facilite le traitement du contenu par les modèles linguistiques.
Google utilise-t-il llms.txt ?
Non. Google a déclaré ne pas utiliser llms.txt pour la recherche ou les AI Overviews.
llms.txt est-il identique à robots.txt ?
Non. robots.txt indique aux robots ce qu'ils peuvent accéder. llms.txt offre seulement un aperçu du contenu et ne contrôle pas l'accès.