robots.txt : un protocole de contrôle d’exploration
Le fichier /robots.txt permet de définir des règles par agent utilisateur. Il ne remplace ni l’authentification ni les contrôles d’accès serveur et ne garantit pas l’absence d’indexation.
Une mauvaise règle peut empêcher l’exploration de pages importantes. Toute modification doit être testée et surveillée.
llms.txt : une convention proposée
Le fichier llms.txt propose une sélection de liens et d’explications dans un format textuel lisible. Sa présence n’établit pas qu’un moteur ou assistant l’utilise pour classer ou citer un site.
Ne le présentez pas comme une obligation SEO ou GEO. Priorisez d’abord les pages accessibles, la qualité du contenu et les pratiques techniques documentées.
Choisir les contrôles pertinents
Auditez robots.txt pour détecter des restrictions involontaires ; documentez llms.txt comme un signal descriptif facultatif. Un score global ne doit pas attribuer à ce dernier un effet de visibilité non démontré.