Maturité IA à la racine
robots.txt + llms.txt, 27 robots contrôlés
Deux fichiers décident de ce qu'un moteur d'IA peut faire de votre site : robots.txt dit qui peut entrer, llms.txt dit ce qui vaut la peine d'être lu. Nous séparons les robots entre ceux qui alimentent des moteurs de réponse (et peuvent vous citer) et ceux qui ne prennent que des données d'entraînement. La plupart des outils les confondent et appellent problème tout blocage. Ce n'en est pas un.
Deux requêtes : /robots.txt et /llms.txt