Preparación para IA en tu raíz
robots.txt + llms.txt, 27 rastreadores comprobados
Dos archivos deciden qué puede hacer un motor de IA con tu sitio: robots.txt dice quién puede entrar y llms.txt dice qué merece la pena leer. Separamos los rastreadores entre los que alimentan motores de respuesta (y pueden citarte) y los que solo se llevan datos de entrenamiento. La mayoría de herramientas los mete en el mismo saco y llama problema a cualquier bloqueo. No lo es.
Dos peticiones: /robots.txt y /llms.txt