Kökünüzde yapay zekâ hazırlığı
robots.txt + llms.txt, 27 tarayıcı kontrol edilir
Bir yapay zekâ motorunun sitenizle ne yapabileceğine iki dosya karar verir: robots.txt kimin girebileceğini, llms.txt neyin okunmaya değer olduğunu söyler. Tarayıcıları, cevap motorlarını besleyen (ve sizi alıntılayabilen) ile yalnızca eğitim verisi alanlar diye ikiye ayırıyoruz. Çoğu araç bunları aynı kefeye koyup her engellemeyi sorun sayar. Değildir.
İki istek: /robots.txt ve /llms.txt