You.com · Arama

YouBot nedir?

Yalnızca topluluk listelerinden bilinen, You.com'un arama ve LLM özellikleri için kullandığı bir token. robots.txt kurallarına uyup uymadığı bilinmiyor.

robots.txt token'ı: YouBot
Operatör: You.com
Amaç: Arama
robots.txt kurallarına uyar: Belirtilmemiş Operatör bu konuda bilgi vermiyor.
Operatör tarafından belgelenmiş: Hayır. Token yalnızca ai.robots.txt gibi topluluk listelerinde biliniyor.

YouBot botunu tüm sitenizde engelleyin

robots.txt

User-agent: YouBot
Disallow: /

İzin verin, ancak özel yolları engelleyin

robots.txt

User-agent: YouBot
Allow: /
Disallow: /admin/

Oluşturucudaki robots.txt dosyasına ekleyin →

Kaynaklar

github.com/ai-robots-txt/ai.robots.txt