Google · Eğitim
GoogleOther nedir?
Google'ın Search dışındaki araştırma ve geliştirme amaçlı genel crawler'ı. robots.txt kurallarına uyar ve ortak crawler IP listesini kullanır.
- robots.txt token'ı
GoogleOther- Operatör
- Amaç
- Eğitim
- robots.txt kurallarına uyar
- Evet Operatör, robots.txt kurallarına uyduğunu belirtiyor.
- Operatör tarafından belgelenmiş
- Evet, operatörün kendi sayfalarında.
- Yayımlanmış IP listesi
- developers.google.com/static/crawling/ipranges/common-crawlers.json
- Dokümantasyon
- developers.google.com
GoogleOther botunu tüm sitenizde engelleyin
User-agent: GoogleOther
Disallow: /
İzin verin, ancak özel yolları engelleyin
User-agent: GoogleOther
Allow: /
Disallow: /admin/
Google tarafından sunulan diğer botlar
GooglebotGoogle-ExtendedGoogle-CloudVertexBotGoogle-AgentGoogle-GeminiNotebookGemini SparkGemini-Deep-ResearchGoogleAgent-Mariner
Oluşturucudaki robots.txt dosyasına ekleyin →