Google · Eğitim

Google-Extended nedir?

Crawler değil, bir kontrol token'ıdır: İçeriği Googlebot getirir; Google-Extended ise bu içeriğin Gemini eğitimi ve dayanaklandırma için kullanılıp kullanılamayacağını belirler.

robots.txt token'ı: Google-Extended
Operatör: Google
Amaç: Eğitim
robots.txt kurallarına uyar: Evet Operatör, robots.txt kurallarına uyduğunu belirtiyor.
Operatör tarafından belgelenmiş: Evet, operatörün kendi sayfalarında.
Dokümantasyon: developers.google.com

Kendine ait bir user agent'ı olmadığından erişim günlüklerinizde görünmez.

Google-Extended botunu tüm sitenizde engelleyin

robots.txt

User-agent: Google-Extended
Disallow: /

İzin verin, ancak özel yolları engelleyin

robots.txt

User-agent: Google-Extended
Allow: /
Disallow: /admin/

Google tarafından sunulan diğer botlar

Googlebot Google-CloudVertexBot GoogleOther Google-Agent Google-GeminiNotebook Gemini Spark Gemini-Deep-Research GoogleAgent-Mariner

Oluşturucudaki robots.txt dosyasına ekleyin →

Kaynaklar

developers.google.com/search/docs/crawling-indexing/google-common-crawlers