Google · Pelatihan

Apa itu GoogleOther?

Crawler umum Google untuk riset dan pengembangan yang mengambil halaman di luar Search. Bot ini mematuhi robots.txt dan menggunakan daftar IP crawler umum.

Token robots.txt: GoogleOther
Operator: Google
Tujuan: Pelatihan
Mematuhi robots.txt: Ya Operator menyatakan bahwa bot ini mematuhi robots.txt.
Didokumentasikan oleh operator: Ya, di halaman milik operator sendiri.
Daftar IP yang dipublikasikan: developers.google.com/static/crawling/ipranges/common-crawlers.json
Dokumentasi: developers.google.com

Blokir GoogleOther dari seluruh situs Anda

robots.txt

User-agent: GoogleOther
Disallow: /

Izinkan bot, tetapi kecualikan path privat

robots.txt

User-agent: GoogleOther
Allow: /
Disallow: /admin/

Bot lain dari Google

Googlebot Google-Extended Google-CloudVertexBot Google-Agent Google-GeminiNotebook Gemini Spark Gemini-Deep-Research GoogleAgent-Mariner

Tambahkan ke robots.txt di generator →

Sumber

developers.google.com/search/docs/crawling-indexing/google-common-crawlers