Google · Training

Wat is GoogleOther?

De algemene crawler van Google voor onderzoek en ontwikkeling, die pagina's ophaalt buiten Search om. Volgt robots.txt en gebruikt de gedeelde lijst met crawler-IP's.

robots.txt-token: GoogleOther
Operator: Google
Doel: Training
Volgt robots.txt: Ja De beheerder zegt dat deze robots.txt volgt.
Gedocumenteerd door operator: Ja, op de eigen pagina's van de beheerder.
Gepubliceerde IP-lijst: developers.google.com/static/crawling/ipranges/common-crawlers.json
Documentatie: developers.google.com

Blokkeer GoogleOther op je hele site

robots.txt

User-agent: GoogleOther
Disallow: /

Sta deze toe, maar sluit privé-paden uit

robots.txt

User-agent: GoogleOther
Allow: /
Disallow: /admin/

Andere bots van Google

Googlebot Google-Extended Google-CloudVertexBot Google-Agent Google-GeminiNotebook Gemini Spark Gemini-Deep-Research GoogleAgent-Mariner

Voeg deze toe aan een robots.txt in de generator →

Bronnen

developers.google.com/search/docs/crawling-indexing/google-common-crawlers