Google · Pagsasanay
Ano ang GoogleOther?
Generic na crawler ng Google para sa mga fetch na may kaugnayan sa research at development sa labas ng Search. Sinusunod nito ang robots.txt at ginagamit ang karaniwang listahan ng mga IP para sa crawler.
- robots.txt token
GoogleOther- Operator
- Layunin
- Pagsasanay
- Sumusunod sa robots.txt
- Oo Ayon sa operator, sumusunod ito sa robots.txt.
- May dokumentasyon mula sa operator
- Oo, sa mga page mismo ng operator.
- Inilathalang IP list
- developers.google.com/static/crawling/ipranges/common-crawlers.json
- Dokumentasyon
- developers.google.com
I-block ang GoogleOther sa buong site mo
User-agent: GoogleOther
Disallow: /
Payagan ito, pero ilayo sa mga pribadong path
User-agent: GoogleOther
Allow: /
Disallow: /admin/
Iba pang bot mula sa Google
GooglebotGoogle-ExtendedGoogle-CloudVertexBotGoogle-AgentGoogle-GeminiNotebookGemini SparkGemini-Deep-ResearchGoogleAgent-Mariner
Idagdag ito sa robots.txt sa generator →