Google · Wyszukiwanie
Czym jest Googlebot?
Główny crawler Google używany w wyszukiwarce Google. Przestrzega robots.txt, a Google publikuje swoje zakresy adresów IP.
- Token robots.txt
Googlebot- Operator
- Cel
- Wyszukiwanie
- Przestrzega robots.txt
- Tak Operator informuje, że bot przestrzega robots.txt.
- Udokumentowany przez operatora
- Tak, na własnych stronach operatora.
- Opublikowana lista adresów IP
- developers.google.com/static/search/apis/ipranges/googlebot.json
- Dokumentacja
- developers.google.com
Aby nie zezwalać na trenowanie Gemini, a jednocześnie pozostać w wyszukiwarce, zablokuj Google-Extended zamiast Googlebota.
Zablokuj Googlebot w całej witrynie
User-agent: Googlebot
Disallow: /
Zezwól na dostęp, ale zablokuj ścieżki prywatne
User-agent: Googlebot
Allow: /
Disallow: /admin/
Inne boty od Google
Google-ExtendedGoogle-CloudVertexBotGoogleOtherGoogle-AgentGoogle-GeminiNotebookGemini SparkGemini-Deep-ResearchGoogleAgent-Mariner
Dodaj do robots.txt w generatorze →