---
title: "Googlebot：屏蔽或允许此 AI 爬虫 · DotsAgent"
description: "Googlebot 由 Google 运营，归类为「搜索」。了解其 robots.txt token、是否遵守规则、IP 列表及控制方法。"
url: https://dotsagent.io/zh/agent-ready/bots/googlebot
---

Google · 搜索

# Googlebot 是什么？

Google Search 的主要爬虫。它遵守 robots.txt，且 Google 会公布其 IP 地址段。

- **robots.txt token**: `Googlebot`
- **运营方**: Google
- **用途**: 搜索
- **是否遵守 robots.txt**: 运营方表示该爬虫遵守 robots.txt。
- **运营方是否提供文档**: 是，运营方在其自有页面上有相关说明。
- **公开的 IP 列表**: [developers.google.com/static/search/apis/ipranges/googlebot.json](https://developers.google.com/static/search/apis/ipranges/googlebot.json)
- **文档**: [developers.google.com](https://developers.google.com/search/docs/crawling-indexing/google-common-crawlers)

如需拒绝 Gemini 训练用途，同时继续出现在 Search 中，请禁止 Google-Extended，而不是 Googlebot。

## 在整个网站上屏蔽 Googlebot

`robots.txt`

```
User-agent: Googlebot
Disallow: /
```

## 允许访问，但屏蔽私有路径

`robots.txt`

```
User-agent: Googlebot
Allow: /
Disallow: /admin/
```

## Google 的其他爬虫

[Google-Extended](https://dotsagent.io/zh/agent-ready/bots/google-extended)

[Google-CloudVertexBot](https://dotsagent.io/zh/agent-ready/bots/google-cloudvertexbot)

[GoogleOther](https://dotsagent.io/zh/agent-ready/bots/googleother)

[Google-Agent](https://dotsagent.io/zh/agent-ready/bots/google-agent)

[Google-GeminiNotebook](https://dotsagent.io/zh/agent-ready/bots/google-gemininotebook)

[Gemini Spark](https://dotsagent.io/zh/agent-ready/bots/gemini-spark)

[Gemini-Deep-Research](https://dotsagent.io/zh/agent-ready/bots/gemini-deep-research)

[GoogleAgent-Mariner](https://dotsagent.io/zh/agent-ready/bots/googleagent-mariner)

[在生成器中将其添加到 robots.txt →](https://dotsagent.io/zh/agent-ready/robots-txt)

## 来源

1. [developers.google.com](https://developers.google.com/search/docs/crawling-indexing/google-common-crawlers)/search/docs/crawling-indexing/google-common-crawlers

为 AI agent 开发者提供的独立参考资料。与此处提及的任何厂商均无关联。

© 2026 DotsAgent · 事实核查日期：2026年10月1日