---
title: "ClaudeBot：屏蔽或允许此 AI 爬虫 · DotsAgent"
description: "ClaudeBot 由 Anthropic 运营，归类为「训练」。了解其 robots.txt token、是否遵守规则、IP 列表及控制方法。"
url: https://dotsagent.io/zh/agent-ready/bots/claudebot
---

Anthropic · 训练

# ClaudeBot 是什么？

Anthropic 用于抓取公开页面的爬虫，这些页面可能会用于训练 Claude 模型。它遵守 robots.txt，包括 Crawl-delay。

- **robots.txt token**: `ClaudeBot`
- **运营方**: Anthropic
- **用途**: 训练
- **是否遵守 robots.txt**: 运营方表示该爬虫遵守 robots.txt。
- **运营方是否提供文档**: 是，运营方在其自有页面上有相关说明。
- **公开的 IP 列表**: [claude.com/crawling/bots.json](https://claude.com/crawling/bots.json)
- **文档**: [support.claude.com](https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler)

## 在整个网站上屏蔽 ClaudeBot

`robots.txt`

```
User-agent: ClaudeBot
Disallow: /
```

## 允许访问，但屏蔽私有路径

`robots.txt`

```
User-agent: ClaudeBot
Allow: /
Disallow: /admin/
```

## Anthropic 的其他爬虫

[Claude-SearchBot](https://dotsagent.io/zh/agent-ready/bots/claude-searchbot)

[Claude-User](https://dotsagent.io/zh/agent-ready/bots/claude-user)

[在生成器中将其添加到 robots.txt →](https://dotsagent.io/zh/agent-ready/robots-txt)

## 来源

1. [support.claude.com](https://support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-can-site-owners-block-the-crawler)/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-ca

为 AI agent 开发者提供的独立参考资料。与此处提及的任何厂商均无关联。

© 2026 DotsAgent · 事实核查日期：2026年10月1日