Anthropic · Trenowanie
Czym jest ClaudeBot?
Crawler Anthropic zbierający publiczne strony, które mogą posłużyć do trenowania modeli Claude. Przestrzega robots.txt, w tym Crawl-delay.
- Token robots.txt
ClaudeBot- Operator
- Anthropic
- Cel
- Trenowanie
- Przestrzega robots.txt
- Tak Operator informuje, że bot przestrzega robots.txt.
- Udokumentowany przez operatora
- Tak, na własnych stronach operatora.
- Opublikowana lista adresów IP
- claude.com/crawling/bots.json
- Dokumentacja
- support.claude.com
Zablokuj ClaudeBot w całej witrynie
User-agent: ClaudeBot
Disallow: /
Zezwól na dostęp, ale zablokuj ścieżki prywatne
User-agent: ClaudeBot
Allow: /
Disallow: /admin/
Inne boty od Anthropic
Dodaj do robots.txt w generatorze →