Anthropic · Addestramento

Che cos'è ClaudeBot?

Il crawler di Anthropic che raccoglie pagine pubbliche potenzialmente utilizzabili per addestrare i modelli Claude. Rispetta robots.txt, incluso Crawl-delay.

Token robots.txt: ClaudeBot
Operatore: Anthropic
Scopo: Addestramento
Rispetta robots.txt: Sì L'operatore dichiara che rispetta robots.txt.
Documentato dall'operatore: Sì, nelle pagine dell'operatore.
Elenco IP pubblicato: claude.com/crawling/bots.json
Documentazione: support.claude.com

Blocca ClaudeBot su tutto il sito

robots.txt

User-agent: ClaudeBot
Disallow: /

Consenti l'accesso, ma escludi i percorsi privati

robots.txt

User-agent: ClaudeBot
Allow: /
Disallow: /admin/

Altri bot di Anthropic

Claude-SearchBot Claude-User

Aggiungilo a robots.txt nel generatore →

Fonti

support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-ca