Anthropic · Ophalen door gebruikers
Wat is Claude-User?
Haalt een pagina op wanneer een Claude-gebruiker daarom vraagt. Anders dan de meeste fetchers die door gebruikers worden geactiveerd, volgt deze robots.txt. Anthropic zegt dat al zijn bots dat doen.
- robots.txt-token
Claude-User- Operator
- Anthropic
- Doel
- Ophalen door gebruikers
- Volgt robots.txt
- Ja De beheerder zegt dat deze robots.txt volgt.
- Gedocumenteerd door operator
- Ja, op de eigen pagina's van de beheerder.
- Gepubliceerde IP-lijst
- claude.com/crawling/bots.json
- Documentatie
- support.claude.com
Blokkeer Claude-User op je hele site
User-agent: Claude-User
Disallow: /
Sta deze toe, maar sluit privé-paden uit
User-agent: Claude-User
Allow: /
Disallow: /admin/
Deze bot haalt pagina's op voor een persoon of voor een agent die namens iemand handelt. Verschillende beheerders zeggen dat robots.txt mogelijk niet van toepassing is op zulke verzoeken. Controleer daarom de regel hierboven en blokkeer de bot op je firewall als dat belangrijk is.
Andere bots van Anthropic
Voeg deze toe aan een robots.txt in de generator →