Anthropic · Mga pagkuha ng user
Ano ang Claude-User?
Kinukuha nito ang isang page kapag hiniling ito ng user ng Claude. Hindi tulad ng karamihan sa mga fetcher na pinapagana ng user, sumusunod ito sa robots.txt; ayon sa Anthropic, sumusunod dito ang lahat ng bot nila.
- robots.txt token
Claude-User- Operator
- Anthropic
- Layunin
- Mga pagkuha ng user
- Sumusunod sa robots.txt
- Oo Ayon sa operator, sumusunod ito sa robots.txt.
- May dokumentasyon mula sa operator
- Oo, sa mga page mismo ng operator.
- Inilathalang IP list
- claude.com/crawling/bots.json
- Dokumentasyon
- support.claude.com
I-block ang Claude-User sa buong site mo
User-agent: Claude-User
Disallow: /
Payagan ito, pero ilayo sa mga pribadong path
User-agent: Claude-User
Allow: /
Disallow: /admin/
Kinukuha ng bot na ito ang mga page para sa isang tao o para sa isang agent na kumikilos sa ngalan ng isang tao. Sinasabi ng ilang operator na maaaring hindi saklaw ng robots.txt ang mga ganitong request, kaya tingnan ang linya sa itaas at i-enforce ang patakaran sa firewall mo kung mahalaga ito.
Iba pang bot mula sa Anthropic
Idagdag ito sa robots.txt sa generator →