Anthropic · Pobieranie przez użytkowników
Czym jest Claude-User?
Pobiera stronę na żądanie użytkownika Claude. W przeciwieństwie do większości narzędzi pobierających strony na żądanie użytkownika, przestrzega robots.txt — Anthropic informuje, że robią to wszystkie jego boty.
- Token robots.txt
Claude-User- Operator
- Anthropic
- Cel
- Pobieranie przez użytkowników
- Przestrzega robots.txt
- Tak Operator informuje, że bot przestrzega robots.txt.
- Udokumentowany przez operatora
- Tak, na własnych stronach operatora.
- Opublikowana lista adresów IP
- claude.com/crawling/bots.json
- Dokumentacja
- support.claude.com
Zablokuj Claude-User w całej witrynie
User-agent: Claude-User
Disallow: /
Zezwól na dostęp, ale zablokuj ścieżki prywatne
User-agent: Claude-User
Allow: /
Disallow: /admin/
Ten bot pobiera strony na żądanie użytkownika lub działającego w jego imieniu agenta. Kilku operatorów informuje, że robots.txt może nie mieć zastosowania do takich żądań. Sprawdź więc powyższy wiersz i, jeśli to ważne, wymuś blokadę na firewallu.
Inne boty od Anthropic
Dodaj do robots.txt w generatorze →