dotsagent.io
Ngôn ngữ:Tiếng Việt
Anthropic · Lượt tải từ người dùng

Claude-User là gì?

Tải trang khi người dùng Claude yêu cầu. Khác với phần lớn bot tải trang theo yêu cầu của người dùng, bot này tuân thủ robots.txt; Anthropic cho biết tất cả bot của họ đều làm vậy.

Token robots.txt
Claude-User
Nhà vận hành
Anthropic
Mục đích
Lượt tải từ người dùng
Tuân theo robots.txt
Có Nhà vận hành cho biết bot này tuân thủ robots.txt.
Có tài liệu từ nhà vận hành
Có, trên các trang của chính nhà vận hành.
Danh sách IP được công bố
claude.com/crawling/bots.json
Tài liệu
support.claude.com

Chặn Claude-User trên toàn bộ trang web

robots.txt
User-agent: Claude-User
Disallow: /

Cho phép bot này, nhưng không cho truy cập các đường dẫn riêng tư

robots.txt
User-agent: Claude-User
Allow: /
Disallow: /admin/

Bot này tải trang theo yêu cầu của một người hoặc một agent thay mặt họ. Một số nhà vận hành cho biết robots.txt có thể không áp dụng cho các yêu cầu như vậy, vì thế hãy kiểm tra dòng trên và chặn ở firewall nếu cần.

Các bot khác của Anthropic

Thêm bot này vào robots.txt trong trình tạo →

Nguồn

  1. support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-ca