Anthropic · Pengambilan oleh pengguna
Apa itu Claude-User?
Mengambil halaman saat pengguna Claude memintanya. Tidak seperti kebanyakan pengambil halaman yang dipicu pengguna, bot ini mematuhi robots.txt; Anthropic menyatakan bahwa semua botnya mematuhinya.
- Token robots.txt
Claude-User- Operator
- Anthropic
- Tujuan
- Pengambilan oleh pengguna
- Mematuhi robots.txt
- Ya Operator menyatakan bahwa bot ini mematuhi robots.txt.
- Didokumentasikan oleh operator
- Ya, di halaman milik operator sendiri.
- Daftar IP yang dipublikasikan
- claude.com/crawling/bots.json
- Dokumentasi
- support.claude.com
Blokir Claude-User dari seluruh situs Anda
User-agent: Claude-User
Disallow: /
Izinkan bot, tetapi kecualikan path privat
User-agent: Claude-User
Allow: /
Disallow: /admin/
Bot ini mengambil halaman untuk seseorang, atau untuk agent yang bertindak atas nama seseorang. Beberapa operator menyatakan bahwa robots.txt mungkin tidak berlaku untuk permintaan seperti ini, jadi periksa baris di atas dan blokir di firewall jika diperlukan.
Bot lain dari Anthropic
Tambahkan ke robots.txt di generator →