dotsagent.io
Bahasa:Bahasa Indonesia
Anthropic · Pencarian

Apa itu Claude-SearchBot?

Crawler Anthropic untuk penelusuran di Claude. Bot ini mematuhi robots.txt dan memiliki token sendiri, yang terpisah dari ClaudeBot.

Token robots.txt
Claude-SearchBot
Operator
Anthropic
Tujuan
Pencarian
Mematuhi robots.txt
Ya Operator menyatakan bahwa bot ini mematuhi robots.txt.
Didokumentasikan oleh operator
Ya, di halaman milik operator sendiri.
Daftar IP yang dipublikasikan
claude.com/crawling/bots.json
Dokumentasi
support.claude.com

Blokir Claude-SearchBot dari seluruh situs Anda

robots.txt
User-agent: Claude-SearchBot
Disallow: /

Izinkan bot, tetapi kecualikan path privat

robots.txt
User-agent: Claude-SearchBot
Allow: /
Disallow: /admin/

Bot lain dari Anthropic

Tambahkan ke robots.txt di generator →

Sumber

  1. support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-ca

Referensi independen bagi mereka yang membangun agen AI. Tidak berafiliasi dengan vendor mana pun yang disebutkan di sini.

© 2026 DotsAgent · Fakta diperiksa 1 Oktober 2026