dotsagent.io
ภาษา:ไทย
Anthropic · การดึงข้อมูลโดยผู้ใช้

Claude-User คืออะไร?

ดึงหน้าเว็บเมื่อผู้ใช้ Claude ขอให้เปิด ต่างจากเครื่องมือดึงข้อมูลตามคำขอของผู้ใช้ส่วนใหญ่ บอตนี้ปฏิบัติตาม robots.txt โดย Anthropic ระบุว่าบอตทั้งหมดของตนทำเช่นนั้น

token สำหรับ robots.txt
Claude-User
ผู้ให้บริการ
Anthropic
วัตถุประสงค์
การดึงข้อมูลโดยผู้ใช้
ทำตาม robots.txt
ใช่ ผู้ให้บริการระบุว่าบอตนี้ปฏิบัติตาม robots.txt
มีเอกสารจากผู้ให้บริการ
มีระบุไว้ในหน้าเว็บของผู้ให้บริการ
รายการ IP ที่เผยแพร่
claude.com/crawling/bots.json
เอกสาร
support.claude.com

บล็อก Claude-User จากทั้งเว็บไซต์

robots.txt
User-agent: Claude-User
Disallow: /

อนุญาตให้เข้าถึง แต่กันเส้นทางส่วนตัวไว้

robots.txt
User-agent: Claude-User
Allow: /
Disallow: /admin/

บอตนี้ดึงหน้าเว็บให้บุคคลหนึ่ง หรือให้ agent ที่ดำเนินการแทนบุคคลนั้น ผู้ให้บริการหลายรายระบุว่า robots.txt อาจไม่มีผลกับคำขอประเภทนี้ ดังนั้นโปรดตรวจสอบบรรทัดด้านบน และบังคับใช้กฎที่ firewall หากเป็นเรื่องสำคัญ

บอตอื่นจาก Anthropic

เพิ่มลงใน robots.txt ใน generator →

แหล่งข้อมูล

  1. support.claude.com/en/articles/8896518-does-anthropic-crawl-data-from-the-web-and-how-ca