dotsagent.io
ภาษา:ไทย
Cohere · การดึงข้อมูลโดยผู้ใช้

cohere-ai คืออะไร?

token ที่รายการของชุมชนระบุว่าใช้กับการดึงข้อมูลตามคำขอของผู้ใช้โดย Cohere โดย Cohere ระบุว่าไม่ได้ crawl เพื่อฝึกโมเดล และเอกสารของ Cohere เองยก Coherebot เป็น token ตัวอย่าง

token สำหรับ robots.txt
cohere-ai
ผู้ให้บริการ
Cohere
วัตถุประสงค์
การดึงข้อมูลโดยผู้ใช้
ทำตาม robots.txt
ไม่ได้ระบุ ผู้ให้บริการไม่ได้ระบุ
มีเอกสารจากผู้ให้บริการ
มีระบุไว้ในหน้าเว็บของผู้ให้บริการ
เอกสาร
docs.cohere.com

cohere-training-data-crawler เป็น token ของ Cohere อีกตัวที่มีรายงานในชุมชน แต่ Cohere ไม่ได้ยืนยัน token ทั้งสองตัว

บล็อก cohere-ai จากทั้งเว็บไซต์

robots.txt
User-agent: cohere-ai
Disallow: /

อนุญาตให้เข้าถึง แต่กันเส้นทางส่วนตัวไว้

robots.txt
User-agent: cohere-ai
Allow: /
Disallow: /admin/

บอตนี้ดึงหน้าเว็บให้บุคคลหนึ่ง หรือให้ agent ที่ดำเนินการแทนบุคคลนั้น ผู้ให้บริการหลายรายระบุว่า robots.txt อาจไม่มีผลกับคำขอประเภทนี้ ดังนั้นโปรดตรวจสอบบรรทัดด้านบน และบังคับใช้กฎที่ firewall หากเป็นเรื่องสำคัญ

เพิ่มลงใน robots.txt ใน generator →

แหล่งข้อมูล

  1. docs.cohere.com/docs/cohere-web-crawlers
  2. github.com/ai-robots-txt/ai.robots.txt