OpenAI · การดึงข้อมูลโดยผู้ใช้
ChatGPT-User คืออะไร?
ดึงหน้าเว็บเมื่อผู้ใช้ ChatGPT ขอให้เปิด แทนที่จะ crawl ตามกำหนดการของบอตเอง
- token สำหรับ robots.txt
ChatGPT-User- ผู้ให้บริการ
- OpenAI
- วัตถุประสงค์
- การดึงข้อมูลโดยผู้ใช้
- ทำตาม robots.txt
- ไม่ ผู้ให้บริการระบุว่า robots.txt อาจไม่มีผลกับบอตนี้ หรือมีรายงานจากชุมชนว่าบอตนี้ไม่ปฏิบัติตาม
- มีเอกสารจากผู้ให้บริการ
- มีระบุไว้ในหน้าเว็บของผู้ให้บริการ
- รายการ IP ที่เผยแพร่
- openai.com/chatgpt-user.json
- เอกสาร
- platform.openai.com
OpenAI ระบุว่ากฎ robots.txt อาจไม่มีผลกับการดึงหน้าเว็บเหล่านี้ หากต้องการบล็อก ให้กรองตามรายการ IP ที่ OpenAI เผยแพร่
บล็อก ChatGPT-User จากทั้งเว็บไซต์
User-agent: ChatGPT-User
Disallow: /
อนุญาตให้เข้าถึง แต่กันเส้นทางส่วนตัวไว้
User-agent: ChatGPT-User
Allow: /
Disallow: /admin/
บอตนี้ดึงหน้าเว็บให้บุคคลหนึ่ง หรือให้ agent ที่ดำเนินการแทนบุคคลนั้น ผู้ให้บริการหลายรายระบุว่า robots.txt อาจไม่มีผลกับคำขอประเภทนี้ ดังนั้นโปรดตรวจสอบบรรทัดด้านบน และบังคับใช้กฎที่ firewall หากเป็นเรื่องสำคัญ
บอตอื่นจาก OpenAI
เพิ่มลงใน robots.txt ใน generator →