OpenAI · การฝึกโมเดล
GPTBot คืออะไร?
crawler ของ OpenAI ที่รวบรวมหน้าเว็บสาธารณะซึ่งอาจนำไปใช้ฝึกโมเดล OpenAI ระบุว่า GPTBot ปฏิบัติตาม robots.txt และเผยแพร่ช่วง IP ของตน
- token สำหรับ robots.txt
GPTBot- ผู้ให้บริการ
- OpenAI
- วัตถุประสงค์
- การฝึกโมเดล
- ทำตาม robots.txt
- ใช่ ผู้ให้บริการระบุว่าบอตนี้ปฏิบัติตาม robots.txt
- มีเอกสารจากผู้ให้บริการ
- มีระบุไว้ในหน้าเว็บของผู้ให้บริการ
- รายการ IP ที่เผยแพร่
- openai.com/gptbot.json
- เอกสาร
- platform.openai.com
การบล็อก GPTBot ไม่มีผลกับการค้นหาของ ChatGPT หรือการดึงหน้าตามคำขอของผู้ใช้ ซึ่งใช้ OAI-SearchBot และ ChatGPT-User
บล็อก GPTBot จากทั้งเว็บไซต์
User-agent: GPTBot
Disallow: /
อนุญาตให้เข้าถึง แต่กันเส้นทางส่วนตัวไว้
User-agent: GPTBot
Allow: /
Disallow: /admin/
บอตอื่นจาก OpenAI
เพิ่มลงใน robots.txt ใน generator →