Ano ang GPTBot?

Crawler ng OpenAI para mangolekta ng mga pampublikong page na maaaring gamitin sa pagsasanay ng mga model nito. Ayon sa OpenAI, sumusunod ito sa robots.txt at inilalathala nito ang mga IP range nito.

robots.txt token

GPTBot

Operator

OpenAI

Layunin

Pagsasanay

Sumusunod sa robots.txt

●Oo Ayon sa operator, sumusunod ito sa robots.txt.

May dokumentasyon mula sa operator

Oo, sa mga page mismo ng operator.

Inilathalang IP list

openai.com/gptbot.json

Dokumentasyon

platform.openai.com

Hindi naaapektuhan ng pag-block sa GPTBot ang paghahanap sa ChatGPT o ang mga fetch na hiniling ng user; OAI-SearchBot at ChatGPT-User ang ginagamit para rito.

I-block ang GPTBot sa buong site mo

User-agent: GPTBot
Disallow: /

Payagan ito, pero ilayo sa mga pribadong path

User-agent: GPTBot
Allow: /
Disallow: /admin/

Iba pang bot mula sa OpenAI

Idagdag ito sa robots.txt sa generator →