OpenAI · Pelatihan

Apa itu GPTBot?

Crawler OpenAI untuk mengumpulkan halaman publik yang mungkin digunakan untuk melatih modelnya. OpenAI menyatakan bahwa bot ini mematuhi robots.txt dan memublikasikan rentang IP-nya.

Token robots.txt: GPTBot
Operator: OpenAI
Tujuan: Pelatihan
Mematuhi robots.txt: Ya Operator menyatakan bahwa bot ini mematuhi robots.txt.
Didokumentasikan oleh operator: Ya, di halaman milik operator sendiri.
Daftar IP yang dipublikasikan: openai.com/gptbot.json
Dokumentasi: platform.openai.com

Memblokir GPTBot tidak memengaruhi penelusuran ChatGPT atau pengambilan halaman atas permintaan pengguna, yang dilakukan oleh OAI-SearchBot dan ChatGPT-User.

Blokir GPTBot dari seluruh situs Anda

robots.txt

User-agent: GPTBot
Disallow: /

Izinkan bot, tetapi kecualikan path privat

robots.txt

User-agent: GPTBot
Allow: /
Disallow: /admin/

Bot lain dari OpenAI

OAI-SearchBot ChatGPT-User OAI-AdsBot ChatGPT agent

Tambahkan ke robots.txt di generator →

Sumber

platform.openai.com/docs/bots