GPTBot nedir?

OpenAI'ın, modellerini eğitmek için kullanılabilecek herkese açık sayfaları toplama amaçlı crawler'ı. OpenAI, robots.txt kurallarına uyduğunu ve IP aralıklarını yayımladığını belirtiyor.

robots.txt token'ı

GPTBot

Operatör

OpenAI

Amaç

Eğitim

robots.txt kurallarına uyar

●Evet Operatör, robots.txt kurallarına uyduğunu belirtiyor.

Operatör tarafından belgelenmiş

Evet, operatörün kendi sayfalarında.

Yayımlanmış IP listesi

openai.com/gptbot.json

Dokümantasyon

platform.openai.com

GPTBot'u engellemek, OAI-SearchBot ve ChatGPT-User tarafından gerçekleştirilen ChatGPT aramalarını veya kullanıcıların istediği sayfa getirme işlemlerini etkilemez.

GPTBot botunu tüm sitenizde engelleyin

User-agent: GPTBot
Disallow: /

İzin verin, ancak özel yolları engelleyin

User-agent: GPTBot
Allow: /
Disallow: /admin/

OpenAI tarafından sunulan diğer botlar

Oluşturucudaki robots.txt dosyasına ekleyin →