Wat is GPTBot?

De crawler van OpenAI voor het verzamelen van openbare pagina's die mogelijk worden gebruikt om de modellen te trainen. OpenAI zegt dat deze robots.txt volgt en publiceert de IP-bereiken.

robots.txt-token

GPTBot

Operator

OpenAI

Doel

Training

Volgt robots.txt

●Ja De beheerder zegt dat deze robots.txt volgt.

Gedocumenteerd door operator

Ja, op de eigen pagina's van de beheerder.

Gepubliceerde IP-lijst

openai.com/gptbot.json

Documentatie

platform.openai.com

Door GPTBot te blokkeren, worden ChatGPT Search en door gebruikers aangevraagde pagina-ophalingen niet beïnvloed. Die komen van OAI-SearchBot en ChatGPT-User.

Blokkeer GPTBot op je hele site

User-agent: GPTBot
Disallow: /

Sta deze toe, maar sluit privé-paden uit

User-agent: GPTBot
Allow: /
Disallow: /admin/

Andere bots van OpenAI

Voeg deze toe aan een robots.txt in de generator →