OpenAI · 検索
OAI-SearchBotとは？
ChatGPT 検索用の OpenAI のクローラーです。robots.txt に従い、GPTBot とは別のトークンを使うため、トレーニングへの利用を拒否しながら検索には表示できます。
- robots.txtトークン
OAI-SearchBot- 運営者
- OpenAI
- 用途
- 検索
- robots.txtへの準拠
- はい 運営者は、robots.txt に従うと明言しています。
- 運営者によるドキュメント
- はい。運営者自身のページに記載されています。
- 公開IPリスト
- openai.com/searchbot.json
- ドキュメント
- platform.openai.com
サイト全体で OAI-SearchBot をブロックする
User-agent: OAI-SearchBot
Disallow: /
許可しつつ、非公開パスへのアクセスを防ぐ
User-agent: OAI-SearchBot
Allow: /
Disallow: /admin/