Что такое OAI-AdsBot?

Проверяет целевые страницы объявлений, отправленных в OpenAI. Посещает только URL-адреса, указанные в объявлениях.

Токен robots.txt

OAI-AdsBot

Оператор

OpenAI

Назначение

Реклама

Соблюдает robots.txt

?Не указано Оператор ничего об этом не сообщает.

Описан оператором

Да, на страницах самого оператора.

Опубликованный список IP-адресов

openai.com/adsbot.json

Документация

platform.openai.com

Не включён в генератор robots.txt, поскольку получает только страницы, указанные рекламодателем.

Заблокировать OAI-AdsBot на всём сайте

User-agent: OAI-AdsBot
Disallow: /

Разрешить доступ, но закрыть приватные пути

User-agent: OAI-AdsBot
Allow: /
Disallow: /admin/

Другие боты от OpenAI

Добавить в генератор robots.txt →