dotsagent.io
言語:日本語
Google · エージェント

GoogleAgent-Marinerとは?

Googleのブラウジングエージェント用としてコミュニティから報告されたトークンです。GoogleAgent-URLContextやGoogleAgent-Shoppingと並んで掲載されています。amazon.comのrobots.txtにも記載されています。

robots.txtトークン
GoogleAgent-Mariner
運営者
Google
用途
エージェント
robots.txtへの準拠
記載なし 運営者からの説明はありません。
運営者によるドキュメント
いいえ。ai.robots.txt などのコミュニティのリストでのみ確認できます。

Googleの公式クローラーページには記載がないため、robots.txtへの準拠状況は不明です。

サイト全体で GoogleAgent-Mariner をブロックする

robots.txt
User-agent: GoogleAgent-Mariner
Disallow: /

許可しつつ、非公開パスへのアクセスを防ぐ

robots.txt
User-agent: GoogleAgent-Mariner
Allow: /
Disallow: /admin/

この bot は、ユーザー本人または代理で動作するエージェントのためにページを取得します。こうしたリクエストには robots.txt が適用されない場合があると複数の運営者が説明しています。必要に応じて上記の説明を確認し、ファイアウォールで制御してください。

Google のその他の bot

ジェネレーターで robots.txt に追加 →

出典

  1. github.com/ai-robots-txt/ai.robots.txt
  2. amazon.com/robots.txt