Google · Agent
GoogleAgent-Mariner 是什么？
社区报告称，这是 Google 浏览智能体使用的 token，与 GoogleAgent-URLContext 和 GoogleAgent-Shopping 一同列出。它也出现在 amazon.com 的 robots.txt 中。
- robots.txt token
GoogleAgent-Mariner- 运营方
- 用途
- Agent
- 是否遵守 robots.txt
- 未说明 运营方未作说明。
- 运营方是否提供文档
- 否。只有 ai.robots.txt 等社区列表记录了此 token。
Google 官方爬虫页面未列出它，因此其 robots.txt 行为尚不清楚。
在整个网站上屏蔽 GoogleAgent-Mariner
User-agent: GoogleAgent-Mariner
Disallow: /
允许访问，但屏蔽私有路径
User-agent: GoogleAgent-Mariner
Allow: /
Disallow: /admin/
此爬虫会为用户或代表用户行事的 agent 获取页面。多家运营方表示，这类请求可能不受 robots.txt 约束；如有需要，请查看上方说明，并在防火墙处实施限制。
Google 的其他爬虫
GooglebotGoogle-ExtendedGoogle-CloudVertexBotGoogleOtherGoogle-AgentGoogle-GeminiNotebookGemini SparkGemini-Deep-Research