Google · Agents

Qu’est-ce que GoogleAgent-Mariner ?

Un token signalé par la communauté pour un agent de navigation de Google, répertorié avec GoogleAgent-URLContext et GoogleAgent-Shopping. Il apparaît également dans le fichier robots.txt d’amazon.com.

Token robots.txt: GoogleAgent-Mariner
Opérateur: Google
Objectif: Agents
Respecte robots.txt: Non précisé L’opérateur ne se prononce pas.
Documenté par l’opérateur: Non. Le token n’est connu que grâce à des listes communautaires, comme ai.robots.txt.

Les pages officielles de Google sur ses crawlers ne le répertorient pas ; son comportement vis-à-vis de robots.txt est donc inconnu.

Bloquer GoogleAgent-Mariner sur tout votre site

robots.txt

User-agent: GoogleAgent-Mariner
Disallow: /

L’autoriser, mais exclure les chemins privés

robots.txt

User-agent: GoogleAgent-Mariner
Allow: /
Disallow: /admin/

Ce bot récupère des pages pour une personne ou pour un agent agissant en son nom. Plusieurs opérateurs indiquent que robots.txt peut ne pas s’appliquer à ces requêtes. Vérifiez donc l’indication ci-dessus et bloquez-le au niveau de votre pare-feu si nécessaire.

Autres bots de Google

Googlebot Google-Extended Google-CloudVertexBot GoogleOther Google-Agent Google-GeminiNotebook Gemini Spark Gemini-Deep-Research

L’ajouter à un robots.txt dans le générateur →

Sources

github.com/ai-robots-txt/ai.robots.txt
amazon.com/robots.txt