dotsagent.io
Langue:Français
Google · Entraînement

Qu’est-ce que Google-Extended ?

Un token de contrôle, pas un crawler : Googlebot récupère les contenus, tandis que Google-Extended détermine s’ils peuvent être utilisés pour entraîner Gemini et étayer ses réponses.

Token robots.txt
Google-Extended
Opérateur
Google
Objectif
Entraînement
Respecte robots.txt
Oui L’opérateur indique que le bot respecte robots.txt.
Documenté par l’opérateur
Oui, sur les pages de l’opérateur.
Documentation
developers.google.com

Il n’a pas de user agent propre et n’apparaît donc jamais dans vos journaux d’accès.

Bloquer Google-Extended sur tout votre site

robots.txt
User-agent: Google-Extended
Disallow: /

L’autoriser, mais exclure les chemins privés

robots.txt
User-agent: Google-Extended
Allow: /
Disallow: /admin/

Autres bots de Google

L’ajouter à un robots.txt dans le générateur →

Sources

  1. developers.google.com/search/docs/crawling-indexing/google-common-crawlers