dotsagent.io
Langue:Français
Google · Recherche

Qu’est-ce que Google-CloudVertexBot ?

Explore un site à la demande de son propriétaire, afin de créer des agents Vertex AI. Il respecte robots.txt et utilise les plages d’adresses IP courantes des crawlers de Google.

Token robots.txt
Google-CloudVertexBot
Opérateur
Google
Objectif
Recherche
Respecte robots.txt
Oui L’opérateur indique que le bot respecte robots.txt.
Documenté par l’opérateur
Oui, sur les pages de l’opérateur.
Liste d’adresses IP publiée
developers.google.com/static/crawling/ipranges/common-crawlers.json
Documentation
developers.google.com

Bloquer Google-CloudVertexBot sur tout votre site

robots.txt
User-agent: Google-CloudVertexBot
Disallow: /

L’autoriser, mais exclure les chemins privés

robots.txt
User-agent: Google-CloudVertexBot
Allow: /
Disallow: /admin/

Autres bots de Google

L’ajouter à un robots.txt dans le générateur →

Sources

  1. developers.google.com/search/docs/crawling-indexing/google-common-crawlers