Google · Búsqueda

¿Qué es Google-CloudVertexBot?

Rastrea un sitio cuando su propietario se lo pide a Google, para crear Vertex AI Agents. Sigue robots.txt y usa los rangos de IP habituales de los rastreadores de Google.

Token de robots.txt: Google-CloudVertexBot
Operador: Google
Propósito: Búsqueda
Respeta robots.txt: Sí El operador indica que respeta robots.txt.
Documentado por el operador: Sí, en las páginas oficiales del operador.
Lista de IP publicada: developers.google.com/static/crawling/ipranges/common-crawlers.json
Documentación: developers.google.com

Bloquea Google-CloudVertexBot en todo tu sitio

robots.txt

User-agent: Google-CloudVertexBot
Disallow: /

Permítelo, pero excluye las rutas privadas

robots.txt

User-agent: Google-CloudVertexBot
Allow: /
Disallow: /admin/

Otros bots de Google

Googlebot Google-Extended GoogleOther Google-Agent Google-GeminiNotebook Gemini Spark Gemini-Deep-Research GoogleAgent-Mariner

Añádelo a un robots.txt en el generador →

Fuentes

developers.google.com/search/docs/crawling-indexing/google-common-crawlers