Google · Suche

Was ist Google-CloudVertexBot?

Crawlt eine Website, wenn deren Betreiber Google darum bittet, um Vertex AI Agents zu erstellen. Der Bot beachtet robots.txt und verwendet Googles allgemeine IP-Bereiche für Crawler.

robots.txt-Token: Google-CloudVertexBot
Betreiber: Google
Zweck: Suche
Hält sich an robots.txt: Ja Der Betreiber gibt an, dass der Bot robots.txt beachtet.
Vom Betreiber dokumentiert: Ja, auf den Seiten des Betreibers.
Veröffentlichte IP-Liste: developers.google.com/static/crawling/ipranges/common-crawlers.json
Dokumentation: developers.google.com

Google-CloudVertexBot für Ihre gesamte Website sperren

robots.txt

User-agent: Google-CloudVertexBot
Disallow: /

Zugriff erlauben, aber private Pfade ausschließen

robots.txt

User-agent: Google-CloudVertexBot
Allow: /
Disallow: /admin/

Weitere Bots von Google

Googlebot Google-Extended GoogleOther Google-Agent Google-GeminiNotebook Gemini Spark Gemini-Deep-Research GoogleAgent-Mariner

Im Generator zu robots.txt hinzufügen →

Quellen

developers.google.com/search/docs/crawling-indexing/google-common-crawlers