dotsagent.io
Sprache:Deutsch
Google · Agents

Was ist GoogleAgent-Mariner?

Ein von der Community gemeldetes Token für einen Google-Browsing-Agent, das neben GoogleAgent-URLContext und GoogleAgent-Shopping aufgeführt ist. Es erscheint auch in amazon.com's robots.txt.

robots.txt-Token
GoogleAgent-Mariner
Betreiber
Google
Zweck
Agents
Hält sich an robots.txt
Keine Angabe Der Betreiber macht dazu keine Angaben.
Vom Betreiber dokumentiert
Nein. Das Token ist nur aus Community-Listen wie ai.robots.txt bekannt.

Googles offizielle Crawler-Seiten führen es nicht auf; daher ist sein Verhalten gegenüber robots.txt unbekannt.

GoogleAgent-Mariner für Ihre gesamte Website sperren

robots.txt
User-agent: GoogleAgent-Mariner
Disallow: /

Zugriff erlauben, aber private Pfade ausschließen

robots.txt
User-agent: GoogleAgent-Mariner
Allow: /
Disallow: /admin/

Dieser Bot ruft Seiten für eine Person oder für einen Agenten im Auftrag einer Person ab. Mehrere Betreiber geben an, dass robots.txt für solche Anfragen möglicherweise nicht gilt. Prüfen Sie daher den Hinweis oben und setzen Sie bei Bedarf eine Sperre an Ihrer Firewall durch.

Weitere Bots von Google

Im Generator zu robots.txt hinzufügen →

Quellen

  1. github.com/ai-robots-txt/ai.robots.txt
  2. amazon.com/robots.txt