Google · Agen

Apa itu GoogleAgent-Mariner?

Token yang dilaporkan komunitas untuk agent penjelajah web Google, tercantum bersama GoogleAgent-URLContext dan GoogleAgent-Shopping. Token ini juga muncul di robots.txt milik amazon.com.

Token robots.txt: GoogleAgent-Mariner
Operator: Google
Tujuan: Agen
Mematuhi robots.txt: Tidak disebutkan Operator tidak menyebutkannya.
Didokumentasikan oleh operator: Tidak. Token ini hanya diketahui dari daftar komunitas seperti ai.robots.txt.

Halaman crawler resmi Google tidak mencantumkannya, jadi perilakunya terhadap robots.txt belum diketahui.

Blokir GoogleAgent-Mariner dari seluruh situs Anda

robots.txt

User-agent: GoogleAgent-Mariner
Disallow: /

Izinkan bot, tetapi kecualikan path privat

robots.txt

User-agent: GoogleAgent-Mariner
Allow: /
Disallow: /admin/

Bot ini mengambil halaman untuk seseorang, atau untuk agent yang bertindak atas nama seseorang. Beberapa operator menyatakan bahwa robots.txt mungkin tidak berlaku untuk permintaan seperti ini, jadi periksa baris di atas dan blokir di firewall jika diperlukan.

Bot lain dari Google

Googlebot Google-Extended Google-CloudVertexBot GoogleOther Google-Agent Google-GeminiNotebook Gemini Spark Gemini-Deep-Research

Tambahkan ke robots.txt di generator →

Sumber

github.com/ai-robots-txt/ai.robots.txt
amazon.com/robots.txt