Google · Agent'lar

GoogleAgent-Mariner nedir?

Topluluk tarafından bildirilen, Google'ın web gezinme ajanına ait bir token. GoogleAgent-URLContext ve GoogleAgent-Shopping ile birlikte listeleniyor. amazon.com'un robots.txt dosyasında da yer alıyor.

robots.txt token'ı: GoogleAgent-Mariner
Operatör: Google
Amaç: Agent'lar
robots.txt kurallarına uyar: Belirtilmemiş Operatör bu konuda bilgi vermiyor.
Operatör tarafından belgelenmiş: Hayır. Token yalnızca ai.robots.txt gibi topluluk listelerinde biliniyor.

Google'ın resmi crawler sayfalarında listelenmediğinden robots.txt davranışı bilinmiyor.

GoogleAgent-Mariner botunu tüm sitenizde engelleyin

robots.txt

User-agent: GoogleAgent-Mariner
Disallow: /

İzin verin, ancak özel yolları engelleyin

robots.txt

User-agent: GoogleAgent-Mariner
Allow: /
Disallow: /admin/

Bu bot, bir kişi veya onun adına hareket eden bir agent için sayfaları getirir. Bazı operatörler, bu tür isteklerde robots.txt kurallarının geçerli olmayabileceğini belirtiyor. Bu sizin için önemliyse yukarıdaki açıklamayı kontrol edin ve güvenlik duvarınızda kural uygulayın.

Google tarafından sunulan diğer botlar

Googlebot Google-Extended Google-CloudVertexBot GoogleOther Google-Agent Google-GeminiNotebook Gemini Spark Gemini-Deep-Research

Oluşturucudaki robots.txt dosyasına ekleyin →

Kaynaklar

github.com/ai-robots-txt/ai.robots.txt
amazon.com/robots.txt