Amazon · Entrenamiento
¿Qué es Amazonbot?
Crawler de Amazon para entrenar y mejorar sus productos y servicios. Respeta robots.txt y noarchive, pero no Crawl-delay.
- Token de robots.txt
Amazonbot- Operador
- Amazon
- Propósito
- Entrenamiento
- Respeta robots.txt
- Sí El operador indica que respeta robots.txt.
- Documentado por el operador
- Sí, en las páginas oficiales del operador.
- Lista de IP publicada
- developer.amazon.com/amazonbot/ip-addresses/
- Documentación
- developer.amazon.com
Bloquea Amazonbot en todo tu sitio
User-agent: Amazonbot
Disallow: /
Permítelo, pero excluye las rutas privadas
User-agent: Amazonbot
Allow: /
Disallow: /admin/
Otros bots de Amazon
Añádelo a un robots.txt en el generador →