Amazon · Trenowanie
Czym jest Amazonbot?
Crawler Amazona służący do trenowania i ulepszania jego produktów oraz usług. Przestrzega robots.txt i noarchive, ale ignoruje Crawl-delay.
- Token robots.txt
Amazonbot- Operator
- Amazon
- Cel
- Trenowanie
- Przestrzega robots.txt
- Tak Operator informuje, że bot przestrzega robots.txt.
- Udokumentowany przez operatora
- Tak, na własnych stronach operatora.
- Opublikowana lista adresów IP
- developer.amazon.com/amazonbot/ip-addresses/
- Dokumentacja
- developer.amazon.com
Zablokuj Amazonbot w całej witrynie
User-agent: Amazonbot
Disallow: /
Zezwól na dostęp, ale zablokuj ścieżki prywatne
User-agent: Amazonbot
Allow: /
Disallow: /admin/
Inne boty od Amazon
Dodaj do robots.txt w generatorze →