Amazon · Pobieranie przez użytkowników
Czym jest Amzn-User?
Fetcher Amazona uruchamiany na żądanie użytkownika, który pobiera strony na bieżąco, gdy wymaga tego jego prośba.
- Token robots.txt
Amzn-User- Operator
- Amazon
- Cel
- Pobieranie przez użytkowników
- Przestrzega robots.txt
- Nie Operator informuje, że robots.txt może nie mieć zastosowania, lub zgłoszenia społeczności wskazują, że bot go ignoruje.
- Udokumentowany przez operatora
- Tak, na własnych stronach operatora.
- Opublikowana lista adresów IP
- developer.amazon.com/amazonbot/live-ip-addresses/
- Dokumentacja
- developer.amazon.com
Amazon twierdzi, że może nie przestrzegać wszystkich reguł robots.txt, ale udostępnia osobną listę adresów IP, którą można wykorzystać do filtrowania.
Zablokuj Amzn-User w całej witrynie
User-agent: Amzn-User
Disallow: /
Zezwól na dostęp, ale zablokuj ścieżki prywatne
User-agent: Amzn-User
Allow: /
Disallow: /admin/
Ten bot pobiera strony na żądanie użytkownika lub działającego w jego imieniu agenta. Kilku operatorów informuje, że robots.txt może nie mieć zastosowania do takich żądań. Sprawdź więc powyższy wiersz i, jeśli to ważne, wymuś blokadę na firewallu.
Inne boty od Amazon
Dodaj do robots.txt w generatorze →