Cohere · Pobieranie przez użytkowników
Czym jest cohere-ai?
Token przypisywany przez społecznościowe listy do pobierania stron na żądanie użytkowników przez Cohere. Cohere twierdzi, że nie prowadzi crawl na potrzeby trenowania, a w swojej dokumentacji jako przykładowego tokena używa Coherebot.
- Token robots.txt
cohere-ai- Operator
- Cohere
- Cel
- Pobieranie przez użytkowników
- Przestrzega robots.txt
- Brak informacji Operator nie podaje tej informacji.
- Udokumentowany przez operatora
- Tak, na własnych stronach operatora.
- Dokumentacja
- docs.cohere.com
cohere-training-data-crawler to kolejny token Cohere zgłaszany przez społeczność; Cohere nie potwierdza żadnego z nich.
Zablokuj cohere-ai w całej witrynie
User-agent: cohere-ai
Disallow: /
Zezwól na dostęp, ale zablokuj ścieżki prywatne
User-agent: cohere-ai
Allow: /
Disallow: /admin/
Ten bot pobiera strony na żądanie użytkownika lub działającego w jego imieniu agenta. Kilku operatorów informuje, że robots.txt może nie mieć zastosowania do takich żądań. Sprawdź więc powyższy wiersz i, jeśli to ważne, wymuś blokadę na firewallu.
Dodaj do robots.txt w generatorze →