Cohere · 用户请求
cohere-ai 是什么？
社区列表将此 token 归属于 Cohere 的用户请求抓取器。Cohere 表示不会为了训练而抓取内容；其官方文档以 Coherebot 作为示例 token。
- robots.txt token
cohere-ai- 运营方
- Cohere
- 用途
- 用户请求
- 是否遵守 robots.txt
- 未说明 运营方未作说明。
- 运营方是否提供文档
- 是，运营方在其自有页面上有相关说明。
- 文档
- docs.cohere.com
cohere-training-data-crawler 是社区报告的另一个 Cohere token；Cohere 均未确认这两个 token。
在整个网站上屏蔽 cohere-ai
User-agent: cohere-ai
Disallow: /
允许访问，但屏蔽私有路径
User-agent: cohere-ai
Allow: /
Disallow: /admin/
此爬虫会为用户或代表用户行事的 agent 获取页面。多家运营方表示，这类请求可能不受 robots.txt 约束；如有需要，请查看上方说明，并在防火墙处实施限制。