Perplexity · 搜索
PerplexityBot 是什么？
Perplexity 用于为 Perplexity 搜索建立网页索引的爬虫。Perplexity 表示，该爬虫不用于训练，并且会遵循 robots.txt。
- robots.txt token
PerplexityBot- 运营方
- Perplexity
- 用途
- 搜索
- 是否遵守 robots.txt
- 是 运营方表示该爬虫遵守 robots.txt。
- 运营方是否提供文档
- 是，运营方在其自有页面上有相关说明。
- 公开的 IP 列表
- www.perplexity.com/perplexitybot.json
- 文档
- docs.perplexity.ai
在整个网站上屏蔽 PerplexityBot
User-agent: PerplexityBot
Disallow: /
允许访问，但屏蔽私有路径
User-agent: PerplexityBot
Allow: /
Disallow: /admin/