PerplexityBot 与 Perplexity-User 不相同
Perplexity 官方将两个 user agent 分开:PerplexityBot 用于建立搜索索引并呈现网站连结,不用于基础模型训练;Perplexity-User 则在使用者提出问题时即时存取页面。前者遵循 robots.txt,后者属使用者请求,官方文件说明其一般不受 robots.txt 控制。若网站使用 WAF,还要同时核对官方公布的 user agent 与 IP 范围,避免只靠名称放行伪造爬虫。
| User agent | 用途 | 站方注意事项 |
|---|---|---|
| PerplexityBot | 建立搜索索引并在结果中呈现连结 | robots.txt 允许抓取,WAF 核对官方 IP |
| Perplexity-User | 回应使用者问题时存取页面 | 与索引爬虫分开管理,依网站安全政策决定存取 |