人工智能搜索引擎 Perplexity 因数据抓取活动登上 Cloudflare 雷达。据 Cloudflare 称，尽管已明确声明禁止爬取，Perplexity 仍继续抓取内容，并通过隐藏机器人身份掩盖操作。
Cloudflare CEO Matthew Prince 指责 Perplexity “像朝鲜黑客一样行事”。该公司在声明中表示，Perplexity 不仅使用自有机器人，还伪装成 macOS 上的虚假 Google Chrome 浏览器收集内容；此外，这些爬取活动通过非 Perplexity 的 IP 地址进行，且频繁轮换。
Cloudflare 指出：“这些活动涉及数万域名和数百万每日请求。”该行为尤其出现在已通过 robots.txt 文件和手动反机器人规则防止爬取的网站上。为验证情况，Cloudflare 设置了不应被搜索引擎看到的虚假网站，发现其同样被 Perplexity 爬取并确认。
此后，Cloudflare 将 Perplexity 从“已验证机器人”列表中移除，并宣布在全平台采取针对此类隐蔽爬取的额外措施。
Perplexity 方面作出回应
Perplexity 发言人 Jesse Dwyer 强烈否认指控，将 Cloudflare 的博客文章描述为“销售策略”，声称所分享截图并未实际访问任何内容，并辩称文中提到的机器人不属于他们。
另一方面，Perplexity 此前也曾因类似指控登上新闻头条。Wired 等媒体机构曾指控该公司未经授权使用其内容。
大局观：AI 饥渴正在威胁互联网商业模式
这一事件重新引发了 AI 公司与内容创作者之间的数据冲突。训练 AI 模型的企业长期通过网页抓取收集海量数据，但内容创作者认为这是在未获许可下使用数据，威胁到了其收入模式。
Cloudflare 去年宣布了一项阻止 AI 抓取器的免费工具，并于上个月启动了一个市场，允许网站所有者向这些浏览器收费。CEO Matthew Prince 表示：“AI 正在摧毁互联网的商业模式，尤其是出版商。”行业失衡问题引起了关注。
尽管 Cloudflare 指出 OpenAI 等大型参与者遵守规则，但对于像 Perplexity 这样积极扩张的公司而言，数据战争正变得越来越激烈。OpenAI 虽表示合规，但增长导向型公司的激进策略加剧了冲突。