
Reddit限制互联网档案馆抓取数据,防止AI公司未经授权收集
Reddit为防止人工智能公司未经授权收集平台数据,已对互联网档案馆的Wayback Machine实施全面限制。目前,Wayback Machine仅能抓取Reddit主页;评论、subreddit页面、帖子详情及用户个人资料等内容均无法被归档,这严重削弱了互联网档案馆保护Reddit历史内容的能力。
Reddit发言人Tim Rathschmidt表示,发现部分AI公司通过Wayback Machine违规收集数据:
互联网档案馆为开放网络提供服务,但我们看到一些人工智能公司违反了我们的平台政策,从Wayback Machine中收集数据。
Rathschmidt指出,为防止这些公司归档可能侵犯用户隐私的数据(含已删除内容),实施上述限制措施十分必要。
数据授权成重要收入来源,未获协议者面临强硬态度
近期,Reddit将数据授权业务转化为重要收入来源。该公司已与Google和OpenAI签署价值数百万美元的协议,允许其内容在搜索引擎和AI模型中使用。然而,对于未达成类似协议的公司,Reddit态度强硬。上个月对Anthropic提起的诉讼便是这一立场最显著的例证。
双方保持对话,Reddit数据政策持续收紧
针对此次限制,互联网档案馆宣布将继续维持与Reddit的长期合作关系。Wayback Machine总监马克·格雷厄姆表示,双方正“就此问题保持持续对话”。
此举被视为Reddit数据政策变更的最新一步。自2023年通过博客文章公布的内容以来,Reddit陆续实施了导致第三方应用陷入困境的API更改及搜索引擎访问限制等政策。如今看来,Reddit正将“付费共享数据”的模式扩展至Wayback Machine这类“善意行为体”。

