Meta更新的《商业条款》将于10月30日正式生效。新规授权Meta爬取与其产品相关联的企业网站内容，用于训练AI模型及优化广告推荐等功能。该条款适用范围涵盖所有使用Meta产品的商业行为，包括未投放广告但拥有Facebook页面或使用Business Suite的企业。
针对外界关于“抓取新闻网站”的质疑，Meta发言人安迪·斯通回应称，此次更新旨在确保平台能获取第三方网站待售产品的准确信息，并非专门针对新闻媒体。不过，多位法律专业人士指出，新条款措辞宽泛，可能为Meta主张抓取网页并用于AI训练提供法律依据。
新条款核心权限解析
新版《商业条款》明确允许Meta及其代理方使用爬虫、机器人等自动化工具，收集与企业产品服务相关的域名及页面内容。这些数据来源包括企业主动提供的URL，以及用户在使用Meta产品时产生的链接。
此外，条款还赋予Meta“创建测试凭据”以访问相关页面的权利。收集到的内容将被用于产品开发、改进、研究及AI模型训练等用途。适用场景不仅限于广告投放，还包括营销信息发布、产品列表展示及使用Ads Manager、Meta Business Suite等工具的商业活动。
根据规定，继续使用Meta服务进行商业活动即视为同意新条款；若不同意，需停止相关商业用途。知识产权律师Matt Topic建议，尽管法院最终裁决尚不确定，但出版商应假设该条款会被执行。
与旧版条款的主要差异
相较于2024年3月的版本，新条款显著扩大了数据抓取范围。旧版仅允许抓取已购买广告客户的域名或指定URL，而新规将许可延伸至任何商业用途关联的URL，且不再以广告投放为前提。
此前分散在自助广告条款、生成式AI广告条款及产品目录条款中的抓取权限，现被整合至《商业条款》和修订后的《自助广告服务条款》中，以减少条款重叠。同时，卖家协议中关于使用自动化软件获取商品信息的规定也得以保留。
Robots.txt协议的实际效力存疑
Meta方面表示，新条款不会改变其爬取方式，内容所有者仍可通过robots.txt文件管理访问权限。然而，法律专家对此持保留态度。康奈尔大学法学院教授James Grimmelmann指出，“测试凭据”机制可能在技术上允许Meta注册虚假账号以绕过付费墙或注册限制。
Meta官方爬虫文档显示，不同爬虫对robots.txt的执行标准不一：Meta-ExternalAgent（用于AI训练）和Meta-WebIndexer（用于AI搜索）通常遵循robots.txt指令；但Meta-ExternalFetcher（响应用户请求抓取）和FacebookExternalHit（安全完整性检查）在执行特定任务时可能会绕过该协议。目前，新条款并未明确说明企业的robots.txt设置是否会因接受条款而失效。
行业影响与应对建议
由于新条款与常规商业用途绑定，大量未投放广告的品牌也将受到约束。对于网站运营商而言，在10月30日生效前的两周窗口期内，应重点审查robots.txt文件配置，区分对待Meta的各类爬虫，例如可阻止Meta-ExternalAgent同时保留Meta-WebIndexer。
欧洲出版商委员会（EPC）已就此致函欧盟委员会，表达对Meta新条款的担忧。EPC特别指出，当用户在社交媒体分享文章链接时，Meta可能据此主张拥有使用该文章内容的权利，这引发了版权与数据合规方面的广泛争议。