Google 更新了 Google-Extended 用户代理文档,明确出版商可通过该令牌控制是否允许 Google Gemini 和 Vertex AI 使用其数据进行模型训练或作为 AI 答案的事实依据(Grounding)。
Google-Extended 文档更新详解
基于出版商反馈,Google 对 Google-Extended 的指导说明进行了修订,旨在提升清晰度并补充具体细节。新版文档更准确地界定了该用户代理的用途及屏蔽后的实际效果。
核心定义更新
更新后的文档明确指出:
“Google-Extended 是一个独立的产品令牌,网站出版商可使用它来管理 Google 从其站点抓取的内容是否可用于训练为 Gemini Apps 和 Vertex AI Gemini API 提供动力的未来 Gemini 模型世代,以及用于在 Gemini Apps 和 Vertex AI 上的 Grounding with Google Search 中进行事实依据(即在提示时从 Google Search 索引向模型提供内容,以提升事实准确性和相关性)。”
相比旧版,新定义更详尽地解释了“事实依据”的具体运作机制及其与模型训练的关联。
明确不作为搜索排名信号
此次更新重点澄清了 Google-Extended 与 Google 搜索排名的关系。文档新增表述强调,允许或禁止 Google-Extended 访问数据,均不会被用作 Google 搜索的排名信号。
排名信号条款变更
旧版仅提及不影响收录或排名,新版则做出了更具针对性的区分:
“Google-Extended 不会影响网站在 Google 搜索中的收录,也不用作 Google 搜索的排名信号。”
这一修改消除了出版商对于“开放 AI 数据抓取可能换取搜索流量”或“拒绝抓取会导致降权”的顾虑。
与其他搜索指导保持一致
更新的文档内容与 Google 搜索中心现有指导保持统一,进一步确立了 Google-Extended 与搜索可见性控制的分离原则。Google 再次重申:
“Google-Extended 不是管理您的内容在 Google 搜索中显示方式的方法。相反,请使用其他方法来管理您在搜索中的内容,例如 robots.txt 或其他机器人控制。”
关键要点总结
- 文档透明度提升: Google-Extended 的目的、影响范围及屏蔽效果得到更清晰的阐述。
- 与排名彻底解绑: 明确 Google-Extended 既不影响搜索收录,也不作为排名信号。
- AI 用途界定清晰: 确认该令牌专门用于控制内容在 Gemini 模型训练及事实依据(Grounding)中的使用权限。
- 政策一致性增强: 更新后的语言强化了其与搜索索引控制无关的定位,避免概念混淆。
总体而言,Google 通过此次文档更新,明确了出版商在 AI 数据授权方面的自主权,同时保证了搜索排名体系的独立性。出版商可根据自身需求配置 Google-Extended,无需担心对自然搜索流量产生负面影响。

