大数跨境

Google 谈 Googlebot 如何处理 AI 生成内容

Google 谈 Googlebot 如何处理 AI 生成内容 搜索引擎报
2023-08-28
0
导读:Google 的 Martin Splitt 回答了关于爬取、渲染和处理 AI 内容的问题

针对Googlebot爬取与渲染如何适应AI生成内容激增的问题,Google技术倡导者Martin Splitt在Duda举办的网络研讨会中作出回应。他指出,Google并未因AI内容增加而调整渲染流程,而是通过既有的多阶段质量检测机制来应对低质内容。

Googlebot网页渲染机制

网页渲染是指浏览器或爬虫下载HTML、图片、CSS及JavaScript等资源,并将其组合呈现为可视网页的过程。Googlebot同样遵循这一标准流程,通过获取上述资源来完成页面渲染。

Google对AI生成内容的处理策略

在“探索渲染的艺术”网络研讨会上,Ammon Johns提问:AI导致的内容生产激增是否给爬取和渲染带来负担,是否需要简化渲染流程?

Martin Splitt明确否定了这一推测。他表示,Google已在多个环节实施质量控制,大多数低质内容无需依赖JavaScript渲染即可被识别。若系统判定某页面为垃圾内容,直接跳过渲染是更高效的选择;仅当页面空白或状态不明时,才会尝试渲染以进一步确认。

“如果看到情况不妙且确定是垃圾内容,JavaScript可能只会增加更多垃圾信息,那就直接放弃渲染。这种情况早已存在,并非新事物。AI虽扩大了内容规模,但未改变底层逻辑,渲染本身并非问题根源。”

质量检测机制覆盖AI内容

Martin Splitt强调,Google并未专门开发AI检测工具,而是沿用现有的多阶段质量检测体系。该体系不仅适用于人类创作内容,同样能有效识别低质AI生成内容。

此前Search Engine Journal曾报道,一项旨在区分人机文本的检测算法,意外成为网页语言质量的有效预测指标,其表现优于传统监督式垃圾内容分类器。这与Google“有益内容更新”(Helpful Content Update)的目标一致,即优先展示由人创作的高质量内容。

研究论文《生成模型是页面质量的无监督预测器:一项大规模研究》指出,用于区分人类与机器生成文本的模型,可作为网页质量的强预测因子。这印证了Martin Splitt的观点:AI内容的泛滥并未迫使Google改变策略,现有质量检测机制已能同步覆盖人机生成内容。

  1. Google未针对AI内容引入特殊渲染或检测流程;
  2. 现有质量检测体系同时适用于人类内容与AI生成内容。
【声明】内容源于网络
0
0
搜索引擎报
搜索引擎时报
内容 2299
粉丝 0
搜索引擎报 搜索引擎时报
总阅读3.0k
粉丝0
内容2.3k