谷歌AI概览准确率升至91%,但信源可靠性存疑
《纽约时报》委托AI初创公司Oumi发布的分析显示,谷歌AI概览升级至Gemini 3后,问题回答正确率从Gemini 2的85%提升至91%。然而,超过半数准确回答缺乏可靠依据,所附链接未能完全支撑内容信息。
信源质量与操纵风险凸显
在分析的5,380个引用来源中,Facebook和Reddit分别位列第二和第四大被引平台。研究还发现AI概览易受操纵:BBC播客主持人发布关于虚构“热狗进食比赛”的博客文章仅一天后,该内容即被谷歌作为事实引用。
错误规模争议与谷歌回应
鉴于谷歌年搜索量超五万亿次,9%的错误率意味着每小时可能产生数千万条错误答案。对此,谷歌质疑Oumi的方法论,指出其测试基准包含错误信息,无法反映真实用户搜索行为。

