Graphite于10月16日发布的分析显示,当ChatGPT未使用搜索功能回答问题时,被提及频率较低的品牌,即便在大量引用网页中出现,在使用搜索后的可见度依然有限。该机构建议品牌应致力于优化AI模型训练内容及引用情况,即“参数知识优化(PKO)”。数据显示,在被引用页面中至少15%大量提及的品牌里,若其在无搜索回答中的提及率不足四分之一,则使用搜索时的中位可见度仅为11%。
非搜索可见度与搜索可见度的正相关性
Graphite基于8月20日的提示词跟踪论文,对比了3,115个实体-问题对在未登录状态下的表现。研究发现,无论是否启用搜索,品牌在无搜索状态下被提及的频率越高,其在开启搜索后的可见度也相应提升。同时,随着搜索可见性的提高,被引用页面中提及该品牌的比例也随之增加,表明模型预训练知识与实时检索结果均至关重要。这一结论在两次独立复现中得到验证:一次通过API明确开关搜索功能测试100个提示词,另一次通过追踪工具在两周内监测200个提示词。
现有证据表明,模型训练期间学到的内容会影响其利用搜索结果的方式。尽管各品牌认知度控制变量未完全披露,但数据证实,无论是否使用搜索,品牌可见性均呈现同步增长趋势。
后台扇出查询中的品牌曝光机制
在对约95.7万次ChatGPT后台扇出查询的分析中,59.6%的查询包含品牌名称,22.7%使用了site:操作符。这些查询源自22,953个非品牌实体比较提示词。结果表明,即使原始提示词未提及具体品牌,扇出查询中出现品牌名称也能显著提高相关页面的检索几率。SEJ此前报道的小规模测试也印证了这一模式:在27次对话中,有21次ChatGPT的首次搜索查询自动包含了用户未输入的品牌名称。
引用率变化与搜索行为的关系
Graphite追踪数据显示,在固定集合的实体对比提示词场景下,未登录ChatGPT回复中包含引用的比例从8月初的56.6%升至9月底的88.5%,同期Gemini则从79.0%微增至81.2%。这反映了搜索使用频率的增加,但该比例可能随时间波动。需注意,存在引用并不等同于发生了搜索行为,ChatGPT此前已被证实可在不显示搜索证据的情况下添加行内链接。Ahrefs报告显示,8月至9月间仅14.4%的免费ChatGPT回复包含扇出查询,这与Graphite针对特定对比提示词的统计数据存在差异,两者不可直接等同。
模型知识截止时间与训练数据控制
Graphite通过计算模型发布日期与供应商报告的知识截止日期之间的天数差,评估新内容的影响窗口。对于Anthropic等厂商,自7月以来发布的新模型,该时间段约为2至5个月,被称为“新发布内容的最低影响时间”。此指标不衡量文章爬取进入训练集的具体时间或模型回答的动态变化。
针对PKO策略,Graphite提出两种探索性方法:一是在关闭搜索及新模型发布时通过API收集至少50条响应以建立基线;二是允许训练爬虫访问网站,并排查CDN或防火墙限制。此外,Google明确表示,其用于Gemini训练的robots.txt令牌(Google-Extended)仅控制内容是否用于未来模型训练及事实依据生成,不影响站点在Google搜索中的收录与排名。
研究意义与行业展望
当前的引用份额和被引页面提及指标主要基于ChatGPT识别的参考文献,忽略了未进行搜索时的品牌命名频率。因此,在新模型发布时通过API跟踪关闭搜索的提示词,对于获取无搜索基线至关重要。数据虽显示开启搜索后的可见度随非搜索可见度和页面提及率增加而提升,但这并不意味着单纯增加这两项指标就能直接提高搜索状态下的品牌提及率。
展望未来,鉴于AI实验室不公开训练数据集,且新资料融入模型通常需要2至5个月的滞后期,品牌方需持续监测。考虑到ChatGPT在对比提示词中的引用率呈上升趋势,重复进行开启搜索的跟踪工作将是评估PKO效果的关键手段。

