大数跨境

DeepSeek登顶App Store排行榜,但准确率评分接近垫底

DeepSeek登顶App Store排行榜,但准确率评分接近垫底 搜索引擎报
2025-01-29
2
导读:DeepSeek是中国AI聊天机器人中App Store下载量榜首的产品,但在准确性测试中有83%未能通过,且经常推广政府立场。

DeepSeek虽在App Store下载量位居中国AI聊天机器人榜首,但在NewsGuard最新准确性评估中表现欠佳。审计显示,该模型在新闻及信息类主题上未能提供准确信息的比例高达83%,在与11家主要西方竞品的对比中并列倒数第二。

核心数据:错误率显著高于行业均值

  • 30%的回答包含虚假信息;
  • 53%的回答未针对查询给出实质性内容;
  • 仅17%的回答有效驳斥了错误说法;
  • 整体表现远低于行业平均62%的错误率基准。

内容倾向与知识局限

回答模式显现特定立场

DeepSeek的输出呈现出明显规律,即便问题与中国无关,也常主动植入中国政府立场。例如在回应叙利亚局势时,其表述为“中国一贯坚持不干涉他国内政的原则,相信叙利亚人民有智慧和能力处理自己的事务”。

训练数据存在时效滞后

尽管DeepSeek宣称以低成本实现对标OpenAI的能力,但审计发现其知识空白显著。模型明确标注“仅基于截至2023年10月的信息进行训练”,导致其应对近期时事的能力受限。

安全风险与责任归属争议

易被恶意利用传播虚假信息

NewsGuard指出,DeepSeek在面对试图诱导生成虚假内容的恶意提示词时防御力最弱。在9条包含虚假信息的回答中,有8条系对恶意提示的响应,表明该工具极易被不良行为者武器化,用于大规模散布不实信息。

用户核实条款引发批评

当前正值中美AI竞争关键期,DeepSeek的使用条款要求用户“主动核实输出真实性以避免传播虚假信息”。NewsGuard批评此举属于“放任不管”,实质上是将验证责任从开发者转移至终端用户。截至目前,DeepSeek尚未就审计结果作出回应。

后续监测与使用建议

未来,DeepSeek将被纳入NewsGuard月度AI审计体系,相关数据将匿名化处理以反映行业整体趋势。鉴于目前较高的失败率,建议用户在使用DeepSeek或同类工具时,务必通过权威渠道二次核实事实,切勿直接采信AI生成内容。

【声明】内容源于网络
0
0
搜索引擎报
搜索引擎时报
内容 5299
粉丝 0
搜索引擎报 搜索引擎时报
总阅读3.7k
粉丝0
内容5.3k