AI 自我加速研发的能力首次得到第三方机构的实质性验证。独立评估机构 METR 发布重磅报告,深入揭示了 Anthropic 利用 AI 辅助内部研发的实际成效。图|METR 官方调查报告核心结论显示,自去年 10 月以来,Anthropic 模型能力的进化速度提升近一倍。这意味着其在一年内完成了过去需两年才能完成的研发进度。据评估,这一提速约有八成归功于内部员工高强度使用 Claude 协助下一代模型的研发工作。上下滑动查看更多内容值得注意的是,尽管 METR 进行了为期 11 周的驻场评估并出具了百余页报告,但 Anthropic 行使了一票否决权,将报告中涉及核心证据及未来模型预测的关键数据进行了遮蔽处理,理由为防止机密数据泄露从而加速竞争对手的研发进程。
研发效率翻倍,非依赖算力堆叠
今年 8 月 12 日至 10 月 29 日,METR 评估团队进驻 Anthropic 进行高权限审查。期间,评估人员调阅了从预训练、强化学习到内部模型跑分的一手资料,并发现了三款未公开的内部模型:7 月完成的 Model 2、8 至 9 月完成的 Model 3,以及 9 至 10 月出炉的 Model 4。基于 Anthropic 自家能力指数 AECI 的测试数据显示,模型能力增长曲线呈现显著陡峭化趋势。2025 年 10 月前,年增长斜率约为 15 分;此后该斜率跃升至每年 29 分,增幅达历史水平的 1.9 倍。最新的内部旗舰模型 Model 4 在全部 15 项高难度内部基准测试中得分均超过 50%,其表现甚至让现有题库显得捉襟见肘。针对外界关于“依靠增加 GPU 算力堆叠提升性能”的猜测,METR 在核查内部算力账本后予以排除。尽管具体算力分配细节被遮蔽,但评估确认训练算力的增长速度并未发生显著变化。研发进度的飞跃主要归因于 AI 技术在研发流程中的深度应用。