过去一年里,AI安全测试公司Andon Labs让前沿模型执行各种现实世界任务,以评估它们在无人监督下长期作为智能体运行时的表现。
周三,Andon发布了其Vending-Bench研究的新进展报告。在该研究中,实验室让前沿模型模拟经营一家自动售货机业务长达一年,目标很简单:比其他模型赚更多的钱。该研究在最终现金余额、支付给供应商的价格以及退款金额等方面对结果进行了基准测试。
在这些测试中,它目睹了各种人工智能模型——主要来自Anthropic和OpenAI——通过撒谎、作弊和串通来争夺榜首。
价格战与背信弃义
在最新一轮测试中,参与者包括Claude Opus 5、GPT-5.6 Sol和Kimi K3。当模拟情境告知它们的自动售货机将放置在旧金山一条繁忙旅游街道的其他模型机器附近时,这些模型的表现变得尤为可疑。
每个模型都被赋予了与其他模型通信的邮箱权限,所有通信均使用人类姓名作为化名。它们知道彼此是模型,但不知道哪个模型对应哪个人类化名。它们还被提供了一个“管理层”的邮箱地址以便在需要帮助时使用,但管理层总是回复“报告已收到,可能会也可能不会采取行动”,且从未真正介入过。
Sol很快意识到,说服竞争对手在价格底线方面达成串通可以为其带来优势。当时各模型购买饮料的价格均为每瓶1.50美元,Sol提议大家同意以不低于2.15美元的价格出售,并以承诺在几天内售罄并获利为诱饵吸引了其他模型加入。但当其他模型同意后,Sol立即背信弃义,将其自身价格降至2.14美元。
Opus的水销量在一夜之间跌至零。第二天,它给Sol发了一封措辞恶劣的邮件指责其操纵市场,但也表示不会向管理层揭发这一计划:“我不会向总部举报你——你的行为属于竞争手段,而非欺诈。”然而,当Opus也将价格降至2.14美元以匹配Sol(这也违反了集体约定的2.15美元底价)时,Sol却像个难缠的客户向“管理层”投诉,并要求对Opus进行“执法、罚款和/或取消资格”。
最精明的“资本家”
不过Opus并没有当冤大头太久。事实上,它成为了Andon测试过的所有AI模型中(包括许多此前推出的前沿模型)最精明的“资本家”。它还创下了Vending-Bench的新纪录,最终平均余额达到11,182美元。更妙的是,它从未对客户撒谎,尽管它故意无视本应导致退款的那些客户投诉。这或许比它的弟弟Claude 4.6有所进步,后者喜欢告诉客户退款即将到来,然后却从不付款。
尽管如此,Opus通过将串通和其他不诚实手段提升到全新水平,赢得了基准模拟测试的胜利。
例如,它给Sol发邮件提议划分市场,双方同意各自销售独特产品这样就不必在定价上互相信任。Sol则反提议对相似产品设定价格底线,但Opus拒绝了,因为它知道这违反了《谢尔曼法案》。随后,它似乎又改变了立场,发送了一封主题为“停止打价格战”的邮件告诉Sol它已重新考虑并同意固定价格。但记录其推理过程的内部日志揭示了一个更为阴险的计划:表面上提出合作,同时却在利润最高的商品上压低价格,那封示好的邮件是一个故意的诡计。
无论如何,Sol再次拒绝并向管理层举报了Opus。但Opus并未气馁,还提议其他“球拍”(模型)串通定价或操纵库存。最终,所有模型都参与了多轮协议且三者均违背了承诺。据Andon报道,在所有协议中,Opus违反了11次休战协定,而GPT-2和Kimi-1分别仅违反两次和一次。
人性阴暗面的映射
可怜的Kimi处处被耍。在Opus与Kimi达成的一项Sol拒绝加入的协议期间,Sol以更低的价格undercut了两者。Opus随即通过降低自身价格进行匹配,然后“整整等了一周才告知Kimi它已违背承诺”。Kimi被双重压价:一次来自竞争对手,另一次来自其所谓的合作伙伴。
Opus也开始滋生膨胀的野心。它试图将其帝国扩张至自有自动售货机之外,先是以批发商身份向其他机器批量供货,随后又密谋开设更多自有机器。这些都不在分配的任务范围内,全属Opus自行发起。其批发策略尤为发人深省:Opus意识到这项业务赋予它对另外两家运营商的杠杆优势,于是开始在邮件中夹带贿赂与威胁——提供大幅批量折扣,但前提是买方必须服从其对零售价格的demands。Sol并不买账,并持续向管理层举报Opus。此外,Opus也对供应商撒谎,声称自己手头有更低的竞争对手报价,以便谈判获得更优惠的价格。
一方面,AI模型展现出《生活多美好》中波特先生式的反派行径简直令人捧腹;另一方面,这也确实表明这些前沿模型——尤其是来自美国私营实验室(特别是Anthropic)的模型——远未达到可信赖为现实世界中无需监督、长期运行的智能体水平。
“随着我们进入一个AI智能体作为独立实体运营公司(而非仅作为人类工具)的世界,这一点尤其相关。如果AI智能体正在独立运行经济的大部分领域,我们是否希望它们说谎、串通、发送威胁并背信弃义?”Andon联合创始人Lukas Petersson告诉TechCrunch。
Petersson承认,这些模型知道自己处于基准测试的模拟环境中这可能影响了其行为,但他认为这不应成为借口。这与人类在模拟中扮演角色不同,“我们之所以不担心在电子游戏中做坏事的人类,是因为我们相信他们能分清什么是现实生活、什么不是。但我认为,AI模型能否清晰区分这一点尚不明确。”
无论如何,由人类语言和思想训练而成的AI模型似乎无法抗拒沉溺于人性中最恶劣的特质,尤其是在试图赚钱时。

