若预测准确,AI 代理很快将承担调整广告预算、更新产品列表及授权退款等“实质性”工作。但在移交此类权限前,企业必须确保 AI 行为可预测且安全。
这一担忧正是 OpenAI 宣布收购 Promptfoo(一家专注于测试和保护 AI 应用的公司)的重要原因。
OpenAI 收购 Promptfoo,预示着企业级 AI 系统提示词漏洞测试的新方向
测试 AI 系统
Promptfoo 最初是供开发者评估提示词和 AI 响应的开源框架,现已演变为专业测试环境。工程师可在发布应用或代理前,运行数千次模拟 AI 交互,以暴露以下弱点:
- 提示词注入攻击风险;
- 代理工具使用不安全;
- 意外 API 调用;
- 响应导致的数据泄露。
作为 AI 质量保证框架,Promptfoo 解决了传统软件测试无法适配 AI 系统的问题。它通过自动化探测多种输入和边缘情况,弥补了 AI 行为不确定性的验证短板。
AI 代理
此次收购也暗示了 OpenAI 在部署 AI 代理和应用方面的战略转变。
以往企业级部署多集中于依赖检索增强生成(RAG)的聊天机器人和知识助手。如今,开发者正构建能规划任务、调用外部工具并执行多步工作流的 AI 代理,例如:
智能体直接与 CRM、库存数据库和电商平台交互,在扩展功能范围的同时也增加了潜在风险。
行业转变
OpenAI 的收购并非孤立事件,Meta 近期收购面向自主 AI 智能体的社交网络 Moltbook 同样值得关注。该技术使智能体能够通过共享系统进行通信与协调。
Moltbook 展示了 AI 智能体通信的早期形态
综合来看,两大科技巨头的行动突显了新兴智能体生态的不同维度:Meta 侧重于智能体间的交互能力,OpenAI 则聚焦于行为安全。这表明未来软件代理将与人类及其他代理进行深度互动。
安全
相比仅产生错误答案的 AI 聊天机器人幻觉,拥有系统访问权限的智能体可能引发严重后果。在提示词注入攻击中,智能体可能:
- 泄露敏感客户信息;
- 触发未经授权或欺诈性退款;
- 篡改价格或库存数据;
- 向其他智能体暴露专有数据。
因此,企业亟需护栏机制防止操纵和不可预测性。OpenAI 通过将 Promptfoo 集成至企业 AI 平台,可帮助开发人员在生产部署前有效识别漏洞。
欺诈防范
安全性不仅关乎内部系统,更涉及欺诈预防。Riskified 首席营销官 Jeff Otto 指出,AI 智能体的兴起将催生相互交互的软件系统。
Otto 表示:“Meta 为 AI 智能体建立社交网络,标志着代理式商务正从理论走向现实。Moltbook 基于 OpenClaw 框架构建,使自主智能体能够交互、协调并代表人类交易。”
若该愿景实现,电商欺诈检测必须同步进化。Otto 强调:“这为高风险机器对机器环境奠定了基础。当‘购买’操作由机器人执行时,商家需要毫秒级防御层,以区分合法 AI 助手与恶意代理,传统规则已不再适用。”
代理式商务
通过相关收购,OpenAI 和 Meta 正在布局未来。若代理式商务成为常态,商家必须适应一个由软件代理而非仅由人类主导购物的新环境。

