AI语音代理与自动驾驶汽车的评估共通性：Coval的模拟测试平台
AI语音代理和自动驾驶汽车有什么共同点？Waymo前技术负责人Brooke Hopkins认为，它们的性能可以用相同的方式进行评估。Hopkins的新创公司Coval正是致力于此。
“当我离开Waymo时，我意识到我们在Waymo遇到的许多问题正是整个AI行业所面临的，”Hopkins对TechCrunch表示。“但每个人都说这是一个新范式，我们必须从第一性原理出发制定测试实践，基本上我们都要重新发明一切。我看着这一切心想，等等，过去十年里，我们在自动驾驶领域已经搞清楚了如何做到这一点。”
2024年，她决定推出 Coval，一个为AI语音和聊天代理构建模拟平台的系统，该平台以与Hopkins在Waymo测试自动驾驶汽车相同的方式测试和评估代理执行任务的表现。Coval可以同时运行数千个模拟，例如让代理进行餐厅预订，或让代理以间接方式回答客户服务问题。
Coval的技术基于一组通用指标来评估代理，但公司也可以自定义他们关注的指标，并使用Coval继续评估回归问题。用户还可以利用这些数据以及从中获得的见解，将其提供给最终客户，用于演示或作为监控工具，向客户展示代理按预期工作。
“阻碍企业采用代理的最大障碍之一，是企业缺乏信心，担心这只是一场‘障眼法’式的演示，”Hopkins说。“对于这些高管来说，选择供应商是一项非常复杂的任务，因为他们很难知道该问什么问题，也很难证明这些代理是否真的如他们所期望的那样工作。因此，这使我们的公司能够真正展示并证明这一点。”
Hopkins在Y Combinator 2024夏季批次期间真正构思了Coval背后的理念，并于2024年10月公开推出了该产品。她表示，需求一直很强，并在最近两个月变得爆炸式增长，客户纷纷询问他们的代理能多快完成评估。
这家总部位于旧金山的初创公司现在宣布完成由MaC Venture Capital领投、Y Combinator和General Catalyst参与的330万美元种子轮融资。该公司将利用这笔资金组建工程团队，并努力实现产品市场契合度。Hopkins补充说，公司未来还将致力于使用户能够评估其他类型的AI代理，例如基于网络的代理。
Coval问世之际，围绕AI代理的势头——以及炒作——似乎达到了历史新高。像 Marc Benioff 这样的企业技术领袖一直在赞扬（并营销）这项技术，称Salesforce将在明年部署超过十亿个其AI代理。据传， OpenAI 即将推出其版本的 AI 代理。
此外，还有众多初创企业在该领域进行开发。仅在 Y Combinator 2024 年的三届学员中，就有超过 100 家初创公司在构建 AI 代理。一些 AI 代理初创企业也获得了可观的风险投资轮次。其中一家， /dev/agents，在 2024 年 11 月以 5 亿美元估值完成了 5500 万美元的种子轮融资，而该公司成立不到一年。
这种势头意味着，很可能会有更多公司寻求帮助来评估其代理。Hopkins 表示，Coval 有望脱颖而出，因为与不可避免的新进入者不同，Coval 拥有先发优势。
她说：“我认为我们真正脱颖而出的地方在于，我在这个领域已经工作了五年，并且反复构建了这些系统。我们构建了多个版本，看到了它们如何失败以及如何扩展，并将所有这些经验教训融入了 Coval 的构建中。”