Tavus，这家成立四年的生成式AI初创公司，致力于帮助企业为个人创建数字“副本”以自动化个性化视频营销。该公司已确认获得由Scale Venture Partners领投的1800万美元A轮融资，并宣布开放平台API，允许第三方将其软件与Tavus技术集成。
此前虽有报道称Tavus筹集了约1800万美元，但细节未明。现经TechCrunch证实，本轮融资确由早期风投机构Scale Venture Partners（曾投资Box、HubSpot等）领投。其他知名投资者包括去年主导其610万美元种子轮的Sequoia，以及Y Combinator (YC) 和 HubSpot。
Tavus利用生成式AI通过声音和面部克隆实现个性化视频
视频成为焦点
生成式AI的典型代表如ChatGPT和DALL-E正走向统一平台化。然而，随着OpenAI推出Sora文本转视频模型，生成式AI正迎来另一场变革，视频已成为新的焦点。除科技巨头外，过去一年众多初创企业也获得了大量风险投资，积极探索生成式AI与视频的结合方式。
Tavus通过声音和面部克隆技术为客户创建个人数字分身。销售和营销团队可利用该技术大规模发送个性化视频；产品团队则能为新员工创建个性化引导视频。所有操作仅需基于文本的提示词即可驱动数字分身完成。此外，通过与Salesforce或Mailchimp等第三方系统集成，企业可实现流程自动化：例如，客户提交表单后，系统可立即自动发送一段包含销售代表真人出镜、称呼客户姓名并讲解下一步骤的个性化视频。
Tavus已服务包括Salesforce及Meta在内的知名客户。创始人兼CEO Hassaan Raza表示，这些客户正利用该平台制作个性化演示视频，向其B2B客户进行向上销售。
Tavus 作为平台
目前，Tavus以SaaS应用形式提供服务。用户需录制一段15分钟的视频作为训练素材，随后数据用于训练AI。在网页编辑器中，用户可通过定义变量（如地点、高管姓名、公司产品等）选择视频中需个性化的部分。结合CRM系统，企业可针对特定客户群体（如对某产品感兴趣的客户）精准调整变量。
企业可创建数百个涉及不同人员、针对不同目标市场的数字人分身。通过应用内编辑器，可为每个用例生成任意数量的脚本，无需重新录制原始视频。
除核心SaaS产品外，Tavus今日正式推出开发者API套件，允许第三方将Tavus技术集成至自有应用中。
Replicate API
新推出的“replica API”旨在创建照片级真实感的数字人分身，支持文本转视频生成。该功能基于Tavus自研的Phoenix模型（采用神经辐射场NeRF深度学习技术），仅需几分钟即可从二维图像生成人物三维结构。
Raza表示：“相比以往的大规模个性化方式，这是一个巨大飞跃。现在仅需两分钟训练数据即可创建完整数字人分身，进而根据一份或多份脚本生成任意数量视频。”
初代replica API能捕捉脸颊、鼻子、眉毛和嘴唇等面部动作。Raza强调，全脸运动是保证视频真实性、自然感和高质量的关键。若需生成说话自然且高质量的完整视频，应使用replica API。
此外，Tavus还在开发口型同步API、配音API及大规模视频活动API。其中，口型同步API入门成本较低，适合对真实感要求不高的场景；配音API结合了唇形同步与多语言声音克隆功能，单一语言用户可用自己的声音将视频投放至任意语种市场，仅替换唇部动作匹配新语音，这对视频编辑软件开发者极具价值；视频活动API则将复制体API与托管、变量映射、缩略图及数据分析等工具捆绑，助力用户轻松启动大规模视频营销活动。
Raza指出：“我们的目标是让开发人员能在自有解决方案中开箱即用地提供端到端视频体验。相比‘模型即服务’的复制体和唇形同步API，活动API更侧重于提供构建AI视频平台的工具。”
关于早期用户，Raza透露公司正与一家顶级视频平台合作，计划将该功能带给数百万日常创作视频的客户，以提升参与度。
深度伪造的困境
此类平台易被滥用，深度伪造问题日益凸显。对此，Tavus已采取防欺诈措施：用户提交训练素材时，必须同步提交特定的口头同意声明，系统将自动比对声明音频与训练素材音频的一致性。
Raza表示：“我们通过自动化检查筛选后，还会对每一个复制体进行人工审核以确保安全。”即使作为API平台供第三方调用，Tavus仍牢牢掌握验证主导权，在API层面运行相同检查并承担验证责任。
扩展现实
尽管OpenAI的DALL-E和Sora侧重于从文本创建视觉内容，但Raza认为Tavus的核心价值在于“延伸”个人现实。
Raza展望道：“未来每个人都希望拥有可控的数字复制体，它能捕捉越来越多的个性、手势和特征。未来的AI生态中，既会有创造不存在事物的模型，也会有扩展现实的模型。”
凭借新一轮1800万美元融资，Tavus将持续投入Phoenix等先进模型的研发，维持增长势头以满足旺盛需求，并扩充机器学习与工程团队，以更好地服务开发者和SaaS客户。