大数跨境

Tavus利用生成式AI打造支持语音和面部克隆的个性化视频

Tavus利用生成式AI打造支持语音和面部克隆的个性化视频 海外洞察
2023-03-20
0
导读:Tavus 使企业能够基于单次初始录制,为特定个人定制“独一无二”的视频。

生成式人工智能已成为2023年核心科技趋势。以ChatGPT为代表的大型语言模型(LLMs)技术,凭借算法生成文章、代码乃至程序的能力进入公众视野;微软支持的OpenAI推出的DALL-E,则进一步将这种能力拓展至视觉创作领域。

尽管ChatGPT被视为AI主流化的标志,但这仅是AI驱动应用新时代的开端。从消费者搜索、图库摄影到房地产及内容营销,AI正深刻重塑各行各业。

在此背景下,新兴初创公司Tavus试图通过“一次录制,无限定制”的个性化视频技术脱颖而出,赋能企业针对特定个人生成专属视频内容。

例如,销售团队可基于客户表单数据发送海量个性化推销视频;猎头亦可利用LinkedIn资料向候选人批量发送定制化沟通视频。

Tavus由Hassaan Raza和Quinn Favret于2020年在旧金山创立,作为Y Combinator校友企业,今日宣布完成610万美元种子轮融资。本轮由Sequoia领投,Accel Partners、Index Ventures、Lightspeed Ventures及YC Continuity等知名机构参投。

工作原理

传统个性化视频制作耗时且重复。Tavus旨在解决这一痛点:用户仅需数分钟创建AI视频模板,即可基于原始素材生成无限版本。

入职流程中,用户需按Tavus提供的脚本录制一段15分钟视频用于AI训练,随后为每个活动录制专属模板。

Tavus:阅读脚本以创建基础模板。图片来源:Tavus

通过网页编辑器,用户可选择个性化元素,指定变量(如公司名称、高管姓名、地点),并添加行动号召。

Tavus:用变量个性化脚本。图片来源:Tavus

Tavus还支持ChatGPT驱动的长文本变量,以满足用户对高度个性化开场白的需求。例如,基础脚本可配置为包含从目标对象LinkedIn资料中提取的一句话介绍。

Tavus:生成个性化内容。图片来源:Tavus

本质上,Tavus正将邮件营销的大规模个性化能力迁移至更具视觉冲击力的视频领域。但这引发了疑虑:当受众发现视频并非真人专门录制时,是否仍会欢迎这种“个性化”?若意识到视频是基于数据库信息自动生成,原本的“个性化”体验甚至可能显得“非个性化”。

随着AI深度融入生活,此类伦理问题将持续浮现。Favret强调,尽管销售和营销是主要场景,但Tavus的用户群体已涵盖招聘人员、大学院长及C级高管等多元化角色。

Favret表示:“人们常误以为Tavus仅适用于销营团队。实际上,许多高级用户在客户成功、产品、招聘等全组织职能中创新应用Tavus。”

关于谁愿意克隆自己,Favret回应道:“通常用户会克隆自己,但也有企业由高管或发言人统一录制,以保持品牌形象一致。Tavus致力于让所有用户都能在几分钟内轻松完成自我克隆。”

底层技术上,Tavus利用机器学习训练面部表情与唇部动作模型,构建能逼真模拟动作并与合成音频同步的系统。

部署方面,约半数用户通过Web仪表板使用,另一半则通过API或原生集成将其嵌入自有系统。

Favret指出:“销售团队常在平台直接部署以高效生成活动视频;其他团队则以程序化方式集成,创建‘事件驱动’工作流,即在触发条件满足后自动生成并发送视频。”

例如,潜在客户在网站提交表单后,系统可利用其数据自动生成并发送定制视频,从而在最佳时机提升转化率,无需人工等待录制。

滥用风险与防范

在生成式AI赛道,微软与谷歌正激烈争夺企业与消费者市场,目前微软略占上风。同时,GlossAi、Typeface等初创企业也在各自细分领域崭露头角。

Tavus面临Windsor(侧重电商)和Synthesia(专注数字人培训视频)等竞品竞争。尽管生成式AI炒作始于近期,但该趋势早已显现,Tavus已成功吸引CoStar、AB Tasty等大型客户。

然而,技术滥用风险不容忽视。深度伪造欺诈案例频发,即便初衷良好,伦理质疑仍随技术普及而增加。

对此,Tavus内置语音验证与实时录制功能以防欺骗。“用户无法上传他人视频进行克隆,”Favret表示,“用户拥有数据和肖像完全所有权,可随时删除。我们严格审查每个用例是否符合社区准则与伦理标准,安全与伦理对我们至关重要。”

商业模式

Tavus提供面向小型企业的入门计划,月费275美元,含视频数量限制;定制版“商业”计划取消限制,价格根据使用意图定制。

Favret说明:“宏观上采用基于用量的模式,费用取决于席位数量与生成视频数量的组合。”

除2021年YC项目期间的小额融资外,本轮种子轮完整投资者名单包括:Sequoia、Accel Partners、Index Ventures、Lightspeed Ventures、YC Continuity、SV Angel、Hack VC、Remus Capital、Mantis Capital、Liquid2 Ventures、Zillionize、Soma Capital、GTMfund、Terra Nova及多位匿名天使投资人。

【声明】内容源于网络
0
0
海外洞察
海外资讯洞察,电商,AI
内容 14232
粉丝 0
海外洞察 海外资讯洞察,电商,AI
总阅读3.2k
粉丝0
内容14.2k