
英伟达宣布,其AI驱动工具Audio2Face已作为开源项目向开发者开放。该工具专为3D头像生成逼真面部动画而设计,通过分析声音声学特征,自动生成匹配的面部表情与唇部动作数据。简言之,Audio2Face利用生成式AI将语音输入转化为逼真的面部动画,使数字角色实现精准口型同步及富有表现力的情感传达。
目前,开发者可利用该工具及其底层框架为游戏和应用创建逼真3D角色,适用于预制作内容及直播活动等多种场景。
包括《切尔诺贝利人2:隔离区》开发商Farm51、《异形:入侵异变进化版》开发团队在内的多家厂商已落地应用。其中,Survios简化了面部捕捉流程,The Farm 51缩短了动画制作时间并提升了表演真实度;Reallusion将其集成至iClone等平台以优化工作流。此外,Convai、Codemasters、GSC Games World、Inworld AI、网易、完美世界游戏、Streamlabs及UneeQ Digital Humans等公司也已采用该技术。
除开源模型和SDK外,英伟达还开放了预训练框架,支持用户根据特定应用场景微调模型。同时,英伟达致力于构建以社区为核心的AI面部动画生态系统,鼓励开发者加入专属Discord社区进行交流协作。

