大数跨境
0
0

魔音分享 | 角色随心所变,一人多声,打造超级配音神器!

魔音分享 | 角色随心所变,一人多声,打造超级配音神器! 魔音工坊
2023-03-24
176
导读:如何通过技术手段实现声音的老化和年轻化,以及男女性别转换,为音频产业带来更多可能性?

如何通过技术手段实现声音的老化和年轻化,以及男女性别转换,为音频产业带来更多可能性?

魔音工坊近期上线的 发音人角色迁移功能 现已实现!

该功能来自 MeetHiFiVoice 家族中的新成员 MeetHiFiVoice-Role 技术!

魔音分享 | 角色随心所变,一人多声,打造超级配音神器!

「角色迁移」已支持如下 19 位发音人:

女:采采魔千雪魔丽娘魔殊琪魔小琪魔芸萱魔芳官军哥小冰魔小灵魔佐伊魔伊莉

男:魔天轮魔西毒魔阿彬魔天启魔翎洛慕容魔小杰魔老铁

今天小编带魔友们一起了解,这新功能背后的黑科技~

01角色迁移

技术介绍

语音合成(Text-To-Speech)技术是一种将文本转换为对应语音的技术。近年来,语音合成技术被广泛地应用于有声书,广播剧,短视频,个人配音等场景。随着深度学习的飞速发展,语音合成技术在近几年也得到了极大的进步,尤其是在音质、自然度、情感等方面。随着语音合成技术的进步,用户对该技术的期望也在逐步提升,从最初的高音质,到高可懂度,再到高自然度,以及情感迁移。最近,用户群体中出现了一个新的需求:希望通过语音合成技术用自己的声音来合成其他性别,甚至其他年龄段的声音。比如,用户用自己的音色通过语音合成技术既可以合成小男孩儿的声音,也可以合成老爷爷的声音。

魔音分享 | 角色随心所变,一人多声,打造超级配音神器!

图片来源于网络

可以将不同年龄和性别的组合身份称为角色,比如“老奶奶”这个角色是指性别为女性,年龄处在老年阶段的人。在以往的技术中,为了能够合成想要的配音,需要专业的发音人去录制各种角色类型的数据(男孩儿、女孩儿、青少年男性、青少年女性、青年男性、青年女性等),然后由技术人员使用角色数据去训练对应的角色模型。这种方案可以实现角色配音的合成,但是耗费的成本是非常巨大的,对发音人和技术人员的要求也非常的高。为了解决上述问题,出门问问的技术人员研究了在发音人单一角色数据的情况下,即每个发音人仅有一种角色,如何使该发音人的模型能够合成其他不同的角色的音频,这项技术叫做跨说话人角色迁移语音合成。简单来说,我们是在MeetHiFiVoice的基础上引入角色信息,联合文本信息和发音人编码训练一个端到端的语音合成模型。

02角色迁移

技术架构

魔音分享 | 角色随心所变,一人多声,打造超级配音神器!

MeetHiFiVoice-Role架构图

03角色迁移

使用效果

我们准备了一些配音音频,魔友们可以听听看。

魔殊琪:

魔翎洛

04角色迁移

总结展望

魔音工坊拥有 500+ 的发音人,1200+ 风格。不久前我们推出了 MeetHiFiVoice-Emotion ,这次再重磅推出角色迁移功能。借助 MeetHiFiVoice-Role 技术,相信很快可以实现让所有发音人支持角色合成功能,让魔友们使用心仪的发音人合成不同角色的声音。

我们的技术目标是让 MeetHiFiVoice 家族不断地更新迭代,时刻关注广大用户的需求,以便让创作者在魔音工坊平台上能够自主控制韵律、情感、语调、方言、语种等,更便捷地创作出高质量、高清晰度的音频内容。

【声明】内容源于网络
魔音工坊
魔音工坊配音神器,让配音更简单。
内容 1001
粉丝 1
魔音工坊 魔音工坊配音神器,让配音更简单。
总阅读122.6k
粉丝1
内容1.0k