2023年
被很多人成为“AI”元年
先有Chat GPT的横空出世
再有AI绘画的“惊为天人”
现在我们的音乐视听也能享受AI福利了
目前
在平台上还能搜到不少“AI歌手”
“AI孙燕姿”“AI周杰伦”、“AI陈奕迅”等
不少人好奇,虚拟歌手火遍全网
技术上是如何实现的呢?
近日
厦门国贸云展科技
就此话题,接受厦门广电采访
下面,为大家带来一线采访报道
厦门国贸云展是一家以数字会展及数实招商一体化为核心业务的科技公司,在工作开展中,不乏通过生成式AI、产业大数据、元宇宙等高新技术赋能业务的案例。对当下热门的“AI歌手”背后的“AI语音模拟及生成技术”也有研究。

张士心作为国贸云展产品研发中心的技术副经理接受采访,他告诉记者,要想做成AI歌手,首先要通过相关软件从这个歌手的大量原声歌曲、或者采访素材中,“提取”出歌手的纯声音。

张士心
厦门国贸云展科技有限公司
产品研发中心技术副经理
把他的背景音、合声部分、呼吸声去掉,就可以获取原声的声音,我把《天黑黑》去掉一些合声的部分音乐,然后我们要在工具里, 把它切成很多小段,然后导入训练工具里面,识别数据集,预处理,最后开始训练。

通过技术处理完成“训练”,“AI孙燕姿”就生成了一个仿真的声音模型,然后就是把这个声音模型去做“推理”,最终实现声音替换。

张士心
厦门国贸云展科技有限公司
产品研发中心技术副经理
生成孙燕姿声音模型之后,在推理这部分就把我们想要换的一首歌放进去, 比如把《龙拳》切成每一个小段,这样她学习起来会比较快。
虽然技术手段让人听得似懂非懂,但一套演示下来效果还是相当逼真。事实上近段时间,从ChatGPT横空出世、到AI绘画、AI换脸、再到AI歌手走红网络,AI的触角已经延伸到我们生活的多个方面。
内容来源:特区新闻广场

