hi,同学们,我是赤辰,本期是我们第144期AI项目教程
真的非常炸裂!上段时间阿里开发了一款由音频驱动的人像视频生成模型EMO,一经发布,震惊整个AI圈,其实AI生成图片开口说话视频,也并不是什么新鲜事,但阿里的生成视频大模型EMO其质量与之前的任何AI图片开口说话工具生成的作品都不一样,基本告别面部生硬表情时代。
EMO只需输入一张参考图像和人声音频(如说话和唱歌),就能生成具有生动表情和各种头部姿势,口型完全匹配高保真的人声头像视频,同时还能根据输入视频的长度生成任意时长的视频。
目前,EMO框架上线到GitHub中,相关论文也在arxiv上公开。
GitHub:https://github.com/HumanAIGC/EMO
论文:https://arxiv.org/abs/2402.17485
既然EMO还没有正式上线,那么本期就给大家盘点一下目前市面上已有且好用的AI图片开口说话工具。
1.HEYGEN
https://www.heygen.com/
HeyGen 就是一款可以制作数字人视频的工具,功能非常强大,包括实时与数字人聊天交流,数字人克隆,视频翻译,图片数字人开口说话功能,应该算在数字人领域中知名度较高的AI工具。


价格也是在一众AI工具中,收费属于中高阶段,当然也可以在某宝上购买低价的积分账号来用。

2.DID
https://www.d-id.com/
DID可以快速制作数字人口播视频。只需上传你的人物照片,输入视频介绍文本,几分钟之内,你就能看到一个虚拟人物栩栩如生地开口说话,而且它的嘴型与音频完美匹配,真实感十足!


价格会比HEYGEN低一些,但个人觉得DID制作出来的效果比HEYGEN作品口型匹配上效果差一些,但也算在数字人图片口播AI工具中排前三。
DID为了避免被白嫖,免费生成的视频自带的水印,基本无法去除,所以你在没有其他工具选择的情况下,再考虑付费会员吧!

3.SadTalker
SadTalker是Stable Diffusion的一个图片口播数字人插件,通过它,我们就能实现只要提供一张图片和声音,就能实现一个会说话的视频,重点开源免费,真的香,在目前所有免费工具中,SadTalker生成的对口型视频效果应该是最强的。
但由于Stable Diffusion对于电脑硬件配置要求较高,因此也劝退了一大波人,不过感兴趣的小伙伴可以选择云部署,云端制作这类视频。

最低配置:NVIDIA GeForce GTX 1060或AMD Radeon RX 5600
推荐配置:NVIDIA GeForce RTX 2070或AMD Radeon Pro 5700XT
Stable Diffusion的代码和模型文件,可以从这里下载:
https://github.com/Stability-AI/stablediffusion
Sadtalker的代码和模型文件,可以从这里下载:
https://github.com/OpenTalker/SadTalker
4.KreadoAI
https://www.kreadoai.com/
Kreado AI只需输入文本或关键词,即可创作真实/虚拟人物的多语言口播视频,它还提供 AI 生成的营销文案。

Kreado Al的核心功能:AI视频创作、虚拟人物视频创作、AI模型创作、AI数字人物创作、数字人物创作

Kreado AI比起HEYGEN便宜些,功能也是非常强大。

像国产工具奇妙元、美册、万彩等也是可以生成高质量的图片开口说话数字人视频,价格均不同,大家可以根据自己的预算需求来选择。
好了,今天的内容就到这。AI小红书商单全域分发训练营,AI俄罗斯克隆人带货训练营进行中,AI爆文写作变现也会长期进行,假如同学对更多AI案例感兴趣,学习更多AI技能和项目实战变现等等,可加入圈咨询。
ok,今天这个玩法大家觉得如何?若同学们觉得内容有趣有启发,记得点赞,在看,转发三连!
往期教程:
用AI做十二星座壁纸号,粉丝8029,商单36张,可矩阵(附制作教程)
在小红书用AI做“MBTI”话题账号,48天涨粉2.1万,28张商单赚6000+(附制作教程)
用AI做治愈文案插画,粉丝6273,接37张商单,做矩阵月入过万(附保姆级教程)
END


