更多AI前沿科技资讯,请关注我们:
【closerAI ComfyUI】新王登场!角色替换、动作迁移的新解决方案:智谱开源SCAIL-2,让AI角色动画真正“活”起来!效果炸裂!
SCAIL-2 的最大亮点是端到端(End-to-End)控制。你给它一张参考角色图,再扔一段驱动视频(可以是真人、动画、甚至动物动作),模型就能直接把动作迁移过去,不需要任何显式的姿态中间表示。
它是怎么做到的?团队用之前几个开源模型(包括他们自己的 SCAIL-Preview、Wan-Animate、MoCha)合成了一个 60K 的运动对数据集,然后设计了一个统一的运动迁移接口,加上特定的掩码通道和 RoPE 设计,让模型在训练时同时吃下各种任务的数据。还用了“反向驱动”的训练技巧,让模型学到比原模型更强的能力。
结果就是几个涌现能力:
跨身份角色替换(把一个人换成另一个人,动作自然衔接)
动物驱动(狗的动作驱动猫的角色,或者更离谱的)
多角色场景支持
零样本适应更高级的控制信号(比如 SAM3D-Body 的网格渲染)
这已经不是简单的“姿态跟随”了,更像是让模型真正理解了“这个角色该怎么动”。
https://github.com/Comfy-Org/ComfyUI/pull/14373
https://huggingface.co/Comfy-Org/SCAIL-2/tree/main
总结:
超级完美的角色替换与动作迁移解决方案。
本地算力不够怎么办?
如果本地设备算力不好的小伙伴,推荐使用线上comfyUI来运行体验:runninghub.cn
https://www.runninghub.cn/ai-detail/2065425739767435265
https://www.runninghub.cn/ai-detail/2065428854314987521
最后几句:
如果对你有帮助,请一键三连支持下我,感谢!以下是小站主流的一些AI工具应用:
CloserAI AI短剧工作台(本地化解决方案)
https://aigc.douyoubuy.cn/ai-agent/
closerAI FlowStudio本地AIGC无限画布创作工具
https://aigc.douyoubuy.cn/closerai-flowstudio/
closerAI AI绘画大师万象视界:
https://aigc.douyoubuy.cn/closerai-vision/
CLOSERAI POD电商印花批量生产工作站:
https://aigc.douyoubuy.cn/?page_id=420541
印花提取:
https://aigc.douyoubuy.cn/yinhua/
以上是就是本期的分享,当然,更多工作流、资讯、插件、工具也可以在我们closerAI会员站上获取(查看原文)。
以上,既然看到这里了,如果觉得不错,随手点个赞、在看、转发三连吧,如果想第一时间收到推送,也可以给我个星标⭐~谢谢你看我的文章,我们,下次再见。
>/ 作者:JimmyMo
更多AI前沿科技资讯,请关注我们:

