最近世界杯踢得正热,TikTok那边更是掀起了球衣穿搭挑战,球衣早就不是球迷专属了。这个热点作为跨境人必须来蹭一波啊!!
我们正好在TikTok刷到一条播放量几十万的实拍爆款:一个女生穿着球衣在看比赛,结果球衣穿反了。旁边人提醒她,她一脸尴尬又意外,于是当场把衣服转着穿回正面——而这整个换衣动作相当复杂。
产品正好是我们在卖的球衣,爆点又足够清晰,这创意不复刻可惜了。
而最后跑通的那版,跟原视频的动作完全不一样:原视频没有脱衣,而是直接把衣服转着穿回正面;我们复刻的是把衣服脱了再穿正。要是你没留意这个区别,那说明其实这个爆点我们已经跑通70-80%了。
没法一比一还原不是我们妥协了,是死磕后才想明白:跟AI死磕复杂动作,是最浪费时间的决定。
先走最快最简单的路。
这里我们用Lovart的agent模式,直接投喂完整的分镜提示词,要求一次性输出 9 张图并完成 3 * 3 排版。
第一轮对话出来结果非常拉跨。。人物、场景、球衣全部漂移,甚至在同一批次中混了写实与动漫两种画风,好家伙给我整得跨次元了。
行,于是第二轮我们加约束锁定人物面部特征。结果分镜逻辑直接断了,强行合成的九张图塞满了一堆不知道哪来的视觉元素。
行!第三轮我们再加更多限制条件:① 指定外籍面孔;② 加分镜预审;③ 上传产品正侧背三视图。但人物特征还是不稳、产品细节还是丢、空间逻辑更是乱,我宣告取得了全面失败。
三轮下来才看明白,问题根本不在提示词。
而是Lovart的agent模式会先锁定一张人物图,再以此往下生成,链路里人物特征被反复重采样,这才是画风混搭、人物漂移的根源。卡在这一步,怎么改提示词都是白费。
一次性生成pass后,我们转向拆成9次独立的单图生成。效果很明显:叙事这块明显好转,模型能看懂单帧画面在讲什么了,比如“人物在喝水”、“产品在桌上”这种语义都能理解。
单图拆解这步只是解决了「画什么」的逻辑问题,但「怎么动」压根没碰到。纯文本提示词,定义不了复杂的肢体交互和物理状态。
换个思路,直接引入原视频做视觉锚点不就行了?
然后在Lovart里用多图参考指令喂给模型:复刻该姿势,替换服装为该产品,移除字幕,保持人物面部特征。最后构图确实向参考图靠拢了,但视频生成的动作复刻却彻底失败。。
参考图明明白白显示衣物反穿,模型还是要给你生成正穿。手部位置、躯干扭转角度,跟原图都对不上,衣物和身体的互动关系也还原不出来。
也就是说,即便把1比1的提示词和参考图都喂给模型,它依然无法完整复刻。
垫图不等于控制,这次失败把三个技术事实钉死了:
所以到这一步,对于"反穿旋转穿正"这个动作的像素级复刻,我们正式放弃了。
那就换条AI能走的路:不复刻动作,而是复刻结果。
任务整个重构:原序列是「反穿 → 旋转 → 穿正」,AI做不到;换成AI能执行的常规序列:「发现错误 → 脱下衣物 → 重新穿戴 → 整理展示」。
跑通的这版,提示词大概是这样:
第一帧人物把球衣穿反,被点出后直接整件脱下来、翻正、重新穿上。没有原视频那种转着穿的复杂动作,但「穿反了→ 被发现 → 改正」的爆点完整保留。
顺便说一下,首尾帧的路子我们团队也试过:首帧穿反、尾帧穿正,让AI补中间,生图阶段经常翻车,还出现过「上半截领子正穿、下半截反穿」这种诡异画面,也是没戏。
所以目前跑通的这版,是我们尝试了n个方案的最优解。
这趟四次踩坑复盘到底图什么,得说清楚。
话放这了,复杂物理动作目前 AI 做不到。我把现实摆出来:这条创意的成功率只有五分之一,批量跑不动。不是我们没找对方法,是当下模型的训练数据里,没有这类布料和肢体物理交互的足够样本,也就是目前模型能力还没跟上,复杂动作的复刻现在基本靠抽卡。
这件事大概只能等模型迭代了,但那是以后的事。眼下能省出来的时间,不如花在下一个能跑起来的创意上。
如果你们也在死磕类似的物理交互动作,遇到过别的解法,欢迎在评论区讨论。

