

Adobe进军AI视频领域！视频生成模型Firefly支持文生视频！图生视频！

软积木

2024-10-21

导读：借助Firefly文本到视频（测试版）的功能，用户可以利用文本提示、丰富的摄像机控件和参考图像，生成无缝衔接的B-Roll素材，填补时间线的空白。

今年9月Adobe推出视频生成模型Firefly，就在上周，Firefly模型又迎来了重大改进！

文本到视频

借助Firefly文本到视频（测试版）的功能，用户可以利用文本提示、丰富的摄像机控件和参考图像，生成无缝衔接的B-Roll素材，填补时间线的空白。

现在，即使错过了某些镜头，也不再是问题。通过详细的提示，创作者们可以轻松生成引人入胜的插入镜头，为最终项目增添亮点。

例如下面视频，这是一个关于夜晚街道上老年男子的电影般特写镜头，通过Firefly Video Model的生成，展现出了忧郁而戏剧性的光线、蓝影与橙色的高光色彩搭配，以及男子极其逼真的皮肤纹理和可见的毛孔。

镜头中的动作微妙而柔和，仿佛时间在这一刻静止。这样的创作不仅挑战了视觉效果的极限，也展现了创作者对细节的极致追求。

此外，对于预算紧张且需要快速周转的团队来说，将难以拍摄或昂贵的镜头的创意意图可视化是一项巨大的挑战，而Adobe Firefly则提供了解决方案。

在进入VFX或返回现场进行拾取镜头之前，创作者们可以使用Firefly来可视化和规划这些镜头，从而简化了制作和后期制作之间的沟通流程。

Firefly Video能够创造出火焰、水流、漏光效果以及烟雾等大气元素，这些元素极大地丰富了现有内容的视觉层次与深度。

在黑色或绿色背景的衬托下生成这些特效元素，用户可以利用混合模式，或者在Adobe Premiere Pro、Adobe After Effects等专业的Adobe软件工具中执行抠像操作，轻松地将这些元素叠加到已有的视频素材上。

在Premiere Pro中使用屏幕混合模式合成：

图像到视频

除了文本到视频的功能外，Adobe Firefly图像到视频的功能也表现出色。

创作者们可以通过上传视频中的单个帧作为参考图像，轻松地为现有内容创建补充镜头。

无论是为现有内容添加特写镜头，还是从静态摄影中创建新的B-roll素材，图像到视频功能都能为创作者们的图像库注入新的活力。

在某些情况下，用户甚至可以更改镜头的原始动作或意图。

视频更改前：

输入Prompt：戴着手套的宇航员的手进入镜头，并拔下其中一条黄色电缆。

视频更改后：

此外，Adobe还为用户提供了视频编写的Prompt模板。在创作生成式视频提示时，这些模板为用户提供了一个清晰的结构框架，帮助用户提高视频生成效率。

例如，使用“镜头类型描述+角色+动作+位置+美学”的结构来明确自己的创意意图。

同时，使用尽可能多的词语来具体说明光照、电影摄影、颜色等级、情绪和样式等方面的要求。

清晰且描述性强的提示有助于避免歧义，使得生成的视频内容更加符合创作者的预期。

END

ChatU可免费申请试用，支持企业私有部署，多引擎AIGC操作系统安全稳定，点击下方公众号一键试用！

【声明】内容源于网络

软积木

🤖专注AI前沿干货分享 🌎AI原生应用触手可及·开启企业无限智能 💻官网：https://www.CubixAI.com 📮商务合作：BD@cubixai.com

内容 157

粉丝 0

软积木 🤖专注AI前沿干货分享 🌎AI原生应用触手可及·开启企业无限智能 💻官网：https://www.CubixAI.com 📮商务合作：BD@cubixai.com

总阅读92

粉丝0

内容157