高质量AI生成视频的竞争正在加剧。
周一，为电影和图像内容创作者构建生成式AI工具的公司Runway发布了Gen-3 Alpha。该模型可根据文本描述和静态图像生成视频片段。Runway表示，与之前的旗舰模型Gen-2相比，Gen-3 Alpha在生成速度和保真度方面实现了“重大”提升，并对视频的结构、风格和运动提供了更精细的控制。
Gen-3将在未来几天向Runway订阅用户开放，包括企业客户及创意合作伙伴计划中的创作者。
Runway在博客中表示：“Gen-3 Alpha擅长生成具有丰富动作、手势和表情的生动人物角色。它旨在解读多种风格和电影术语，实现富有想象力的转场以及对场景中元素的精确关键帧控制。”
Gen-3 Alpha目前存在局限性，例如视频片段最长仅为10秒。但Runway联合创始人Anastasis Germanidis承诺，Gen-3只是下一代模型家族中的首个版本，该家族将基于升级的基础设施训练多个视频生成模型。
Germanidis在接受TechCrunch采访时指出：“该模型在处理复杂的人物和物体交互时可能会遇到困难，且生成结果并不总是严格遵循物理定律。此次初始发布支持5秒和10秒的高分辨率生成，速度明显快于Gen-2：生成一段5秒片段需45秒，10秒片段则需90秒。”
与其他视频生成模型一样，Gen-3 Alpha是在海量视频及图像示例上训练而成，以学习模式并生成新片段。关于训练数据来源，Runway并未透露。目前很少有生成式AI供应商主动公开此类信息，部分原因是将其视为竞争优势并予以保密。
Germanidis表示：“我们拥有一支内部研究团队负责监督所有训练工作，并使用经过筛选的内部数据集来训练模型。”他未再多言。
若供应商使用包含网络受版权保护数据的公共数据进行训练，细节披露可能引发知识产权诉讼——这也是不愿透露过多信息的原因之一。在多起案件中，法院驳回了供应商关于合理使用训练数据的辩护，理由是生成式AI工具未经许可复制艺术家风格并允许用户生成相似作品，导致艺术家无法获得报酬。
Runway在一定程度上回应了版权问题，称开发模型时咨询了艺术家意见（具体名单尚不清楚）。这与Germanidis在2023年TechCrunch Disrupt大会上的表态相呼应：
“我们正与艺术家密切合作以确定最佳解决方案，并探索各种数据合作伙伴关系以构建下一代模型。”
Runway还表示，Gen-3将附带新的安全措施，包括审核系统，用于阻止从受版权保护图像或不符合服务条款的内容中生成视频。此外，公司还在开发兼容C2PA标准（由微软、Adobe、OpenAI等支持）的溯源系统，以确认视频源自Gen-3。
Germanidis表示：“我们全新改进的内部视觉和文本审核系统采用自动监督机制过滤不当内容。C2PA认证验证了Gen-3内容的溯源性和真实性。随着模型能力提升，我们将继续在对齐和安全方面投入大量资源。”
Runway透露，已与“领先的娱乐和媒体组织”合作创建Gen-3定制版，允许更“风格化控制”和一致的角色表现，针对“特定的艺术和叙事需求”。该公司补充道：“这意味着生成的角色、背景和元素可在不同场景中保持连贯的外观和行为。”
视频生成模型面临的主要未解问题是控制力，即让模型生成符合创作者意图的一致视频。正如Devin Coldewey所言，在传统电影中简单的操作（如选择服装颜色），在使用生成式模型时需变通方法，因为每个镜头独立创建。有时即便有变通方法也无济于事，仍需编辑进行大量手动工作。
Runway已从投资者处筹集超2.365亿美元资金，包括Google（提供云计算额度）、Nvidia以及Amplify Partners、Felicis和Coatue等风投机构。随着生成式AI投资增长，该公司已与创意产业紧密结盟。Runway运营着娱乐部门Runway Studios作为企业制片合作伙伴，并主办最早专门展示AI制作电影的AI电影节之一。
但竞争正变得愈发激烈。
生成式AI初创公司Luma上周宣布Dream Machine，这是一款因擅长动画化模因而走红的视频生成器。几个月前，Adobe透露正在开发基于其Stock媒体库内容训练的视频生成模型。
此外还有OpenAI的Sora，尽管访问权限受限，但已向营销机构及独立电影人和好莱坞导演提供早期体验（OpenAI CTO Mira Murati出席了2024年戛纳电影节）。今年翠贝卡电影节也与Runway合作策划AI影片，展映了获早期访问权限导演使用Sora制作的短片。
谷歌也将图像生成模型Veo交给包括Donald Glover及其创意机构Gilga在内的创作者，并努力将其整合到YouTube Shorts等产品中。
无论合作如何发展，一点已清晰：生成式AI视频工具有望颠覆影视行业。
电影制作人泰勒·佩里在目睹Sora能力后，暂停了原计划8亿美元的工作室扩建项目。《复仇者联盟：终局之战》导演乔·罗素预测，一年内AI便能制作完整电影。
Animation Guild委托的一项研究发现，在采用AI技术的电影制作公司中，75%在使用该技术后减少、合并或取消了岗位。研究估计，到2026年，超10万个美国娱乐业工作岗位将受生成式AI冲击。
需要强有力的劳动保护措施，以确保视频生成工具不会重蹈其他生成式AI技术覆辙，导致创意工作需求急剧下降。