

使用 OpenAI 未发布的 Sora 模型生成的第一个音乐视频就在这里

七元宇宙

2024-05-05

导读：今年早些时候，OpenAI展示了一种名为Sora的新AI模型，该模型可以制作逼真，高分辨率和流畅的视频。

今年早些时候，OpenAI展示了一种名为Sora的新AI模型，该模型可以制作逼真，高分辨率和流畅的视频，每个剪辑长达60秒，这让科技界以及媒体和艺术界的许多人惊叹不已，同时也提高了传统摄像师和艺术家的羽毛。

该技术目前仍未向公众发布——OpenAI 当时表示，早在 2024 年 2 月，它就让 Sora “可供红队成员评估关键领域的危害或风险”，以及一小群选定的“视觉艺术家、设计师和电影制作人”。但这并没有阻止一些最初的用户用它制作和发布新项目。

构建值得信赖的 AI：Microsoft 的安全和可扩展生成式 AI 战略

现在，OpenAI 精心挑选的 Sora 抢先体验用户之一、编剧/导演 Paul Trillo 是 3 月份世界上第一批演示使用该模型制作的第三方视频的人之一，他创作了所谓的“第一个使用 OpenAI 的 Sora 制作的官方音乐视频”。

该视频是为独立寒潮音乐家 Washed Out （Ernest Weatherly Greene Jr.）和他的新单曲“The Hardest Part”制作的。它本质上是一个 4 分钟长的系列连接、快速变焦镜头，通过不同的场景，这些场景都被拼接在一起，以创造连续变焦的错觉。在下面观看：

在社交网络 X 上的帐户上，Trillo 发帖说，他在 10 年前第一次有了制作视频的想法，但放弃了。他还回答了追随者的问题，并表示该视频是由 Sora 从总共 700 个片段中生成的 55 个独立片段组成的，并在 Adobe Premiere 中拼接在一起。

另外，但相关的是，Adobe 最近宣布它正在寻求将 Sora 和其他第三方 AI 视频生成器模型添加到其订阅的 Premiere Pro 软件中，但尚未为这种集成设定时间表，因此与此同时，那些希望模拟 Trillo 工作流程的人将不得不在其他第三方软件中生成 AI 视频剪辑，例如 Runway 或 Pika（因为 Sora 仍然是非公开的），然后保存并将它们导入 Premiere。不是世界末日，但也不是天衣无缝。

在接受《洛杉矶时报》采访时，Washed Out/Greene说：“我期待着能够整合一些这种全新的技术，看看它如何为我能想出的东西提供信息。所以，如果这是开创性的，我很乐意成为其中的一员。采访还介绍了一些使用的具体提示：

“Greene需要写出足够多的具体细节的提示，不仅要包括图像本身，还要包括镜头角度和角色的动作。'我们放大它弹出的泡泡，我们放大泡泡糖，进入一个开放的足球场，“特里洛写道，这是他对一段简短视频的提示的一部分。“场景正在快速移动，呈现出正面视角，显示学生越来越大，速度越来越快。”

Trillo 还发帖说，他们只使用了模型的文本到视频功能，而不是在其他地方拍摄或生成的静止图像，并将它们输入到 AI 中以添加动作（在快速发展的 AI 视频场景中，艺术家们的一种流行策略）。

这个例子展示了 Sora 在使用 AI 创建媒体方面的强大功能，并且是对最近披露的信息的有用反驳，即加拿大创意工作室 Shy Kids 制作的另一个首批演示视频名为“Air Head”，其中有一个男人用气球作为头，实际上严重依赖其他 VFX 和视频编辑工具，例如 Adobe After Effects 中的转描。