这两个项目都基于 Meta 的“Emu”人工智能研究项目,该项目探索了在视觉项目中使用生成式人工智能提示的新方法。第一个称为“ Emu Video ”,它使您能够根据文本提示创建短视频剪辑。
正如您在这些示例中看到的,EMU Video 将能够根据简单的文本或静态图像输入创建高质量的视频剪辑。
正如Meta所解释的:
“这是一个用于视频生成任务的统一架构,可以响应各种输入:仅文本、仅图像以及文本和图像。我们将这个过程分为两个步骤:首先,根据文本提示生成图像,然后根据文本和生成的图像生成视频。这种视频生成的“分解”或分割方法使我们能够有效地训练视频生成模型。”
因此,如果您愿意,您可以根据产品照片和文本提示等内容创建视频剪辑,这可以为品牌提供一系列新的创意选择。Emu Video 将能够生成 512x512、四秒长的视频,以每秒 16 帧的速度运行,这看起来相当令人印象深刻,比去年预览的 Meta 之前的文本到视频创建过程要好得多。
“在人类评估中,与之前的工作相比,我们的视频生成受到强烈青睐 - 事实上,96% 的受访者基于质量而更喜欢该模型,85% 的受访者基于对内容的忠实度而优于 [Meta 之前的生成视频项目]文字提示。最后,同一模型可以根据文本提示对用户提供的图像进行“动画”处理,再次创下了新的最先进技术,大大超越了之前的工作。”这是一个外观令人印象深刻的工具,它可以有多种用途,具体取决于它在实际应用中是否表现良好。但它看起来很有希望,这可能是 Meta 的生成式人工智能工具的一大进步。
另外值得注意的是:每个剪辑左下角的小水印,这是 Meta 的新“AI 生成”标签。Meta 正在开发一系列工具来表示人工智能生成的内容,包括在合成内容上嵌入数字水印。其中许多仍然可以被编辑,但对于视频剪辑来说很难做到这一点。
Meta 的第二个新元素称为“ Emu Edit ”,它将使用户能够在视觉效果中进行自定义、特定的编辑。
这个项目最有趣的方面是它基于对话提示工作,因此您不需要突出显示要编辑的图像部分(例如饮料),您只需要求它编辑该元素,系统将了解您所指的是视觉效果的哪一部分。
这对于编辑 AI 视觉效果以及根据您的需求创建更多自定义变体可能会有很大帮助。这两个项目的可能性都是巨大的,它们可以为创作者和品牌以全新的方式使用生成人工智能提供巨大的潜力。Meta 尚未透露这些新工具何时会在其应用程序中推出,但这两种工具看起来都将很快推出,这将以多种方式带来新的创意机会。
原文链接:https://www.socialmediatoday.com/news/meta-previews-new-generative-ai-tools-facilitate-video-and-image/700070/

