大数跨境

Runway 宣布为其视频生成 AI 模型推出 API

Runway 宣布为其视频生成 AI 模型推出 API 海外洞察
2024-09-16
1
导读:AI初创公司Runway宣布为其视频生成模型推出API,使企业和开发者能够将这些模型集成到应用程序中。

Runway是几家开发视频生成技术的AI初创公司之一,今日宣布推出API,允许开发者和组织将公司的生成式AI模型集成到第三方平台、应用和服务中。

目前处于有限访问阶段(设有等待名单),Runway API仅提供一个模型可供选择——Gen-3 Alpha Turbo。这是Runway旗舰产品Gen-3 Alpha的更快但功能稍弱的版本。API包含两个计划:面向个人和团队的Build计划以及Enterprise计划。基础定价为每信用一分钱(一秒钟视频消耗五个信用)。Runway表示,包括营销集团Omnicom在内的“受信任的战略合作伙伴”已经在使用该API。

Runway API还附带不寻常的披露要求。该公司在博客文章中写道,任何使用API的界面必须“显著显示”链接到Runway网站的“Powered by Runway”横幅,以“帮助用户了解应用程序背后的技术,同时遵守我们的使用条款。”

Runway由包括Salesforce、Google和Nvidia在内的投资者支持,上次估值为15亿美元。在视频生成领域,Runway面临激烈竞争,竞争对手包括OpenAI、Google和Adobe。预计OpenAI将在今年秋季以某种形式发布其视频生成模型Sora,而Luma Labs也在继续完善其技术。

图片来源:Runway

一个典型的例子是,在看似并非巧合的时机下,Luma今天推出其视频生成API,无需排队等候,并提供超越Runway的功能,包括能够“控制”AI生成场景中的虚拟摄像机。

随着Runway API的初步上线,Runway成为首批通过API提供视频生成模型的AI供应商之一。尽管该API可能有助于公司实现盈利(或至少收回训练和运行模型的高昂成本),但它并不能解决围绕这些模型以及更广泛的生成式AI技术的遗留法律问题。

Runway的视频生成模型与所有同类模型一样,是通过大量视频示例进行训练的,以便“学习”这些视频中的模式从而生成新的画面。训练数据从何而来?Runway拒绝透露,就像当今许多供应商一样——部分原因是出于担心牺牲竞争优势。

但如果Runway在未获许可的情况下使用受版权保护的数据进行训练,训练细节也可能成为知识产权相关诉讼的来源。事实上已有证据表明情况确实如此——一份来自404 Media的报告揭露了Runway的一份训练数据电子表格,其中包含指向Netflix、迪士尼、Rockstar Games以及Linus Tech Tips和MKBHD等创作者所属YouTube频道的链接。

目前尚不清楚Runway最终是否使用了电子表格中的任何视频来训练其视频模型。在接受TechCrunch采访时,Runway联合创始人Anastasis Germanidis仅表示该公司使用“精选的内部数据集”进行模型训练。但如果确实如此,它也不会是唯一一家在版权法律方面玩弄手段的AI供应商。

今年早些时候,OpenAI首席技术官Mira Murati并未明确否认Sora是使用YouTube内容训练的。此外,据报道Nvidia使用YouTube视频来训练一个名为Cosmos的内部视频生成模型。

许多生成式AI供应商认为,被称为合理使用的法律原则为其提供了法律掩护——他们正在法庭上和公开声明中主张这一点。另一些厂商则不太愿意冒险,和/或将更“合乎道德”的模型训练方式视为其服务的卖点。例如,据报道,为了开发其视频生成Firefly模型,Adobe正在向艺术家提供报酬以换取视频片段。

在其服务条款中,Luma表示将同意为因侵犯知识产权索赔而产生的损害对API商业客户进行辩护和赔偿。其他供应商,包括OpenAI,也提供类似的赔偿政策;Runway则没有,尽管它在去年十二月表示将与素材媒体库Getty合作,开发更多“商业安全”的产品版本。

无论关于基于版权内容训练的合法性诉讼结果如何,有一点正变得清晰:生成式AI视频工具有望颠覆我们所熟知的电影和电视行业。

2024年由代表好莱坞动画师和漫画家的工会——动画工会委托进行的一项研究发现,在采用人工智能的电影制作公司中,有75%的公司在使用该技术后减少、合并或取消了岗位。该研究还估计,到2026年,超过10万个美国娱乐行业的工作岗位将受到生成式人工智能的冲击。

太平洋时间9月16日11:18更新:补充了关于Luma API发布的信息。

【声明】内容源于网络
0
0
海外洞察
海外资讯洞察,电商,AI
内容 14239
粉丝 0
海外洞察 海外资讯洞察,电商,AI
总阅读46.0k
粉丝0
内容14.2k