Moonvalley这支位于洛杉矶的AI视频生成初创公司团队并不认为仅靠提示词就能制作电影,因此该公司于周二向公众开放了其“3D感知”模型,承诺提供一种“混合”方法,使电影制作人比其他标准文本到视频模型拥有更多控制权。
Moonvalley最初在三月的测试阶段推出了其名为Marey的模型,现已将其作为按月积分订阅服务发布,用户可支付14.99美元获得100个积分、34.99美元获得250个积分以及149.99美元获得1,000个积分;用户可以生成长达五秒的视频片段,这与公开可用的视频生成模型的行业标准一致。
这家初创公司由曾在Google自己的视频生成模型上工作的前DeepMind研究人员共同创立,声称Marey是少数完全使用开源许可数据训练的模型之一,这恰好契合Moonvalley的目标客户群体:那些希望避免未来因可能类似版权材料的AI生成内容而面临诉讼的电影制作人。
对于独立电影人安赫尔·曼努埃尔·索托(Ángel Manuel Soto)来说,Marey最大的卖点在于它使顶级AI叙事工具的获取变得民主化,尤其是对于那些长期以来被传统电影制作拒之门外的人。索托表示,在波多黎各长大时,你首先得凑出几百或几千美元来租用摄像机才能拍摄电影。
他说:“在家里,我们需要获得许可才能讲述我们的故事。”“AI赋予了你按照自己的条件进行创作的能力,不必因为有人拒绝融资而放弃梦想,也不必因为他们认为来自你国家的故事无法盈利而却步。”
如今,索托表示,Marey帮助他降低了20%到40%的制作成本,并让他能够更自由地工作。
索托此前曾与Moonvalley旗下的工作室Asteria合作,参与了HBO纪录片系列《Menudo: Forever Young》的制作。据General Catalyst首席执行官Hemant Taneja透露,Asteria(又名XTR)今年被Moonvalley收购。(GC是Asteria的主要股东,并向合并后的实体投入了更多资金。)
Marey的“混合电影制作”方法
Moonvalley首席执行官兼联合创始人Naeem Talukdar演示了Marey如何在前期和后期制作中使用,无论是用于拍摄前测试场景还是事后调整镜头角度,以及它如何控制物体、角色、运动和场景构图。
Talukdar表示,Marey对物理世界的理解随着技术的发展,可以转化为更具互动性的叙事方式。目前,这种理解——Marey与其他模型如Google的Veo 3以及OpenAI尚未公开的Sora——使得Marey能够做一些事情,比如模仿运动,同时仍然尊重物理定律。
例如,一段野牛在草原上奔跑的视频可以被转换成凯迪拉克在同一环境中疾驰的画面,草地和泥土会对汽车的移动做出反应。或者,Marey可以将一个看起来像乔治·华盛顿的角色叠加在演员身上,将演员的面部动作以及他做手势时前臂的肌肉变化都一一转化。
也许更独特的是Marey对自由相机运动的支持。Talukdar展示了如何通过鼠标改变相机的轨迹:他只需拖动光标,就将一段火车上女性的视频加入了摇摄和滑动变焦效果。他还指出,Marey可以实现接近360度的相机运动,并遵循指令创建仿佛是用手持摄像机或轨道车拍摄的画面。
Marey还可以更改视频的背景,让电影制作人可以从源素材开始构建他们想要的场景。Talukdar播放了一段男子在郊区道路上骑摩托车的视频,随后该视频演变为同一名男子(未戴头盔)骑着略有不同的摩托车在乡村公路上行驶的画面。
Talukdar表示,Moonvalley在未来几个月的计划是推出新的控制功能,如灯光、深度物体轨迹和角色库。
Marey的公开发布使其直接置身于一个不断壮大的AI视频生成器领域,与诸如Runway Gen-3、Luma Dream Machine、Pika和Haiper等模型展开竞争。

