此前，我们曾介绍过开发生产式AI模型生成3D物体的公司Luma AI获得4300万美元投资的消息。昨日，Luma AI正式发布了其生成式AI文本转视频工具Dream Machine。
根据官方信息，Dream Machine能够基于简单的文本指令生成高质量视频，使企业及个人创作者能在几分钟内制作出新颖且原创的视频内容。
Dream Machine已于昨日对所有用户开放。为获得更佳效果，建议输入比ChatGPT更详细的提示词，例如：“一只可爱的猫幼崽在公园追逐鸟类的日出场景”。该工具约需2分钟即可将此类提示转化为视频，同时也支持上传图片生成视频。使用上述示例提示生成的视频效果如下：
据首批Beta测试用户反馈，该平台不仅能忠实还原特定物体、角色、动作和环境，还具备讲述连贯故事及从头到尾保持流畅运动的能力。结合实测效果，Beta用户的积极评价确实提升了市场期待值。鉴于该工具免费且全面开放，内容创作者可能会在某些项目中优先选用Dream Machine。
Luma AI官网演示表明，该产品已克服制作逼真视觉效果视频的诸多挑战。但公司也坦言，视频生成模型在自然流畅的动作、形变特效以及文字重绘等方面仍面临技术瓶颈。
纵观AI文本转视频领域，除Pika Labs和Runway等初创公司外，Lightricks Inc推出的LTX Studio不仅提供视频生成，还集成了编辑工具；Google I/O 2024上发布的Veo也已加入竞争行列。此外，备受关注的OpenAI Sora自发布以来，已通过两支音乐录影带引发业界瞩目。
与仅向有限用户开放的Sora不同，Dream Machine面向公众开放，有助于迅速扩大用户基础。Luma AI表示，未来将推出各类API和插件，以实现与Adobe等创意软件工具的深度集成。