英伟达开源 RTX Remix 技术，用 AI 重制经典游戏；Luma 发布首尾帧功能可快速补全视频丨 RTE 开发者日报

RTE开发者社区

2024-07-08

导读：本期关键词： Dream Machine 、寻光、可灵 AI

开发者朋友们大家好：

这里是「RTE 开发者日报」，每天和大家一起看新闻、聊八卦。我们的社区编辑团队会整理分享 RTE（Real-Time Engagement）领域内「有话题的新闻」、「有态度的观点」、「有意思的数据」、「有思考的文章」、「有看点的会议」，但内容仅代表编辑的个人观点，欢迎大家留言、跟帖、讨论。

本期编辑：@JLT，@鲍勃

有话题的新闻

1、破解 ChatGPT 惊人耗电，DeepMind 新算法训练提效 13 倍，能耗暴降 10 倍

最近，GoogleDeepMind 研究团队提出了一种加快 AI 训练的新方法——多模态对比学习与联合示例选择（JEST），大大减少了所需的计算资源和时间。

JEST 以 13 倍更少的迭代次数，以及 10 倍更少的计算量，超越了最先进的模型。总体来说，JEST 方法展现出了「数据质量引导」（data quality bootstrapping）方法的巨大潜力，即使用小规模精选数据集来指导对更大的、未经管理的数据集的学习。

无论是使用 JEST 参考模型对数据集进行预评分，还是通过可学习性评分来根据模型需求进行动态调整，都可以成为通用基础数据集的更有效率的替代方案。当然，该方法仍存在一定局限性，虽然 JEST 同时实现了性能增益和训练成本降低，但依旧依赖于小型、精心管理的参考数据集，它指定了未经管理的更大数据集中优先考虑的分布。（@极客公园）

2、英伟达开源 RTX Remix 技术，用 AI 重制 / 实时生成游戏新图形

英伟达近日宣布经过广泛 Beta 测试之后，正式开源 RTX Remix 技术，并鼓励开发者利用这些工具，改造使用 DirectX8 或 9 开发的游戏。

英伟达表示 MOD 开发者借助 NVIDIA RTX Remix，能够通过全景光线追踪、DLSS 3.5、高质量的素材和物理精准的材质重制经典 DirectX 8 和 DirectX 9 游戏。RTX Remix 基于 NVIDIA Omniverse 构建，包含一个运行时渲染器和一个工具套件应用，可为游戏素材和材质的 modding 提供帮助。

英伟达还会添加通过 REST API 使用 Remix 工具套件功能的方式，让 MOD 开发者可以将 RTX Remix 实时链接到其他 DCC 工具（如 Blender）、Mod 工具（如 Hammer）以及生成式 AI 应用（如 ComfyUI）。

英伟达还会为 Remix Runtime 提供 SDK，使 Modder 可以将 RTX Remix 的渲染器部署到 DirectX 8 和 9 经典版之外的其他应用和游戏中。（@IT 之家）

3、阿里达摩院推出一站式 AI 视频创作平台「寻光」

2024 世界人工智能大会（WAIC 2024）期间，阿里达摩院推出了一站式 AI 视频创作平台 —— 寻光。

官方表示，该平台旨在通过 AI 技术使视频创作更简单、高效，其集成了剧本创作、分镜设计、视频素材编辑等关键步骤，创作者可以从构思到成品，在该平台上完成视频创作全过程。

4、快手可灵 AI 网页端正式上线

近日，快手宣布可灵 AI 网页端正式上线，所有功能限时免费。其中，「文生视频」开放最长 10 秒生成能力，「图生视频」新增运镜控制、自定义首尾帧等功能。

根据目前可灵 AI 网页端的功能来看，可灵 AI 网页端提供 AI 图片、AI 视频以及即将上线的视频编辑三大板块。在登录后，AI 图片可以直接使用，用户通过文字描述即可获得自动生成的图片，另外还可以添加参考图使用。AI 视频支持最长 3 分钟的高清视频生成，不过目前需要申请使用。（@爱范儿）

5、Luma 发布首尾帧功能，可以快速补全视频

Luma AI 旗下的视频生成模型 Dream Machine 推出了首尾帧生成视频功能，用户只需要上传两张图片，作为一段视频的第一帧和最后一帧，视频模型就可以帮助补全中间的内容。例如上传一张星系漩涡的图片作为开始，一张人眼的图片作为结束，点击生成，Dream Machine 就可以自然地完成中间过渡视频的生成，视频内容过渡顺畅，一致性保持得很好，有种梦幻的效果。

该功能可以免费在 Dream Machine 内体验，这是 Luma AI 于 6 月中旬刚刚发布的视频生成模型。其实在视频模型中，首尾帧功能并不少见，只不过像 Dream Machine 这样可以免费上手体验的并不多。（@新皮层 NewNewThing、@lepadphone）

有态度的观点

1、比尔·盖茨预言未来每个人都会有自己的 AI 助理

据《中国企业家杂志》报道，近日，微软联合创始人比尔·盖茨参加了知名播客《下一个伟大的构想》的访谈节目，在对话中他提出了对于 AI 助理的看法：

这几十年来，我一直在关注个人 AI 助理，它们在某些工作上可以做得比人类更优秀，比如追踪和阅读信息、帮你处理电子邮件、查看短信、管理社交账号等。当你坐在机器旁边，让它帮助你进行活动时，它基本可以理解你的意图是什么，已经可以像普通白领一样为你服务。未来行政助理、心理医生、朋友、专家等这些角色个人 AI 助理都可以扮演。

比尔·盖茨还预测，未来每个人都会有自己的 AI 助理。（@爱范儿）

2、AI 视频迎来寒武纪爆发，专家称行业将 3 年走完百年影史

AI 视频生成技术在中国迎来快速发展期，吸引了众多创作者。今年 6 月，快手、Luma AI 和 Runway 等公司发布了多款 AI 视频生成模型，引发广泛关注。尽管当前技术在可控性、运动轨迹和光影效果等方面还有待提高，但专家预测，AI 视频生成技术将在网文小说和教学内容领域率先应用。（@蓝鲸财经）

写在最后：

我们欢迎更多的小伙伴参与「RTE 开发者日报」内容的共创，感兴趣的朋友请通过开发者社区或公众号留言联系，记得报暗号「共创」。

对于任何反馈（包括但不限于内容上、形式上）我们不胜感激、并有小惊喜回馈，例如你希望从日报中看到哪些内容；自己推荐的信源、项目、话题、活动等；或者列举几个你喜欢看、平时常看的内容渠道；内容排版或呈现形式上有哪些可以改进的地方等。

【声明】内容源于网络

RTE开发者社区

RTE 开发者社区是聚焦实时互动领域的中立开发者社区。不止于纯粹的技术交流，我们相信开发者具备更加丰盈的个体价值。行业发展变革、开发者职涯发展、技术创业创新资源，我们将陪跑开发者，共享、共建、共成长。

内容 1122

粉丝 0

RTE开发者社区 RTE 开发者社区是聚焦实时互动领域的中立开发者社区。不止于纯粹的技术交流，我们相信开发者具备更加丰盈的个体价值。行业发展变革、开发者职涯发展、技术创业创新资源，我们将陪跑开发者，共享、共建、共成长。

总阅读33

粉丝0

内容1.1k