大数跨境

OpenAI 探索基于“一致性”的图像生成器,超越扩散模型

OpenAI 探索基于“一致性”的图像生成器,超越扩散模型 海外洞察
2023-04-12
2
导读:OpenAI 可能正在开发一种名为“一致性模型”(consistency models)的图像生成器继任者,该技术在速度与质量之间做出权衡,目前仍有较大的提升空间。

图像生成领域发展迅速。尽管 Midjourney 和 Stable Diffusion 等主流工具采用的扩散模型目前表现优异,但新技术层出不穷。OpenAI 可能已取得突破——“一致性模型”(Consistency Models)能以比 DALL-E 快一个数量级的速度完成简单任务。

该论文上月以预印本形式发布,未伴随 OpenAI 重大产品发布时的宣传节奏。这并不意外:它是一篇高门槛的研究论文。但其早期实验结果已足以引发行业关注。


一致性模型 vs 扩散模型

一致性模型原理较复杂,但与扩散模型对比更易理解:

  • 扩散模型:从纯噪声图像起步,逐步去噪直至匹配提示词描述。虽能生成惊艳图像,但需 10 至数千步迭代,导致运行成本高、速度慢,难以支持实时应用。
  • 一致性模型:旨在单步或最多两步内生成可用结果。它同样学习图像破坏过程,但核心能力是:无论输入图像的模糊程度如何(信息缺失多少),均能在一步之内还原完整原始图像。
一致性论文代表性摘录。图片来源:OpenAI


技术潜力与应用场景

当前生成的图像质量尚未达到顶尖水平,但核心价值在于“单步生成”。此外,该模型可泛化至上色、超分辨率、草图解读、图像补全等多种任务,且仅需单步(第二步通常可进一步提升效果)。

无论输入主要是噪声还是数据,一致性模型均可直接输出最终结果。图片来源:OpenAI

这一进展的重要性体现在两方面:

  1. 遵循技术演进规律:机器学习发展通常经历“确立基础→优化方法→微调增效”的过程。现代扩散模型与 ChatGPT 均循此路径。一致性模型展示了新一代高效技巧的雏形:初期效果或有差距,但效率显著提升,为后续资源投入奠定基础。
  2. 探索下一代应用场景:表明 OpenAI 正积极超越扩散模型框架。扩散模型适合 GPU 集群长时间迭代生成高质量图像;但在移动端低功耗运行、实时聊天界面即时响应等场景中,一致性模型更具优势。Ilya Sutskever 及 Yang Song、Prafulla Dhariwal、Mark Chen 等研究者正致力于此方向。

现代图像生成 AI 核心技术——扩散模型的简史

一致性模型究竟是下一个重大突破,还是多模态时代众多技术储备之一,取决于后续研究进展。若获得更多信息,将及时更新本文。

【声明】内容源于网络
0
0
海外洞察
海外资讯洞察,电商,AI
内容 14232
粉丝 0
海外洞察 海外资讯洞察,电商,AI
总阅读3.2k
粉丝0
内容14.2k