每年在 Adobe Max 大会上，Adobe 都会展示其称为“Sneaks”的研发项目，这些项目或许——也可能不会——在未来成为商业产品的一部分。今年也不例外，幸运的是，我们在大会正式开始前就获得了预览机会。
Project Clever Composites（Adobe 如此命名）利用 AI 实现自动图像合成。更具体地说，它能自动预测物体的比例大小，确定将其插入图像的最佳位置，然后对物体颜色进行归一化处理，估算光照条件，并根据图像的美学风格生成阴影。
以下是 Adobe 对此的描述：
图像合成可以让您将自己添加进去，营造出您当时就在现场的假象。或者，也许您想创作一张自己在星空下露营的照片，但手头只有星空和白天露营的素材图片。
我并非 Photoshop 高手，但 Adobe 告诉我，合成往往是一个高度手动、繁琐且耗时的过程。通常，这需要找到一张合适的物体或主体图片，仔细将其从原图中抠出，并调整其颜色、色调、比例和阴影，使其与粘贴到的场景外观相匹配。Adobe 的原型系统则摒弃了这一繁琐流程。
该项目的一名 Adobe 研究工程师 Zhifei Zhang 通过电子邮件告诉 TechCrunch：“我们开发了一种更智能、更自动化的图像对象合成技术，采用了新的合成感知搜索技术。”“我们的合成感知搜索技术利用多个深度学习模型和数百万数据点，来确定语义分割、合成感知搜索、对象合成的比例-位置预测、颜色和色调协调、光照估计、阴影生成等。”
据 Zhang 介绍，驱动图像合成系统的每个模型都是针对特定任务独立训练的，例如根据几何和语义一致性搜索与给定图像相符的对象。该系统还利用一个独立的基于 AI 的自动合成流水线，负责预测对象合成的比例和位置、色调归一化、光照条件估计以及阴影合成。
Zhang 声称，这一结果形成了一种工作流程，让用户只需点击几次鼠标即可完成对象合成。
Zhang 表示：“实现自动对象合成颇具挑战，因为该过程的多个组成部分都需要进行合成。我们的技术充当了‘粘合剂’，使所有这些组件能够协同工作。”
与所有 Sneaks 项目一样，该系统可能永远只是一个技术演示。但 Zhang 认为它将成为 Photoshop 和 Lightroom 的“绝佳补充”，他表示改进版的工作已经启动，将支持合成 3D 对象，而不仅仅是 2D 对象。
“我们的目标是让实现逼真且巧妙的2D和3D合成这一常见但困难的任务完全通过拖放操作即可完成，”张表示。“这将是图像合成领域的一次变革，因为它将使从事图像设计和编辑工作的人员更容易创建逼真的图像，因为他们现在只需几次点击就能搜索要添加的对象、仔细抠出该对象并调整其颜色、色调或比例。”