Photoshop 今日迎来生成式 AI 注入,新增一系列基于 Firefly 的功能。用户可利用 AI 生成的背景将图像扩展至边界之外、向图中添加对象,或通过全新的“生成式填充”功能更精确地移除对象,其精度远超此前的内容感知填充。
目前,这些功能仅在 Photoshop 测试版中可用。Adobe 也正逐步将这些能力开放给 Firefly 网页版测试用户(Firefly 用户已在该服务上创建超 1 亿张图像)。
集成的巧妙之处在于,Photoshop 用户可通过自然语言文本提示描述期望生成的图像或对象类型。与所有生成式 AI 工具一样,结果有时具有不可预测性。默认情况下,Adobe 为每个提示提供三种变体;但与 Firefly 网页应用不同,目前暂不支持对某一变体进行迭代以查看类似结果。
为实现上述功能,Photoshop 会将图像的特定部分发送至 Firefly(并非整图,尽管 Adobe 也在实验全图处理),并为生成结果创建新图层。
Adobe 数字成像副总裁 Maria Yap 在发布前演示了这些新功能。虽然生成式 AI 的结果难以预测,但部分效果令人惊喜。例如,当要求在小猎犬奔跑下方生成水坑时,Firefly 似乎考虑到了整体光照,甚至生成了逼真的倒影。尽管并非所有结果都同样出色(曾出现亮紫色水坑选项),但该模型在添加对象及扩展图像框架方面表现相当不错。
鉴于 Firefly 使用 Adobe Stock 上的照片及其他商业安全图像训练,其在风景生成方面表现出色不足为奇。与多数生成式图像工具类似,Firefly 在处理文本方面仍存在困难。
Adobe 还确保模型返回安全结果。这 partly 归因于训练集,但也得益于额外的安全措施。“我们将此与一系列已知的提示工程措施相结合,”Yap 解释道,“我们排除了某些术语及不安全词汇。此外,我们正在研究另一层级的处理机制:如果用户选择的区域包含大量皮肤,系统可能会发出警告并限制对该区域的扩展提示,以避免不可预测性及潜在风险。”
与所有 Firefly 图像一样,Adobe 将自动为利用这些 AI 功能生成的图像添加内容凭证。
许多此类功能在 Lightroom 中也将极具价值。Yap 对此表示认同,虽未承诺具体时间表,但确认公司计划将 Firefly 引入其照片管理工具中。

