大数跨境

Adobe将Firefly生成式AI引入Photoshop

Adobe将Firefly生成式AI引入Photoshop 海外洞察
2023-05-23
1
导读:今天,Photoshop 迎来了一波基于 Firefly 的生成式 AI 功能注入。

Photoshop 今日迎来生成式 AI 注入,新增一系列基于 Firefly 的功能。用户可利用 AI 生成的背景将图像扩展至边界之外、向图中添加对象,或通过全新的“生成式填充”功能更精确地移除对象,其精度远超此前的内容感知填充。

目前,这些功能仅在 Photoshop 测试版中可用。Adobe 也正逐步将这些能力开放给 Firefly 网页版测试用户(Firefly 用户已在该服务上创建超 1 亿张图像)。

图片版权:Adobe

集成的巧妙之处在于,Photoshop 用户可通过自然语言文本提示描述期望生成的图像或对象类型。与所有生成式 AI 工具一样,结果有时具有不可预测性。默认情况下,Adobe 为每个提示提供三种变体;但与 Firefly 网页应用不同,目前暂不支持对某一变体进行迭代以查看类似结果。

为实现上述功能,Photoshop 会将图像的特定部分发送至 Firefly(并非整图,尽管 Adobe 也在实验全图处理),并为生成结果创建新图层。

Adobe 数字成像副总裁 Maria Yap 在发布前演示了这些新功能。虽然生成式 AI 的结果难以预测,但部分效果令人惊喜。例如,当要求在小猎犬奔跑下方生成水坑时,Firefly 似乎考虑到了整体光照,甚至生成了逼真的倒影。尽管并非所有结果都同样出色(曾出现亮紫色水坑选项),但该模型在添加对象及扩展图像框架方面表现相当不错。

鉴于 Firefly 使用 Adobe Stock 上的照片及其他商业安全图像训练,其在风景生成方面表现出色不足为奇。与多数生成式图像工具类似,Firefly 在处理文本方面仍存在困难。

Adobe 还确保模型返回安全结果。这 partly 归因于训练集,但也得益于额外的安全措施。“我们将此与一系列已知的提示工程措施相结合,”Yap 解释道,“我们排除了某些术语及不安全词汇。此外,我们正在研究另一层级的处理机制:如果用户选择的区域包含大量皮肤,系统可能会发出警告并限制对该区域的扩展提示,以避免不可预测性及潜在风险。”

与所有 Firefly 图像一样,Adobe 将自动为利用这些 AI 功能生成的图像添加内容凭证。

许多此类功能在 Lightroom 中也将极具价值。Yap 对此表示认同,虽未承诺具体时间表,但确认公司计划将 Firefly 引入其照片管理工具中。

【声明】内容源于网络
0
0
海外洞察
海外资讯洞察,电商,AI
内容 14232
粉丝 0
海外洞察 海外资讯洞察,电商,AI
总阅读3.2k
粉丝0
内容14.2k