2023年5月23日周二，Adobe在其Photoshop测试版中添加了一个名为“生成填充”的新工具，该工具使用基于云的图像合成，根据文本描述，用新的AI生成的内容填充图像的选定区域。由Adobe Firefly提供支持，生成填充的工作原理类似于自去年以来DALL-E和稳定扩散版本中使用的一种称为“修复”的技术。
Generative Fill的核心是Adobe Firefly，这是Adobe的自定义图像合成模型。作为一个深度学习AI模型，Firefly已经在Adobe库存库中的数百万张图像上进行了训练，将某些图像与它们的文本描述相关联。现在，Photoshop的一部分，人们可以键入他们想看到的内容（即，“电脑显示器上的小丑”），萤火虫将合成几个选项供用户选择。Generative Fill使用一种称为“修补”的众所周知的AI技术来创建一个上下文感知的生成，可以无缝地将合成图像融合到现有图像中。
要使用生成填充，用户需要选择要修改的现有图像区域。选择它后，弹出一个“上下文任务栏”，允许用户键入他们希望看到在所选区域生成的内容的描述。Photoshop将这些数据发送到Adobe的服务器进行处理，然后在应用程序中返回结果。生成之后，用户可以选择在几个代选项之间进行选择，或者创建更多选项进行浏览。
使用时，生成填充工具会创建一个新的“生成层”，允许对图像内容进行非破坏性更改，例如由这些文本提示驱动的添加、扩展或删除。它会自动调整到选定图像的透视、照明和样式。
生成填充并不是Photoshop beta中添加的唯一AI功能。Firefly还使Photoshop能够完全删除图像的部分内容，从场景中删除对象，或通过生成围绕现有图像的新内容来扩展图像的尺寸，这是一种称为“outpainting”的人工智能技术。”
自去年8月以来，这些功能已经在OpenAI的DALL-E 2图像生成器和编辑器中可用（并且大约在同一时间在稳定扩散的各种自制版本中可用），因此Adobe现在正在赶上将它们添加到其旗舰图像编辑器中。不可否认，对于一家公司来说，这是一个快速的转变，当涉及到有害或社会污名化的内容生成，利用艺术家的图像进行训练数据，以及为宣传或虚假信息提供动力的问题时，它可能会有一个巨大的责任目标。
沿着这些原则，Adobe不仅阻止某些受版权保护的、*力暴**的和性的关键字的生成，而且还依赖于限制人们生成“滥用、非法或机密”内容的使用条款。
此外，由于Generative Fill能够轻松地扭曲照片的明显媒体现实（无可否认，Photoshop自成立以来一直在做的事情），Adobe正在加倍其内容真实性计划，该计划使用内容凭据向生成的文件添加元数据，以帮助跟踪其出处。
Photoshop Beta版应用程序中的生成式填充目前可供所有Creative Cloud会员通过Creative Cloud应用程序的“Beta版应用程序”部分订购或试用Photoshop。它还不能用于商业用途，18岁以下的个人无法访问，在中国不可用，目前只支持英文文本提示。Adobe计划在今年年底前向所有Photoshop客户提供生成填充，以便任何人都可以轻松制作庭院小丑。