Firefly AI 生成式 AI 模型的最新迭代带来了更高的图像质量、对输出的更多控制以及与 Photoshop 图像编辑应用程序的更深入集成。
Adobe 周二在伦敦举行的Adobe Max活动 上推出了最新的 Firefly 图像生成人工智能 (genAI) 模型,承诺提供更大的真实感并改进对生成输出的控制。下一代 Firefly 模型也将集成到 Photoshop 中,图像编辑器将在今年晚些时候推出多项新功能。
Adobe Firefly 是 一组生成式 AI 模型, 用于创建和修改摄影风格图像、插图和字体等内容。 (Firefly 视频生成模型将于今年晚些时候出现 在 Premier Pro 视频编辑工具中,音乐生成算法也在开发中。)它可以作为独立应用程序访问,也可以集成到 Adobe 的 Creative Cloud 应用程序中套房。
自推出一年多以来,Firefly 的图像模型现已进入第三次迭代。 Adobe 表示,Firefly Image 3 在多个方面对去年 10 月推出的第二次迭代进行了改进。
该公司强调了图像质量的改进,尤其是人物图像。这意味着更逼真的输出、更好的照明和主题定位以及更广泛的表达方式。另一个质量改进涉及渲染有助于图像连贯性的直线和结构。
ADOBE FIREFLY 生成了工作室中艺术家的图像。
土坯
最新模型包括 Adobe 上个月宣布的结构参考功能;它允许用户应用参考图像的结构来提供更准确的输出。样式参考也是如此,它有助于创建一致的图像样式。
用户还可以期待更广泛的插图、摄影艺术和图像矢量艺术的输出样式。 Adobe 表示,Firefly Image 3 还将更好地理解用户提示,比以前的版本更准确地反映更长、更复杂的输入。
IDC 计算机视觉和人工智能研究总监 Matt Arcaro 表示:“Firefly Image 3 比已经高性能的 Firefly Image 2 模型有了相当大的提升,图像质量和与用户提示的一致性有了显着改进。”
Constellation Research 副总裁兼首席分析师 Liz Miller 表示,Firefly Image 3 还使用户能够更好地控制 AI 模型生成的图像。 “如果 Firefly Image 1 和 2 专注于生成能力,那么 Firefly Image 3 则关注和控制生成式 AI 模型,将创作者头脑中的想法提取到初始画布上,”她说。
Adobe 是提供 genAI 图像模型的众多科技公司之一,其中包括 Canva、Midjourney、OpenAI、Stability AI等。 IDC 预测,2027 年全球 genAI 工具(包括软件和基础设施)支出 将达到 1430 亿美元,高于 2023 年的 160 亿美元。
“Firefly Image 3 可能处于测试阶段,但与 Adobe 的一些竞争对手相比,感觉实验性较差,”Miller 说。她说,最新的 Firefly 模型更加逼真,解决了创作者使用生成式人工智能工具围绕结构遇到的一些问题,例如用两只手生成手臂图像。
Firefly Image 3 现已通过 Firefly Web 应用程序提供测试版。
Photoshop 中的新 Firefly 功能
Arcaro 表示,Adobe 生成式 AI 功能的另一个优势是其产品之间的集成。 “Adobe 致力于通过其产品组合为用户提供 genAI 功能,”他说。
Adobe 表示,Firefly 图像模型和新的 genAI 功能将于今年晚些时候在 Photoshop 上推出,它们建立在生成填充(根据 Adobe 的说法,这是 Photoshop 中最快速采用的功能)和 一年前添加到 Photoshop 的生成扩展工具的基础上。
这个想法是为了改进在 Photoshop 中访问 genAI 功能时的工作流程。
例如,参考图像允许用户通过上传参考文档来将生成填充图像定制为特定样式。这可以让用户更准确地引导 Firefly 的输出,并节省输入文本提示以创建所需图像的时间。
ADOBE FIREFLY 使通过 GENAI 操作和使用参考图像变得更加容易。
土坯
另一个功能“生成图像”允许用户使用文本提示在 Photoshop 文档中从头开始创建整个图像。 Adobe 表示,其目的是让任何技能水平的用户都更容易使用图像编辑器。生成图像工具提供内容类型、效果选项,并允许用户上传参考图像。
生成背景可以更轻松地使用自然语言提示替换或创建图像中的背景视觉效果。 Adobe 表示,虽然 Photoshop 中已经可以生成背景图像,但新功能更加简化,需要的点击次数也更少。
生成背景允许用户使用自然语言提示创建背景视觉效果。
土坯
“生成相似”提供图像中对象的变化,用户可以从中进行选择,例如水果盘中水果的数量或类型,从而可以对结果进行更大程度的微调。
使用 FIREFLY 生成相似对象可提供图像中对象的变体。
土坯
最后,增强细节可以让用户提高生成图像的锐度和清晰度。
Adobe 表示,这些功能在今年晚些时候全面上市之前,已在测试版 Photoshop 应用程序(一款展示新功能的独立应用程序)中提供。人工智能处理可以在 Adobe 的服务器上运行,也可以在用户的本地设备上运行,默认情况下云计算。
“这些工具都是为了提高效率,并将单调的工作从创作者手中转移出去,”米勒说。她说,从概要到草图再到草稿可能是一个痛苦、耗时且昂贵的过程。
“传统的创作节奏会造成影响,尤其是当创造力的语言可能在翻译中迷失时......”米勒说。 “借助 Photoshop 自带的这些工具,创作者可以快速构思和迭代,快速就色调、形状和结构进行协作。”