10月10日,全球多媒体软件领导者Adobe在官方宣布,在Photoshop、Illustrator、Adobe Express等产品中,正式发布生成式AI功能Firefly
生成式重新上色 – Illustrator 中的 AI – Adobe
Adobe Photoshop
用文本就能直接P图,Adobe全面开放生成式AI
Adobe在Photoshop、Illustrator、Adobe Express中正式发布了生成式AI功能Firefly,允许用户通过文本创作各种类型的图片,无需专业设计背景,为全球2000万正版用户提供了重要的创意工具。
10 月 11 日消息,在日前举行的 Adobe MAX 创意大会上,Adobe 推出了 Adobe Firefly Image 2、Adobe Firefly Vector Model 和 Adobe Firefly Design Model 三款 AI 模型,这是其 AI 创意生成模型系列的下一个主要版本。
Adobe的Firefly是一款生成式AI工具,用户可以通过文本描述,创作3D、平面、素描等多种类型的图片。这一功能类似于Midjourney,但更强大,提供了更多的创意选择。Firefly支持多种语言提示,为用户提供了更广泛的应用可能性。此工具在商业领域表现突出,生成的图片和设计模板可以用于商业用途,无需担心版权问题。
Adobe Firefly 的初始模型于 3 月推出测试版以来,用户已经使用该模型生成了超过 30 亿张图像,使其成为“全球最受欢迎”的人工智能图像生成模型。Firefly image 2 建立在 Firefly 图像模型的基础上,用于下一代生成式 AI 图像,在创意和质量带来了重大进步。
Adobe Firefly Image 2
Adobe的AIGC生图平台Firefly最近进行了一次大更新。Adobe直接把它命名为Firefly 2。
首先是Firefly image 2的图像模型质量有了非常大的飞跃,提升了图像质量、引入了矢量图生成功能,并增加了多项新功能,极大改善了用户体验,为创作和设计工作提供更出色的工具。
Adobe Firefly Image 2 可生成更高质量的图像和插图,通过改善皮肤、头发、眼睛、手和身体结构来提高人类渲染质量,提供更好的颜色和改进的动态范围,最终帮助用户更快地提供创造性的视觉效果。与最初的 Firefly 模型一样,Firefly Image 2 通过许可内容(如 Adobe Stock)和版权过期的公共域内容进行训练。它支持 100 多种语言的文本提示,以及包括“快速”生成积分在内的新付费计划。
Adobe Firefly Image 2 新功能:
- 生成匹配:用户指定图像的样式以按比例生成新图像。Generative Match 功能为业界首创,用户可以从预先选择的列表中挑选图像,也可以上传自己的参考图像,以在通过 Firefly 应用程序中的“文本到图像”提示生成新图像时指导风格。
- 照片设置:Firefly Image 2 通过更高保真的细节,包括皮肤毛孔和树叶,以及更大的景深控制、运动模糊、视野和生成,实现了更真实的图像质量。
- 改进的文本提示功能:Firefly Image 2 提高了对文本提示的理解,并将识别更多的地标和文化符号。用户可以在 Firefly 应用程序的“文本到图像”模块中选择特定元素,如关键术语、颜色或形状,以排除图像生成。
- Firefly 共享和保存到库:用户可以直接从 Firefly 中共享和保存图像,并利用他们喜欢的图像提示进行微调。
另外两款产品中,Adobe Firefly Vector 模型汇集了 Adobe 的矢量图形和生成人工智能专业知识,为下一代高质量的设计和插图提供动力。它是世界上第一个用于矢量图形的生成人工智能模型,也是第一个生成“人类品质”矢量和模式输出的生成人工模型。
Adobe Firefly Design 模型通过 Adobe Express 中的文本到模板功能,使用专业布局技术,结合 Firefly 图像模型、Adobe 字体,为即时生成模板设计提供了支持,这些模板在 Express 中完全可编辑,可用于印刷、社交和网络广告等领域。
PhotoshopAI文生图一步完成,效果惊人,模型全面升级,矢量图完美支持
我们来看一下:
右边的新模型图片中甚至能看到棉花糖的褶皱
右图的新模型中鸟类羽毛和景深的细节都比上一代模型好太多
Firefly Image 2 模型可生成质量明显更高的图像,尤其是在渲染逼真的人体时,涉及树叶、皮肤纹理、头发、手和面部特征等高频细节。使用 Firefly Image 2 模型生成的图像具有更高的分辨率,并且具有更鲜艳的色彩和色彩对比度。
而且新增了矢量图的生成功能,可以直接通过prompt生成矢量图形。
Adobe还增加了几个能大幅改善用户体验的新功能:
生成匹配:可以根据用户上传的示例图片来生成风格相近的图像。
图像设置:还能针对生成的图片进行细节设置,包括景深控制、运动模糊、视野调整和生成。
Prompt优化提示:对于用户的Prompt,系统能自动生成提示建议,帮助用户更好地表达自己的需求,获得更加理想的图像输出。
01 更能打的图像模型,全面提升生图质量
Adobe宣称Firefly 2大幅改进了图像输出的质量,特别是在树叶、皮肤纹理和面部特征等方面,相比上一代模型有了更加逼真和精细的细节。
特别对于人像图片,通过改善皮肤、头发、眼睛、手和身体结构来增强人体渲染质量,提供更好的色彩和的更加准确的动态效果。
右边新模型生成的人物皮肤更加真实自然,背景的景深效果也更加明显。
左图中,新模型的人物的光影效果更加真实一致,背景细节更自然。中图云彩细节更自然丰富,光影也更加柔和。右图人物细节更逼真,手部描绘更加自然。棉花糖的效果更加真实,细节也更加丰富。
从图片内容上来看,明显新的模型对于什么是CRT显示器以及电视的理解和描绘都更加准确。上一代引擎基本上只描绘出了一个显示屏幕,而新一代引擎对于显示器的细节绘制得更加合理。
从画面风格的角度来看,新的模型生成的图片风格光影比较自然,更加逼真,色调也更加一致。
就像其他几个生图AI一样,Firefly也可以自由选择生图的模型版本。虽然2版本理论上比1要好,但是如果用户想要用1版本来生图,也是完全没有问题的。
02 实测3个全新功能,赋予用户精细控制图片的能力
图像模型的变化是Firefly对于模型输出「整体质量」的大升级。
但是用户对于生图AI产品最看重的一点——图片生成过程中的控制能力。Adobe在这些方面的几十年的积累显然不是图像产品新手Midjourney,DALL-E 3能够比拟的。
针对这次更新的生成匹配,图像设置,prompt提示建议3个功能,我们也进行了一波实测。
使用之后最大的感受就是,PS+AI生图的结合真爽!
首先,通过Firefly的官方网站进行注册就能使用这些全部功能了。
入口地址:https://firefly.adobe.com/inspire/images
生成匹配功能:
类似于其他生图AI的「风格转换器」功能,生成匹配功能能根据用户给定的一幅图片,生成风格和内容都有高度相似性的图片,可以理解为Adobe版本的「image to image」功能。
比如,我们希望根据素描铅笔的风格的眼睛图像时,我们只需提供一个同样风格的素描画,然后再输入提示,比如「一个人的眼睛」。
然后,Firefly 2就会创造出四幅素描铅笔风格的图像,与我们所期望的风格完美匹配。
用「霓虹主题」的图片配合小狗提示词生成的「霓虹小狗」。
用剪纸风格的原图,配合猫咪的提示词来生成剪纸风格的猫猫。
此外,你还可以根据个人喜好调整图像的风格,将其转变为生动的立体风格,赋予图像更加生动和引人入胜的特质。
这个功能让你能够根据不同项目的要求或个人创意的多样性,轻松地定制和创作出独一无二的图像。
图像设置
此外,Firefly还提供了对生成的图像进行二次编辑的功能,相当于融合了PS+AI生图的能力,对于图片细节要求很高的用户,提供了一个非常便捷的工作流。
举个例子,你可以使用刚刚系统生成的剪纸小猫咪的图像,随时对这个素材进行编辑,包括添加文字、图形或其他元素。
这种灵活性让你能够根据需要进一步个性化和完善生成的内容,创造出符合你独特创意的图像,满足你的具体需求。
这种功能在创意性和定制性方面为用户提供了更多的选择和控制权。
此外,对视觉强度、颜色色调、光照、合成都可以做进一步的修改。例如在生成的猫猫图像的基础之上,右下角可以改动色调,光照等效果。
如果你想要生成金色的小猫,可以在Firefly 2的颜色和色调选项中进行选择。
你还能够在创作中合成更多元素,比如透过窗户拍摄的场景。
提示词建议
作为AI生图人类端的最大瓶颈——提示词,Adobe这次更新也给出了自己的解决方案。
如果用户的输入提示太过简短或不足以清晰描述用户的需求,系统提供了提示词建议的功能。
例如,当我们输入类似「a woman is on top of the mountain during sunset」这样的简短提示时,系统会自动补充生成五个不同的语句,这些语句将呈现出多种方式来表达类似的情境,以供我们选择和进一步完善我们的创意需求。
这一功能使得我们可以更灵活地定制和拓展我们的创作想法,提高了创意的可能性和多样性。
这些方面共同展示了Adobe发布的Firefly 2的更强大性能。它不仅提高了图像质量,引入了矢量图生成功能,还新增了多项功能,大幅改善了用户体验,为创作者和设计师提供了更卓越的工具。