澎湃Logo
下载客户端

登录

  • +1

半年后再推三个生成AI模型,Adobe又迎来重要更新

2023-10-11 18:08
来源:澎湃新闻·澎湃号·湃客
字号

机器之能报道

编辑:吴昕

仅半年后,Adobe 的 AI 图像生成器又迎来重要更新,包括三个新的生成 AI 模型。不难看出,Adobe 对生成式 AI 的看法与其说是内容创建,不如说是生成式编辑。

对于生成式人工智能来说,今年是忙碌的一年。

眼瞅着 Midjourney、Stable Diffusion 等挑战者不断威胁到自己的创意客户群体,Adobe 不敢有丝毫懈怠。

距离 3 月首次推出 Firefly 模型后仅半年,本周二,Adobe 宣布对包括 Photoshop、Illustrator 和 Adobe Express 在内的多个产品的 AI 图像合成功能进行重大更新。这次更新包括三个新的生成 AI 模型—— Firefly Image 2 Model 、Firefly Design Model 和 Firefly Vector Model。

其中,Firefly Image 2 Model 是 3 月推出的 Firefly 模型的最新版本;Firefly Vector Model 号称「世界上第一个用于矢量图形的生成 AI 模型」(当然,谷歌未必答应)。

据 Adobe 称,迄今为止,Firefly 模型已经用于生成超过 30 亿张图像,仅在上个月就有 10 亿张。绝大多数 Firefly 用户( 90% )也是 Adobe 产品的新手。

现在,Adobe 正通过一系列新的生成 AI 功能进一步开疆扩土。

先来看 Firefly Image 2 Model。Adobe 称,新版本生成的图像质量明显更高,特别是在渲染逼真人类时,在皮肤纹理、头发、手和面部特征等细节方面表现突出。

下面是新老版本模型生成图像的对比,我们可以从右图(基于新版本模型)中看到棉花糖含糖部分形成的「褶皱」。

这是新版本生成的树懒,毛发细节极其逼真:

Prompt: Cinematic studio portrait of a sloth, shot on a solid black cyclorama

新版本生成的图像具有更高的分辨率,和更鲜艳的色彩、颜色对比度:

使用时,用户可以轻松在两代模型之间切换,比较不同输出效果:

「 Firefly 是多个模型的集合,我们已经将它们的尺寸增加了三倍,」 Adobe 生成 AI 和 Sensei 副总裁 Alexandru Costin 告诉媒体,「所以,它就像一个大三倍的大脑,知道如何建立这些连接,并为用户渲染更美丽的像素和细节。」

Adobe 还将数据集增加了近两倍,这反过来又使得模型更好了解用户要求。

prompt :a muscular barbarian with weapons beside a CRT television set, cinematic, 8K, studio lighting

更大的模型显然更需要资源,但 Costin 指出,它的运行速度应该与第一个模型相同。「我们将继续在蒸馏、修剪、优化等方面进行探索和投资。要确保客户获得类似的体验,还有很多工作要做,但我们不会让云成本过高。」

不过,目前 Adobe 重点是质量而不是优化。

除了这些增强功能外,Firefly Image 2 Model 还引入了新的控制部件,比如 AI 驱动的编辑功能,可以调整各种照片设置,如景深和运动模糊,就像手动调整相机一样。

可手动控制景深和运动模糊等图像属性,以提高照片真实感

其中,新增的「提示指导( Prompt Guidance )」功能还能帮助用户优化其文本描述的措辞,提升 prompt 效率。

「提示指导(Prompt Guidance)」会给到提示建议,帮助用户自动完成(仅限英语)提示,生成符合愿景的内容

值得注意的是,Adobe 还引入了新的「生成匹配(Generative Match)」功能,类似一种「 img-2-img 」的功能,允许用户将生成内容的样式与特定图像相匹配。

用户可以上传少至 10 到 20 张图像,用作生成图像的基础,也可以从预先选择的图像列表中进行选择。通过控制滑块,确定参考图像与生成图像之间的相似程度。

大多数创意人士都有一种表达他们独特视角的风格。通过「生成匹配」,他们就可以指导模型将自己独特的风格批量到不同物料中。而对于那些希望轻松复制自己品牌风格的公司来说,这一功能也可能会有吸引力。

我们的目标是让大品牌上传一些产品照片,然后使用生成技术自动制作数百或数千张图像,以满足其网站、社交媒体活动和印刷广告等各种需求。Adobe 数字媒体首席技术官 Ely Greenfield 对媒体表示。

「直到几个月前,获取所有这些照片仍然是一个手动过程,不仅要拍摄照片,还要加工处理。」

Adobe 设计负责人 Scott Belsky 在一篇专门的博客文章中强调,该公司已经制定了「新的政策和保障措施」,确保这一功能不被滥用。

比如,该功能将提示用户同意 Adobe 使用条款,并确认他们有权使用上传的图像,同时在 Adobe 服务器上存储上传内容的缩略图(不用于训练 AI 模型)。

他们还推出了内容凭证( content credentials )功能,使用元数据自动标记人工智能生成的内容,将创作者姓名、日期以及用于创建内容的工具和编辑等信息附加到作品中。如果内容凭证已经显示内容受到保护,那么该图片风格无法再被复制利用。

目前,「生成匹配」功能仍处于测试阶段,在此试用期内不允许用于商业用途。

通过单击图钉来查看其内容凭证,如果上传到生成匹配的图像已经被标识为受保护的内容,则无法复制其风格。

内容凭证可以捕获随时间变化的详细历史记录,帮助用户深入了解图片编辑的历史信息,包括AI生成的内容。

除了 Firefly Image 2 Model,这一次,Adobe 还为世界上最受欢迎的矢量图形编辑器之一 Adobe Illustrator 推出了 Firefly Vector Model。

虽然可能算不上「世界上第一个用于矢量图形的生成AI模型」,但可以肯定地说,它是 Adobe 第一个矢量生成 AI 模型。

用户只需输入文本提示即可生成可编辑的矢量图形,文本提示会自动将图形的每个元素划分为「逻辑」组和图层。与传统的 JPEG 、 PNG 文件不同,矢量图形(也称为 SVG 文件)非常适合从事徽标、产品标签、小手册等设计的创意人群,因为它们是通过数学公式计算获得的,具有任意缩放、编辑后不失真的特点。

将AI生成的肌肉野蛮人插入到 Adobe 提供的矢量图景中

矢量模型生成所描述图像的三种变体,允许用户选择最佳选项

用户只需输入文本提示即可生成可编辑的矢量图形

第三,这一次,Adobe 还为 Adobe Express 引入了 Firefly Design Model 。

Adobe Express 是一款以消费者为中心的创意应用程序,通常被用来快速制作 Reels 和 TikTok 视频、传单、简历、横幅、徽标等内容。在 Firefly Design Model 支持下,这款入门级设计应用程序获得了新的生成功能。

比如,通过简单的文本提示,就能立刻为印刷品、社交帖子、在线广告、视频等生成可自定义的模板。他们称之为「文本到模板」。

AI 生成的模板提供了更个性化的起点,而不是像过去那样,寻找预先存在的设计或从头开始

这一功能与 Canva 的 Magic Design 功能(另一个与 Adobe Express 相媲美的多合一设计平台)有一些相似之处,用户可以描述类似「海滩度假传单」的东西来生成独特的模板,而不是将单个文本和图像一并拖放到空白画布上。

用户还可以自定义设计规格(比如颜色、高宽比例)并调整大小,还能智能选择文本颜色以最大程度提高其可读性。

模版设计示例

自 2022 年 4 月推出 DALL-E 2 以来,图像合成模型的质量迅速提高。Adobe 在受欢迎的产品未满周岁之际再度推陈出新,也侧面反映出这一领域竞争的激烈。

作为这个领域的现存者,版权往往是他们对抗后来挑战者的武器。Adobe 向其客户承诺,生成的图像将免受法律挑战。

Adobe 也将 Firefly 模型定位为「商业用途安全」,其模型仅接受 Adobe Stock 图像训练,与 DALL-E、Midjourney 等流行模型形成鲜明对比,后者面临版权和内容偏见的批评。

另一方面,与这些文生图工具主要在聊天界面内运行不同, Adobe 的生成工具可以与现有工具和生产工作流程很好地集成。

不过,Adobe 在人工智能上的大赌注是否在面临日益激烈的竞争时得到回报,只有时间才能证明。

Firefly 2(包括生成匹配)预计稍后将集成到 Creative Cloud 应用程序中。同时,Firefly Vector Model 可通过 Creative Cloud 应用程序中的 Adobe Illustrator 更新获得,Firefly Design Model 目前是 Adobe Express 的测试功能。

© THE END

转载请联系本公众号获得授权

投稿或寻求报道:content@jiqizhixin.com

原标题:《半年后再推三个生成AI模型,Adobe 鲨疯了》

阅读原文

    本文为澎湃号作者或机构在澎湃新闻上传并发布,仅代表该作者或机构观点,不代表澎湃新闻的观点或立场,澎湃新闻仅提供信息发布平台。申请澎湃号请用电脑访问http://renzheng.thepaper.cn。

    +1
    收藏
    我要举报

            扫码下载澎湃新闻客户端

            沪ICP备14003370号

            沪公网安备31010602000299号

            互联网新闻信息服务许可证:31120170006

            增值电信业务经营许可证:沪B2-2017116

            © 2014-2024 上海东方报业有限公司

            反馈