Adobe 加入AI行业竞争! Firefly正式开放测试

发布时间:2024-03-22 17:17:10 浏览量:122次

转自 | 拍吧paibar

订阅 | 010-86092062


围绕AI人工智能的热议似乎仍然保持着一个比较高的温度,各大软件公司也开始涉足这一新兴领域。最能说明问题的是Adobe公司,它在几个月前就对外宣布了,自己将进入人工智能领域。至少可以说,他们正在计划和实施如何将AI集成到软件中,这显然是一件雄心勃勃的计划。


对此,一家著名的海外影视器材平台对Adobe Firefly进行了测试,现在我们为大家简单介绍一下测试过程和结果。需要提前说明的是:Firefly生成的图像目前还没有达到Midjourney的精度,但未来就不好说了。



在不久前结束的NAB 2023展会上,Adobe透露了他们的Firefly计划,以实现快速轻松的视频制作。这将使用户能够通过发出AI文本命令来更改镜头的配色方案,或是直接从脚本中生成一个完整的草图故事。点击“Make previz”后,你可以去喝杯咖啡,Adobe神经网络会让用它的深度学习大脑,为你创建一个完整的3D可视化视图......


为此,我们将拭目以待Adobe实现它的计划。目前我们只能评估已经存在并可用于测试运行的内容,例如Firefly的文本到图像生成器,其用于创造性文本效果的额外功能,以及重新着色。


什么是Adobe Firefly?如何测试它?


Firefly是Adobe的最新研究领域,专注于人工智能驱动的工具和模型生成方法。开发人员从生成图像和文本效果开始,但他们不会就此止步。他们的基本目标是找出所有可能的方法来加快和改进创意工作流程,然后将其集成到Adobe现有的产品中,如Photoshop、Premiere Pro或InDesign。


Firefly是Adobe在过去40年中的技术延伸,源于帮助人们将自己的想法准确地绘制在生成的图像中。你可以向Adobe提交你的参与测试Firefly请求,Adobe鼓励用户为他们提供意见和建议。不过,要参与Firefly测试,你在提交请求之后,可能需要等待几周时间。如果获得批准,你会收到来自Adobe公司的邮件。



一旦你有了它,你就可以直接在浏览器中使用Adobe Firefly,包括Chrome、Safari和Edge等浏览器,也许使用这些浏览内核的国产浏览也可以和Firefly兼容。但请留意,Firefly测试版目前不支持平板电脑或任何移动设备。


Adobe Firefly的界面


如果你熟悉其他的文本图像生成器,如Midjourney或Stable Diffusion,Adobe Firefly的界面会让你大吃一惊。它不仅看起来非常用户友好,而且还具有许多非常易于使用的创造性功能,你只需要动动手指就可以了。


在Chrome浏览器中打开Adobe Firefly


当你更改这些样式时,程序只会在下面的文本提示中添加单词。在Midtravel中,你必须与聊天机器人聊天才能获得你希望的结果,而Firefly感觉像是一个突破性的解决方案


令人好奇的是,当你使用不同的参数时,你可以要求模型将它们应用于你已经生成的图片,或者你可以点击“刷新”,获得一组完全不同的图片。在下面的拼贴画中,是同一个女孩的三个稍微不同的风格。


Firefly 的不同的风格


经过几次测试,得到的结果是:参数并不总是像它们承诺的那样起作用。通过改变构图属性,你不会立即获得修改后的图像,Firefly无法在几秒钟内将你的宽镜头照片转换为微距照片。所以,在点击“生成”之前,最好选择所有的风格,这是接近你想要的结果的最佳方式。


另一个你可能会忽略的实用技巧是:将鼠标悬停在其中一张图片上,左上角会弹出“显示相似”按钮。点击它,你会得到不同的变化。Adobe也经常在他们的直播中分享一些实用技巧,比如这个。


图像生成功能还不完善


让我们再来看看这个被鲜花覆盖的女孩的脸,这是我们做的第一个测试。你注意到了什么?首先,我喜欢Firefly在一个图像集内提供了完全不同类型的人的图像(比如不同的种族)。开发人员强调,他们正在完美人工智能模型的思维过程,让它在工作中无“偏见”,比如刚才说过不能存在种族、国籍、肤色等偏见,在这里我们可以清楚地看到他们的成功之处。


同时,我们不会将这些生成的结果与实际照片相混淆(尽管在生成图像时选择了内容类型为“照片”)。它们看来并不真实。在对Adobe直播的评论中,有些用户也注意到Firefly在生成人物方面并不先进(在照片真实性方面)。也许Midtravel真的很先进,它已经突飞猛进地发展起来,在人工智能社区中已经有了“真实感奇迹”的称号。


为了证实我们的结论,我们在两个Firefly和Midtravel中都尝试了相同的文本提示,下面是我们得到的图片:


相同的提示,不同的AI(左边是Adobe Firefly创建的图像)


在这里我们可以看到,Adobe Firefly显然没有处理好人物的肢体,或者可以说它生成的图片更接近于卡通画,这是所有深度学习模型在开发阶段都必须面对的问题。不过,Adobe的工程师也清楚这一点。他们说,虽然测试人员在某些场景中不可避免地会遇到奇怪的“作品”,但神经网络会不断学习,并逐渐调整它们“思维”过程,让图像变得更好。


落日余晖中的薰衣草庄园

Adobe Firefly生成的室内图片


快速简单的文本效果


我们测试的下一个功能是文本效果生成器。该工具的工作原理是:只需输入一个解释样式的提示,添加你想要的文本即可


Firefly支持你对一些参数进行调整,例如更改文本颜色(实际上不起作用)、更改背景颜色(起作用,但在透明度和文本轮廓方面存在问题,开发人员会随着时间的推移而改进),或者决定效果应该延伸多远。在Firefly的Discord上发现的一个技巧建议,在文本提示中添加[outline strength=10(变量10-100)],以创建一点额外的参数,并将效果元素进一步推到其边界之外。


Adobe 提供的视频截图


经过一些尝试,建议只提供两三个简单的特征描述,比如纹理+颜色,你可以得到更好的结果,不需要复杂的参数。


Adobe Firefly中的重新着色功能


这是一个全新的工具,一周前还没有。公平地说,测试时并没有真正使用矢量,所以并不确定手动重新着色有多难。尽管如此,我们还是尝试了一下这个功能。


Adobe Firefly 重新着色


在这个例子中,我们从Instagram上取了一个电影板的简单图标,并让Firefly在上面应用霓虹调色板。结果符合预期,也可以作为SVG文件下载。



Firefly 是否符合法律规范?


这是目前人工智能生成图像的关键问题,因为它涉及到人工智能引用合法性。与其他开发者相比,Adobe决定采用一种独立的、同时也是合法的方式。他们称Firefly使用Adobe Stock图像、公开许可的素材以及版权过期的公共领域内容来为Firefly提供数据支持。


这有利于避开人工智能面临的法律问题,并尊重艺术家的所有权和知识产权。这也意味着:在未来,我们将可以在商业项目中自由使用Firefly生成的内容。



即将推出的功能


当然目前Firefly还存在许多局限,具体表现为:


不支持上传或导出视频内容、不能使用自己的素材来训练模型;


虽然仍处于测试阶段,但你只能将Firefly用于非商业目的,生成的图像上有水印;


目前,Adobe Firefly 只支持英文提示;


此版本不允许将你创建的作品保存到创意云;


你无法在Firefly中创作名人的幽默图片或品牌模型



使用Adobe Firefly生成图像还远远不够完美,但关注和了解它的发展过程,却是令人兴奋的。开发人员梳理了不同的功能,这些功能将在今年进行测试。例如,其中包括图像扩展、智能肖像或绘画。


即将推出的修复功能


如果你对如何在Adobe应用程序中使用这项技术有一个令人兴奋的想法,你可以加入Firefly Discord服务器,直接与工程师交谈(如果你是Adobe社区论坛的成员,你也可以在那里做)。他们对反馈持开放态度,并鼓励测试人员参与未来对人工智能的探索。




由于测试阶段的目的是帮助Adobe创建更多更酷的新工具,这将会加快我们的工作进度,他们要求Firefly用户报告所有错误并评估生成的结果。你可以直接在界面中进行操作:每张图像上都有“向上”或“向下”的按钮,还有一个用于提供反馈的报告工具,你可以在这里提交你的反馈意见。










热门课程推荐

热门资讯

请绑定手机号

x

同学您好!

您已成功报名0元试学活动,老师会在第一时间与您取得联系,请保持电话畅通!
确定