ControlNet作者最新研究: AI绘画能分图层!生成透明PNG图像!

发布时间:2024-09-23 14:20:46 浏览量:114次

金磊 发自 凹非寺
量子位 | 公众号 QbitAI

“这绝不是简单的抠图。”

ControlNet作者最新推出的研究引起了广泛关注——

通过一句prompt,使用Stable Diffusion可以直接生成单个或多个透明PNG图层!

例如:

描述:头发凌乱的女性,在卧室里。
AI生成:Woman with messy hair, in the bedroom.

AI生成图像

可以看到,AI不仅能完整生成符合prompt的图像,还能将人物和背景分离出来。

放大人物的PNG图像,细节清晰可见。

PNG图层放大细节

再来看另一个例子:

描述:燃烧的柴火,在一张桌子上,在乡下。
AI生成:Burning firewood, on a table, in the countryside.

AI生成图像

放大“燃烧的火柴”的PNG图像,火焰周围的黑烟也能清晰分离出来:

PNG图层放大细节

ControlNet作者提出的新方法——LayerDiffusion,利用大规模预训练的潜在扩散模型生成透明图像。

LayerDiffusion示意图

值得强调的是,LayerDiffusion着重于生成,而非简单的抠图。

网友评论说:

这是动画、视频制作中关键的工序之一。通过LayerDiffusion,图像一致性将不再是问题。

网友评论

有人认为这项工作并不困难,只是“顺便加个alpha通道”的小事,但最终需要经过漫长等待才有了成果。

等待的成果

想了解LayerDiffusion是如何实现的吗?从现在开始PNG图像将走上生成的道路!

热门课程推荐

热门资讯

请绑定手机号

x

同学您好!

您已成功报名0元试学活动,老师会在第一时间与您取得联系,请保持电话畅通!
确定