火星网校
AI画画模型Composer惊艳亮相！图像拆分再灵活重组，创造力飞升
发布时间：2024-09-25 13:33:20 浏览量：148次
AI画画通用模型，新增一员大将！
阿里达摩院副院长周靖人等人打造的可控扩散模型Composer，一经发布就引起了轩然大波。
这个模型由50亿参数训练而来，与Stable Diffusion原理有所不同。
它更进一步把训练图像拆解成了多个元素，然后基于这些元素训练扩散模型，让它们能够灵活组合。
模型的创造能力因此大幅提升，创作的可能性倍增。
网友们看了纷纷表示，AI画画发展速度也太快了！
团队表示，模型的训练和推理代码都在路上了。
有限手段的无限使用
该框架的核心思想是组合性（compositionality），模型名字就叫做Composer。
观察到现下很多AI画画模型，在细节的可控性上还有待提高，Composer的出现填补了这一空白。
研究团队认为，想要实现图像的可控生成，重点应该放在组合性上，这种方式可以将图像的创造力提升到指数级。
具体来看，该模型将每个训练图像拆解成一系列基础元素，如蒙版图、草稿图、文字描述等，用它们来训练一个扩散模型。
然后让这些被拆分的元素，在推理阶段灵活组合，生成大量新的图像输出。
它可以支持多种形式作为输入。比如文字描述作为全局信息，深度图和草图作为局部引导，颜色直方图为低级细节等。
在保证生成图像可控的基础上，作为一个通用框架，该模型还能不用再训练就可以完成大量经典生成任务。
团队表示，现有成果还在继续优化，以应对AI画画模型面临的挑战和风险。
达摩院副院长带队
该研究由火星时代教育及蚂蚁团队完成，成果斐然。
通讯作者为周靖人。
他现任火星时代教育副院长、智能计算CTO，是IEEE Fellow。
了解更多数字艺术教育培训课程，请点击咨询。
热门课程推荐
热门资讯
-
想将照片变成漫画效果？这篇文章分享了4个方法，包括Photoshop、聪明灵犀、VanceAI Toongineer、醒图，简单操作就能实现，快来尝试一下吧！
-
2. 华为手机神奇“AI修图”功能，一键消除衣服！原图变身大V领深V！
最近华为手机Pura70推出的“AI修图”功能引发热议，通过简单操作可以让照片中的人物换装。想了解更多这款神奇功能的使用方法吗？点击查看！
-
近年来,人工智能逐渐走入公众视野,其中的AI图像生成技术尤为引人注目。只需在特定软件中输入关键词描述语以及上传参考图就能智能高效生成符合要求的...
-
4. AI视频制作神器Viggle：让静态人物动起来，创意无限！
Viggle AI是一款免费制作视频的AI工具，能让静态人物图片动起来，快来了解Viggle AI的功能和优势吧！
-
5. Logo Diffusion——基于sd绘画模型的AI LOGO 生成器
这下LOGO设计彻底不用求人了。接下来详细演示一遍操作流程首先进入Logo D... 想学习更多AI技能,比如说关于怎么样利用AI来提高生产效率、还能做什么AI...
-
6. 零基础10分钟生成漫画，教大家如何用AI生成自己的漫画
接下来,我将亲自引导你,使用AI工具,创作一本既有趣又能带来盈利的漫画。我们将一起探索如何利用这个工具,发挥你的创意,制作出令人惊叹的漫画作品。让...
-
7. AI显卡绘画排行榜:4090无悬念，最具性价比出人意料
在AI绘图领域，Stable Diffusion的显卡绘图性能备受关注。本文整理了Stable Diffusion显卡的硬件要求和性能表现，以及2023年3月显卡AI绘图效率排行榜和性价比排行榜。欢迎查看最新的AI显卡算力排行榜。
-
以下是一些免费的AI视频制作网站或工具,帮助您制作各种类型的视频。 1. Lumen5:Lumen5是一个基于AI的视频制作工具,可将文本转换为视频。 用户可以使...
-
就能快速生成一幅极具艺术效果的作品,让现实中不懂绘画的人也能参与其中创作!真的超赞哒~趣趣分享几款超厉害的AI绘画软件,提供详细操作!有需要的快来...
-
10. 10个建筑AI工具，从设计到施工全覆盖!肯定有你从来没听过的
讲述了建筑业比较著名的AI公司小库科技做出的探索,在这儿就不多说了。今天,我们试着在规划设计、建筑方案设计、住宅设计、管道设计、出渲染图、3D扫...
