用AI指挥另一个AI,GAN+CLIP的组合成了“CG艺术家”

发布时间:2024-06-12 19:51:55 浏览量:104次

梦晨 发自 凹非寺
量子位 报道 | 公众号 QbitAI

用AI指挥另一个AI,GAN+CLIP的组合成了“CG艺术家”新潮玩法让图像变得更酷炫!

你觉得GAN生成的图像不够炫酷吗?别担心,不需要改变数据集,只需要在CLIP的命令中加上“虚幻引擎”几个字,让CLIP指挥GAN,图像就瞬间变成了高大上的CG艺术风。

最初,Aran Komatsuzaki在推特上发布了添加虚幻引擎这一技巧,吸引了众多CV圈的人前来围观。

后来,有人将这一流程分享到Colab上,引发了网友们的热情参与。

除了虚幻引擎,还可以尝试指定“彩色铅笔风格”:

或者尝试“吉卜力风格”:

更惊喜的是,添加“3D photo inpainting”还能生成立体构图。

CLIP作为OpenAI开发的负责给图像重排序的模型,与GAN的合作方式也相当简单。

首先,使用一张普通的随机图案作为种子,如下图:

通过让CLIP评估种子图案与描述之间的相似度得分,并反馈给GAN,使GAN不断迭代以提高得分。

AI艺术家的默契合作由此诞生。

除了在提示中加入风格要求,还可以直接向AI提供一个人名,看看AI会如何为其绘制图像。

甚至可以用来揭示一些从未曝光的人物,比如神秘的比特币之父中本聪。

这就是AI创作出的中本聪的形象,无论你信与不信,反正我是相信的。

想体验这一奇妙技术?点击咨询我们选取了Colab上速度和质量出色的VQGAN+CLIP版本供您在线试玩。

热门课程推荐

热门资讯

请绑定手机号

x
确定