发布时间:2024-04-03 16:46:23 浏览量:255次
这是一篇关于stable diffusion本地部署并通过基础模型搭配不同的lora生成图片的教程,软件很容易获取,对电脑的要求也不是太高,相较于本地化的chatglm动不动就要6G显存的门槛还是很低的,根据不同性能显卡,同样的参数生成图片的速度也不一样,4090-24G版本的几秒就可以生成一张图,1060-4G的几乎要3-5分钟才能生成一样。下面主要讲一讲很多新手经常搞不懂的问题和使用教程。
stable diffusion生成的古风美女图
对于软件的安装这里就不介绍了,网上很多的视频教程更加的简单易懂,本文以上图为例,讲一下如何生成同类型的图,stable diffusion最方便的一个功能就是图片信息,我们可以把图片直接拖进去,右边就会显示这张图的描述和相关参数。如何看懂这个参数呢?我们要先知道stable diffusion模型和lora的区别,简单讲stable diffusion模型决定了可以生成图的画风和类型,lora决定了生成图的其他细节:服装、脸部特征、动作等,也算是对模型的补充。
stable diffusion的图片信息功能
通过上面的图,我们可以看到右边的各种描述,其中<lora:>这种形式的内容,就是这张图用到了这些lora,prompt中的一些关于画质、人物、动作之类的描述都是通用的,我们可以直接复制使用,也有人对()内的提示词不太理解,其实每一个提示词都有权重的,越靠前权重要高,如果想更高一点就可以加()加的括号越多权重也就越高。同理其他样式的括号作用也是这样的。右下角还提到了Model: chilloutmix-Ni,这是这张图用的到基础模型,如果我们模型和lora本地都有了就可以直接点下面的文生图按钮。(本地没有可以去网上下载)
stable diffusion的文生图功能
如果你的默认模型不是chilloutmix-Ni,可以在左上角切换模型,如果你的lora名字和提示词不一样,需要换成你本地的名字,需要注意大小写和lora版本的问题,lora后面的数值:0.5是代表调用的权重,数值越高占比越高,最高是2。当模型和lora都准备好了,我们就可以点击右边的生成来炼丹了。下面的Steps、Sampler、Seed等参数都已经设置好了,我们不需要动,如果后面生成的图没问题了,可以做适当的调整。
stable diffusion的文生图功能
除了模型和lora要一致,还需要注意Negative prompt里面有没有用到嵌入式的描述,一般带下划线的就是直接调用的embeddings文件夹里面的pt文件,这个我们也需要去网上下载下来放到对应的文件夹里面,这里可以补充一下每个类型的文件放的文件夹位置,如果是超过1G的文件,基本上就是sd模型了,下载了直接放到models下面的stable diffusion文件夹里面,可以连图片一起下载 会显示缩略图方便查看。几十几百兆的文件 一般都是lora,放到models下面的文件夹里面,还有一些插件是放在extensions文件夹里面的(比如常用的中文汉化、controlnet、posex-master、tagcomplete等等),只有几十KB的文件就是文字型描述放在embeddings里面。
stable diffusion存放目录
通过这样的操作,我们就可以通过一张图,生成同类型的其他图了,搭配controlnet还可以实现不同的pose,下面放一些微调了提示词的图片供大家欣赏,如果对stable diffusion使用还有其他不了解的也欢迎大家讨论。
stable diffusion生成的图
stable diffusion生成的图
stable diffusion生成的图
热门资讯
想将照片变成漫画效果?这篇文章分享了4个方法,包括Photoshop、聪明灵犀、VanceAI Toongineer、醒图,简单操作就能实现,快来尝试一下吧!
2. 华为手机神奇“AI修图”功能,一键消除衣服!原图变身大V领深V!
最近华为手机Pura70推出的“AI修图”功能引发热议,通过简单操作可以让照片中的人物换装。想了解更多这款神奇功能的使用方法吗?点击查看!
近年来,人工智能逐渐走入公众视野,其中的AI图像生成技术尤为引人注目。只需在特定软件中输入关键词描述语以及上传参考图就能智能高效生成符合要求的...
4. AI视频制作神器Viggle:让静态人物动起来,创意无限!
Viggle AI是一款免费制作视频的AI工具,能让静态人物图片动起来,快来了解Viggle AI的功能和优势吧!
5. Logo Diffusion——基于sd绘画模型的AI LOGO 生成器
这下LOGO设计彻底不用求人了。接下来详细演示一遍操作流程首先进入Logo D... 想学习更多AI技能,比如说关于怎么样利用AI来提高生产效率、还能做什么AI...
6. 零基础10分钟生成漫画,教大家如何用AI生成自己的漫画
接下来,我将亲自引导你,使用AI工具,创作一本既有趣又能带来盈利的漫画。我们将一起探索如何利用这个工具,发挥你的创意,制作出令人惊叹的漫画作品。让...
以下是一些免费的AI视频制作网站或工具,帮助您制作各种类型的视频。 1. Lumen5:Lumen5是一个基于AI的视频制作工具,可将文本转换为视频。 用户可以使...
8. AI显卡绘画排行榜:4090无悬念,最具性价比出人意料
在AI绘图领域,Stable Diffusion的显卡绘图性能备受关注。本文整理了Stable Diffusion显卡的硬件要求和性能表现,以及2023年3月显卡AI绘图效率排行榜和性价比排行榜。欢迎查看最新的AI显卡算力排行榜。
9. 一款免费无限制的AI视频生成工具火了!国内无障碍访问!附教程
人人都可以动手制作AI视频! 打开网址https://pixverse.ai/,用邮箱注册后,点击右上角Create,就可以开始创作了。 PixVerse目前有文案生成视频,和图片生...
就能快速生成一幅极具艺术效果的作品,让现实中不懂绘画的人也能参与其中创作!真的超赞哒~趣趣分享几款超厉害的AI绘画软件,提供详细操作!有需要的快来...
同学您好!