一、基本介绍
1、介绍
StableDiffusion是一种基于扩散过程的图像生成模型,可以生成高质量高分辨率的图像。这种模型具有较强的稳定性和可控性,可以生成具有多样化效果和良好视觉效果的图像。
Stable Diffusion 可以通过生成多样化、高质量的图像、修复损坏的图像、提高图像的分辨率和应用特定风格到图像上等方式,辅助视觉创意的实现。
2、与Midjourney区别
3、使用条件
1) Windows电脑系统是Win10或者Win11
基本配置要求如下:
- 电脑运行内存8GB以上
- 英伟达的显卡(俗称N卡)
- 显卡内存4GB以上
2) 购买云电脑
青椒云一小时最需要2.2元
使用也很简单,注册 → 实名认证 → 选择哪个地区的服务器 → 打开云电脑就可以使用了。
不用的时候需要虽是关键,不然会持续计费。
3) 一键式安装SD本地部署
推荐使用秋叶大佬的安装包。链接在下面:
链接:https://pan.quark.cn/s/4815d9cefa1f
提取码:cZcq
秋叶大佬的B站视频:https://www.bilibili.com/video/BV1iM4y1y7oA/?spm_id_from=333.999.0.0
- 下载sd-webui-aki-v4文件和启动器运行依赖(如有需要,可以下载我已经安装了很多插件和模型的一体包)
- 选择解压到系统盘以外的盘。
- 点击安装运行依赖
- 然后就可以点击sd-webui-aki-v4文件夹中的A启动器文件,愉快的使用了。
4、模型介绍与安装
1)、模型来源
目前,Stable Diffusion 模型的主要开源平台是 Civitai (https://civitai.com/),所有的模型都是免费共享。除了免费模型之外,平台还提供画廊、帖子、文章等形式,因此,它为AI绘画爱好者及艺术创作者提供一个资源共享和发现平台。
2)模型对比与安装
Stable Diffusion 模型主要包括以下几类,模型对比和模型存放目录如下图所示,我们可以在第三方渠道下载对应格式的模型,然后放到 Stable Diffusion 项目文件夹下的子文件夹中,即可使用。
3)模型使用
- Checkpoint(ckpt)模型 对效果影响最大的模型。在 webui 界面的左上角选择使用。
- Lora 模型 / LoHA 模型 / LoCon 模型
对人物、姿势、物体表现较好的模型,在 ckpt 模型上附加使用。 在 webui 界面的 Additional Networks 下勾线 Enable 启用,然后在 Model 下选择模型,并可用 Weight 调整权重。权重越大,该 Lora 的影响也越大。 不建议权重过大(超过 1.2),否则很容易出现扭曲的结果。
多个 lora 模型混合使用可以起到叠加效果,譬如一个控制面部的 lora 配合一个控制画风的 lora 就可以生成具有特定画风的特定人物。 因此可以使用多个专注于不同方面优化的 Lora,分别调整权重,结合出自己想要实现的效果。
LoHA 模型是一种 LORA 模型的改进。
LoCon 模型也一种 LORA 模型的改进,泛化能力更强。
- Embedding
对人物、画风都有调整效果的模型。在提示词中加入对应的关键词即可。大部分 Embedding 模型的关键词与文件名相同,譬如一个名为为“SomeCharacter.pt”的模型,触发它的关键词检索“SomeCharacter”。
二、功能使用
1、参考B站视频教程
以下课程都是B站的开源内容:
【第一天03】AI绘画软件比较与stable diffusion的优势
2、提示词模板
暂无评论内容