Stable diffusion学习相关

关于模型

关于模型

模型下载地址：Civitai | Stable Diffusion models, embeddings, LoRAs and more

主要需要魔法下载，最好定位IP为美国

CivitAI 上的模型主要分为四类：Checkpoint、LoRA、Textual Inversion、Hypernetwork，分别对应 4 种不同的训练方式。

Checkpoint：通过 Dreambooth 训练方式得到的大模型， 特点是出图效果好，但由于训练的是一个完整的新模型，所以训练速度普遍较慢，生成模型文件较大，一般几个 G，文件格式为 safetensors 或 ckpt。

LoRA：一种轻量化的模型微调训练方法，是在原有大模型的基础上，对该模型进行微调，用于输出固定特征的人或事物。特点是对于特定风格特征的出图效果好，训练速度快，模型文件小，一般几十到一百多 MB，需要搭配大模型使用。

Textual Inversion：一种使用文本提示来训练模型的方法，可以简单理解为一组打包的提示词，用于生成固定特征的人或事物。特点是对于特定风格特征的出图效果好，模型文件非常小，一般几十 K，但是训练速度较慢，需要搭配大模型使用。

Hypernetwork：类似 LoRA，但模型效果不如 LoRA，需要搭配大模型使用。

模型推荐：Checkpoint > LoRA > Textual Inversion > Hypernetwork

通常情况 Checkpoint 模型搭配 LoRA 或 Textual Inversion 模型使用，可以获得更好的出图效果。

补充：还有一类 VAE 模型，简单理解它的作用就是提升图像色彩效果，让画面看上去不会那么灰蒙蒙，此外对图像细节进行细微调整。

CivitAI 上可以根据不同分类和排序方式，对模型进行筛选和搜索。

1. Checkpoint

模型存放路径：

/stabl-diffusio-webui/models/Stabl-diffusion

2. LoRA

模型存放径：

/stable-diffusion-webui/extensions/models/Lora

3. Tetual Inversion

模型存放路径：

/stable-diffusion-webui/embeddings

模型下载与装载

所需模型：Checkpoint 模型（ReV Animated），Lora 模型（Blindbox）

模型下载方式一：下载至本地（适合本地部署）

下载 LoRA 模型：

https://civitai.com/models/25995/blindbox?modelVersionId=32988（存放至本地 Lora 模型文件夹 /stable-diffusion-webui/models/Lora）

下载 Checkpoint 模型：

https://civitai.com/models/7371?modelVersionId=46846（放至本地 Checkpoint 模型文件夹 /stable-diffusion-webui/models/Stable-diffusion）