在AI绘图领域，Stable Diffusion作为一种开源的深度学习图像生成模型，已被广泛应用于生成各种风格和内容的图像。为了更好地控制生成结果，Stable Diffusion提供了多种类型的模型和扩展工具，用户可以根据需求自由选择和使用。在这篇教程中，我们将详细介绍如何下载、安装和使用Stable Diffusion的不同模型，以便能够更精确地定制生成的图像。
一、Stable Diffusion模型下载
Stable Diffusion提供了多种不同类型的模型，这些模型能够帮助控制生成的画风、内容以及细节。常见的模型下载网站有：
1、Civitai：提供多种Stable Diffusion模型、embedding、hypernetwork等资源。
2、Hugging Face：Stable Diffusion模型的官方存储库。
3、SD WebUI资源站：提供与Stable Diffusion WebUI配套的各类模型。
4、元素法典 AI 模型收集站：提供各种AI绘图模型的下载。
5、AI绘画模型博物馆：另一个用于收集AI绘图模型的资源平台。
二、Stable Diffusion模型安装
下载模型后，需要将它们放置在指定的目录下。不同类型的模型应放置在不同的文件夹中。以下是常见的模型安装方式：
1、大模型（Ckpt）
这是Stable Diffusion模型的核心文件，通常是”.ckpt”格式。将这些模型文件放置在 “models\Stable-diffusion” 目录下。
2、VAE 模型
有些大模型需要配合VAE（变分自编码器）模型来获得更好的效果。VAE模型文件应该放置在 “models\Stable-diffusion” 或 “models\VAE” 目录中，并在WebUI的设置中进行选择。
3、Lora / LoHA / LoCon 模型
这些是对人物、物体、姿势等效果优化的辅助模型。将它们放在 “extensions\sd-webui-additional-networks\models\lora” 或 “models/Lora” 目录中。
4、Embedding 模型
这些模型通过提示词控制人物、画风等特征的调整。Embedding模型应放在 “embeddings” 目录中。
三、Stable Diffusion模型使用
在安装完成模型后，需要在WebUI界面中选择并启用相应的模型。不同类型的模型会对生成效果产生不同的影响。
1、Checkpoint（Ckpt）模型
这类模型对生成效果的影响最大。在WebUI界面的左上角选择并启用相应的模型。
另外一些模型需要特定的触发词才能生效，因此在提示词中加入相应的关键词即可激活模型。
2、Lora / LoHA / LoCon 模型
这些模型通常是用于对人物、姿势、物体等细节的表现进行优化。在Ckpt模型的基础上附加使用，可以在WebUI的“Additional Networks”部分启用它们。启用后，可以选择对应的模型，并通过调整Weight来控制其影响力。一般来说，权重不建议设置过高（超过1.2），否则可能会导致生成结果失真。
还可以混合多个Lora模型来叠加效果。例如，可以将一个用于控制面部的Lora与另一个用于控制画风的Lora配合使用，从而实现特定风格的特定人物效果。
- LoHA模型是Lora模型的一种改进版，能够在特定场景下提供更好的表现；
- LoCon模型则是一种泛化能力更强的Lora模型，适用于更多样化的生成需求；
- Embedding模型：这些模型可以用来控制画风、人物特征等。在提示词中加入对应的关键词即可激活模型。例如，某个Embedding模型名为“SomeCharacter.pt”，那么触发它的关键词就是“SomeCharacter”。
