stable diffusion实践操作-大模型介绍

本文专门开一节写大模型相关的内容，在看之前，可以同步关注：
stable diffusion实践操作

模型下载网站
国内的是：https://www.liblibai.com
国外的是：https://civitai.com（科学上网）

一、发展历史

1 官方大模型

大模型从无到有训练大模型花费时间非常久，花费非常高，上百万美元：

2 CHECKPOINT

在官方大模型的基础上再次训练，就是我们看到的CHECKPOINT模型，但是对于硬件的要求还是很高，使用起来不是很灵活

3 EMBEDDING

后来发展出来了embedding模型，文件小，训练成本低，但是效果差强人意，好处是灵活

4 Lora 和Hypernetworks

二 什么是大模型

我们可以理解为各种绘画风格的打包集合，不像midjourney那样，想要什么风格，就在关键词中写上就可以了，比如，国风水墨，迪士尼等。如下：

Stable Diffusion就需要大模型来规定风格，比如国风模型，迪士尼模型等，具体参考checkpoint，选定这个模型后，那么你所有的关键词都是根据这个模型来确定的，也就是说，不同模型，关键词不一样，这也是SD比较难学的原因。

三 使用注意事项

通过二我们知道，每个大模型的关键词都不一样，所以下载大模型的时候要详细看作者说明，以及作者的关键词，通过关键词来学习，这样才能使用好这个大模型。

正文

---

序号	模型名称	简介
1	Stable Diffusion 常用官方模型V1.5版本	官方
2	Stable Diffusion XL1.0	官方
3	Anything 系列	二次元
4	Realistic Vision V2.0	写实模型
5	DreamShaper	人物肖像
6	MeinaMix	动漫
7	ChilloutMix	现实
8	majicMix系列
9	AbyssOrangeMix2_hard.safetensors	漫画

1、官方大模型

底模/大模型 是SD能够绘图的基础模型。安装完SD软件后，必须搭配基础模型才能使用。不同的基础模型，其画风和擅长的领域会有侧重。常见的模式，后缀ckpt，safetensors，大小在2-8G之间。
【1】Stable Diffusion 常用官方模型V1.5版本，v1-5-pruned.ckpt。
下载链接：https://openai.wiki/stable-diffusion-model-v1-5.html
【2】目前升级到新版本【Stable Diffusion XL1.0 正式版】
下载链接：https://www.liblibai.com/modelinfo/77a9ca05a2c7c93ceb05f4dceae9ed97
【3】Anything系列型号，偏向二次元
anything-v5-PrtRE.safetensors模型可以用于生成多种类型的图像，包括肖像、风景、动物、卡通、科幻等。它具有较强的适应性和泛用性，效果表现出较强的真实感和细节还原能力。

详细介绍链接：https://zhuanlan.zhihu.com/p/640797704

2、写实大模型Realistic Vision V2.0，

链接: https://pan.baidu.com/s/1wat_55oIRa-fSSleqpE1kw 提取码: 5u8w

3、DreamShaper

这个模型在肖像提示上表现得特别好，创造了一件令人惊叹的艺术品，捕捉到了主题的感觉和风格元素。在风景方面，DreamShaper能够创造出一个有趣而复杂的图像，具有鲜艳的色彩和迷人的细节。插图展示了充满活力的色彩和各种形状，使图像栩栩如生。
链接: https://pan.baidu.com/s/1zZeTk3J4odbWqjwJle_1Bg 提取码: ba47

4、MeinaMix

MeinaMix是最受欢迎的型号之一，这是有充分理由的。这个模型能够生成具有独特绘画般质量的精彩插图。与Anything模型非常相似，MeinaMix在人物方面专注于动漫风格，但它也能够生成复杂的插图。
链接: https://pan.baidu.com/s/1ECn3AAU6CBj_6rOriFn7ig 提取码: u24m

5、checkpoint模型下载，在C站，或者liblib上面，标签是checkpoint的就是。

6、ChilloutMix-KoreanDollLikeness

提到SD模型，Chillout是必不可少的。即使因为停止了后续更新，市场上已经涌现出了很多能够替代Chillout的模型，但Chillout依旧是一座丰碑：第一个爆火的真人模型。
Chillout在真人出图是统治级别的占有率 。是非常好的模型，但或许因为成熟的太早，也很快就停更了。最新版本是2023年2月的版本。

模型分为32和16两个精度，其中16精度可以大幅节省显存，但是因为玄学原因，我还是在用32精度的。
介绍以及下载链接：https://zhuanlan.zhihu.com/p/632997666

7 、majicMix系列

majic也是堪称封神的模型。作者是国人大佬麦橘。

明暗光影控制都非常到位，这种能够控制暗影部分效果的能力，是之前SD相比于MJ所相对较弱的部分，但是有了majic，就给补上了。尤其是女性的眼睛和神态，像戴了美瞳一样。甚至人物身上的小雀斑小痣都能够出现。尤其惊为天人的，是对男性的表现力。从肌肉到血管，都非常的真实。

有一个趣闻，就是AI博主娜乌斯嘉，娜娜酱，炼了自己的lora融进sombra后，作者直接在最新的V5版本里把娜娜酱融进了正式版，属于是真正的赛博永生了。

模型推荐用Euler作为采样器。

以及作者强调了N次的……不要开面部修复！
majic系列分了好几个，分别是：

7.1 majicMIX realistic：主打真实系，是通用版本。

下载介绍链接：https://www.liblibai.com/modelinfo/bced6d7ec1460ac7b923fc5bc95c4540

7.2 majicMIX fantasy：风格非常炸裂美好，但是远距离脸部需要inpaint以达成最好效果。

下载链接：https://www.liblibai.com/modelinfo/ab2e95bb3f3e746456d8955216865963

7.3 majicMIX lux:融合了，realistic和fantasy，是适合抽卡博梦想的模型。

7.4majicMIX horror：偏恐怖主题。

8. AbyssOrangeMix2_hard.safetensors

下载链接：https://www.liblibai.com/modelinfo/2bd0c7cec6e843f69ee446c9820adbf8
参考示例：

下面是一个生成的龙，是不是看着比以前的好多了

结尾

---

常用到的基础模型和插件（持续更新中）
链接：https://pan.baidu.com/s/1c9utQmWlGcRqLTr_kftTyA?pwd=1111
提取码：1111