学习笔记|为什么你用Stable Diffusion画的那么模糊？如何使用VAE

今天看到一个对比，用Stable Diffusion的基础模型和付费版的Midjoureny V5做对比，结果当然是Stable Diffusion表现一塌糊涂。

和Midjoureny内置了大量的模型相比，Stable Diffusion基础模型基本上没什么价值。

Stable Diffusion作为开源软件，最大的特点就是模型自由搭配组合，最著名的模型分享站点是C站。

对于AI绘画爱好者来说，C站下载量排在前面的可以无脑下载。

你永远可以相信全世界的LSP们的集体审美：

我没看到黑人美人鱼，没看到吊眼角的亚洲人，没看到以肥为美的LGBT... ...

无论是真人模型还是动漫模型，都是一水的马甲线大长腿的美少女，当然偶尔也有花样美男。

编辑切换为居中

PS，不要被下载量最大的前两个预览图迷惑，这两个是综合类的模型，画真人美女更出色，只是作者为了低调，放了很朴素的图，但依然被LSP们顶到下载前列。

动漫题材的模型中，MIX-Pro是非常出色的一个，下载量也比较大。

在使用这个模型的时候，我发现一个问题：我和C站网友做的画面几乎一致，基本复现的同时，画面却非常灰暗，不像网友做的那么靓丽。

比如我用了这一段提示词。正向：Original Characters, Natural Volumetric Lighting And Best Shadows, Deep Depth Of Field, Sharp Focus, Portrait Of Stunningly Beautiful Petite Girl, Soft Delicate Beautiful Attractive Face With Alluring Brown Eyes, Lovely Medium Small Breasts, Sharp Eyeliner, Seductive Smiling, Closed Mouth, Windswept Disheveled Brown Hair, Thick Layered Medium Hairstyles, Blush Eyeshadow With Thick Eyelashes, Parted Lips, Oversized Straw Sun Hat, Single Ribbon Bow, White Rustic One-piece Dress Long, (Flutter In The Wind:1.1), (Ripe Yellow Rye Field Under Beautiful Summer Sunset Sky With Clouds:1.2), (Highest Quality, Amazing Details:1.4), Masterpiece, Bloom, Picturesque, Vivid Watercolor Paintings,White gloves反向（比较随意和大同小异）。

(worst quality, low quality, loli, child, infant, baby:1.4), lowres, blurry, bad anatomy, bad hands, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, (signature, watermark, username,letter, letterboxed, copyright name, copyright, chinese text, artist name, name tag, company name, name tag, text, error:1.5)

我画出来的画面是这样的：

虽然很好看，但画面明显不够靓丽，哪里出问题了？

这种情况就是因为没有使用正确的VAE。

什么是VAE？

VAE 的全称是Variational Auto-Encoder，翻译过来是变分自动编码器，本质上是一种训练模型，Stable Diffusion里的VAE主要是模型作者将训练好的模型“解压”的解码工具。

在C站下载模型，需要特定VAE的情况下，会提示下载链接。

编辑切换为居中

VAE文件扩展名是CKPT或者PT，安装路径是 models\VAE ，需要和早期的模型文件区分开，早期模型文件扩展名也是CKPT，但模型文件一般2G以上，而VAE文件只有几百兆。

拷贝完毕后，刷新首页外挂VAE模型，选中对应的VAE文件，重新生成即可。

新生成的画面更加清晰和透彻，效果远好于不使用VAE。

那么问题来了，由于搜罗模型非常费劲，有些模型被C站下架，如果下载模型的时候没有找到VAE文件怎么办？

可以下载一些通用VAE，可能效果比专用VAE略差一些，但基本能够解决颜色、亮度失真的问题。有时候生成的画面会过亮，这就需要更换一下通用VAE文件，尝试生成最好的结果。

比如，我用通用VAE生成的图像是这样的：

和专用VAE几乎没有太大区别（为什么帽檐破了？？）。

本文用到的模型文件下载：

1、Mix-Pro V3：https://www.123pan.com/s/ztzbVv-LV5Eh.html

2、Mix-Pro V4:

https://www.123pan.com/s/ueDeVv-Rk0I.html提取码:lgyh

3、本模型专用VAE：

https://www.123pan.com/s/ueDeVv-Dk0I.html提取码:lgyh

4、通用VAE（三个，可分别尝试最佳效果）：

https://www.123pan.com/s/ztzbVv-lTqEh.html

https://www.123pan.com/s/ztzbVv-7TqEh.html

https://www.123pan.com/s/ztzbVv-STqEh.html