什么是VAE模型? #
VAE 的全称是 “virational autoencoder”,译为“变分自编码器”,它的位置在操作页面的左上方的右侧。打开 stable diffusion 的操作页面,左上方第一个是模型,第二个就是VAE。
VAE文件在哪里? #
打开Stable Diffusion 启动器窗口
“模型管理”-“变分自编码器(VAE)模型”-“打开文件夹”,路径是:启动器\models\VAE
从上图中的VAE文件后缀可以看出,VAE文件后缀有pt、ckpt、safetensors 3种格式。VAE的文件大小都比较小,几十MB到几百MB。
VAE的作用? #
VAE模型有2个作用,一种是滤镜(就像是PS、抖音、美图秀秀等用到的滤镜一样),让出图的画面看上去不会灰蒙蒙的,让整体的色彩饱和度更高。
另一种是微调,部分VAE会对出图的细节进行细微的调整(个人觉得变化并不明显仅会对细节处微调)。
接下来我们用angthing-v4.5模型来测试使用VAE前后出图效果对比。图左为未添加VAE模型的效果,图右为添加了VAE模型的效果。
从图片对比可以看出来,添加VAE后图片颜色饱和度更高,色彩更艳丽。
此外,使用不同的VAE模型对最终出图的色彩饱和度都是有所不同的,接下来我们使用5个不同的VAE进行对比测试,大模型依旧是angthing-v4.5。
从下方图片出图效果可以看出,不同的VAE模型有不同的出图效果,以及在细节形状上会有细微的调整(注意看胸口领巾处的变化)。
此外,若使用的大模型里面已经内置了VAE模型,这时无需再添加VAE模型。如果额外使用了VAE模型,就可能会使得画面最终效果下降,或者VAE使用后无效。
接下来我们使用一个包含VAE的模型测试出图颜色(“Anime Pastel Dream”大家可以自行搜索下载),从出图来看,颜色的饱和度已经很不错了,那么在使用这类型大模型时,无需再额外添加VAE模型。
下图为测试添加VAE模型后的出图效果,前3个VAE模型与无VAE效果基本一致,后2个VAE模型对图片的饱和度进行了调整,整体风格的选择就看各自的喜好了。
ps:以上“VAE的作用”中的内容来自于虎课网,原文地址:https://huke88.com/article/8085.html (如有不妥马上删除)
下载好的VAE文件放在哪里? #
将下载好的VAE文件放在:启动器\models\VAE
在哪里下载VAE? #
有两个方法下载VAE,可以通过“启动器”-“模型管理”-“变分自编码器(VAE)模型”,进行下载。
或者去C站(civitai.com)搜索VAE下载。
ps:以前早期的模型出图效果经常出现颜色发灰,饱和度不够,对比度不够的情况,现在越来越多的新模型作者都会规避这个问题,随着新模型的改进,VAE的重要性在逐渐减弱。
评论0