近日，Stability AI 在官方推特上宣布发布了两个新的微调解码器，它们提高了Stable Diffusion生成的图像的质量。

  • “微调解码器”到底是什么意思？ 实际上，Stable Diffusion是一种在压缩空间中运行的扩散模型，然后将其“解码”成全分辨率图像。 这个解码器本身也是一个训练有素的神经网络。

  • 所以“微调解码器”只是意味着在对新数据集进行进一步训练后，所得到的一组新的解码器神经网络参数（即改变蓝色圈出的部分，图表来自huggingface) 。

新的数据集是LAION-Aesthetics（与稳定扩散训练的数据集相同）以及LAION-Humans，LAION-5B的新人类子集。这两个解码器是：

1. SD-VAE-FT-EMA ：接受过LAION-美学+人类的培训
2. SD-VAE-FT-MSE ：继续在同一数据集上进行训练，但要使输出更流畅。

代码地址：

https://colab.research.google.com/drive/1gQLdsxYJA6AOhVmORTA3iF8rWenD75VD?usp=sharing

内容中包含的图片若涉及版权问题，请及时与我们联系删除