Stable Diffusion概念
stable diffusion models: 是一类用扩散过程来生成高质量图片的神经网络模型的统称
checkpoint: 一般也称model,是必须的主模型,文件体积GB级别,文件后缀通常是ckpt或者safetensors
controlNet:是一种stable diffusion的神经网络式的扩展模块,主要是通过增加条件图来限定stable diffusion model输出图的人物轮廓
lora: 也是一种stable diffusion model的扩展模块,是通过input text来微调checkpoint的辅助模型;和controlNet区别在于,它这里只通过input text,不能通过image prompt来辅助输出
ip-adapter:也是一种stable diffusion model的扩展模块,也是通过image prompt来控制影响checkpoint主模型来生成图片。与controlNet区别在于,它主要是保证保留输入图像的特征或风格,而ControlNet是保证精确控制生成图像的结构或布局的场景
automatic1111:
vae: 也是一种给checkpoint做调整的小模型,主要是类似滤镜作用
embedding:也是一种给checkpoint做调整的,主要是保存了很多提示词
参考: Stable Diffusion——基础模型、VAE、LORA、Embedding各个模型的介绍与使用方法