【Stable Diffusion】

1、SD 模型

安装完SD软件后,必须搭配基础模型才能使用。

不同的基础模型,其画风和擅长的领域会有侧重。

  • Checkpoint大模型

大模型是 SD 的核心,用来控制生成图片的整个画面风格走势。

出图前要选择好合适的大模型,比如有些擅长写实照片,有些擅长游戏原画,有些擅长室内设计等等

模型存放路径【\stable diffusion\models\stable-diffusion】

文件后缀一般为.ckpt和.sefetensors

模型大小为2G-8G不等

  • Lora模型

用于复刻人物、物品的特征、训练画风,需搭配主模型使用

部分Lora会需要触发词来使用,否则效果不明显

模型存放路径【\stable diffusion\Lora】

文件后缀一般为.safetensors

模型大小为几十mb至两三百mb

  • VAE模型

相当于给画面加一个滤镜,需搭配主模型使用。

简单来说就是修正出图的颜色,如果不使用VAE进行出图的话,生成的图像颜色会偏灰,除非使用的大模型已经内置了VAE

模型存放路径【\stable diffusion\models\VAE】

文件后缀一般为.ckpt和.pt

有的大模型是会自节VAE的,如果再加VAE则可能画面效果会适得其反

  • Embeddings模型

可理解为提词打包模型,它可以生成指定角色的特征、风格或者画风,需搭配主模型使用

模型存放路径【\stable diffusion\embeddings 】

文件后缀一般为.pt

由于embeddings模型本质是提词打包,所以这类虽然节省模型的体积通常很小(通常几kb)空间资源,但由于体积小所携带的信息少,所以现在使用这种模型的也越来越少了

相关推荐
武子康6 天前
不要问模型是 Transformer 还是 Diffusion:一套五层技术栈检查法(系统角色 / 表示空间 / 网络骨架 / 训练范式 / 推理算法)
人工智能·stable diffusion·llm
武子康8 天前
从随机动作块到真实闭环:Diffusion 与 Flow 策略的执行账本
人工智能·stable diffusion·agent
chenment8 天前
ComfyUI 自定义节点开发:从零扩展你的图像生成工作流
python·stable diffusion
Lifangyun_WD16 天前
RTX 5090跑Stable Diffusion XL:生图速度、显存占用与商业应用边界
人工智能·stable diffusion·gpu算力·rtx 5090·gpu容器·gpu租赁
承渊政道16 天前
把家里的显卡变成远程AI画室:Stable Diffusion WebUI部署实战
人工智能·stable diffusion·内网穿透·cpolar·web ui·ai画室
老刘说AI2 个月前
类Sora模型:解锁动态视觉艺术的密码
人工智能·stable diffusion·架构·embedding
python-码博士2 个月前
Stable Diffusion 3 / FLUX 类模型中的 Flow Matching:怎么用、怎么调、怎么避坑
stable diffusion
Rocky Ding*2 个月前
Latent Consistency Models:一篇读懂扩散模型的少步生成核心基础知识
人工智能·深度学习·机器学习·ai作画·stable diffusion·aigc·ai-native
Asimov_Liu2 个月前
Diffusion 与 Flow Matching 数学原理及其在 VLA Action 生成中的应用
stable diffusion·自动驾驶·具身智能·vla·flow matching
Rocky Ding*2 个月前
Token Merging for Fast Stable Diffusion:一篇读懂 Stable Diffusion 的免训练加速机制
论文阅读·人工智能·深度学习·机器学习·stable diffusion·aigc·ai-native