【Stable Diffusion】

1、SD 模型

安装完SD软件后,必须搭配基础模型才能使用。

不同的基础模型,其画风和擅长的领域会有侧重。

  • Checkpoint大模型

大模型是 SD 的核心,用来控制生成图片的整个画面风格走势。

出图前要选择好合适的大模型,比如有些擅长写实照片,有些擅长游戏原画,有些擅长室内设计等等

模型存放路径【\stable diffusion\models\stable-diffusion】

文件后缀一般为.ckpt和.sefetensors

模型大小为2G-8G不等

  • Lora模型

用于复刻人物、物品的特征、训练画风,需搭配主模型使用

部分Lora会需要触发词来使用,否则效果不明显

模型存放路径【\stable diffusion\Lora】

文件后缀一般为.safetensors

模型大小为几十mb至两三百mb

  • VAE模型

相当于给画面加一个滤镜,需搭配主模型使用。

简单来说就是修正出图的颜色,如果不使用VAE进行出图的话,生成的图像颜色会偏灰,除非使用的大模型已经内置了VAE

模型存放路径【\stable diffusion\models\VAE】

文件后缀一般为.ckpt和.pt

有的大模型是会自节VAE的,如果再加VAE则可能画面效果会适得其反

  • Embeddings模型

可理解为提词打包模型,它可以生成指定角色的特征、风格或者画风,需搭配主模型使用

模型存放路径【\stable diffusion\embeddings 】

文件后缀一般为.pt

由于embeddings模型本质是提词打包,所以这类虽然节省模型的体积通常很小(通常几kb)空间资源,但由于体积小所携带的信息少,所以现在使用这种模型的也越来越少了

相关推荐
Rocky Ding*1 天前
Latent Consistency Models:一篇读懂扩散模型的少步生成核心基础知识
人工智能·深度学习·机器学习·ai作画·stable diffusion·aigc·ai-native
Asimov_Liu2 天前
Diffusion 与 Flow Matching 数学原理及其在 VLA Action 生成中的应用
stable diffusion·自动驾驶·具身智能·vla·flow matching
Rocky Ding*2 天前
Token Merging for Fast Stable Diffusion:一篇读懂 Stable Diffusion 的免训练加速机制
论文阅读·人工智能·深度学习·机器学习·stable diffusion·aigc·ai-native
yuguo.im3 天前
Mac M4 安装 sd-webui 踩坑全记录
macos·stable diffusion
hugo_im4 天前
Mac M4 安装 sd-webui 踩坑全记录
stable diffusion
一叶知秋dong5 天前
Stable diffusion 工作原理
人工智能·深度学习·stable diffusion
仰望尾迹云8 天前
灵感画廊入门:AI绘画零基础到精通
stable diffusion·ai绘画·图像生成
AI极客菌8 天前
AI绘画工具中,为什么专业玩家爱用Stable Diffusion,普通玩家却喜欢Midjourney?
大数据·人工智能·ai·ai作画·stable diffusion·aigc·midjourney
大叔and小萝莉8 天前
比迪丽AI绘画镜像免配置:GPU算力优化部署,显存占用降低40%
stable diffusion·ai绘画·gpu部署
日光明媚8 天前
从代码的角度解读DMD2
人工智能·深度学习·机器学习·stable diffusion·aigc