Stable Diffusion 3 大模型文生图实践

windows教程2024年最新Stable Diffusion本地化部署详细攻略,手把手教程(建议收藏!!)_stable diffusion 本地部署-CSDN博客

linux本地安装教程

1.前期准备工作

1)创建conda环境

conda create --name stable3 python=3.10

2)下载模型

git lfs install

git clone https://www.modelscope.cn/AI-ModelScope/stable-diffusion-3-medium.git stable-diffusion-3-medium

3)下载ComfyUI工作流可视化工具

git clone https://github.com/comfyanonymous/ComfyUI.git ComfyUI

4)在克隆好的项目models目录下放入大模型对应文件

checkpoints 文件夹:是存放SD3 模型文件根目录下的sd3_medium.safetensorssd3_medium_incl_clips.safetensorssd3_medium_incl_clips_t5xxlfp8.safetensors等模型文件的文件夹。

clip 文件夹:是存放SD3 模型文件text_encoders目录下的clip_g.safetensorsclip_l.safetensorst5xxl_fp8_e4m3fn.safetensorst5xxl_fp16.safetensors等模型文件的文件夹。

mv sd3_medium_incl_clips.safetensors sd3_medium_incl_clips_t5xxlfp8.safetensors sd3_medium.safetensors /home/cxh/ComfyUI/models/checkpoints

mv clip_g.safetensors clip_l.safetensors t5xxl_fp16.safetensors t5xxl_fp8_e4m3fn.safetensors /home/cxh/ComfyUI/models/clip

2.启动ComfyUI工作流可视化界面

1)进入comfuUI根目录,安装python包

pip install -r requirements.txt

2)启动ComfyUI可视化工具:

python main.py

3)修改模型文件./stable-diffusion-3-medium/comfy_example_workflows/sd3_medium_example_workflow_basic.json的第416行 ,去掉sdv3/2b_1024/sd3_medium.safetensors的相对目录为sd3_medium.safetensors

4)加载修改后的工作流配置文件:点击ComfyUILoad 按钮,选择修改后的sd3_medium_example_workflow_basic.json文件:

5)调整参数,生成图片:我们可以修改工作流中任意一个参数(最常修改的是Prompt提示词,包括正面和负面提示词),也可以点击右键增加工作流节点。最终参数调整确定之后,点击Queue Prompt按钮,开始排队生成图片:

改提示词后如下所示(a cat on the desk)

文章来源https://www.cnblogs.com/obullxl/p/18255038/NTopic2024061701

相关推荐
老刘说AI2 天前
类Sora模型:解锁动态视觉艺术的密码
人工智能·stable diffusion·架构·embedding
python-码博士2 天前
Stable Diffusion 3 / FLUX 类模型中的 Flow Matching:怎么用、怎么调、怎么避坑
stable diffusion
Rocky Ding*5 天前
Latent Consistency Models:一篇读懂扩散模型的少步生成核心基础知识
人工智能·深度学习·机器学习·ai作画·stable diffusion·aigc·ai-native
Asimov_Liu6 天前
Diffusion 与 Flow Matching 数学原理及其在 VLA Action 生成中的应用
stable diffusion·自动驾驶·具身智能·vla·flow matching
Rocky Ding*6 天前
Token Merging for Fast Stable Diffusion:一篇读懂 Stable Diffusion 的免训练加速机制
论文阅读·人工智能·深度学习·机器学习·stable diffusion·aigc·ai-native
yuguo.im7 天前
Mac M4 安装 sd-webui 踩坑全记录
macos·stable diffusion
hugo_im8 天前
Mac M4 安装 sd-webui 踩坑全记录
stable diffusion
一叶知秋dong9 天前
Stable diffusion 工作原理
人工智能·深度学习·stable diffusion
仰望尾迹云12 天前
灵感画廊入门:AI绘画零基础到精通
stable diffusion·ai绘画·图像生成
AI极客菌12 天前
AI绘画工具中,为什么专业玩家爱用Stable Diffusion,普通玩家却喜欢Midjourney?
大数据·人工智能·ai·ai作画·stable diffusion·aigc·midjourney