Stable Diffusion 3 大模型文生图实践

windows教程2024年最新Stable Diffusion本地化部署详细攻略,手把手教程(建议收藏!!)_stable diffusion 本地部署-CSDN博客

linux本地安装教程

1.前期准备工作

1)创建conda环境

conda create --name stable3 python=3.10

2)下载模型

git lfs install

git clone https://www.modelscope.cn/AI-ModelScope/stable-diffusion-3-medium.git stable-diffusion-3-medium

3)下载ComfyUI工作流可视化工具

git clone https://github.com/comfyanonymous/ComfyUI.git ComfyUI

4)在克隆好的项目models目录下放入大模型对应文件

checkpoints 文件夹:是存放SD3 模型文件根目录下的sd3_medium.safetensorssd3_medium_incl_clips.safetensorssd3_medium_incl_clips_t5xxlfp8.safetensors等模型文件的文件夹。

clip 文件夹:是存放SD3 模型文件text_encoders目录下的clip_g.safetensorsclip_l.safetensorst5xxl_fp8_e4m3fn.safetensorst5xxl_fp16.safetensors等模型文件的文件夹。

mv sd3_medium_incl_clips.safetensors sd3_medium_incl_clips_t5xxlfp8.safetensors sd3_medium.safetensors /home/cxh/ComfyUI/models/checkpoints

mv clip_g.safetensors clip_l.safetensors t5xxl_fp16.safetensors t5xxl_fp8_e4m3fn.safetensors /home/cxh/ComfyUI/models/clip

2.启动ComfyUI工作流可视化界面

1)进入comfuUI根目录,安装python包

pip install -r requirements.txt

2)启动ComfyUI可视化工具:

python main.py

3)修改模型文件./stable-diffusion-3-medium/comfy_example_workflows/sd3_medium_example_workflow_basic.json的第416行 ,去掉sdv3/2b_1024/sd3_medium.safetensors的相对目录为sd3_medium.safetensors

4)加载修改后的工作流配置文件:点击ComfyUILoad 按钮,选择修改后的sd3_medium_example_workflow_basic.json文件:

5)调整参数,生成图片:我们可以修改工作流中任意一个参数(最常修改的是Prompt提示词,包括正面和负面提示词),也可以点击右键增加工作流节点。最终参数调整确定之后,点击Queue Prompt按钮,开始排队生成图片:

改提示词后如下所示(a cat on the desk)

文章来源https://www.cnblogs.com/obullxl/p/18255038/NTopic2024061701

相关推荐
空白诗21 小时前
CANN ops-nn 算子解读:Stable Diffusion 图像生成中的 Conv2D 卷积实现
深度学习·计算机视觉·stable diffusion
学易1 天前
第十五节.别人的工作流,如何使用和调试(上)?(2类必现报错/缺失节点/缺失模型/思路/实操/通用调试步骤)
人工智能·ai作画·stable diffusion·报错·comfyui·缺失节点
心疼你的一切1 天前
基于CANN仓库算力手把手实现Stable Diffusion图像生成(附完整代码+流程图)
数据仓库·深度学习·stable diffusion·aigc·流程图·cann
Niuguangshuo2 天前
DALL-E 3:如何通过重构“文本描述“革新图像生成
人工智能·深度学习·计算机视觉·stable diffusion·重构·transformer
Niuguangshuo3 天前
深入解析 Stable Diffusion XL(SDXL):改进潜在扩散模型,高分辨率合成突破
stable diffusion
Niuguangshuo3 天前
深入解析Stable Diffusion基石——潜在扩散模型(LDMs)
人工智能·计算机视觉·stable diffusion
迈火3 天前
SD - Latent - Interposer:解锁Stable Diffusion潜在空间的创意工具
人工智能·gpt·计算机视觉·stable diffusion·aigc·语音识别·midjourney
迈火10 天前
Facerestore CF (Code Former):ComfyUI人脸修复的卓越解决方案
人工智能·gpt·计算机视觉·stable diffusion·aigc·语音识别·midjourney
重启编程之路11 天前
Stable Diffusion 参数记录
stable diffusion
孤狼warrior14 天前
图像生成 Stable Diffusion模型架构介绍及使用代码 附数据集批量获取
人工智能·python·深度学习·stable diffusion·cnn·transformer·stablediffusion