Stable Diffusion 3 大模型文生图实践

windows教程2024年最新Stable Diffusion本地化部署详细攻略,手把手教程(建议收藏!!)_stable diffusion 本地部署-CSDN博客

linux本地安装教程

1.前期准备工作

1)创建conda环境

conda create --name stable3 python=3.10

2)下载模型

git lfs install

git clone https://www.modelscope.cn/AI-ModelScope/stable-diffusion-3-medium.git stable-diffusion-3-medium

3)下载ComfyUI工作流可视化工具

git clone https://github.com/comfyanonymous/ComfyUI.git ComfyUI

4)在克隆好的项目models目录下放入大模型对应文件

checkpoints 文件夹:是存放SD3 模型文件根目录下的sd3_medium.safetensorssd3_medium_incl_clips.safetensorssd3_medium_incl_clips_t5xxlfp8.safetensors等模型文件的文件夹。

clip 文件夹:是存放SD3 模型文件text_encoders目录下的clip_g.safetensorsclip_l.safetensorst5xxl_fp8_e4m3fn.safetensorst5xxl_fp16.safetensors等模型文件的文件夹。

mv sd3_medium_incl_clips.safetensors sd3_medium_incl_clips_t5xxlfp8.safetensors sd3_medium.safetensors /home/cxh/ComfyUI/models/checkpoints

mv clip_g.safetensors clip_l.safetensors t5xxl_fp16.safetensors t5xxl_fp8_e4m3fn.safetensors /home/cxh/ComfyUI/models/clip

2.启动ComfyUI工作流可视化界面

1)进入comfuUI根目录,安装python包

pip install -r requirements.txt

2)启动ComfyUI可视化工具:

python main.py

3)修改模型文件./stable-diffusion-3-medium/comfy_example_workflows/sd3_medium_example_workflow_basic.json的第416行 ,去掉sdv3/2b_1024/sd3_medium.safetensors的相对目录为sd3_medium.safetensors

4)加载修改后的工作流配置文件:点击ComfyUILoad 按钮,选择修改后的sd3_medium_example_workflow_basic.json文件:

5)调整参数,生成图片:我们可以修改工作流中任意一个参数(最常修改的是Prompt提示词,包括正面和负面提示词),也可以点击右键增加工作流节点。最终参数调整确定之后,点击Queue Prompt按钮,开始排队生成图片:

改提示词后如下所示(a cat on the desk)

文章来源https://www.cnblogs.com/obullxl/p/18255038/NTopic2024061701

相关推荐
春末的南方城市9 小时前
港科大&快手提出统一上下文视频编辑 UNIC,各种视频编辑任务一网打尽,还可进行多项任务组合!
人工智能·计算机视觉·stable diffusion·aigc·transformer
多恩Stone4 天前
【Stable Diffusion 1.5 】在 Unet 中每个 Cross Attention 块中的张量变化过程
stable diffusion
今夕节度使4 天前
ARM架构推理Stable Diffusiond
stable diffusion
远瞻。9 天前
【论文精读】2024 ECCV--MGLD-VSR现实世界视频超分辨率(RealWorld VSR)
人工智能·算法·stable diffusion·音视频·超分辨率重建
远瞻。9 天前
【论文精读】2024 CVPR--Upscale-A-Video现实世界视频超分辨率(RealWorld VSR)
论文阅读·人工智能·算法·stable diffusion·音视频·超分辨率重建
乱世刀疤10 天前
AI绘画:手把手带你Stable Diffusion从入门到精通(系列教程)
人工智能·ai作画·stable diffusion
layneyao11 天前
从0到1搭建AI绘画模型:Stable Diffusion微调全流程避坑指南
ai作画·stable diffusion
远瞻。12 天前
【论文精读】2024 arXiv --VEnhancer现实世界视频超分辨率(RealWorld VSR)
论文阅读·stable diffusion·音视频·超分辨率重建
立秋678914 天前
深入理解Diffusers: 从基础到Stable Diffusion
stable diffusion
Liudef0614 天前
Stable Diffusion底模对应的VAE推荐
stable diffusion