AI绘图:开源Stable Diffusion 3 ComfyUI下载安装方法

AI绘图:开源Stable Diffusion 3 ComfyUI下载安装方法

安装好后软件运行效果:

第一步:安装ComfyUI的最新版本

1、请从下面的地址下载压缩包,并解压缩到硬盘
https://github.com/comfyanonymous/ComfyUI/releases/download/latest/ComfyUI_windows_portable_nvidia_cu121_or_cpu.7z

2、进入安装好的目录,运行run_nvidia_gpu.bat,接下来系统会自动下载必需的文件

3、之后会自动弹出如下的网页,说明安装成功

注意:这个后台窗口要保持开启,否则ComfyUI无法正常使用

第二步:下载SD3模型和文本编码器

1、进入SD3的抱抱脸页面:
国外下载地址:

https://huggingface.co/stabilityai/stable-diffusion-3-medium/tree/main

国内下载地址:

百度网盘模型下载链接 :
https://pan.baidu.com/s/1gRA3ezoP-rUbLAYM07lU6Q

提取码:5gw6

夸克网盘分享下载地址:
https://pan.quark.cn/s/6ab1885c2e51#/list/share

由于huggingface.co下载不佳,

可搜索国内下载地址

2、下载主要模型,全部下载大约有20G

主要包括三个文件:

sd3_medium.safetensors

sd3_medium_incl_clips.safetensors

sd3_medium_incl_clips_t5xxlfp8.safetensors

3、到text_encoders目录里,下载文本编码器,全部下载大约有16G

主要包括四个文件:

clip_g.safetensors

clip_l.safetensors

t5xxl_fp16.safetensors

t5xxl_fp8_e4m3fn.safetensors

第三步:把模型和编码器放入ComfyUI的对应目录

1、下载后的模型需要放到 \ComfyUI\models\checkpoints 文件夹里

sd3_medium.safetensors

sd3_medium_incl_clips.safetensors

sd3_medium_incl_clips_t5xxlfp8.safetensors

2、下载后的模型文本编码器需要放到 \ComfyUI\models\clip 文件夹里

clip_g.safetensors

clip_l.safetensors

t5xxl_fp16.safetensors

t5xxl_fp8_e4m3fn.safetensors

第四步:将官方提供的json流程导入ComfyUI

1、到comfy_example_workflows目录里,下载工作流,建议全部下载

主要包括三个文件:

sd3_medium_example_workflow_basic.json

sd3_medium_example_workflow_multi_prompt.json

sd3_medium_example_workflow_upscaling.json

2、将下载的json文件,根据需要拖到ComfyUI的界面,就会出现相应的工作流

第五步:开始使用**

你需要先选择正确的模型以及文本编码器,并输入"正面提示词"和"负面提示词",然后点击右方的"Queue Prompt"按钮,即可开始绘画!

1、选择模型:Load Checkpoint

ckpt_name:sd3_medium.safetensors

2、选择文本编码器: TripleCLIPLoader

clip_name1:clip_g.safetensors

clip_name2:clip_l.safetensors

clip_name3:t5xxl_fp16.safetensors

3 填写正面提示词、负面提示词

正面提示词:

beautiful model-gired redhead girl,wearing gunglasses,...

提示词:《古墓丽影》的lora croft站在玛雅神庙前,上衣写着"LORA"几个字母,她20岁,红色头发,单马尾辫,她面向镜头,电影胶片画质

百度翻译转换为英文句子:

Lora croft from Tomb Raider stands in front of the Mayan temple, with the letters "LORA" written on her shirt. She is 20 years old, with red hair and a single ponytail. She faces the camera and the film quality is excellent

目前开源的 SD3 Medium 模型的简单说明:

工作原理Stable Diffusion(简称sd软件)

运用了降噪扩散整合采样"一次生成即逼真",

通过引导天然地噪声信号从模糊图像中获取逐次积累的细节,

逐渐减少随机噪声以重建原始高分辨率图像。

1)基础模型 1+3:

主模型:sd3_medium

文本编码器:clip_g、clip_l、t5xxl_fp16/t5xxl_fp8_e4m3fn

使用:在 ComfyUI 中使用时需分别通过模型加载器和CLIP加载器加载,t5xxl是非必要项

2)融合了文本编码器的模型 2 个:

无T5:sd3_medium_incl_clips = sd3_medium + clip_g + clip_l

有T5:sd3_medium_incl_clips_t5xxlfp8 = sd3_medium + clip_g + clip_l + t5xxl_fp16/t5xxl_fp8_e4m3fn

使用:在 ComfyUI 中使用时直接用模型加载器加载主模型即可,无需CLIP加载器(如同之前的SD1.5或SDXL的基础工作流)

开始操作前,请确保你有"畅通"的网络

如果不畅通,需下载国内地址

来简单测试一下

本blog地址:https://blog.csdn.net/hsg77

相关推荐
余生H2 分钟前
Brain.js(十):GRUTimeStep 实战教程 - 股市指数预测以及与 LSTMTimeStep 对比
javascript·人工智能·深度学习·神经网络·webml·brain.js
小熊bdg3 分钟前
3D 生成重建034-NerfDiff借助扩散模型直接生成nerf
人工智能·3d·aigc
aiblog3 分钟前
能不能用一句话或者简洁地凝练深度学习的本质和精髓?
人工智能·深度学习·ai·deep learning
芜湖_6 分钟前
从〇开始深度学习(番外)——混淆矩阵(Confusion Matrix)
人工智能·深度学习·混淆矩阵
小熊bdg8 分钟前
3D 生成重建035-DiffRF直接生成nerf
人工智能·3d·aigc
Milk夜雨1 小时前
人工智能与大数据:从零开始学习的教学指南
大数据·人工智能·学习
AIBigModel2 小时前
专访李飞飞:从2D到3D,AI将为我们带来哪些改变?
人工智能·3d
weixin_404551242 小时前
huggingface NLP-微调一个预训练模型
人工智能·自然语言处理·微调·nlp·huggingface·fine-train
我的龙呢2 小时前
Flash Attention
人工智能·flash attention
云樱梦海2 小时前
Coconut:探索大语言模型的连续思维链推理能力
人工智能·coconut