第二十节.探索新技术:如何自学SD3模型(上)(找官方资料/精读/下载/安装/3款工作流/效果测试)

早在 2024 年 6 月 12 日,StabilityAI 开源了最新的 SD3 模型的 2B 版本,而神奇的是,ComfyUI 早在 6 月 11 号就已经适配了 SD3!相比之下,SD WebUI 的更新速度却远远落后...

所以,如果想要尝试一些 AI 绘画领域的新技术,ComfyUI 是一个非常值得投入时间学习的工具。

这节课,我们就来讲一下 SD3 这个模型,以及官方开源的一堆内容,到底是做什么的?


🍉模型下载

首先是模型下载

1. 去哪里下载?

想要找官方模型,一般都去抱脸(huggingface) 找,网址(需要魔法):https://huggingface.co

2.怎么才能找到想要的模型呢?

3.怎么下载?

  • 点击顶部的"Files and Versions",可以看到本次开源的模型及相关资料

备注 :此模型的官方 StabilityAI 要求填写必要的个人信息 ,才可以下载(大部分模型是不需要的)。所以,在下载前,需要先自行填写信息注册并登录才可以看到 上面的完整的下载页面

  • 待看到完整的模型界面后,就可以通过点击模型右侧的下载图标,来下载该模型了(点击后,直接通过浏览器下载):
  • 如果网络不好,也可以从以下网盘下载模型及工作流:下载地址:

夸克网盘分享https://pan.quark.cn/s/5cc3824dd3b9#/list/share

这么多内容,是不是都需要下载呢?

我们继续往下看,这些模型分别是什么 ?这几个大模型,有什么不一样

🍉模型介绍

1. 官方说明

一般模型的介绍,还是建议大家看原作者的说明,网络上有很多二次分享的 UP 主,介绍的不一定有官方全面。

官方的这一段说明,其实已经介绍的比较详细了,先大概翻译下:

  • 这次的 SD3 模型 ,其实是比较大的,并且使用了 3 个 text encoder 编码器 ,分别是:clip_gclip_l ,和 t5xxl ,也就是 text_encoders 文件夹下的这些文件。

注意 :你会发现 t5xxl 有两个版本 ,分别是fp16 版本和 fp8 版本 ,这两个版本虽然体积相差一倍 ,但是实际效果差别不大 ,所以建议 直接使用fp8 版本就可以,比较省硬盘空间。

相关推荐
TaoMetrix2 小时前
TaoMetrix:AI 硬件创业公司如何做好原型制造
人工智能·制造
智圣新创012 小时前
面向多级组织协同场景 高校第二课堂一站式管理中枢落地全场景实操答疑
大数据·人工智能
cd_949217212 小时前
AI纹理和Substance Painter手绘纹理哪个更适合游戏资产制作?
人工智能·游戏·substance painter
sali-tec2 小时前
C# 基于OpenCv的视觉工作流-章106-差值追踪
图像处理·人工智能·opencv·算法·计算机视觉
Shockang2 小时前
用 AI 打造高品质 Web 应用
人工智能
l1258652 小时前
# LangGraph Memory机制深度解析:短期记忆与长期记忆的工程实践
前端·人工智能·python·langchain·bootstrap
手写码匠3 小时前
Dify 多 Agent 工具权限与安全沙箱实战:让智能体“有能力,但不越权“
人工智能·深度学习·算法·aigc
ZGIAI3 小时前
ZGI Skill Loop:给工具调用设边界
人工智能·架构
黎阳之光3 小时前
打破堆场感知黑盒:黎阳之光视频孪生,构建港口码头网格化透明管控新体系
大数据·人工智能·算法·安全·数字孪生
ZGIAI3 小时前
ZGI 工作区权限:用户为何看不到资源
人工智能·架构