第二十节.探索新技术:如何自学SD3模型(上)(找官方资料/精读/下载/安装/3款工作流/效果测试)

早在 2024 年 6 月 12 日,StabilityAI 开源了最新的 SD3 模型的 2B 版本,而神奇的是,ComfyUI 早在 6 月 11 号就已经适配了 SD3!相比之下,SD WebUI 的更新速度却远远落后...

所以,如果想要尝试一些 AI 绘画领域的新技术,ComfyUI 是一个非常值得投入时间学习的工具。

这节课,我们就来讲一下 SD3 这个模型,以及官方开源的一堆内容,到底是做什么的?


🍉模型下载

首先是模型下载

1. 去哪里下载?

想要找官方模型,一般都去抱脸(huggingface) 找,网址(需要魔法):https://huggingface.co

2.怎么才能找到想要的模型呢?

3.怎么下载?

  • 点击顶部的"Files and Versions",可以看到本次开源的模型及相关资料

备注 :此模型的官方 StabilityAI 要求填写必要的个人信息 ,才可以下载(大部分模型是不需要的)。所以,在下载前,需要先自行填写信息注册并登录才可以看到 上面的完整的下载页面

  • 待看到完整的模型界面后,就可以通过点击模型右侧的下载图标,来下载该模型了(点击后,直接通过浏览器下载):
  • 如果网络不好,也可以从以下网盘下载模型及工作流:下载地址:

夸克网盘分享https://pan.quark.cn/s/5cc3824dd3b9#/list/share

这么多内容,是不是都需要下载呢?

我们继续往下看,这些模型分别是什么 ?这几个大模型,有什么不一样

🍉模型介绍

1. 官方说明

一般模型的介绍,还是建议大家看原作者的说明,网络上有很多二次分享的 UP 主,介绍的不一定有官方全面。

官方的这一段说明,其实已经介绍的比较详细了,先大概翻译下:

  • 这次的 SD3 模型 ,其实是比较大的,并且使用了 3 个 text encoder 编码器 ,分别是:clip_gclip_l ,和 t5xxl ,也就是 text_encoders 文件夹下的这些文件。

注意 :你会发现 t5xxl 有两个版本 ,分别是fp16 版本和 fp8 版本 ,这两个版本虽然体积相差一倍 ,但是实际效果差别不大 ,所以建议 直接使用fp8 版本就可以,比较省硬盘空间。

相关推荐
云烟成雨TD几秒前
Spring AI Alibaba 1.x 系列【40】多智能体核心模式 - 智能体作为工具(Agent as Tool)
java·人工智能·spring
大龄程序员狗哥几秒前
第33篇:超参数调优实战——用网格搜索与随机搜索为模型“精调”(项目实战)
人工智能
卷Java8 分钟前
Agent架构设计:规划器、工具、记忆、评估器如何协同工作
人工智能
Claw开发者11 分钟前
Hermes 接 LiteLLM 缓存不生效踩坑记录
人工智能·agent
齿轮14 分钟前
Agent 管理范式演进:从管一句话到管整个系统
人工智能·后端
AIGCmagic社区14 分钟前
AI多模态理论基础高频考点
人工智能
珹洺22 分钟前
C++AI多模型聊天系统(三)AI多模型(豆包/Kimi/千问)接入与实现
开发语言·c++·人工智能
啷咯哩咯啷22 分钟前
纯本地运行的私人文档知识库
前端·人工智能·后端
FrontAI22 分钟前
深入浅出 LangGraph —— 第7章:持久化与检查点机制
人工智能·langchain·ai agent·langgraph
探物 AI29 分钟前
【感知·车道线检测】UFLDv2车道线检测与车道偏离预警(LDWS)实战
人工智能·算法·目标检测·计算机视觉