Stable diffusion 3.0

Esser P, Kulal S, Blattmann A, et al. Scaling rectified flow transformers for high-resolution image synthesisC//Forty-first International Conference on Machine Learning. 2024.

https://github.com/huggingface/diffusers/releases/tag/v0.29.0

https://huggingface.co/stabilityai/stable-diffusion-3-medium-diffusers

https://huggingface.co/docs/diffusers/main/en/api/pipelines/stable_diffusion/stable_diffusion_3

实验过程

  1. 安装依赖:

    bash 复制代码
    pip install -U diffusers
    pip install transformers
    pip install sentencepiece
  2. 在 huggingface 上申请 SD3 并创建 Token,然后在终端进行登录:

  3. 随后就可以使用 demo 进行推理,第一次下载模型较慢,以后每次调用可以直接加载模型进行推理:

    需要注意的是,预训练模型会下载到 cache 文件夹下,如果想要更改位置,可以提前设置 HF_HOMEHUGGINFACE_HUB_CACHE 环境变量 [1](#1)

实验结果

a photo of an astronaut riding a horse on mars:

a photo of a Lamborghini racing on the track:

a photo of the night scenery of Chongqing:

a photo of the Great Wall:

A poster of Ferrari:

A wallpaper of NBA stars:


  1. Diffusers ↩︎
相关推荐
老刘说AI7 天前
类Sora模型:解锁动态视觉艺术的密码
人工智能·stable diffusion·架构·embedding
python-码博士7 天前
Stable Diffusion 3 / FLUX 类模型中的 Flow Matching:怎么用、怎么调、怎么避坑
stable diffusion
君为先-bey7 天前
LightningDiT----重建与生成:在潜在扩散模型中驯服优化困境
深度学习·扩散模型·视频生成·潜在扩散模型
君为先-bey7 天前
NWM----导航世界模型
transformer·扩散模型·导航·具身智能·世界模型·条件扩散
Rocky Ding*10 天前
Latent Consistency Models:一篇读懂扩散模型的少步生成核心基础知识
人工智能·深度学习·机器学习·ai作画·stable diffusion·aigc·ai-native
科研小刘带你玩学术10 天前
学术干货|DDT:解耦扩散Transformer实现高效高质量图像生成
扩散模型·图像生成·扩散transformer·解耦架构·条件编码器·速度解码器
机器学习之心11 天前
扩散模型数据增强 + Transformer-LSTM 回归预测:小样本场景下的工业级解决方案
回归·lstm·transformer·扩散模型
Asimov_Liu11 天前
Diffusion 与 Flow Matching 数学原理及其在 VLA Action 生成中的应用
stable diffusion·自动驾驶·具身智能·vla·flow matching
Rocky Ding*11 天前
Token Merging for Fast Stable Diffusion:一篇读懂 Stable Diffusion 的免训练加速机制
论文阅读·人工智能·深度学习·机器学习·stable diffusion·aigc·ai-native
yuguo.im12 天前
Mac M4 安装 sd-webui 踩坑全记录
macos·stable diffusion