00. pixelle-video + comfyUI 生成视频

pixelle-video + comfyUI 生成视频

工具

用到的工具,deepseek api-key 、 comfyUI 、 Pixelle-Video

deepseek api-key

在 https://platform.deepseek.com/api_keys 中创建自己的 api-keys,

comfyUI

  1. 下载解压 comfyUI 到 D 盘,例如:D:\ComfyUI_windows_portable_nvidia_cu126
  2. 双击 run_nvidia_gpu_fast_fp16_accumulation.bat 启动软件,启动后会自动打开浏览器窗口
  3. 将 D:\Pixelle-Video-v0.1.15-win64\Pixelle-Video\workflows\selfhost\image_flux.json 拖拽到弹出的浏览器页面中,然后会看到提示'缺少模型',接下来下载缺少的模型。
bash 复制代码
- `clip_l.safetensors`  
  下载页:<https://huggingface.co/comfyanonymous/flux_text_encoders/blob/main/clip_l.safetensors>
- `t5xxl_fp8_e4m3fn.safetensors`  
  下载页:<https://huggingface.co/comfyanonymous/flux_text_encoders/blob/main/t5xxl_fp8_e4m3fn.safetensors>
- `ae.safetensors`  
  仓库页:<https://huggingface.co/black-forest-labs/FLUX.1-dev/tree/main>
- `flux1-dev.safetensors`  
  仓库页:<https://huggingface.co/black-forest-labs/FLUX.1-dev/tree/main>

分别放到对应路径下:
- `D:\ComfyUI_windows_portable_nvidia_cu126\ComfyUI_windows_portable\ComfyUI\models\text_encoders\clip_l.safetensors`
- `D:\ComfyUI_windows_portable_nvidia_cu126\ComfyUI_windows_portable\ComfyUI\models\text_encoders\t5xxl_fp8_e4m3fn.safetensors`
- `D:\ComfyUI_windows_portable_nvidia_cu126\ComfyUI_windows_portable\ComfyUI\models\vae\ae.safetensors`
- `D:\ComfyUI_windows_portable_nvidia_cu126\ComfyUI_windows_portable\ComfyUI\models\diffusion_models\flux1-dev.safetensors`

Pixelle-Video

  1. 下载解压 Pixelle-Video 到 D 盘 例如:D:\Pixelle-Video-v0.1.15-win64
  2. 启动 comfyUI后在,双击 start.bat 启动 Pixelle 软件
  3. 配置系统配置,确保大预言模型可以测试通过;ComfuUI 可正常连接,如图:

4. 基础配置: * 视频脚本栏选择 ai 创作,文本输入:"做竹知了简单步骤";如图:

* 分镜数自定义; * 分镜模板中选择 生成插图;如图:

* 插图生成:选择 image_fluux.json - Selfhost,如图:

* 其他默认即可 * 点击生成视频,等待一会可以正常生成视频,如图:

FAQ

  1. comfyui 中 节点与模型的关系 节点是"功能模块",模型是"节点要加载和使用的数据文件"。

可以这样理解:

  • 节点:像零件或工序,比如 UNETLoader、VAELoader、CLIPTextEncode、KSampler
  • 模型:像原料或权重文件,比如 flux1-dev.safetensors、ae.safetensors、clip_l.safetensors

它们的关系是:

  • 有些节点负责"加载模型"

    • 例如 UNETLoader 读取扩散模型
    • VAELoader 读取 VAE
    • DualCLIPLoader 读取文本编码器
  • 有些节点负责"使用模型做事"

    • CLIPTextEncode 用文本编码模型把提示词变成向量
    • KSampler 用 UNet 模型采样生成潜空间图像
    • VAEDecode 用 VAE 把潜空间结果解码成图片
  • 缺节点:工作流里连"工具"都没有,通常会报"找不到节点/类"

  • 缺模型:节点在,但没有可加载的权重,通常会报"value not in list""model not found"

相关推荐
信马堂23 分钟前
WorkBuddy 接入第三方模型 API 全流程:安装与配置实录
人工智能·大模型·token·ai算力·workbuddy
朝朝辞暮i2 小时前
VLA 系统学习第 4 课:一个 Batch 进入神经网络后,模型到底是怎么“学会”的?
人工智能·python·神经网络·vla
IT古董2 小时前
《FDE前沿部署工程师实战教程》33 - Enterprise AI Observability:从Agent Trace到全链路智能运维
数据库·人工智能
xsd202411182 小时前
地网腐蚀AI识别算法全解析:从锈蚀图像到地下腐蚀快速定位
人工智能
oooost2 小时前
pytorch学习笔记2(transformer)
人工智能·机器学习
云杂项3 小时前
Exploring Model Inversion Attacks in the Black-box Setting(个人笔记)
人工智能
还卿一钵无情泪3 小时前
Unsloth 微调 构建自己的大模型 没有GPU也能微调
linux·开发语言·人工智能·python·大模型·nlp·unsloth
冬奇Lab4 小时前
LLM 驱动的自动化测试系列(06):移动端自动化(二)——DroidRun/Mobilerun 的角色级模型拆分
人工智能·测试
冬奇Lab4 小时前
一天一个开源项目(第230篇):HandRaw-Style —— 把 327 种手绘风格、165 种排版、36 种配色编号化,让 AI 画图不再每次都飘
人工智能·开源·资讯
罗西的思考4 小时前
从陶哲轩的访谈看:AI 数学研究方法论 & 给其它行业的启示
人工智能