如何在算家云搭建ControlNext-SVD(视频生成)

一、ControlNext-SVD-V2简介

ControlNext-SVD-V2 是 ControlNext-SVD 的 V2 模型。其中 ControlNext-SVD 模型是通过添加 ControlNet 来控制 Stable Video Diffusion (SVD),使用高分辨率视频训练,具体来说它可以将图片生成与指定姿态相匹配的高质量视频。

与前一个版本相比具有以下特点:

  • 收集了一个更高质量、更高分辨率的数据集来训练模型。
  • 将训练和推理批处理帧扩展到 24 个。
  • 将视频高度和宽度扩展到 576 × 1024 的分辨率。
  • 采用 fp32。
  • 在相关之后的推理中,采用姿势对齐。

要求:

显存 >=16G

CUDA 版本 >=11.8

二、模型搭建流程

1. 创建容器镜像

  • 进入算家云平台的"应用社区",点击搜索或者找到"ControlNext-SVD",点击"创建应用",即可进入"租用实例"页面
  • 点击进入之后选择3090 卡(可根据显存自己选择),点击创建即可创建实例
  • 也可以点击"专业创建"自己自主选择 GPU 型号、计费方式等配置

2.启动项目

  • 实例创建成功之后,点击"项目实例"再点击"WebShell"开启终端(小黑屏)
  • 进入终端后复制以下命令输入到终端即可开始运行:

    conda activate comfyui
    cd ComfyUI
    python main.py

出现下图即表示模型开始运行:

3.开启外部访问

  • 返回"项目实例"列表,选择并点击对应实例的"开放端口"操作
  • 有两种访问方式可以选择:本地私密访问、对外开放端口
  • 如果选择ssh工具访问,登录之后填写各选项,点击"开启代理"
  • 如果选择对外开放端口请看下图:

点击后访问的网址就已经复制到剪切板

4.访问获取的地址,开始使用

  • 将访问网址复制到新网页即可开始 ui 界面的使用

以上就是在算家云搭建 ControlNext-SVD的流程,具体使用方式可进入算家云应用社区查看该模型的使用说明。

点击算家云-应用社区,选择模型,一键开启 AI 之旅!

相关推荐
AI量化投资实验室17 分钟前
金融量化智能体,如何开发一个有效的策略?
人工智能·金融
九章云极AladdinEdu24 分钟前
GPU SIMT架构的极限压榨:PTX汇编指令级并行优化实践
汇编·人工智能·pytorch·python·深度学习·架构·gpu算力
数智大号25 分钟前
浪潮云边协同:赋能云计算变革的强力引擎
人工智能
胡玉洋1 小时前
从新手到高手:全面解析 AI 时代的「魔法咒语」——Prompt
人工智能·ai·prompt·transformer·协议
是店小二呀1 小时前
Trae 插件 Builder 模式:从 0 到 1 开发天气查询小程序,解锁 AI 编程新体验
人工智能·ai编程·trae
kyle~1 小时前
深度学习框架---TensorFlow概览
人工智能·深度学习·tensorflow
CodeJourney.2 小时前
ChemBlender:科研绘图创新解决方案
数据库·人工智能·信息可视化·excel
电鱼智能的电小鱼2 小时前
产线视觉检测设备技术方案:基于EFISH-SCB-RK3588/SAIL-RK3588的国产化替代赛扬N100/N150全场景技术解析
linux·人工智能·嵌入式硬件·计算机视觉·视觉检测·实时音视频
妄想成为master2 小时前
计算机视觉----基于锚点的车道线检测、从Line-CNN到CLRNet到CLRKDNet 本文所提算法Line-CNN 后续会更新以下全部算法
人工智能·计算机视觉·车道线检测
夜幕龙2 小时前
LeRobot 项目部署运行逻辑(七)—— ACT 在 Mobile ALOHA 训练与部署
人工智能·深度学习·机器学习