文生视频模型总表

文章目录

一、开源(可本地ComfyUI/Diffusers部署,N卡CUDA)

1. MiniMax H3(Hailuo 海螺3.0)

  • 特点:全模态统一模型,原生音视频一起生成,24fps;强人物动态、镜头运镜、角色一致性;支持首末帧、多参考图/参考视频锁定角色
  • 显存门槛:12G起步,8G可FP8剪枝+全offload,24G可跑2K再生
  • 短板:访存压力巨大,推理慢,模型体积大
  • 许可:权重开源,商用看协议

2. Wan2.1 / Wan2.2(阿里万相)【新手首选】

  • 版本:1.3B(8G显存入门)、14B(高画质24G+);T2V / I2V,支持视频内渲染文字
  • 特点:生态最成熟,Apache2.0允许商用 ;画面干净稳定;无原生音频,音频需要后期叠加
  • 分辨率:480p~720p,单段5s左右
  • 适用:大量迭代试镜头、写实短片、低成本本地批量生成

3. LTX-Video(Lightricks LTX2.3 / LTX2.5)

  • 亮点:原生音视频联合生成,推理速度很快,支持4K;轻量蒸馏版本速度优势巨大
  • 架构:Video DiT;T2V/I2V
  • 显存:10G+可跑720p;适合需要音画一体、快速出片场景

4. CogVideoX(清华智谱)

  • 老牌标杆,CogVideoX-5B、CogVideoX-10B;国内早期开源文生视频
  • 特点:中文理解好,生态完善,ComfyUI节点齐全;人物容易手部崩坏,动态上限弱于Wan/H3
  • 显存:5B版本10G可跑,适合学习基线

5. HunyuanVideo 混元视频(腾讯)

  • HunyuanVideo 8.3B;T2V+I2V,720p
  • 优势:中文提示词理解强,人物稳定性不错,官方ComfyUI支持完善
  • 许可:社区许可,商用有约束

6. Mochi(Genmo)

  • 10B,DiT架构;长时序,画面质感柔和;显存需求高(≥20G)
  • 定位:艺术向、电影感短片

7. Open-Sora / Open-Sora Plan

  • 主要是研究项目,训练框架开源;推理权重版本多,工程化不如Wan/Hunyuan;适合科研二次开发,不推荐普通创作

8. Allegro(Rhymes AI)

  • 2.8B,Apache2.0;720p,6s片段;轻量DiT,适合小显卡做动态测试

二、闭源在线模型(不能本地部署,仅网页/API调用)

  1. Pika Labs(Pika 2.5):动画、风格化最强,艺术短片、特效镜头天花板;写实略弱
  2. Runway Gen-4:电影镜头、Motion Brush局部动画控制,影视广告专业向
  3. Kling可灵AI(快手):国内平台,强写实、中文提示词,电商/短剧常用
  4. Vidu生数科技:物理仿真强,动画、写实双优
  5. Google Veo:长时序、物理一致性强,海外API
  6. OpenAI Sora:长视频、物理模拟顶尖;目前已停止面向普通用户开放

选型速查表(本地部署优先)

模型 显存下限 原生音频 最强优势 短板
Wan2.1 1.3B 8G ❌ 门槛最低、稳定、商用友好 无原生音频
MiniMax H3 12G ✅ 人物动态、运镜、音画一体 吃显存、推理慢
LTX 2.5 10G ✅ 生成速度快,原生音视频 复杂人物细节一般
CogVideoX-5B 10G ❌ 中文好,生态成熟 手部容易崩坏
HunyuanVideo 8.3B 12G ❌ 中文理解强,人物稳定 商用协议受限
相关推荐
TechVoyager_82464 小时前
多形态输入与12 通道音频:IT6615 这颗 HDMI 发射器的接口宽度
音视频·音频芯片·芯片选型·视频发射
Raymond16884 小时前
AI配音工具长文本合成架构技术解析:全局音色锚定与声学状态跟踪
人工智能·架构·实时互动·视觉检测·音视频·语音识别
hflmwl810 小时前
Wise Data Recovery找回误删的文档照片音乐和视频
音视频·datarecovery·找回误删的文档照片音乐和视频·找回误删的文档照片音乐视频
技灵AI10 小时前
AI 视频转场提示词怎么写?让前后画面衔接更自然
人工智能·prompt·aigc·音视频
youandyouyou12 小时前
跨区培训的屏幕共享怎么做才稳?同屏同步与弱网优化实践
音视频·网络通信
开开心心就好12 小时前
课堂随机点名工具,绿色版免安装双击即用
java·服务器·前端·ffmpeg·音视频·perl·symfony
美狐美颜SDK开放平台13 小时前
直播APP集成美颜SDK,如何梳理第三方组件的数据权限?
开发语言·人工智能·深度学习·音视频·第三方美颜sdk
l143723326714 小时前
批量视频硬字幕擦除多少钱?影响报价的关键因素全解析
音视频
重生六道14 小时前
B站视频时长统计:一段JS脚本搞定分P/合集总时长(附倍速计算)
开发语言·javascript·音视频
音视频牛哥14 小时前
不换摄像机,也能接入 WebRTC?SmartMediaKit RTSP/RTMP 转 WHIP 技术实践
音视频·webrtc·smartmediakit·rtsp转whip·rtmp转whip·whip推流·rtsp转webrtc播放