【ComfyUI+视频生成】LTX-Video 快速生成视频 + 图生视频 (生成4秒 3090需要20秒)

代码:https://github.com/Lightricks/LTX-Video

comfyui官方工作流:https://comfyanonymous.github.io/ComfyUI_examples/ltxv/

官方模型:https://huggingface.co/Lightricks/LTX-Video

工作流下载:https://pan.baidu.com/s/1g9Yx78ddwcTt2tNvLihk6g?pwd=1212

工作流:

简介

来自 Lightricks的开创性视频生成模型LTX Video (LTXV)。LTXV是一个仅有20亿参数 (2B)的基于DiT架构的视频生成模型,能够实时生成高质量视频。它以768x512的分辨率,每秒24帧的速度生成视频,最多生成4秒,支持文生图,图生图。

另外,LTX Video 基于开发人员的反馈和真实世界用例构建,可以提供自然逼真的结果。该模型做了高级定制化设计,可以流畅地集成各种外部工具,从而轻松地增强工作流。

在生成过程中,LTX Video 最大程度减少了闪烁和伪影,创建出具有出色细节和清晰度的高保真视频。每一帧都在精心制作下呈现清晰锐利、栩栩如生,符合用户的视觉效果。

最后,LTX Video 实现了无缝的跨帧一致性,从角色到环境,可以保持连贯的视觉效果,将每个细节整合在一起。

代码实现基础

扩展阅读

机器之心 :RTX 4090可跑、完全开源,最快视频生成模型问世,实测一言难尽

小小将 :实时视频生成模型LTXV来了:生成5s时长的768x512视频只要4s!

破狼:超高效视频模型!仅需4秒生成5秒24帧高质量视频,运动一致性且消除物体变形

模型国内镜像下载

https://hf-mirror.com/

bash 复制代码
export HF_ENDPOINT=https://hf-mirror.com  # linux
# $env:HF_ENDPOINT = "https://hf-mirror.com"  # windows
huggingface-cli download --resume-download Lightricks/LTX-Video  --local-dir  ./models/checkpoints
相关推荐
chenchao_shenzhen2 小时前
RK3568嵌入式音视频硬件编解码4K 60帧 rkmpp FFmpeg7.1 音视频开发
ffmpeg·音视频·rk3588·音视频开发·嵌入式开发·瑞芯微rk3568·硬件编解码
音视频牛哥2 小时前
H.264、H.265 到 H.266:编码标准演进、RTSP支持与实时视频系统实战
音视频·大牛直播sdk·h.266编码·rtmp h.266·rtsp h.266·h.266解码·h.265和h.266差异
从后端到QT10 小时前
RTCP详解
服务器·音视频·实时音视频·rctp
ECC&SM911 小时前
Video_AVI_Packet(2)
笔记·音视频
_多拉不懂A梦13 小时前
FFmepg源码系列-avformat_open_input()
c++·ffmpeg·音视频
iphone1081 天前
视频创作者如何保护自己的视频内容版权?
音视频·加密软件·视频加密·加密技术·视频安全·保护原创·知识原创
音视频牛哥1 天前
Android平台RTSP播放器选型指南:从开源方案到跨平台低延迟专业SDK
android·人工智能·音视频·大牛直播sdk·android rtsp播放器·安卓rtsp播放器·安卓播放rtsp流
火山引擎边缘云2 天前
基于 DiT 大模型与字体级分割的视频字幕无痕擦除方案,助力短剧出海
音视频
欣赏你流浪^2 天前
物联网智能感知进阶:基于YOLO的琏雾系统视频分析
物联网·yolo·音视频
m0_747124532 天前
视频输入输出模块介绍和示例
linux·音视频