LatentSync 开源数字人视频对口型 懒人整合包

LatentSync

github地址:github.com/bytedance/L...

LatentSync ‌ 是开源唇形同步(Lip Sync)框架,基于 ‌**Stable Diffusion 的潜在扩散模型**‌,实现从音频到高分辨率视频唇部运动的端到端生成。它无需依赖中间运动表示(如 2D 特征点或 3D 人脸模型),直接在潜在空间中建模音频与视觉的跨模态关联,显著提升生成质量与效率。

核心特点

  • ‌**端到端架构**‌:输入音频,直接输出与之同步的唇部视频帧,简化传统多阶段流程。
  • ‌高分辨率支持 ‌:支持最高 ‌512×512‌ 分辨率视频生成,1.6 版本已大幅改善模糊问题。
  • ‌低显存需求 ‌:1.6 版本最低仅需 ‌8GB 显存‌,可在消费级 GPU 上运行。
  • ‌多语言优化‌:特别针对中文语音处理效果进行优化。
  • ‌广泛适用性‌:支持真人视频、动漫角色、虚拟主播等多种应用场景

本文懒人包为1.5版本

点击启动程序.bat,会弹出一个终端

等待终端执行加载,会自动弹出webui网页

选择视频,和选择对应的语音文件,点击生成视频

终端可以看到处理进度生成后右侧有视频结果,可以预览和下载

Tips

点击此处 网盘下载

建议显存8GB及以上使用

已开启送

相关推荐
小虎AI生活6 小时前
ChatGPT for Chrome 扩展升级解读:从「你复制给它」到「替你操作浏览器」(附三步上手流程)
aigc·ai编程
wangruofeng6 小时前
GPT-6.1 辅助我半天完成架构升级:GPT Image 提示词网站 9K+ 图片迁入 Cloudflare R2
aigc·ai编程
Fang_YuanAI12 小时前
AIGC导演思维训练:从动机到镜头语言的系统方法
aigc·ai视频·ai漫剧·ai短剧·aigc创作·生成式视听语言·ai导演思维
林墨聊AIGC14 小时前
AI分镜模板:一键生成高效短剧视觉流程
人工智能·ai作画·aigc·音视频·ai写作
敲代码的小霖15 小时前
novanovastudio 开源漫剧短剧无限画布项目发布v0.1.9版本 3D导演台开源
ai·aigc·开源软件·无限画布·3d导演台
技灵AI15 小时前
AI 奶茶广告分镜提示词怎么写:从参考图到芒果奶茶广告片(附全文)
人工智能·prompt·aigc
阿明副业观察17 小时前
AI短剧分镜秘籍:从零到电影级视觉冲击
大数据·人工智能·aigc·音视频·ai写作
远航计算机19 小时前
AI 答案里的链接,为什么开始分等级了?
大数据·人工智能·爬虫·aigc
SkyWalking中文站19 小时前
从模型输入到文件变更:追踪 AgentCore 上的 LangGraph Agent
langchain·aigc·ai编程
SkyWalking中文站21 小时前
LLM 回答得好不好?SkyWalking 用 LLM-as-Judge 评估线上回答
后端·aigc