LatentSync 开源数字人视频对口型 懒人整合包

LatentSync

github地址:github.com/bytedance/L...

LatentSync ‌ 是开源唇形同步(Lip Sync)框架,基于 ‌**Stable Diffusion 的潜在扩散模型**‌,实现从音频到高分辨率视频唇部运动的端到端生成。它无需依赖中间运动表示(如 2D 特征点或 3D 人脸模型),直接在潜在空间中建模音频与视觉的跨模态关联,显著提升生成质量与效率。

核心特点

  • ‌**端到端架构**‌:输入音频,直接输出与之同步的唇部视频帧,简化传统多阶段流程。
  • ‌高分辨率支持 ‌:支持最高 ‌512×512‌ 分辨率视频生成,1.6 版本已大幅改善模糊问题。
  • ‌低显存需求 ‌:1.6 版本最低仅需 ‌8GB 显存‌,可在消费级 GPU 上运行。
  • ‌多语言优化‌:特别针对中文语音处理效果进行优化。
  • ‌广泛适用性‌:支持真人视频、动漫角色、虚拟主播等多种应用场景

本文懒人包为1.5版本

点击启动程序.bat,会弹出一个终端

等待终端执行加载,会自动弹出webui网页

选择视频,和选择对应的语音文件,点击生成视频

终端可以看到处理进度生成后右侧有视频结果,可以预览和下载

Tips

点击此处 网盘下载

建议显存8GB及以上使用

已开启送

相关推荐
AlbertZein4 天前
Step-5-Preview 上手实测:3D 游戏、金融分析、网页设计一次跑完
人工智能·aigc
AIGCmagic社区4 天前
文档智能专题:小模型后训练怎么选样本?PaddleOCR-VL-1.6按三类弱点挖掘
人工智能·aigc·文档智能
AIGCmagic社区4 天前
文档智能专题:HunyuanOCR-1.5用DFlash把整页解码压到1.4秒
人工智能·aigc·文档智能
小虎AI生活4 天前
腾讯开源了一个项目,让 AI 直接用你已经登录好的浏览器
aigc·ai编程
plainGeekDev4 天前
Harness 实战:用 Android 登录模块搭一套可靠的 Agent 开发环境
aigc·ai编程·claude
全栈弄潮儿4 天前
周复盘:把 AI 当实习生,还是当工程搭档?
aigc·openai·ai编程
程序员清风4 天前
系统架构设计:模型服务、业务服务与知识库如何拆分
人工智能·ai·架构·aigc
倔强的石头_4 天前
我给 WorkBuddy 设了个闹钟:每天上午十点半,一份 AI 日报自动送进微信
aigc
李白客4 天前
向量数据库怎么选:RAG 项目最该比较的 8 个维度(深度拆解)
数据库·aigc
へ蟲児.5 天前
国内适合设计师的AIGC学习平台哪个好?能贴合商业设计实战
aigc