1GB 显存跑声音克隆,LuxTTS 上了 AIGCPanel

5.4k stars 的轻量克隆模型,现在导入 AIGCPanel 点一下就能出声。

想在自己电脑上克隆一段声音,过去第一反应是先查查显卡够不够 8G。GitHub 上 5.4k stars 的 LuxTTS 把门槛砍到了 1GB:基于 ZipVoice 蒸馏到 4 步,速度冲到单卡 150 倍实时,输出还是大多数 TTS 模型给不了的 48kHz。这样的模型,差的只剩一个点开就用的入口。 顺带说下 AIGCPanel:一款开源的本地 AI 数字人桌面应用,这类模型它已经收了一列表。

⚡ 快得不像本地模型

1 分钟的音频,不到 1 秒就合成完,这是 LuxTTS 官方给出的 150 倍实时速度。没有独显也别急着走,它自带 int8 ONNX 版本,纯 CPU 也能跑出实时以上的速度;CUDA 下显存占用 1GB 以内,随便哪张本地显卡都装得下。底座是 k2-fsa 的 ZipVoice(123M 参数、flow matching 架构),LuxTTS 在它基础上蒸馏到 4 步采样,步数砍了,质量没塌。

🎙️ 48kHz,耳朵收货的那部分

大部分开源 TTS 停在 24kHz 输出,听着总有一层塑料感;LuxTTS 换上自定义 48kHz vocoder,高低频交叉融合,人声的齿音和气息都留住了。克隆门槛同样低:扔一段 3~10 秒的参考音频,whisper 自动听写文本,零样本出同款音色。官方 README 的说法是,克隆效果能跟规模大 10 倍的模型打平。不着急装,HuggingFace 在线试玩 先过耳朵。当 48k 的清晰度和 1GB 的显存要求同时出现,挑剔就显得有点不识好歹。

🖥️ 进 AIGCPanel,命令行可以关掉了

模型好用,部署难搞,这是本地模型劝退人的老问题。AIGCPanel 把 LuxTTS 打成了一键运行包:官网下载 导入模型页,声音合成、声音克隆两个入口直接打开,采样步数、T-Shift、语速、随机种子全是表单填空。设备也不用你操心:有 CUDA 用 CUDA,苹果芯片走 MPS,啥都没有自动切 CPU 的 ONNX,长文本自动分段再拼接,全程不碰一行命令。

🛠️ 不止一个声音模型

AIGCPanel 本身是个一站式 AI 数字人桌面应用:声音合成与克隆之外,自带独立的声音识别、数字人视频换口型、25+ 个音视频处理工具箱,以及把它们串起来的可视化工作流。LuxTTS 只是模型列表里新加的那一个。

其他要点:

  • Apache-2.0 开源,中英文双语支持
  • 社区已有 Gradio、ComfyUI 节点、ONNX、FalAI 托管等多种玩法
  • HuggingFace 上 38 个 Space 在用它,月下载近 6,000 次

没显卡照样出声,有显卡更快,你那张吃灰的显卡也终于有活干了。 最想先克隆谁的声音?你自己的、家里老人的叮嘱,还是已获授权的音色?评论区聊聊,记得只克隆自己或已获授权的声音,说不定下一期就出教程。

相关推荐
TTATTC1 小时前
从 proxy_pass 末尾斜杠到 WebAssembly 预压缩:深挖 Nginx 生产环境四大高频踩坑点
docker·开源
TTATTC1 小时前
消灭 AI 编程助手的幻觉代码:拆解 Google 官方文档 MCP 与三大云厂商知识检索架构
docker·开源
LDG_AGI2 小时前
AIStore免费AI公开课-智能体篇(二十一):SillyTavern上架AIStore,开源版Character AI,开箱即用
人工智能·开源
迷迭香yy3 小时前
港股通标的数据管道实战从gphk列表到港股行情的落地细节 IG50免费开源股票数据API接口
开源
长弓三石3 小时前
给企业级智能体装上「安全阀」:开源Harness平台BizBuddy 的内容安全与合规落地
安全·开源
python与大数据分析3 小时前
CNN+Transformer+Mamba 16 模型全景对比|DeepGlobe 遥感土地覆盖分割最全开源工程
cnn·开源·transformer
万物智能信息科技3 小时前
人体感应芯片PIR模块驱动开发—【万物智能之开源鸿蒙OpenHarmony系统实战开发系列教程】
驱动开发·嵌入式硬件·华为·开源·harmonyos
死磕音视频4 小时前
自己搭一个“私人版 ChatGPT“:Open WebUI 一条命令部署 + 接入本地/云端模型保姆级教程
docker·开源·open webui·大模型部署