audiocraft - 免费文本转音乐、AI音乐生成、AI音乐创作工具,Facebook开源,本地一键整合包下载

AudioCraft 是一个由Facebook Research开发的PyTorch库,专注于深度学习在音频生成领域的研究。这个强大的工具包集成了两个最新的AI音频生成模型:AudioGen和MusicGen,能够产生高质量的声音和音乐。

今天的一键包也包含了 AudioGen 和 MusicGen 两个部分,主要演示MusicGen,因为MusicGen的模型基本支持了AudioGen的所有功能。

之前也发过过类似的工具,比如 Stable Audio Tools ,同样,audiocraft不仅可以生成各种模拟音频效果,还能减少音损。用户使用该AI工具,只需要在输入文本内容后,即可生成高质量、逼真的音频和音乐。

AudioCraft 使用了两万小时的授权音乐来训练 MusicGen。具体来说,依赖于 10K 高质量音乐曲目的内部数据集,以及 ShutterStock 和 Pond5 音乐数据。

最后,最重要的一点,AudioCraft生成的音乐是可以用于商业用途的,不用担心版权纠纷。

一键包下载:私信 " AI音乐 "

应用场景

音乐创作:使用MusicGen,你可以根据简单的文本指令创造出独一无二的音乐作品。

语音合成:AudioGen可以将文本转化为自然流畅的声音,适用于有声读物或语音助手等领域。

音频压缩与解码:EnCodec提供高效高质的音频编码与解码方案,可用于音频传输和存储优化。

版权保护:AudioSeal的水印技术可对音频内容进行安全标记,防止未经授权的使用

使用教程:

输入提示词,也可手动上传参考音频文件

官方程序提供了10 个预训练模型。

着重介绍以下几个模型:

facebook/musicgen-small : 300M 型号,仅文本到音乐

facebook/musicgen-medium :1.5B 型号,仅文本到音乐

facebook/musicgen-melody : 1.5B 型号,文本转音乐和文本+旋律转音乐

facebook/musicgen-large : 3.3B 型号,仅文本到音乐

facebook/musicgen-melody-large : 3.3B 模型,文本到音乐和文本 + 旋律到音乐

facebook/musicgen-stereo-melody-large :所有以前的型号都针对立体声生成进行了微调 - 小、中、大、旋律、旋律大

如果你的显卡较好,显存12G起,推荐facebook/musicgen-stereo-melody和facebook/musicgen-stereo-melody-large这两个模型,生成的效果是最好的。

如果你的显卡一般,比如8G显存起,可以用 facebook/musicgen-small和facebook/musicgen-medium。

官方推荐 facebook/musicgen-stereo-melody 这个模型,综合能力最好。

考虑到一键包大小,一键包只内置了 facebook/musicgen-stereo-melody 这个模型,如果需要体验其他模型,只需要切换到任意模型,提交的时候后台会自动下载。

也可以单独下载网盘提供的模型包,下载后拷贝到软件根目录下,右键解压到当前文件夹即可。

模型选择好后,选择解码器,设置生成时长,剩下的参数可以默认

最后点击生成即可。

相关推荐
视觉语言导航2 分钟前
哈工深无人机目标导航新基准!UAV-ON:开放世界空中智能体目标导向导航基准测试
人工智能·深度学习·无人机·具身智能
yzx9910133 分钟前
AI心理助手开发文档
人工智能·深度学习·机器学习
STC_USB_CAN_80517 分钟前
实战 AI8051U 音视频播放:USART-SPI→DMA-P2P→SPI+I2S 例程详解
单片机·嵌入式硬件·音视频
图灵学术计算机论文辅导20 分钟前
论文推荐|迁移学习+多模态特征融合
论文阅读·人工智能·深度学习·计算机网络·算法·计算机视觉·目标跟踪
一百天成为python专家28 分钟前
Python循环语句 从入门到精通
开发语言·人工智能·python·opencv·支持向量机·计算机视觉
轻松Ai享生活1 小时前
GitHub Repo 骨架:Makefile + CUDA 入门程序
人工智能
用户5191495848451 小时前
对抗性工程实践:利用AI自动化构建GitHub仓库的虚假提交历史
人工智能·aigc
riveting2 小时前
重塑工业设备制造格局:明远智睿 T113-i 的破局之道
人工智能·物联网·制造·t113·明远智睿
zzywxc7872 小时前
详细探讨AI在金融、医疗、教育和制造业四大领域的具体落地案例,并通过代码、流程图、Prompt示例和图表等方式展示这些应用的实际效果。
开发语言·javascript·人工智能·深度学习·金融·prompt·流程图
算家计算2 小时前
32K上下文开源语音理解、40分钟深度交互——Voxtral-Small-24B-2507本地部署教程
人工智能·开源·aigc