希尔贝壳与西湖大学音频信息与信号处理实验室联合发布的论文被国际顶级会议 NeurIPS 2024 录用

神经信息处理系统大会(Conference on Neural Information Processing Systems,NeurIPS)是中国计算机学会(CCF)推荐的人工智能领域 A 类学术会议,其 H5 指数高达 337,在 Google Scholar 的 AI 类出版物中排名第一,与 ICML 和 ICLR 并称为机器学习领域难度最高、影响力最大的"三大会议"。

今年的会议 NeurIPS 2024 将于 12 月 10 日至 15 日在加拿大温哥华的 Vancouver Convention Center 举行。大会总共收到了 15671 篇有效投稿,最终录用率为 25.8%。希尔贝壳西湖大学音频信息与信号处理实验室联合发布的论文成功入选。

RealMAN是由希尔贝壳(AISHELL)与西湖大学音频信息与信号处理实验室(AUDIOLAB)联合开源的一个规模较大、实录、带标注的多通道麦克风语音与噪声数据集(RealMAN)。

数据组成

RealMAN是一个面向动态声学场景语音增强与声源定位任务的麦克风阵列音频数据集。具体而言,该数据集使用32通道高精度麦克风阵列进行录音,使用扬声器播放语音源信号。总共包括32个场景下录制的语音信号83小时(其中48小时为静态扬声器,35小时为移动扬声器),31个场景下录制的背景噪声144小时。

数据说明

RealMAN语音和噪声录制场景覆盖了各种常见的室内、室外、半室外和交通环境。录音设备见图1。借助于全向鱼眼摄像机标注扬声器相较于麦克风阵列的水平角,该标注可用于声源定位网络的训练。使用估计得到的直达路径滤波器对播放的语音源信号进行滤波,进而得到直达路径信号,方便语音增强网络的训练。

实验结果

  • 相比模拟数据,使用RealMAN数据集能够训练出更好的语音增强和声源定位网络;

  • 使用32通道麦克风阵列组成的不同子阵列可以训练出直接用于未见阵列的变阵列网络。

相关推荐
萌新小码农‍5 小时前
Spring框架学习day7--SpringWeb学习(概念与搭建配置)
学习·spring·状态模式
蓝婷儿5 小时前
6个月Python学习计划 Day 15 - 函数式编程、高阶函数、生成器/迭代器
开发语言·python·学习
行云流水剑5 小时前
【学习记录】深入解析 AI 交互中的五大核心概念:Prompt、Agent、MCP、Function Calling 与 Tools
人工智能·学习·交互
一弓虽6 小时前
zookeeper 学习
分布式·学习·zookeeper
苗老大6 小时前
MMRL: Multi-Modal Representation Learning for Vision-Language Models(多模态表示学习)
人工智能·学习·语言模型
xhyu617 小时前
【学习笔记】On the Biology of a Large Language Model
笔记·学习·语言模型
小白杨树树7 小时前
【SSM】SpringMVC学习笔记7:前后端数据传输协议和异常处理
笔记·学习
dddaidai12310 小时前
kafka入门学习
分布式·学习·kafka
明月清了个风11 小时前
数据结构与算法学习笔记(Acwing 提高课)----动态规划·树形DP
笔记·学习·动态规划·树形dp