TV蓝牙遥控器近场语音自研

TV蓝牙遥控器近场语音自研


一、近场语音功能实现过程

1.按下语音键,遥控器通过蓝牙协议通知TV端语音键按下的事件

2.BT模块检测按键信息,通知BT驱动启动录音数据传输;同时通知audio framework设备可用;通知亚马逊近场app开始录音

3.audio framework收到setwireDeviceConnection通知后,创建音频流进行探测,如果open/close成功,将设备加入到Available input devices管理

4.亚马逊近场app通过AudioRecord启动录音,在btle audio hal接口创建音频流,然后执行read操作

5.btle audio hal操作:打开/dev/bleremote_audio设备节点,获取音频数据,做协议解码,然后将解码后的录音流传给app做识别处理

(在读操作之前,先从设备节点获取蓝牙遥控器编码协议,选择合适的解码库将音频解析成pcm格式,常用opus编码)

二、近场语音问题分析
1./dev/bleremote_audio设备节点open失败

原因:selinux权限问题、读写权限问题
2./dev/bleremote_audio设备节点ioctl报错

原因:驱动问题,检查驱动状态
3.APM::TclAudioPolicyEngine打印的availableDevices找不到相关设备AUDIO_DEVICE_IN_BLUETOOTH_BLE

例如:APM::TclAudioPolicyEngine: getForceDevice, inputSource=6, device=84000000 availableDevices is {AUDIO_DEVICE_IN_BUILTIN_MIC, @:bottom;AUDIO_DEVICE_IN_REMOTE_SUBMIX, @:0;AUDIO_DEVICE_IN_LOOPBACK, @:;AUDIO_DEVICE_IN_PROXY, @:SUPPRESSED;AUDIO_DEVICE_IN_ECHO_REFERENCE, @:}

原因1:检查dumpsys audio信息,是不是没有setWiredDeviceConnectionState状态设置

原因2:探测执行adev_open_input_stream失败导致,可能是上面/dev/bleremote_audio权限问题
4.APM::TclAudioPolicyEngine选择设备错误,选择了BUILTIN_MIC

原因1:audio policy当前根据BT传输的信息的name:AR来做的判断,如果name改变,流程判断会打开BUILTIN_MIC

原因2:audio policy逻辑异常,具体原因根据日志分析,关键打印APM::TclAudioPolicyEngine: getForceDevice, inputSource=6, device=xxxxx device为84000000时为正常,其他为异常

原因3:audioRecord创建近场使用hotword source,我们平台不支持。兼容处理后已实现支持

相关推荐
纤纡.几秒前
阿里云 DSW 实战:从零完成 Qwen3-4B 大模型 LoRA 微调全流程
人工智能·阿里云·语言模型·云计算
AI视觉网奇8 分钟前
3d 打印模型修复
人工智能·3d
“码”力全开19 分钟前
深度解析:基于 Docker 与边缘计算的 AI 视频管理平台架构——打通 GB28181/RTSP 协议与“源码交付”的高效集成方案
人工智能·docker·边缘计算
wangqiaowq23 分钟前
预训练 后预训练 微调
人工智能·深度学习·机器学习
LONGZETECH30 分钟前
架构师实战拆解|无人机智慧实训SaaS中台:断电续考、AI组卷、多端同步核心设计
大数据·人工智能·架构·系统架构·无人机
战族狼魂34 分钟前
集 “自动飞行、智能识别、实时预警、勤务联动” 于一体的高速公路应急车道无人机检测系统方案
java·人工智能·大模型·无人机
月光船幽幽35 分钟前
Helio-Core临界控制:守护拓扑量子稳定
人工智能·科技·动态规划·拓扑学
jkyy201437 分钟前
大模型重构饮食健康服务链路:多维技术赋能膳食管理智能化升级
大数据·人工智能·信息可视化·重构·健康医疗
罗西的思考39 分钟前
【Agentic RL / 强化学习 / OPD】OpenClaw-RL 源码阅读笔记 --- (4)--- 系统架构
人工智能·算法·机器学习
2601_9578885639 分钟前
从关键词到语义网络:生成式引擎优化(GEO)的技术原理解析与工程实践
人工智能·大模型