03.智能家居端侧 AI 架构


关键点:

  • 唤醒词(Wake Word):OpenWakeWord,说"你好管家"才启动识别,避免误触发
  • VAD(语音端点检测):WebRTC VAD,检测起止点,喂给本地ASR
  • 本地 ASR:sherpa-onnx
  • Qwen3-VL 意图解析,System Prompt 要求模型输出自然语言,转为可执行 JSON 指令,比如: {"device":"living_room_light", "action":"turn_on", "value":null}
  • 本地 TTS:sherpa-onnx-vits-zh-ll
  • mac-名字映射:把json里的device名字映射到MAC
  • 数据引擎:根据设备物模型内容+具体mac+目标action,封装出最终指令
  • RAG增强检索
  • 会话记忆
  1. 保留最近 N 轮对话上下文给 Qwen3-VL(messages = {"role":"user",...},...
  2. 维护家庭设备状态缓存(人体存在传感器、环境温度)供模型参考做上下文推理
相关推荐
逗脑IDE18 小时前
零基础学ESP32:蜂鸣器——让ESP32会“唱歌”!
python·物联网·esp32·智能家居
TOP品牌榜中榜2 天前
2026智能门锁生物识别技术拆解:从2D平面特征到3D结构光深度建模,指纹/人脸识别的安全阈值到底差在哪?
智能家居·智能门锁
阿钱真强道3 天前
16 极物科技 | DALI协议栈 - 架构总览与模块设计
智能家居·照明·极物·极物智能·极物科技·iec 62386·dali协议栈
anew___4 天前
从零搭建智能家居:智能插座+智能灯泡+温湿度联动,你需要做哪些准备?
智能家居
乐橙开放平台4 天前
养老 SaaS 笔记:setMessageCallback 事件桥接 + msgType 映射 P0/P1,先 ACK 再分流值班流
笔记·物联网·音视频·智能家居
乐橙开放平台5 天前
老旧社区双通道笔记:周界 hoveringAlarm / aiPerArea + 电梯 aiNonVehDetect,一套 callback 做 24h 防护
笔记·物联网·音视频·智能家居
明天会出太阳6 天前
GB/T 50034‑2024 照明工程落地:UGR、RG0、Ra 参数核查与不同空间设计要点
智能家居·武汉·knx·照明设计·无主灯
嵌入式阿蔡8 天前
项目实战 02:智能家居环境网关——ESP32 做 BLE 中心 + 本地联动
网络·单片机·嵌入式硬件·esp32·智能家居·嵌入式实时数据库
阿钱真强道9 天前
06 极物科技 | 创明RS485窗帘 - UDP 通讯协议规范
udp·智能家居·通讯协议·极物·极物智能·极物科技·创明窗帘
3C速讯10 天前
智能门锁生物识别方案技术对比:3D双目人脸 vs 3D结构光 vs 掌静脉的实测数据分析
智能家居·智能门锁