03.智能家居端侧 AI 架构


关键点:

  • 唤醒词(Wake Word):OpenWakeWord,说"你好管家"才启动识别,避免误触发
  • VAD(语音端点检测):WebRTC VAD,检测起止点,喂给本地ASR
  • 本地 ASR:sherpa-onnx
  • Qwen3-VL 意图解析,System Prompt 要求模型输出自然语言,转为可执行 JSON 指令,比如: {"device":"living_room_light", "action":"turn_on", "value":null}
  • 本地 TTS:sherpa-onnx-vits-zh-ll
  • mac-名字映射:把json里的device名字映射到MAC
  • 数据引擎:根据设备物模型内容+具体mac+目标action,封装出最终指令
  • RAG增强检索
  • 会话记忆
  1. 保留最近 N 轮对话上下文给 Qwen3-VL(messages = {"role":"user",...},...)
  2. 维护家庭设备状态缓存(人体存在传感器、环境温度)供模型参考做上下文推理
相关推荐
吴建旭 智宅焕15 小时前
智能家居全国交付的规则调度架构:从资源拥有到交付确定性系统
智能家居
吴建旭 智宅焕16 小时前
智能家居B端交付能力解耦架构:从全链路自持到全国交付基础设施接入
架构·智能家居
吴建旭 智宅焕20 小时前
智能家居品牌方渠道交付能力的系统架构:从产品供应到全国交付基础设施接入
系统架构·智能家居
法途Lawtrot21 小时前
智能家居警示:安装指南涉侵权,拆分争议降 75% 整改成本
智能家居
吴建旭 智宅焕1 天前
智能家居全国交付基础设施的规则化演进:创始人角色从操作执行到规则维护的系统架构
系统架构·智能家居
吴建旭 智宅焕2 天前
智能家居全国交付计价模型的设计与实现:按天包干与交付确定性架构
架构·智能家居
吴建旭 智宅焕2 天前
智能家居全国交付基础设施的资源注入分析:可加速层与不可压缩的架构约束
架构·智能家居
吴建旭 智宅焕2 天前
智能家居全国交付中交付执行端分级与派单调度的架构设计与实现
智能家居
ly98203 天前
专业做成都全铝家具的公司
智能家居
吴建旭 智宅焕3 天前
智能家居交付供给端的碎片化现状与全国交付基础设施架构设计
智能家居