03.智能家居端侧 AI 架构


关键点:

  • 唤醒词(Wake Word):OpenWakeWord,说"你好管家"才启动识别,避免误触发
  • VAD(语音端点检测):WebRTC VAD,检测起止点,喂给本地ASR
  • 本地 ASR:sherpa-onnx
  • Qwen3-VL 意图解析,System Prompt 要求模型输出自然语言,转为可执行 JSON 指令,比如: {"device":"living_room_light", "action":"turn_on", "value":null}
  • 本地 TTS:sherpa-onnx-vits-zh-ll
  • mac-名字映射:把json里的device名字映射到MAC
  • 数据引擎:根据设备物模型内容+具体mac+目标action,封装出最终指令
  • RAG增强检索
  • 会话记忆
  1. 保留最近 N 轮对话上下文给 Qwen3-VL(messages = {"role":"user",...},...
  2. 维护家庭设备状态缓存(人体存在传感器、环境温度)供模型参考做上下文推理
相关推荐
GEOshijie1232 天前
智能家居品牌做GEO推荐哪家供应商?品类词抢占案例复盘
人工智能·python·智能家居
longxingiot2 天前
智能家居网关实现家居智能精细化场景
智能家居
远翔调光芯片^138287988723 天前
从参数到应用:FP7208如何以0.2V精密反馈提升LED驱动性能
科技·单片机·嵌入式硬件·智能家居·能源
远翔调光芯片^138287988724 天前
高效驱动!FP7153赋能3A大电流手电筒,单节锂电 / 5V 供电也能迸发强劲照明力
科技·单片机·嵌入式硬件·智能家居·能源
国产化创客4 天前
Kindle+ESP32开发原生智能家居应用
嵌入式硬件·物联网·开源·智能家居
听你说324 天前
AI 浪潮席卷 2026 ChinaJoy,KTC 移动屏解锁移动智能显示全新交互形态
人工智能·智能家居
米修米修ne5 天前
Home Assistant连接米家MIoT和苹果HomeKit折腾笔记
服务器·智能家居
国产化创客5 天前
Kindle --FBInk绘图与zforce2 触摸应用开发
linux·物联网·智能家居·智能硬件
什么都干的派森5 天前
小智MCP智能家居(红外设备篇)
硬件工程·智能家居·小智ai·小智mcp·红外控制