开源项目 NextBand:探索融合健康传感、语音交互与 AI Agent 的下一代可穿戴设备

NextBand

NextBand 是面向下一代可穿戴智能设备的开源项目 ,探索健康传感、语音交互与 AI Agent 的新型可穿戴交互方案。

它可以通过手环/手表形态,将心率、血氧等传感能力与云端 AI Agent 连接,使设备能够感知用户状态、理解用户意图,并代用户采取行动。

我们先看一下硬件清单

图标1 是主控 ESP32S3

图标2 是屏幕 ST7735

图标3 是心率血氧传感器 MAX30102

图标4是数字麦克风 INMP441

接下来上电,让设备启动

按钮1 是语音输入用户意图

按钮2是进行心率检测

先按下按钮1录入一个用户意图

本次录入的语音是:"在晚上9点后,如果我的心率低于100的话,请发送一个邮件给我的紧急联系人,主题是我爱你,内容是一首跟心跳相关的诗"

在结束录音后,该语音会上传到云端服务器进行语音转录。

切到云端服务器后台,查看 AI 大模型的转录结果,如下图:

转录结果正确,且该结果已存入服务器。

注:AI Agent 在收到后续的健康数据后,将根据此用户意图采取相应的行动

接下来按下按钮2进行心率检测

先把手指放在图标1 处(MAX30102上面)

然后等待心率的数据采集,图标2处所显示

检测结束,本次录得的心跳数据是 86 BPM

注:在检测结束时,该数据已经自动上传到云端服务器了

切换到云端服务器后台,如下图所示,可以看到心跳数据已成功接收,且已触发相应的 AI Agent,目前正在执行任务。

在等待AI智能体执行完成之后,如下图:

见图中所选区域,由于目前的时间是10点26分,而之前我们录入的意图是要在晚上9点之后,所以本次任务就到此结束了。

再返回工作台,录入新的意图

再次按下按钮2进入语音录入

本次录入的语音是:"如果我的心率低于100的话,请发送一个邮件给我的紧急联系人,主题是我爱你,内容是一首跟心跳相关的诗"

录入结束后,切回云端服务器可以看到,用户意图已更新,如下图:

返回工作台,进行新的心率检测

这次检测的心率是 83 BPM,如下图:

切回云端服务器,可以看到 AI 智能体再次被触发,如下图:

等待其运行结束后,可以看到以下结果

结果显示AI智能体已经写了一首诗,并且按照之前设置的用户意图发送一封邮件到紧急联系人那里了。

打开邮箱,检验结果

可以看到,已经收到"我爱你"的邮件,且诗的内容是跟心率 83 有关系。

结尾

以上就是 NextBand 从硬件交互到云端 AI Agent 的介绍。

这个方案可以延伸到更复杂的场景,比如:

  1. 健康与养老
    • 老人心率异常、血氧异常时自动通知家人
    • 根据用户预设条件自动联系紧急联系人
  2. 运动与健身
    • "如果我的心率超过 160,提醒我降低运动强度"
    • 根据心率、运动状态动态调整训练计划
  3. 睡眠与日常健康管理
    • 根据心率、血氧等数据判断用户状态
    • "如果连续几天晚上心率异常,提醒我预约检查"
  4. 独居人群 / 安全守护
    • "如果我长时间没有活动,并且心率异常,就联系家人"
    • 可进一步融合跌倒检测、GPS 等能力,自动触发安全守护
  5. 情绪与压力管理
    • 结合心率变化和用户语音意图判断压力状态
    • "如果我的心率持续偏高,提醒我休息"
  6. 个人 AI 助手
    • 不再局限于健康数据,而是让手环成为 AI Agent 的入口
    • 未来可以接入邮件、日历、智能家居、企业系统等,实现真正的"感知 + 决策 + 执行"。

有兴趣的小伙伴可以在 Github 上搜索 amin2312/NextBand 获取完整的开源代码。

相关推荐
霸道流氓气质几秒前
Spring AI 多租户隔离方案
java·人工智能·spring
ACP广源盛139246256731 分钟前
M6/M5 Pro Mac mini 端侧 AI 爆发@ACP#YLB3118 存储扩展芯片在本地 AI 服务中的机会与落地场景
大数据·网络·数据库·人工智能·嵌入式硬件·macos
Rain5096 分钟前
谁动了我的 URL?——记一次微前端“灵异 Bug“的排查实录
前端·vue.js·人工智能·前端框架·bug·ai编程
外域速览10 分钟前
OpenAI Astra 跨过「高危红线」、李飞飞世界模型 Atlas 落地:AI 行业进入「安全与落地」双拐点
人工智能·安全
Mr数据杨11 分钟前
莫斯科公寓价格预测实战 从 Kaggle 房价回归到可落地估值流程
人工智能·数据分析·kaggle竞赛
故七月14 分钟前
产业观察|从 9 月行业数据看西南市场 GEO 落地现状与发展路径
大数据·人工智能
丶浅行DE时光17 分钟前
管道式电磁流量计选型指南 介质腐蚀与工况适配方案推荐
大数据·网络·人工智能·科技·推荐算法
电子科技圈17 分钟前
芯科科技在IOTE 2026上以全栈无线连接与边缘AI展现其在智能网联领域的卓越领导力
人工智能·科技
Ro Jace18 分钟前
基于深度学习的图像处理方法
图像处理·人工智能·深度学习
Y_Mathison19 分钟前
Agent安全护栏设计:权限控制、对抗鲁棒性与人工确认环
人工智能·ai