开源项目 NextBand:探索健康传感、语音交互与 AI Agent 融合的下一代可穿戴交互

发布时间:2026/8/16 14:41:08
开源项目 NextBand:探索健康传感、语音交互与 AI Agent 融合的下一代可穿戴交互 NextBandNextBand 是面向下一代可穿戴智能设备的开源项目探索健康传感、语音交互与 AI Agent 的新型可穿戴交互方案。它可以通过手环/手表形态将心率、血氧等传感能力与云端 AI Agent 连接使设备能够感知用户状态、理解用户意图并代用户采取行动。我们先看一下硬件清单图标1是主控 ESP32S3图标2是屏幕 ST7735图标3是心率血氧传感器 MAX30102图标4是数字麦克风 INMP441接下来上电让设备启动按钮1是语音输入用户意图按钮2是进行心率检测先按下按钮1录入一个用户意图本次录入的语音是“在晚上9点后如果我的心率低于100的话请发送一个邮件给我的紧急联系人主题是我爱你内容是一首跟心跳相关的诗”在结束录音后该语音会上传到云端服务器进行语音转录。切到云端服务器后台查看 AI 大模型的转录结果如下图转录结果正确且该用户意图已存入服务器。注AI Agent 在收到后续的健康数据后将根据此用户意图采取相应的行动接下来按下按钮2进行心率检测先把手指放在图标1处(MAX30102上面)然后等待心率的数据采集图标2处所显示检测结束本次录得的心跳数据是 86 BPM注在检测结束时该数据已经自动上传到云端服务器了切换到云端服务器后台如下图所示可以看到心跳数据已成功接收且已触发相应的 AI Agent目前正在执行任务。在等待AI智能体执行完成之后如下图见图中所选区域由于目前的时间是10点26分而之前我们录入的意图是要在晚上9点之后所以本次任务就到此结束了。再返回工作台录入新的意图再次按下按钮2进入语音录入本次录入的语音是“如果我的心率低于100的话请发送一个邮件给我的紧急联系人主题是我爱你内容是一首跟心跳相关的诗”录入结束后切回云端服务器可以看到用户意图已更新如下图返回工作台进行新的心率检测这次检测的心率是 83 BPM如下图切回云端服务器可以看到 AI 智能体再次被触发如下图等待其运行结束后可以看到以下结果结果显示AI智能体已经写了一首诗并且按照之前设置的用户意图发送一封邮件到紧急联系人那里了。打开邮箱检验结果可以看到已经收到“我爱你”的邮件且诗的内容是跟心率 83 有关系。结尾以上就是 NextBand 从硬件交互到云端 AI Agent 的介绍。这个方案可以延伸到更复杂的场景比如健康与养老老人心率异常、血氧异常时自动通知家人根据用户预设条件自动联系紧急联系人运动与健身“如果我的心率超过 160提醒我降低运动强度”根据心率、运动状态动态调整训练计划睡眠与日常健康管理根据心率、血氧等数据判断用户状态“如果连续几天晚上心率异常提醒我预约检查”独居人群 / 安全守护“如果我长时间没有活动并且心率异常就联系家人”可进一步融合跌倒检测、GPS 等能力自动触发安全守护情绪与压力管理结合心率变化和用户语音意图判断压力状态“如果我的心率持续偏高提醒我休息”个人 AI 助手不再局限于健康数据而是让手环成为 AI Agent 的入口未来可以接入邮件、日历、智能家居、企业系统等实现真正的“感知 决策 执行”。有兴趣的小伙伴可以在 Github 上搜索 amin2312/NextBand 获取完整的开源代码。