概述
当 Muse 头带的 PPG 与基于摄像头的 rPPG 同时可用时,SDK 支持传感器融合:以接触式 PPG 为参考,校准并改进基于摄像头的心率估算。MuseFusionCalibrator
将 Muse PPG 读数与摄像头 rPPG 估算融合,以提高准确性:RppgProcessor 也内置了 Muse 集成:
MuseCalibrationModel
一个简单的回归模型,随时间学习摄像头 BPM 与接触式 BPM 之间的关系:BPM 证据类型
处理器从多种分析方法中生成证据:Muse PPG 滤波
对 PPG 样本应用 Muse 风格的带通滤波:校准流程
- 从仅使用摄像头的 rPPG 开始
- 当 Muse 头带连接后,将其 PPG 作为真实值输入
- 校准模型学习摄像头与接触式之间的映射关系
- 训练完成后,使用学到的模型校正仅摄像头的估算
- 融合校准器结合两种来源,以获得最高准确性
下一步
帧来源
摄像头采集和人脸检测
rPPG 摄像头集成
端到端网络摄像头流水线