跳转到主要内容

概述

当 Muse 头带的 PPG 与基于摄像头的 rPPG 同时可用时,SDK 支持传感器融合:以接触式 PPG 为参考,校准并改进基于摄像头的心率估算。

MuseFusionCalibrator

将 Muse PPG 读数与摄像头 rPPG 估算融合,以提高准确性:
RppgProcessor 也内置了 Muse 集成:

MuseCalibrationModel

一个简单的回归模型,随时间学习摄像头 BPM 与接触式 BPM 之间的关系:

BPM 证据类型

处理器从多种分析方法中生成证据:

Muse PPG 滤波

对 PPG 样本应用 Muse 风格的带通滤波:

校准流程

  1. 从仅使用摄像头的 rPPG 开始
  2. 当 Muse 头带连接后,将其 PPG 作为真实值输入
  3. 校准模型学习摄像头与接触式之间的映射关系
  4. 训练完成后,使用学到的模型校正仅摄像头的估算
  5. 融合校准器结合两种来源,以获得最高准确性

下一步

帧来源

摄像头采集和人脸检测

rPPG 摄像头集成

端到端网络摄像头流水线