远程 PPG(面部视频心率)
从被试的面部视频估计心率(远程 PPG)。我会附上面部视频,必要时附上每段视频的接触式心率文件、事件表和被试表。请给我一份报告,包含视频质量、基于 POS 的各条件心率(另以 CHROM 和深度学习模型作对比)、信噪比与可靠时间窗、提供参考值时与参考值的误差、含效应量和图表的条件与组间比较(不含面部图像),另附指标表。每一步都显示所运行的代码。
远程 PPG(面部视频心率): 正在提取和分析数据
请上传面部视频。我们会从肤色的细微变化中提取脉搏波,估计心率及其随时间的变化,并为你提供同时展示信号质量和(有参考心率时)误差的报告和指标表。也可以比较多名参与者和多个条件。每一步运行的代码也可以直接在聊天中查看。
适合这些人
- 想不佩戴传感器、通过网络摄像头或录像查看参与者心率反应的HCI/UX研究者
- 需要从在线实验、访谈录像中获取各条件唤醒指标的研究者
- 需要比较rPPG方法(POS、CHROM、深度学习)并报告与接触式参考之间误差的研究者
- 需要有依据地判断面部视频信号质量的研究生
你会得到这些结果
结果有三份。报告里是解释,指标表里是数字,测量数据文件里是代码测得的信号和窗口心率。生成这些数字的代码会以代码框的形式保留在聊天的每个步骤中。
- 面部视频心率报告 本次分析的全过程和结果 · 数据、视频质量(面部检出、大小、亮度、运动、帧率)、可直接用于论文的方法段落、各条件和组别的心率、SNR和可信窗口比例、相对参考心率的误差、比较检验和效应量、图(脉搏波、心率时间序列、频谱、Bland–Altman、条件比较)、解释与局限、报告清单、参考文献。不包含面部照片 · MD(可用PDF·PNG转换智能体生成用于分享的PDF)
- rPPG心率表 参与者 × 条件的数字 · 宽表和长表、各方法的心率(POS、CHROM、PhysNet)、SNR、窗口级波动、参考比较、质量判定、检验结果、敏感性分析(Expert及以上)、单位 · XLSX(可直接导入SPSS、R、JASP)
- 测量数据(窗口心率·脉搏波信号) 代码测得的原始数值 · rppg_windows.csv — 每个10秒窗口(2秒步长)的心率(bpm)和SNR,按方法分列(POS·CHROM·PhysNet)。rppg_signals.csv — 每帧的脉搏波信号(t, pos, chrom, deep)。可用于自行重新分析或绘图 · CSV(信号很长时以每条记录一个CSV打包为ZIP)
报告中包含的指标
聊天的每个步骤都会以代码框保留当时运行的代码。点击后可在右侧查看代码和运行结果。
- 心率 区间心率(POS,主要方法)、CHROM心率,Expert及以上还有PhysNet心率
- 可信度 SNR(dB)、可信的10秒窗口比例、窗口间心率波动、方法间不一致的标记
- 参考比较 有参考心率时的区间误差、窗口级平均绝对误差、偏差和一致性界限(Bland–Altman)
- 质量 面部检出率、面部大小、亮度、面部运动、帧率
- 统计 符合设计的检验、效应量、Holm校正、排除标准
这样提出请求
用附件中的面部视频估计{什么}的心率——{要看什么}。 — 把下划线部分替换成你的内容。
- 什么: 默认是一个人的一段视频。若要比较多名参与者或多个条件,请通过文件名(P01_rest.mp4)或事件表告诉我们区间。
- 要看什么: 心率随时间的变化和信号可靠性(默认)。需要比较时可选条件之间、组别之间或两者;留空则根据数据结构决定。
建议一起上传
- 面部视频(MP4·MOV·WEBM,多个请打包为ZIP) 25 fps以上、正面、光照稳定、动作越少越准确
- 参考心率表(视频名 + _hr.csv,time·hr列) 与胸带、指夹传感器的数值比较并报告误差
- 事件表·参与者表 用于划分条件区间和组间比较
也可以这样请求
- 给我看这一个视频的心率变化,并告诉我信号是否可靠。 → 心率时间序列与频谱、SNR 与可靠窗口比例、质量判定
- 和胸带心率(_hr.csv)比较,看看 rPPG 有多准确。 → 平均绝对误差、偏差、Bland–Altman
- 用20段网络摄像头录像比较休息和心算任务时的心率。 → Pro 及以上: 各条件心率的配对比较、效应量、可信度标记
我的指引
每项研究的条件区间和排除标准都不同。只需设定你关心的项目,其余按默认值运行。命名保存后,下次也能继续使用。 报告首页会写明采用了哪些指引以及做了哪些假设。
- 条件区间 (数据) 将视频按条件划分的方法 · 例如: 0–60秒静息,60–180秒任务 · 使用所附events.csv · 默认: 按事件表 → 文件名 → 整段视频的顺序
- 参考心率 (数据) 用于核对准确度的接触式心率文件 · 例如: 用胸带测得的P01_rest_hr.csv(time, hr) · 默认: 如附有名为视频名 + _hr/_ref/_gt、含time和hr(bpm)列的表则使用该表
- 组别 (数据) 被试间组别(如有) · 例如: P01–P10为A组,P11–P20为B组 · 默认: 如附有含group列的被试表则使用该表
- 排除标准 (处理) 信号较弱时排除被试的标准 · 例如: 超过30%的10秒窗不可靠时排除 · 默认: 超过50%的10秒窗SNR低于0 dB时不纳入统计
- 分析窗 (处理) 每个区间要分析的时长 · 例如: 每个任务只取最后60秒 · 默认: 整个区间(至少15秒)
- 主要指标 (统计) 用于条件或组别比较的指标 · 例如: 心率及其在各窗之间的变动 · 默认: 心率(POS)
- 显著性水平 (统计) 比较检验的α · 例如: α = .01 · 默认: α = .05
- 报告语言 (结果格式) 撰写语言 · 例如: 用英语撰写 · 默认: 请求的语言
工作方式
模型不会猜测数字。每一步都会实际运行分析脚本,并把代码以代码框保留在聊天中。模型只负责把指引转换为参数以及解释结果。
- 数据确认 做什么: 将视频、参考心率、参与者、条件、时长、帧率整理成表 · 可设定的内容: 条件区间、参考心率、组别 · 需要确认的内容: 条件区间是否正确
- 视频质量检查 做什么: 每秒检测一次面部,按检出率、大小、亮度、运动、帧率判定通过/注意/不可用 · 可设定的内容: — · 需要确认的内容: 注意和不可用的视频
- 肤色信号提取 做什么: 在所有帧中提取额头和脸颊区域的平均颜色,Expert及以上还提取深度学习脉搏波 · 可设定的内容: — · 需要确认的内容: 检出面部的比例
- 心率估计 做什么: 从POS(主)和CHROM脉搏波的频谱得出区间心率和SNR、10秒窗口时间序列、相对参考的误差 · 可设定的内容: 分析窗口、排除标准 · 需要确认的内容: SNR和可信窗口
- 条件和组别比较 做什么: 符合设计的检验、效应量、Holm校正(Pro及以上) · 可设定的内容: 主要指标、显著性水平 · 需要确认的内容: 检验是否符合设计
- 图 做什么: 脉搏波、心率时间序列、频谱、Bland–Altman、条件比较(无面部照片) · 可设定的内容: — · 需要确认的内容: 时间序列的波动
- 解释与局限 做什么: 不改变数字地解释,判断结果是否可信 · 可设定的内容: — · 需要确认的内容: 解释的范围
- 报告 做什么: 保存报告和指标表 · 可设定的内容: 报告语言 · 需要确认的内容: 清单中的填写项
不同级别的差异
支持的文件格式
- MP4 · MOV · WEBM · AVI · MKV · M4V 每个视频一人(画面中最大的面部),8 fps以上(建议25 fps以上)
- 参考心率表 视频名 + _hr·_ref·_gt,含time(秒)和hr·bpm列
- ZIP 解压后读取其中所有文件
- 事件表·参与者表 onset·duration·condition / participant·group
- 视频会议录像等高度压缩的视频可能会抹去肤色变化,导致信号变弱。
关于方法
- 用面部视频测量心率的原理 心脏每跳动一次,面部皮肤的血容量就会发生极细微的变化,肤色(尤其是绿色分量)也随之改变。逐帧收集额头和脸颊区域的平均颜色并滤除肤色方向(POS)后,剩下的就是脉搏波,其周期即为心率。
- 如何判断结果是否可信 有接触式参考时,直接计算误差。没有参考时,展示频谱峰值的清晰程度(SNR)以及每个10秒窗口重新测得的心率有多稳定。各方法(POS、CHROM、深度学习)之间相差超过10 bpm时会加以标记。
- 个人信息 面部视频属于敏感个人信息。请仅在参与者同意的范围内上传。报告和图中不包含面部照片。
- 提示 适合无日光灯闪烁的均匀光照、正面拍摄、尽量少转动头部的姿势。
- 如有可能,请用胸带或指夹传感器同时记录至少一部分参考心率。
- 收到结果后可以在聊天中继续提出请求。例如:「每个任务只重新看最后60秒」「用CHROM结果进行比较」
常见问题
- 也能得到心率变异性(HRV)吗?
- 不能。视频难以精确测量心跳间期,因此只输出平均心率及其波动。如需HRV,请使用ECG HRV Analysis或PPG Pulse Analysis。
- 深度学习结果和POS差别很大。
- PhysNet使用的是在合成数据(SCAMPS)上训练的权重,可能因拍摄环境而出现偏差。相差超过10 bpm时会加以标记,主要结果以POS给出。
- 可以用于诊断吗?
- 不可以。这不是医疗用测量。
- 最多支持多少名参与者?
- Lite一次最多分析1个视频(前3分钟),Pro 60个(每个视频10分钟),Expert 120个,Max 300个(每个视频30分钟)。上传每个文件最大1GB。