Non-contact Pain Recognition from Video Sequences with Remote Physiological Measurements Prediction

IJCAI21论文疼痛状态检测

Non-contact Pain Recognition from Video Sequences with Remote Physiological Measurements Prediction

摘要

疼痛识别的三种方法

• 外观变化
• 生理信号线索
• 融合以上两种信息

有两个问题

• 长程时间考虑不足，过于受每个受测对象影响
• 生理信号测量
  所以提出了rPPG-enriched Spatio-Temporal Attention Network (rSTAN)的多任务模型。

介绍

一开始人们考虑的是面部信息，但容易被个体影响，接着就有人提出生理信号¹²。

本文章提出四个贡献：

• 新网络。
• VAE模块增强生理信号。
• 时空注意力模块改善外观信号。
• SOTA并证明可以完成这个任务。

相关工作

有通过landmark距离和纹理变化判断痛苦程度的。有通过几何变化和头部变化。
在生理信号方面：心率࿰