1.学术界里的表情识别
1.0 表情识别传感器
- electromyograph(EMG)
- electrocardiogram(ECG)
- electroencephalograph(EEG)
- RGB摄像头 or 红外摄像头
虽然表情识别的传感器有多种,但是EMG、ECG、EEG都是穿戴设备,在自然不受控的场景下,这些穿戴设备不太适合,本调研报告重点介绍RGB摄像头下的表情识别。
1.1 表情建模FACS编码
FACS,表示Facial aciton coding system,它的创始人是Ekman和Friesen,它根据人脸的肌肉解剖学原理,对每个人脸上的肌肉运动(AU:action units)进行编码,AU编码的意义可以参考如下图:
除了FACS编码可以把人脸肌肉进行编码,还可以把表情直接分为一些基本的类型,而这些基本表情可以与AU进行对应,如上图所示。
Faces参考文献:
https://imotions.com/blog/facial-action-coding-system/
https://www.