人机交互论文导读——FaceSight: Enabling Hand-to-Face Gesture Interaction on ARGlasses with a Downward-Facing

这是一篇由清华团队于2021年5月份发表于CHI上面的一篇高质量论文。题为：在具有向下摄像头视觉的 AR 眼镜上实现手对脸手势交互的文章，介绍了 FaceSight，就是一种⽤于 AR 眼镜的基于计算机视觉的手对脸手势感应技术。 它将红外摄像头固定在 AR 眼镜的桥架上，以提供对下⽅⾯部和手部行为的额外感知能力（图 1）。检测手脸接触，并训练卷积神经网络（CNN）模型对手对脸手势进行分类。输入特征包括手势识别、鼻子变形估计和连续指尖运动。

---

 相机镜头周围有六个红外灯作为主动光源。这种安装方式的好处在于可以在⾼分辨率图像中捕获⽤⼾的⾯部和手部，以便检测到丰富而微妙的手对脸手势。而且通过调节红外光源的发光强度，可以只照亮前景（鼻子、脸颊和手），而背景⼏乎是暗的。这不仅简化了计算机视觉过程，还减轻了捕捉周围环境的隐私问题。第三，将摄像头连接到 AR 眼镜的鼻梁架上保证了紧凑的外形尺⼨，这就使得穿戴很轻松便捷。

 

---

区分⾯部不同位置上的触摸点是⽤于手对脸手势交互的设计空间的第一个特征

维度。定位触摸点可以