Meta眼球追踪研究：采用事件相机，采样率可达kHz级

扎克伯格在访谈中曾指出下一代Quest的重点是面部和眼球追踪技术，Project Cambria也将配备眼球追踪技术。尽管如此，眼球追踪依然是Meta需要解决的一大研发难题，这项技术在普遍适用性、延迟、准确性等方面都存在挑战。

从Meta Reality Labs公布的最新论文来看，其正在探索一种基于事件相机的眼球追踪方案。那么什么是事件相机呢？它的英文名为Event Camera，是近几年来出现的相机技术。

事件相机与传统相机的数据回传格式不同，它采用一种异步的通讯方式，也就是说设备之间的时钟不同步，事件相机不是事实回传捕捉到的数据，而是在捕捉到亮度等像素变化（事件）时，才会回传数据。

简单来讲，事件相机类似于人眼的工作原理，主要功能是捕捉物体的变化或运动。

Meta指出，事件相机可以低功率运行，响应延迟可降低至微秒级。这些特性有望解决现有眼球追踪技术在实时性、功耗上的局限，甚至有望带来适合AR/VR头显等移动设备的眼球追踪技术。

关于Meta眼球追踪方案

目前，眼球追踪系统常见的设计是采用闪烁的灯光照亮角膜来捕捉数据，这种方案只需要稀疏的数据即可运行。这说明眼球追踪系统的采样率不需要非常高，因此科研人员预计即使用事件相机也足够，尽管事件相机在捕捉到运动时才拍照，但只要捕捉到关键数据，也能计算出眼球变化。