详解苹果Vision Pro的“眼动交互”

目录

一．眼动识图

二．眼动数据应用

三．眼动数据隐私安全

四．眼动滑动输入法

五．眼动人机识别

六．眼动追踪与健康医疗、精神

---

苹果产品的很多特性往往会成为业界标准，慢慢出现在各类 AR 设备里，国内在 AR 上有所布局的大厂大概率会紧锣密鼓的在眼动追踪技术上加大研发力度。因此眼动硬件逐渐成为标配已经成为无可争议的事实。

图源：苹果 Vision Pro 眼动追踪

交互技术的重大改变，往往伴随着巨大的创业机会。例如以键盘和鼠标作为基础诞生 PC 电脑，进而诞生了大量基于鼠标键盘的图形化软件；例如以全面屏多点触控作为基础诞生了iPhone，基于触摸交互诞生了大量的 APP 应用。而且如今各个互联网大厂所分析的用户数据、精准营销、广告推送，都是需要用户付诸明确的交互行为才可以获得。

试想一下如果未来AR眼镜硬件性能进一步成熟，那么在未来基于眼动交互可能会有那些 APP 和创业机会呢？

• 一．眼动识图

图源：电影《大黄蜂》

在眼动追踪技术中，大家常听说注视点渲染，也就是实现眼睛看哪里图像渲染哪里进而降低了计算机的功耗和算力。但是大家可能不常听过的是-注视点图像识别，也就是实现眼睛看哪里图像识别哪里。

例如，苹果 Vision Pro 的前置摄像头实现的 AR 透视，再结合注视点图像识别可以间接的将眼睛注视点映射在现实世界，从某种意义上来说，这是让计算机在以用户的第一人称视角在感知并理解用户的所闻所见。那么如果计算机能够以用户的视角在感知世界，见你所见，思你所思，那么 AR 眼镜能够为用户提供的个性化服务的想象空间实在是很大了。

那么想象空间有哪些？其中就包括笔者早年曾探索 的AR 眼镜的识图购物。

上图是本人早年基于 Magic Leap One 研发的基于眼动识图购物的应用场景，图中白圈是用户的注视点，此时用户正在看着一架无人机，实现了对无人机图像信息的