MirrorSys：沉浸式现实是一种怎样的体验？

文/James Begole博士

倘若你曾被一部小说的情节深深吸引，可能你并不需要任何视觉细节来说服你深信不疑，因为故事本身便会让你身临其境。视频游戏也如此，例如Minecraft（我的世界）这款采用低保真数据块的视频游戏引人入胜，其带来的体验并不亚于最先进的、具有照片般画面质量的游戏。低保真手机游戏已经深深地打入高保真游戏机市场，其主要原因就是人们可以随时随地酣畅淋漓地沉浸到游戏当中。然而，研究表明，视觉和听觉细节的确会影响我们对现实的感知，让我们对现实更加深信不疑；与此同时，逼真的视觉及听觉效果也更能让我们身临其境，仿佛置身于整个故事中，成为故事不可分割的一部分。

何为沉浸式体验？

游戏大概是沉浸式现实（Immersive Reality）最具代表性的杀手级应用。在游戏中，玩家头戴耳机，畅游在一个人造世界中。然而，虚拟现实并不局限于由电脑生成的人造世界，它还包括让远在天边的场景变得近在咫尺。通过部署高清摄像机、麦克风和低时延网络，我们的眼睛和耳朵能够感知来自遥远地区的光和声，从而使这一切变得真真切切。这种远程现实是虚拟现实的一种。远程现实中的所有实物都是现实世界中真实存在的，只是不在你眼前而已。

如今摄像机已经具备了令人惊异的高分辨率。典型的消费型摄像机像素已经超过了1200万，甚至一些图片传感器的像素已经超过了1.2亿。同时，显示器分辨率也从高清（200万像素）提升至4K超高清（800万像素），并且新的显示屏幕的分辨率可以达到8K（3200万像素）。或许我们在轻松后仰着看电视或电影时，这些分辨率已经绰绰有余。然而当我们身处一种远程空间进行交流时，这些分辨率是否足够让我们随心所欲地跟踪目标并调整焦距、产生一种沉浸式体验呢？

传统的电影和电视带给观众的都是一种“后仰式”经历，观众只能被动地聆听别人讲故事，或者跟随摄像机的镜头移动而移动。然而在沉浸式体验中，每一个观众都可以定义自己的兴趣点，他们的兴趣点可以根据活动场景随时变更。说的再清楚一点就是——他们正在重现现实。这并不像在拍摄电影或者讲述故事时那样，把观众的注意力引向某一场景中的某一主角或某一物体上。在沉浸式现实中，一个观众想要的所有视觉和听觉数据在他们转头的瞬间就必须准备就绪。