内容部分
这篇文章所要实现的东西还是蛮有趣的,是诺基亚贝尔实验室做的,可以实现一个叫做Distributed Reality概念的类似于在线沉浸式旅游的东西,效果如下图:
这个人戴上VR HMD,然后既能看到远端补捉来的“现实”(沙滩),又能把自己当前所处的“现实”(饭桌)代入,形成了一个新的现实:他在沙滩上吃饭(还用的筷子,可以hhh)。评价放后边吧。
不过,除了他的系统实现以外,这篇文章还有一个比较有意义的点是,对 xR 做了一个taxonomy,还是蛮适合做一些解释和叙述的。下面详细介绍一下啊
分类坐标系有两个维度,一个是你看到的东西与你的距离(纵轴),一个是你看到的东西的产生方法(横轴)。其实这里用看不够准确,因为还有听觉,future work可能还会有其他感官。
- Local Reality。其实就是Reality,就是现实。它在最原点,说的就是你看到的完全本地,完全是补捉来的。这个不需要任何设备,你的眼睛就可以做到。
- Diminished Reality。消解现实。这个可以理解为AR,也就是增强现实的反面。或者其实划到增强现实里也可以。谁说消解不是一种增强呢hhh。它是把你本地的一些本来就有的东西弄消失。虽然不知道这个的意义是什么,但学术概念上还是有价值的。
- Augmented Reality。也就似乎AR,增强现实,love it。很简单,就是用设备,扩充现实,给你本地的现实上再加一些generated的东西,以此来增强你的能力。现在的AR商用还大多都是基于手机的。但未来真正的AR一定是基于HMD的,shout out to Microsoft Hololens and whatever Apple is developing。
- Virtual Reality。VR 到了横轴的最尽头,当所有的东西都是生成的时候,也就无所谓远端还是本地了,就是虚拟现实。现在VR在游戏领域真的大有作为。
- 360视频。这篇文章这个taxonomy的优点就在于,把基本上会用到HMD的概念名词和技术都进行了分类。当你看到的全都是远端补捉来的现实时,你就是在看360视频了(比如一些不可描述影片)。
- Distributed Reality。就是本文提出来的了。不完全是远端现实,再加上一点本地现实,让用户更有沉浸感。(好像运用到不可描述影片里会更好)
- 其他概念。剩下的这几个概念,Annotated Video(带标记视频,这里当然是360视频,不然reality不起来),Virtual Stage(虚拟舞台),Virtual Theater(虚拟剧院)相当于是做了一些应用上的推演或划分,本质上差距不太大。或者是一些概念上的融合,比如Augmented Distributed Reality(增强分布显示,给Distributed Reality里再加点增强呗)和Augmented Virtuality(用现实来增强虚拟,让VR更有沉浸感,比如射击类游戏,让用户在VR里能看到自己的胳膊或者自己的投影,以增加真实感)
思考部分
- 这篇文章的工作还有很大的后续进行空间。比如首先就可以进行user case study。像分布现实这种概念,看似新颖,但是真正的意义在哪里还得需要用户实验来解答,并且需要心理学。我觉得这个领域的研究,最终都离不开user case study甚至是心理学。毕竟,你让一个人戴HMD假装在沙滩边吃饭,他真能感到愉悦和放松吗😂。毕竟从旁观者角度看,太诡异了(不禁又让人想到了不可描述影片)。
- 然后那就是数学了,系统地做性能优化。
- 不过这属于VR领域了,不通过光学成像的东西,嗯,感觉不是未来。
- 不是,CSDN竟然还没有一个增强现实的标签啊,等我三级了建一个。
ACM MMSys ’19 (MMVE Short Papers)
AlvaroVillegas,PabloPérez,EsterGonzález-Sosa
alvaro.villegas@nokia-bell-labs.com, pablo.perez@nokia-bell-labs.com, ester.gonzalez@nokia-bell-labs.com
NokiaBellLabs,Madrid,Spain