Towards a Distributed Reality: a multi-video approach to xR

内容部分

这篇文章所要实现的东西还是蛮有趣的，是诺基亚贝尔实验室做的，可以实现一个叫做Distributed Reality概念的类似于在线沉浸式旅游的东西，效果如下图：

这个人戴上VR HMD，然后既能看到远端补捉来的“现实”（沙滩），又能把自己当前所处的“现实”（饭桌）代入，形成了一个新的现实：他在沙滩上吃饭（还用的筷子，可以hhh）。评价放后边吧。

不过，除了他的系统实现以外，这篇文章还有一个比较有意义的点是，对 xR 做了一个taxonomy，还是蛮适合做一些解释和叙述的。下面详细介绍一下啊

分类坐标系有两个维度，一个是你看到的东西与你的距离（纵轴），一个是你看到的东西的产生方法（横轴）。其实这里用看不够准确，因为还有听觉，future work可能还会有其他感官。

1. Local Reality。其实就是Reality，就是现实。它在最原点，说的就是你看到的完全本地，完全是补捉来的。这个不需要任何设备，你的眼睛就可以做到。
2. Diminished Reality。消解现实。这个可以理解为AR，也就是增强现实的反面。或者其实划到增强现实里也可以。谁说消解不是一种增强呢hhh。它是把你本地的一些本来就有的东西弄消失。虽然不知道这个的意义是什么，但学术概念上还是有价值的。
3. Augmented Reality。也就似乎AR，增强现实，love it。很简单，就是用设备，扩充现实，给你本地的现实上再加一些generated的东西，以此来增强你的能力。现在的AR商用还大多都是基于手机的。但未来真正的AR一定是基于HMD的，shout out to Microsoft Hololens and whatever Apple is developing。
4. Virtual Reality。VR 到了横轴的最尽头，当所有的东西都是生成的时候，也就无所谓远端还是本地了，就是虚拟现实。现在VR在游戏领域真的大有作为。
5. 360视频。这篇文章这个taxonomy的优点就在于，把基本上会用到HMD的概念名词和技术都进行了分类。当你看到的全都是远端补捉来的现实时，你就是在看360视频了（比如一些不可描述影片）。
6. Distributed Reality。就是本文提出来的了。不完全是远端现实，再加上一点本地现实，让用户更有沉浸感。（好像运用到不可描述影片里会更好）
7. 其他概念。剩下的这几个概念，Annotated Video（带标记视频，这里当然是360视频，不然reality不起来），Virtual Stage（虚拟舞台），Virtual Theater（虚拟剧院）相当于是做了一些应用上的推演或划分，本质上差距不太大。或者是一些概念上的融合，比如Augmented Distributed Reality（增强分布显示，给Distributed Reality里再加点增强呗）和Augmented Virtuality（用现实来增强虚拟，让VR更有沉浸感，比如射击类游戏，让用户在VR里能看到自己的胳膊或者自己的投影，以增加真实感）

思考部分

• 这篇文章的工作还有很大的后续进行空间。比如首先就可以进行user case study。像分布现实这种概念，看似新颖，但是真正的意义在哪里还得需要用户实验来解答，并且需要心理学。我觉得这个领域的研究，最终都离不开user case study甚至是心理学。毕竟，你让一个人戴HMD假装在沙滩边吃饭，他真能感到愉悦和放松吗😂。毕竟从旁观者角度看，太诡异了（不禁又让人想到了不可描述影片）。
• 然后那就是数学了，系统地做性能优化。
• 不过这属于VR领域了，不通过光学成像的东西，嗯，感觉不是未来。
• 不是，CSDN竟然还没有一个增强现实的标签啊，等我三级了建一个。

ACM MMSys ’19 (MMVE Short Papers)
AlvaroVillegas,PabloPérez,EsterGonzález-Sosa
alvaro.villegas@nokia-bell-labs.com, pablo.perez@nokia-bell-labs.com, ester.gonzalez@nokia-bell-labs.com
NokiaBellLabs,Madrid,Spain