增强现实AR

前一段时间一直在做光场方面的研究,看到了一些新的东西,也了解了一些目前虚拟现实(VR)的火爆,但就我个人而言,我还是比较看好AR的。正好我之前做过一段时间关于AR和VR的调研,所以整理了一些东西,不然又遗忘了快哭了。但涉及的都比较浅,多是些概念和介绍性的东西,具体的技术就不讨论了,以后等我光场的研究告一段落再补充吧。


增强现实(Augmented Reality,简称AR),也被称之为混合现实。它通过电脑技术,将虚拟的信息应用到真实世界,真实的环境和虚拟的物体实时地叠加到了同一个画面或空间,也叫“21世纪的移动随身听”或“能够实时交互的移动电视”。

AR设备:由于AR是现实场景和虚拟场景的结合,所以基本都需要摄像头,在摄像头拍摄的画面基础上,结合虚拟画面进行展示和互动,比如GOOGLE GLASS。

目前AR有的产品分类:软件(API),应用(APP),硬件和服务,国内目前仅限于简单APP和小部分硬件制作,主要硬件和软件(API)都是国外在推进。

投资银行 Digi-Capital 近日发布了一份最新报告,称至 2020 年,全球增强现实 (AR) 与虚拟现实 (VR) 市场规模将达到 1500 亿美元。其中 AR 市场规模为 1200 亿美元, VR 市场规模则仅 300 亿美元。

  AR设备代表:

HoloLens:HoloLens使用的传感器是一种高效节能的深度摄像头(左右各两台),具有120°×120°的视野。实际视野类似于眼前放了一块15英寸的屏幕,分辨率未知。传感器提供的其他功能包括头部跟踪,视频拍摄,以及声音捕捉。除了高性能的CPU和GPU,HoloLens带有全息处理器(HPU)这一协处理器用于从所述的各种传感器集成数据,并处理诸如空间映射,手势识别和语音识别的任务。

MaicLeap

AR实现流程框图:


第一步,三维信息感知:计算机必须通过传感器感知三维环境信息,这个传感器可以是普通 RGB 摄像头,也可以是 TOF 或者结构光深度摄像头。

第二步,三维场景重构,这是最重要的一步,需要通过所获得的环境信息实时对场景进行三维重构。使用的是近在 AR 领域反复提及的 SLAM 算法,该算法在实时构建三维场景的同时,能够准确地定位拍摄相机(或拍摄者)的位置。

第三步,三维场景识别:获得丰富的三维场景信息后,需要让计算机理解三维场景,即让计算机认知什么是地板,什么是天花板,什么是桌子,是一张什么桌子,桌子的材质是什么?

第四步,物理建模与仿真:在识别出三维物体之后,虚拟物件需要和物件发生交互(例如:碰撞),所以要对三维物体的材质进行识别。如果是实时的流体材质仿真,就需要提到 CG 研究领域的 physically based rendering。

第五步,实时 CG 图像渲染:在完成了所有呈现效果的仿真计算之后,便是将 AR 效果实时渲染出来,进而投射在显示设备上。

总的来说:
1. AR可以简单的分为两个部分:一个是对现实世界的感知,另一个是对虚拟图像的融合和呈现。
2. Magic Leap和HoloLens的感知都是空间感知定位技术,不同的是显示部分,Magic leap采用的是光纤向视网膜直接投射整个数字光场产生所谓的Cinematic reality,而Hololens采用一个半透玻璃,从侧面DLP投影显示,虚拟物体总是实的,与Google glass方案类似,是一个2维显示器,视角不大,40度左右

  Google Project Glass

在眼镜前方悬置的一台摄像头和一个位于镜框右侧的宽条状的电脑处理器装置,配备的摄像头像素为 500 万,可拍摄 720p 视频。镜片上配备了一个头戴式微型显示屏,它可

将数据投射到用户右眼上方的小屏幕上,镜片屏幕分辨率640×360。显示效果如同 2.4 米外的 25 英寸高清屏幕。

  Project Tango

谷歌Project Tango的研发计划,该计划的目的是通过摄像头将智能手机与周围环境结合起来,从而实现更多的交互功能。ProjectTango智能手机配备了四个相机传感器,除了一个普通成像传感器之外,还包括两个FOV视场传感器和一个红外线景深传感器主摄像头为400万像素,而两个鱼眼相机传感器则分别位于手机的正面和背面,其中前置鱼眼传

感器的视场为120度,视觉效果与人眼接近,而后置鱼眼传感器的视场则为180度。此外,独特的红外线景深传感器还能产生分辨率为320×180的图像。

  CES 2016的AR

  AR+体感的融合

N-show体感学习机,N-show体感试衣平台

   全息投影式导航

WayRay Navion是一种增强现实导航系统,可以将全息GPS图像和驾驶员通知投射到汽车的挡风玻璃上。

ProViu 360则可以将摄像头获得的信息做成3D的模拟效果,显示在显示屏上,这样驾驶者便可以更为真切地看到盲区中的各种情况。

Google智能风挡玻璃,放大版的谷歌眼镜,它通过摄像头和GPS的识别,在风挡玻璃上虚拟显示与行车、生活以及娱乐相关的各种信息。

CES2016几乎都是VR的产品,目前来说ARVR在技术上更难,VR是对AR的妥协。







评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值