近年来我们看到 AR 已经从畅想,发展到今天技术相对成熟的阶段,搭载 AR 技术的应用也不断推陈出新。5G 的发展还将越来越多的 AR 体验走进生活,被更多人了解和使用,在刚刚落幕的 Google 开发者大会上,ARCore 的技术创新和应用案例闪亮夺目。
今年 Google 开发者大会(Google Developer Summit)圆满落下帷幕,全程 6 天的线上大会,为各行各业关注科技创新的参与者带来了尖端技术趋势和行业机遇,更有大量产品更新和开发工具发布,用技术赋能创新。而在这一系列精彩纷呈的技术盛宴中,随着近年来 AR 技术的越趋火热,谷歌 Google 在 ARCore 上的一些列更新和应用也吸引了更多人的关注。
Google ARCore 为哪些行业带来了创新的应用?这一年来有哪些功能上的更新不可错过?之后将带领 AR 技术如何发展?以上这几个问题,在本次谷歌开发者大会的 ARCore 分会场,Google 大中华区 AR/VR 负责人熊子青与各位开发者做了关键性分享。如果你错过直播,就一定要看本文为你带来的亮点总结。
ARCore 平台 2020 功能革新
2018 年 3 月 Google 正式推出了 ARCore 这个帮助开发者以更简单的方法和更强大的工具构建增强现实体验的平台。这一平台在过去两年中得到了飞速的发展,转眼间,ARCore 经历了 20 次的版本迭代,以下便是 AR 领域 2020 年更新的重磅功能,这里一次给到你。
1. 深度 API (Depth API)
深度 API (Depth API)是 Google ARCore 今年上线的重要功能,可以针对任何现实场景进行 3D 理解,让 AR 物体与用户所处的真实环境完美结合,带来沉浸式交互体验。
Google 开发出的动态深度算法,允许开发者只通过单个 RGB 摄像头,就可以创建整个环境深度图。在用户移动手机的过程中,算法会记录多个从不同角度拍摄的图像,通过对比,估算出场景中每个像素的距离。如果设备搭载了 ToF 等主动深度传感器,那么这些数据会自动纳入深度信息中。这样会提升现有深度图的理解能力,即使不移动相机镜头,对于场景中移动的物体,设备也能很好地实时理解物体的“景深”。同时,像在“白墙”这种缺少纹理的平面上,或动态场景中,搭载主动深度传感器(TOF)也可解决之前的“理解无能” 问题。
这项功能以 MotionStereo 作为输出基础,目前已有两亿以上的 ARCore 设备支持。在不久的未来会拓展到所有的 ARCore 设备上。
有了 Depth API,虚拟物体可以在现实世界找到自己的位置,和环境良好互动。让我们一起看看下面的优秀案例。
Snap Lens —— 把你的家打造成“海底世界”,鱼群在家具间肆意穿梭。
SKATRIX by Reality Crisis —— 在家打造滑板公园
Quick Measure by 三星 —— 手机也能当尺子用
TeamViewer Pilot—— 足不出户获取远程技术支持
2. 持久云锚点(Persistent Cloud Anchors)
经过一年的研究,云锚点技术“一键更新”成功,于今年 10 月新鲜出炉。“升级版”允许用户在更大的区域内完成映射和内容锚定,体验时间更长。换言之,AR 现在安装了“保存按钮”,让虚拟对象和真实世界对应叠加。用户可以将锚点安插在附加笔记、视频链接和 3D 物体等任何需要的地方,并分享给身边的朋友。
过去,云锚点最长“保滞期” 只有 24 小时,而此次推出的全新架构能够将锚点停留时长延至一年,并进行多次延展。同时谷歌团队也推出了相应的 API ,来实时反馈锚点地图的创建质量。开发者可以利用这一功能指引用户创建优质锚点。
【应用案例】
MARK by 创梦天地 & Sybo —— 真实世界线上共享,玩转 AR 涂鸦
MARK 应用搭载永久云锚点技术,可以让用户通过智能手机和朋友、粉丝共同发现、共同创作出与现实世界完美贴合的 AR 涂鸦。利用 AR 和场景完美整合的特性,还可以进行房屋装饰,体验多人大范围寻宝游戏,甚至跨城市慈善募捐等。
REWILD by PHORIA —— 把博物馆“搬”进你家
面对新局势的逆境,全国各地的博馆纷纷关闭,Rewild 小组则充分利用 ARCore 的深度 API 以及持久云锚点功能升级 AR 体验,真正做到将博物馆“搬”进家中。玩家可在每一集中亲眼目睹人类活动对大自然造成的不好影响,并在体验过程中共同努力,恢复自然生态。趣味好玩、沉浸感十足,同时兼具教育意义让 Rewild 两次获得著名的威比奖最佳 AR 奖项。
除了功能上的更新,在设备层面 ARCore 通过简单的平台和强大的工具帮助开发者开发出更多解决真实世界问题的 AR 应用。现在全球 ARCore 认证设备已达 7 亿部 。此外,Google 已经和全球手机大厂共同合作,在软硬件设计和开发的阶段就确保设备能够在上市时具备支持 ARCore 的条件。随着新机的上市,越来越多的人能够体验 ARCore 的强大。
3. 瞬间放置 API(Instant Placement API)
大部分用户对 AR 技术的初体验就是打开相机,同时晃动手机寻找平面。但是一半以上的用户会选择中途退出应用,就是因为找不到平台来放置虚拟对象。这主要是因为 AR 三角测量算法要求手机采用特定的方式进行移动才能够在 3D 空间中定位,寻找特征点。这需要相机镜头尽可能大范围抓去图像,同时用户缓慢移动设备才能让平面检测效果达到最好。为了解决这一痛点,Google 推出了瞬间放置 API(Instant Placement API)。
有了这个功能,用户无需让移动设备扫描周围环境、等待 ARCore 完成跟踪后,再进行 AR 体验。相反,它可以快速抓取小范围平面中的特征点,并流畅地放置虚拟对象,让用户与之互动。在用户放置 AR 对象后,随着设备在环境中的移动, 虚拟对象的位姿将得到实时反馈。
此外,瞬间放置 API 可以搭配比例维持功能一起使用,这对于家装场景尤为适用。请看下面这个例子。通过 AR 技术,用户不但可以将单人沙发立即放置在屋内,还可以等到 6DoF 位姿准备就绪后,根据房间比例使其“任意位移”。这样既可以保证沙发大小的准确性,又能在房间内查看整体效果,找到最佳位置,省去“跑腿换货”的时间。
【应用案例】
美图软件
在国内异常火爆的 P 图软件,在一些滤镜中也搭载了瞬间放置 API。例如,在房间中放置一个金光夺目宝藏箱,或者在地板上投射出当日天气和日期,让用户快速跳过平面理解的过程,轻松放置虚拟物体。
AR 丰富的应用场景 —— 让用户提前“尝鲜”未来科技
随着科技的不断演进,人机交互的方式正在不断变革。摄像头依然是数字世界的眼睛,能“看懂”并“感知”这个世界。如今,有了 AR 技术的“加特效”,摄像头可以实现三维空间的追踪、了解环境中物体的平面、光线、位置、大小。将“整个世界”输入,结合 IMUs,GPS 以及背后的算法和深度学习,在最需要的位置和时空无缝连结,并响应现实世界。那些过去只能在科幻片中看到的未来场景,正在随着 AR 技术的更新迭代而真正落地,成为可能。
一旦有了这些丰富的输入与输出,相机便可以解锁全新的功能。如今,Google 很多的应用也搭载了 AR 技术,进一步服务用户提前“尝鲜”未来科技,让人们的生活更加便捷、有趣。
更加丰富的应用场景
在 Google Search,通过 AR 技术将虚拟对象投射在家中的客厅,可以让你 360 度观看企鹅、人体骨骼、数学公式等 3D 模型。特殊时期,这项功能得到了全球用户的广泛使用。
Google Lens,智慧镜头,让你打开相机就可以辨认花草、翻译文字、识别地标。
YouTube AR 试妆, 让你看美妆大 V 介绍产品的同时就能通过“虚拟试妆”即刻体验。
Google 地图 AR 步行导航,遇路口自动提示前行方向。目前是用户数量最多的 AR 应用之一。
沉浸式 3D Swirl 营销工具, 将人们带入品牌世界, 大大提升用户的参与度及品牌影响力。
ARCore 的成功案例就在你身边
在海外,已经有数千个 ARCore 应用上线供用户进行体验。同时,在国内我们也看到了越来越多 AR 应用的推出。本次开发者大会上,Google 便为大家带来了两个 ARCore 应用的成功案例,给在做的开发者一些启示。
滴滴 x ARCore:“路痴”出行更简单
滴滴作为领先的出行服务提供者,目前服务已经覆盖全球 1000 多个城市,为了践行“让出行更美好”的使命,滴滴一直在想办法解决“碰面难”的问题,让乘客司机轻松快乐启程。通过利用 ARCore 技术,滴滴的 AR 实景导航从用户痛点出发解决问题,大大改善了用户找上车点的体验。现在 AR 实景导航 已经在北京深圳、郑州、厦门、以及日本东京等地的机场、火车站及大型机场落地。
数据显示,AR 实景导航能帮助用户节省近 1/4 的时间,帮助用户更便捷地到达上车点。我们也在持续搜集用户的反馈,更好地进行优化,电话调研显示 AR 导航用户满意度达 80%。目前,在已经开通服务的大型商场机场火车站,约 15% 用户会选择使用 AR 实景导航。
网易有道 x ARCore:让概念更易懂
由于新局势的原因,为了全力支持学生“在家学”的需求,网易有道成为了 Google 今年在教育领域发力的重要合作伙伴。各式的 ARCore 教育应用提供了沉浸式的新奇体验,让学生远程学习更加有趣高效。有道少儿字典就是陪伴孩子学习的重要利器。不知道怎么玩?看看下面这个例子。
在学习“三角恐龙”这个单词时,ARCore 可以直观地在现实世界中投射出相应的 3D 模型,让孩子 360 度全景观察。除此之外,还可以将“恐龙”放置在书房近距离接触,趣味体验,学习不止。数据显示,每位用户每次会查看 5 个以上的 AR 3D 单词,而照片及视频的分享率高达 90%。
通过本次 Google 开发者大会,ARCore 在中国开发者群体得到了进一步的讨论和关注,新功能的发布赋予了开发者们更多想象的空间,进一步实现自己的创意与愿景。Google 相信,随着科技不断创新,AR 会逐渐摘去“未来”、“黑科技”等标签,成为真正落地、服务于用户的常用手段。
如果您的 AR 应用所打造的虚拟物体不够真实,可以通过 Google 的示范应用 ARCore Depth Lab 体验 ARCore 深度 API 功能。目前,这个应用已经上架 Google Play 且源代码已开放。在 Github 直接搜索 arcore-depth-lab,相关代码、文献、简介,小视频便可免费下载。
如果您对 ARCore 的更新有任何期望和建议,或者在实操过程中遇到了什么问题,欢迎登陆官网或关注【谷歌开发者】公众号寻求帮助,也可在下方留言与我们联系。
此外,您还可以前往中国大学 MOOC 官网搜索【Google ARCore 入门开发课程】系统学习 ARCore 开发技术,让科技为生活拓展无限创意与体验。
点击“阅读全文”也可进入学习哦。