来源:物联网智库
在近期召开的计算机图形顶级会议ACM SIGGRAPH 2021 上,英伟达介绍了自研的3D仿真模拟和协作平台Omniverse,并放出了“合成版老黄”的打造过程。有媒体据此报道称——万万没想到,在3个月前的GTC大会中,厨房橱柜、老黄经典皮衣、不时摇动双手的老黄本人……竟然都是假的!
老黄骗了全世界!诸如此类的消息在极短的时间内引发了科技圈的轰动,很多人甚至在 Youtube、哔哩哔哩等平台反复回放今年4月GTC老黄的Keynote视频,企图分辨“真假黄仁勋”。
然而,就在全网热议不断的档口,英伟达在其官方博客中确认,4月发布会中,黄仁勋的Omniverse数字人仅出现过一次,就在发布会约62分钟处,持续时间约14秒。根据这个信息,发布会中其他消失的老黄、厨房等片段,应该是其他CG电脑动画特效,不属于数字人技术。
尽管并非完全“造假”,但老黄无疑又火了一把。不仅如此,英伟达旗下的全球首个为元宇宙建立提供基础的模拟和协作平台Omniverse也再次将元宇宙这一概念推到风口浪尖。
真假黄仁勋?
8月12日晚间,英伟达针对“虚拟黄仁勋召开发布会对骗过’观众”的说法做出了澄清。该公司在一份更新的博客文章中表示:“当然,主题演讲离不开一个有血有肉的人站在舞台中央,全部1小时48分钟的发布会上,虚拟黄仁勋只出现了14秒(从1:02:41到1:02:55),其他时间都是黄仁勋本人召开的发布会。”
即使只有14秒,虚拟黄仁勋的难度也不可谓不高。
要想将老黄完美数字化,首先需要大量样本,做到细节丰富。为了达到这一目的,首先就需要数以千计的各种角度的照片,并通过3D扫描获取他身体的每一个特征——包括脸上的每一道褶子。
为了效果更为逼真,扫描过程还将对“标志性”皮衣单独拍照,并在3D建模过程中做非常精细的调整,从而方便后期编辑。在文字转换为音频的过程中,通过Audio2Face即能实现语音内容自动生成,只需导入纯音频即可实现模型自动讲话。
不过,仅仅只靠模型依然太假。这时候就要利用Face-Vid2Vid。通过一张老黄的照片,即可将其自动匹配合成至视频当中,达到“以假乱真”。
OK,脸的问题解决了,可是身体怎么办呢?这就需要专业的动作捕捉演员来代劳,毕竟老黄身为CEO,时间可是非常宝贵。
为了尽可能的采集老黄的身体动作,英伟达总共录制了8小时的视频,期间这位演员需要一边阅读以前的Keynote,一边模仿老黄的动作和表情。
在这些前期工作做完后,渲染仍然是接下来的重头戏,这就离不开英伟达自研的Omniverse RTX渲染器,真正意义上做到实时光线追踪、移动视角,即使调整光线也能立刻完成更新。当然,这一技术背后离不开英伟达显卡的支持,也需要GPU+云计算才能搞定。
据介绍,这场虚拟发布会总共有34个3D美术师和15个软件研究人员参与,英伟达为此做出了21版数字老黄,最终选择了其中最为相似的一个。而英伟达之所以大费周折的做出这样一位数字老黄,正是为了推广背后用到的3D仿真模拟和协作平台Omniverse。
Omniverse:英伟达“元宇宙”的关键
基于对计算机图形学(CG)技术的持续投入与探索,英伟达自主研发的CG技术已经太多太多。于是乎,英伟达选择将其整合成为一个平台——Omniverse。
具体看来,Omniverse可提供包括从CG到优化技术、从工具包到引擎等各种技术,涵盖从渲染、材质,到光影、照明(光追、路径追踪等)各种应用,其所承载的CG技术的体量可能远远不止本次发布会中用于“造假”。
据介绍,Omniverse已经被广泛应用于缺损像素修补、插帧,可对老照片和古早视频进行修复。不仅如此,Omniverse还能基于GAN生成超分辨率图像、直接把2D照片渲染成3D场景……
在丰富多彩的功能之外,“永远实时在线”是Omniverse的核心亮点,其是指能让设计师、艺术家和审核人员在任何地方通过领先的软件应用在同一个共享的虚拟世界进行实时合作,跨平台实现物理渲染、模拟和仿真。
正是基于平台具备的强大功能,不只是人像修复与仿真,Omniverse已经能够在工厂数字化中发挥重要作用。
例如,通过识别车辆、自主机器、机器人等,Omniverse能够帮助工厂进行设计,其还能在虚拟环境中加入机器人和AI,并在训练完成后直接部署在真实环境中。事实上,这些技术已经在宝马的数字工厂中得到落地,将工厂效率提升了30%。
不止是宝马工厂,Omniverse平台还能够应用于机器人仿真、自驾车仿真在内的一系列技术研发。例如,自动驾驶和工厂的AI检测可能存在行人误判,一旦AI将街头公告张贴的人脸图片识别为行人,就可能导致事故的发生。而如果能够将逼真的数字人与渲染等技术相结合,就能在仿真环境训练下模拟行人,让AI学会判断图片和真人的区别。
如今,借助海量技术工具,Omniverse已经得到广泛支持。自去年12月发布公测版以来,已经有超过5万名个人创作者下载了Omniverse。
为了提供更好的技术支持,Omniverse还计划将通过与Blender和Adobe集成来实现大规模扩展,并将向数百万新用户开放。据悉,Blender是全球领先的开源3D动画工具,现在该工具将加入通用场景描述(USD)支持,使艺术家能够访问Omniverse制作流程。同时,Adobe正与英伟达合作开发为Omniverse提供Substance Material支持的Substance 3D插件,为用户提供全新素材编辑功能。
而在不断加码的背后,英伟达之所以对Omniverse投入如此巨大的心血,其实还有一层更深的远望——元宇宙。
事实上,随着元宇宙概念逐步成为焦点,英伟达是少有的大力投入的企业之一。英伟达Omniverse开发平台副总裁Richard Kerris曾表示:“英伟达Omniverse通过实现元宇宙这一愿景来连接各个世界。”由此可见,Omniverse平台是英伟达实现元宇宙的基础技术和平台产品。
那么,元宇宙究竟是什么?
如何理解元宇宙?
根据各种研究机构、分析师和投资人对它的解读,元宇宙不仅是基于物理实体在虚拟世界中1:1重建的一个“数字孪生体”,还包括由我们的想象力创造的各种虚拟事物。
元宇宙拥有完整的经济逻辑,数据、物体、内容以及IP都可以在元宇宙中存在,而且元宇宙不仅包含虚拟和现实的万事万物,还包含他们之间的各种关系和连接。任何个人和企业都可以参与建设元宇宙,使之不断完善和更加繁荣。
通俗来讲,元宇宙创造了一个始终在线的、不断被刷新的实时数字世界,里面拥有无限量的人、物、事。参与其中,人们不仅可以自由生活,还可以自由创造。元宇宙的核心在于永续性、实时性、多终端、经济功能、可连接性和可创造性。数字孪生、混合现实、物联网、5G等技术都是我们建设元宇宙的手段和工具。
由此可见,元宇宙将是包含许多独立工具、平台和基础设施,由标准和协议支撑的物理世界和虚拟世界不断融合的结果,其将真正构建出现实世界与虚拟世界的交融,并在方方面面改变世界。
不只是英伟达,微软也早在此前就已经开始进行元宇宙的应用。在与全球最大啤酒企业之一的百威英博合作中,微软就与其共同构建了“元宇宙”,其中融合了物理世界和数字世界中的多种元素,创造了一系列的变革性解决方案。
在工厂的实际操作中,百威英博就通过叠加数字孪生、机器学习、混合现实、低代码、精准定位等各种技术,通过想象力交织创造出了一副创意画布,最终实现生产瓶颈突破、产品生命周期跟踪、员工实时定位及减少碳排放等功能,在零售端做到个性化产品的点击率提升近100%、订单转化率提高67%。
此外,Facebook创始人兼首席执行官马克·扎克伯格在2021年6月底表示,该公司的未来规划远不止是社交媒体,而是筑造一个元宇宙。扎克伯克宣称,希望在未来用5年左右的时间,将Facebook打造为一家元宇宙公司。
2021年7月29日,Facebook发布2021财年第二季度审计财报。在财报会议中,有分析师问到关于Facebook对元宇宙的投资以及相关愿景,Facebook高管给出了相应回答。Facebook表示,接下来将以每年50亿美元左右的规模持续投入元宇宙的开发与建设。
写在最后
包括英伟达、微软、Facebook在内的全球科技引领者都不约而同的剑指元宇宙,无疑都表明元宇宙的未来着实可期。由于很难界定元宇宙的边界,也很难将其量化,保守估计元宇宙的规模也在兆亿美元以上。
当然,尽管未来可期,但元宇宙目前仍处于发展的极早期阶段。此次,英伟达倾心打造的14秒“假老黄”,无疑也将成为元宇宙发展的行业标志性事件和高光时刻,并有可能成为类似Alpha Go战胜人类围棋冠军那般意义深远。
没有任何一家独立的公司可以拥有元宇宙,反而是元宇宙可能孕育多家独角兽企业。如果2021是元宇宙走进现实的元年,那么老黄此次或也将青史留名。
参考资料:
1.《只有14秒,假老黄才是假的!黄仁勋没有骗了全世界,英伟达「元宇宙」验明正身》,新智元
2.《黄仁勋骗过了全世界,三个多月都没人发觉!皮衣是假的厨房是假的,连他自己都是假的》, 量子位
3.《英伟达自曝发布会“造假”!老黄竟是AI数字人,揭秘元宇宙黑科技》,智东西
4.《「假黄仁勋」刷屏之后,英伟达官方辟谣:只有14秒是虚拟的》,机器之心
5.《从互联网,到物联网,再到元宇宙,兆亿量级的终极梦想走进现实【物女心经】》,物联网智库,彭昭
未来智能实验室的主要工作包括:建立AI智能系统智商评测体系,开展世界人工智能智商评测;开展互联网(城市)大脑研究计划,构建互联网(城市)大脑技术和企业图谱,为提升企业,行业与城市的智能水平服务。每日推荐范围未来科技发展趋势的学习型文章。目前线上平台已收藏上千篇精华前沿科技文章和报告。
如果您对实验室的研究感兴趣,欢迎加入未来智能实验室线上平台。扫描以下二维码或点击本文左下角“阅读原文”