Hello，虚实集成世界

最新推荐文章于 2024-09-17 07:32:06 发布

腾讯AI实验室

最新推荐文章于 2024-09-17 07:32:06 发布

阅读量955

点赞数 2

文章标签：人工智能大数据编程语言游戏微软

11月15日，科学脱口秀X-Talk在腾讯北京总部举行，邀请自然科学家、哲学社会学者、科幻作家、文化学者等科技和文化相关领域人士，探讨前沿科技的突破以及对人类社会的影响。

腾讯 AI Lab 和 Robotics X 实验室主任张正友博士在活动中做主旨演讲，为大家介绍了一个充满可能性的新世界——虚实集成世界。以下为演讲全文：

试想一下，疫情过后的某天，你突然想去冰岛看极光。但如果真要去，办签证、坐车、过海关、坐飞机，还要隔离14天，等流程都走完，你的兴趣早没了。

但如果我们身处现在我要介绍的虚实集成世界，就都没问题。你可以安排你的虚拟分身，就是Avatar，去冰岛，看看美丽的极光，摸一摸当地的艺术品，甚至跟当地人自拍，再发个朋友圈什么的。

虚实集成世界，英文我叫它Integrated Physical-Digital World，IPhD，它不是VR、虚拟现实；它不是AR、增强现实，也不是MR、混合现实，而是虚拟世界和现实世界的紧密结合，我认为它有四个关键的技术点，就是：现实虚拟化、虚拟真实化、全息互联网、智能执行体。

虚实集成世界探索四项技术

现实虚拟化

我们看到的第一个技术点，就是现实虚拟化。多亏了近年来AI、VR、AR等软件、硬件的飞速发展，让我们有了很多现实虚拟化的例子。

第一个例子，是现实世界可以被高度虚拟化。有一家游戏公司叫 Epic，他们新出的虚幻引擎 5 渲染能力很强，做出来的世界效果，让你看不出这是实物照片，还是合成照片。

第二个例子，是现实世界里的人，可以被高度虚拟化。腾讯 AI Lab 2017年就开始研究，现在用30秒自拍视频，就能做一个你的3D形象，外形很逼真；

我们还测试了AI歌手“艾灵”，声音也能很逼真。

不仅是外形和声音，我们的目标是从细微表情，到全身动作，全部都像。我们的方法是钻研多模态交互技术，把计算机视觉、语音处理、自然语言处理、情绪认知、分析决策等结合在一起，打通技术链条，最终让虚拟人听、说、读、写、想，全都可以。

第三个例子，是虚拟化的世界还能随着真实世界的变化而变化。比如在工业的生产线上，布置数以千计的传感器，实时收集多类信息，包括颜色、厚度、硬度到速度等，这就建立了一个随时更新的虚拟模型，可以持续分析判断，是正常还是异常。数字世界成了真实世界的孪生。

当然，最终极的，可能是把人的一生都虚拟化，实现数字世界的永生，不过我们离这还远，现在还有很多技术要继续发展，包括高带宽、物联网等物理基础设施，算法模型、驱动系统、机器认知、高质量低成本的渲染等。

腾讯虚拟人技术框架

虚拟真实化

除了现实虚拟化，第二个技术点，就是虚拟走向真实化。

我们现在能把虚拟模型制作成真实物体，用3D打印，能把虚拟模型做成实物，比如工具、艺术品、甚至是机器人。

我们还可以把虚拟信息带到真实世界中，比如用增强现实，也就是AR技术，让真人和虚拟角色和物体进行交互。

比如在游戏上，任天堂的《马里奥卡丁车》能让你在家里的真实客厅里，开着游戏里的虚拟车和朋友比拼；在教育上，AR能用更形象生动的方式，教孩子们几何、天文和历史；在文旅上，腾讯与故宫、敦煌研究院一直在探索数字博物馆，未来可能会让你身坐家中，就神游到千里之外的敦煌石窟内，和具有千年历史的壁画亲密接触；在娱乐上，从初音未来到洛天依，AR能将虚拟偶像和真实舞台完美叠加，透过大屏幕或投影仪为观众呈现出一个梦幻与现实混合的三维奇观。

全息互联网

除了虚拟化和真实化，我们的第三个技术点，是全息互联网。它是创造一个科技虫洞，把虚拟世界和真实世界中分布于不同地方的人、事、物全部同步到一起。

我在微软时，曾深入研究全息的重建、传送和渲染技术。这是全息技术和混合现实技术的组合，能把分布于世界各地的人、事、物同步“投影”到一起。一个在远程的全息的人，和一个真人在一起，互相对视和互动。除了三维视觉信息，空间音频也是我研究的一部分，我们能感受到声音来自空间的不同角度和不同位置。现在在腾讯，我也开始研究触觉感知和力感知。也许不久以后我们会开始研究嗅觉和味觉。

这就像是一个虫洞，跨越了时间、地点、语言、甚至跨越虚拟和真实世界的界限，让所有人能进行更真实和更亲密的互动。就像周杰伦曾经和去世多年的邓丽君，跨越时空合唱《千里之外》，未来如果是跨越远距离的你和我，那想象的空间就更大了。

智能执行体

第四个技术点，智能执行体。

古代有个神话，是砍柴的人半路遇到下棋的童子，看了一会儿棋，一回神，手里的斧头已经腐烂，同时代的人也都没有了。这才有了“山中七日，世上千年”的典故。

在虚实集成的世界里，出现了穿梭于虚拟和真实之间，改变时间和游戏规则的智能执行体。

我们知道，很多现实问题很难研究，要么需要很长时间、要么需要很高人力或资金投入、要么就是风险很大，这些问题包括气候变化、农作物生长、发现新的药物或治疗方法等。这时我们会用到模型，将真实问题建模到虚拟世界来进行研究。

腾讯「云深智药」平台AI预测蛋白质结构

在农业这个最古老、数字化却最低的行业里，就出现了典型的智能执行体。腾讯开发的iGrow智慧农业平台，就在真实的温室里布满传感器，测温度、光照和湿度，制造出一个虚拟的温室仿真器，在15秒内就能模拟出82个生长周期，计算出最适合的温度、光照和浇水量，再利用执行器去自动调节控制，节约了能源，还增加了收益。我们的AI去年学会种黄瓜，今年学会种小番茄，我们非常期待它明年的表现。