虚拟数字人是如何实现互动的呢?

本文探讨了虚拟主持人如何在三维空间内与真人互动,包括动作捕捉、面部表情捕捉、建模以及深度学习在其中的作用。虚拟主持人的互动是通过预设的指令和算法实现的,尽管看起来像是实时的,但实际上可能是一场精心排练的表演。这种技术涉及到的动作数据、延迟控制和场景布置都是关键要素。
摘要由CSDN通过智能技术生成

(文章内容不断完善中,涉及到的技术,尽可能给上案例,只要不涉及侵权)

最近看到虚拟主持人跟真人的采访,我当时很震惊,这个人咋出现在那里的呢?虚拟人的活动场景基本不是在三维空间吗?或者说一个布置好的“虚拟场景”里。

且不说怎么出现的,先说互动吧,他怎么跟真人一样聊天、互动等动作的呢?应该还是一系列算法和指令动作的的执行。

以主持人为例,如果他要跟真人一样的口型和动作,一方面是动作捕捉和面部表情捕捉的时候要做到精准,另一方面是他的延迟时间要低一些。

建模肯定是要的,建模之后,人物形态动作,会根据之前收集到的或者说捕捉到的动作数据,然后进行算法模式接近,然后,再根据深度学习,把一些动作指令进行设定,比如说什么词、句,他这边回应什么话和动作甚至表情,或者涉及到互动直播的,比如上连接的这种,他可以在听到哪个指令后,后台操作的工作人员进行操作,去上连接等等,虚拟数字人并非真的不需要人,也是数字人的一种,需要背后有一套程序算法去操作执行指令。

至于那个虚拟人跟数字人做到的同一互动,应该是在那个场景提前做了一个布置。其实所谓的互动都是一场提前排练好的演绎,就好像苏小妹跟演员的舞台共舞一样,演员背后多少次走位,一次都不能都误差,也就是虚拟人的位置是固定好的,但是演员的不是,演员是需要去迁就这个虚拟数字人的。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值