抖音上二次元虚拟主播直播方案

二次元虚拟主播国外发展比较早，国内也有几家作这个的。国内主要是2D的可以搜live2D 了解，比较多的方案，也有一些商用的，带动作捕获的 。

今天我要分享是一个可以完全商用的，基于摄像头的进行动作捕获的虚拟主播。我们指导动作捕获的装备比较贵，整套下来预算估计得超过1个W。但是基于摄像头的纯软件的方案，在2021年以前，由于局限于AI算法的发展，完全商用难度比较大。但是随着科技居然google开源的midiapip后，视乎发生比较大的变化。废话不多说，我们今天来介绍就是该软件的使用教程。

然后分享源码方案,文章的最后：

 

我们先来看视频：

Vtuberface使用教程二次元虚拟主播通过摄像头全身动作捕获

视频中，软件运行后会打开摄像头，然后检测人体的关键特征：

1：面部特征点，用于驱动面部动作。但是由于模型局限，能驱动一些动作眨眼，张口 。头部位置等，表情方面，暂时不支持。

2：手指细节，支持手指动作驱动。

3：全身关节驱动。这个就比较厉害了，支持驱动身体关键关节特征位置，然后驱动虚拟主播。效果还是不错的。