Ubuntu20编译Unity下开源跨平台机器学习模型应用框架过程【MediaPipeUnityPlugin】

首先自然是按照官方文档说的一步步来：https://github.com/homuler/MediaPipeUnityPlugin/wiki/Installation-Guide

官方给出了几种安装方法，其中我选择的是docker安装。

1，首先，docker安装，已安装的可以跳过，具体安装教程参考：如何在 Ubuntu 20.04 上安装和使用 Docker - 知乎

注：安装好的docker需要确保在不使用sudo时，也可以执行。

2，从git下载代码，git地址如下，过程不再赘述

https://github.com/homuler/MediaPipeUnityPlugin.git

将代码克隆下来

2，构建docker环境，因为本身是ubuntu系统，我选择如下指令：

运行命令时，确保处于代码目录下，也就是目录下有docker文件夹

docker build --build-arg UID=$(id -u) -t mediapipe_unity:latest . -f docker/linux/x86_64/Dockerfile.ubuntu

指令执行期间需要联网下载相关环境，所以会很慢 ，简易使用代理，否则很难下完

 等到最后提示所有的步骤执行完毕，即可开始下一步。

 3，进入docker环境，执行以下步骤：

docker run \
    --mount type=bind,src=$PWD/Packages,dst=/home/mediapipe/Packages \
    --mount type=bind,src=$PWD/Assets,dst=/home/mediapipe/Assets \
    -it mediapipe_unity:latest

 随后进入docker环境：

4，进入docker后，开始编译插件

这里我选择的是CPU版，执行以下命令：

python build.py build --desktop cpu --opencv cmake -v

其他指令参数可以参考：Installation Guide · homuler/MediaPipeUnityPlugin Wiki · GitHub

 编译过程中出现找不到numpy模块的错误，

 开始以为是模块没有安装，使用pip指令安装时提示已安装。

随后排除python版本，执行python指令时，版本为3.9，执行python3指令时，版本却时3.6，索性直接将/usr/bin/python3删除，然后重新链接python3.9： 

随后继续编译，成功通过（需要保证3.9版本已通过pip安装numpy模块）：

 完成后便会生成所需的相关库文件，.so之类的

 

在samples目录下打开Start Scene文件即可在unity3d中查看了，点击Run按钮即可执行

插上摄像头，运行案例，其中demo很多，面部检测，脸部网格，手部骨骼，全身检测等都可使用。