Unity-Hololens-Vuforia开发（图片识别和模型识别）

Unity-Hololens-Vuforia开发（图片识别和模型识别）

有些东西纠结了许久，所以来记录一下

---

环境

Hololens2
Unity 2020.3.16f1c1 (64-bit)
Visio Studio 2019 16.11.13
Vuforia 10.6.3

---

一、环境要求

MRTK正常运行要求Unity版本至少升级到2019.4，要求VS至少高于2019.16.8版本，除此以外注意一下Windows10 SDK的版本是否是最新的或者是适用的。
笔者这里的版本使用的是Windows 10 10.0.19041.0
要想部署到Hololens中，还需要额外确保Unity中安装了Windows Build Support（IL2CPP）和Universal Windows Platform Build Support

二、步骤

1.创建新的Unity工程

在File->Build Setting中切换平台至Universal Windows Platform，配置如下：

记得把Target Device改成HoloLens，Architecture应该是指从Unity导出之后是什么版本，这里选择x64或者ARM64应该都可以

2.导入Vuforia

在Vuforia官网下载SDK：Vuforia
版本如前述Vuforia 10.6.3
下载下来后是一个.unitypackage包，拖进Unity项目中，等待加载完毕。
如果弹出提示要求升级工程，点击“Update”即可。
到此即可在Hierarchy右键找到Vuforia引擎的选项了

添加ARCamera，在Hierarchy下删除原有MainCamera，在ARCamera的Inspector下选择Open Vuforia Engine configuration，添加License Key

回到Vuforia官网，在Develop→License Manager下申请新的License Key，Plan Type选择Basic即可。
复制Linces Key粘贴到ARCamera中

3.导入MRTK

下载MRTK管理工具，Mixed Reality Feature Tool：MRTK
管理工具下载好后打开如下：

点start选择要导入工程目录，目录是需要包含asset、package等的总目录
勾选如下：


Import加入工程，Approve确定，此时Unity中会自己读条导入Package

4.Player Setting设置

在File→Build Settings→Player Settings下，首先查看XR Plugin Management，如果还没有下载，就点“Install XR Plugin Management”
设置如下：

在player中，Resolution and Presentation设置如下，取消Run in Background的勾选，Orientation选择 Landscape Left

Other Setting中，设置Api Compatibility Level为.NET 4.x
设置Active Input Handing为Both

Publish Setting中，在Capabilities中勾选如下：
InternetClient
InternetClientServer
WebCam
Microphone
SpatialPerception
在Supported Device Families中勾选：
Holographic，以确保可以在Hololens中运行

为了运行顺利，可以在Quality中调整Levels为最低等级：

5.MRTK工程设置

将MRTK插入场景中，操作如图：

插入后，在Vuforia导入时已经建立的ARCamera会被移动到MixedRealityPlayspace下。（如果没有提前设置ARCamera，这里会是一个普通相机（MainCamera））
此后如果不进行修改，每次运行时，相机ClearFlags都会自动被改回天空盒，因此这里需要设置MRTK，选择MixedReality Toolkit，在Inspector中选择DefaultHoloLens2ConfigurationProfile，如图：

这时再运行相机，就能实时看到相机拍摄的画面了。

6.导入Vuforia图片识别、模型识别数据包

此处在Vuforia教程中较多，不多赘述，如果有不清楚的可以在评论或者私信提问。

7.测试

在Hierachy中右键建立Vuforia Image/Model Target，选择合适DataBase，添加识别后要显示的3D Object，先使用USB相机测试，当在USB相机下能成功识别后，再将项目build导出到hololens中。

8.Hololens打包

Unity中项目设置完成后，在Build Setting中点击Build选择合适文件夹导出即可。
在所建文件夹下，打开.sln文件。
在VS中设置为Release ARM64

Hololen与电脑的连接可以选择通过USB的有线连接和无线连接两种形式。
这里选择无线连接。在连接前需要保证Hololens和电脑处于同一局域网下，在Hololens网络中找到Hololens的ip地址。
在VS项目属性页中，将ip地址写入计算机名

第一次连接时候可能会要求输入hololens的pin码，在hololens系统设置中查看即可。也有可能会要求输入hololens用户名和密码，最好记得用户名和密码，如果忘了好像还挺麻烦的，可能要重装hololens系统什么的。
都设置好之后点击远程计算机部署，等它部署完成就能在hololense中运行查看啦！

说在最后

可能有很多不足没有顾及到的地方，仅仅是我在工程部署过程中遇到的一些问题和需要注意的重点。仍在不断努力中，共勉。