Hololens远程视频通话与AR标注

软件功能仿照微软Dynamics 365 Remote Assist。

软件预览

Hololens视频通信_哔哩哔哩_bilibili

功能原理

1、首先PC端或者专家端软件通过网络传输协议获取Hololens的实时画面。

2、Hololens 提供的实时画面中包含了该画面的空间坐标数据。这些数据Hololens有提供的API接口。

3、专家端开始标注时，将标记的屏幕坐标数据转换成该画面时Hololens中的空间坐标数据，并将坐标本身信息通过网络回传给Hololens,Hololens接到数据后开始在空间绘制。

这些原理出自github上的一位作者，他也给出了源码工程。

源码地址：GitHub - VulcanTechnologies/HoloLensCameraStream: This Unity plugin makes the HoloLens video camera frames available to a Unity app in real time. This enables Unity devs to easily use the HoloLens camera for computer vision (or anything they want).https://github.com/VulcanTechnologies/HoloLensCameraStream

本人制作的软件效果图：

软件演示工程：

GitHub - stonerey/RemoteAssistant: Remote Assist for HoloLens 2 and mobile devices