【小沐学AR】VIVE Sense - SRWorks SDK

已于 2023-07-03 00:51:56 修改
阅读量2.1k 收藏 22
点赞数 3
分类专栏： AR/VR 文章标签： ar vive htc vr srworks
于 2021-10-18 15:09:02 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hhy321/article/details/120775037
版权

SRWorks SDK 测试

1、简介

随着 VIVE Pro、VIVE Pro Eye 和 Cosmos 的推出，开发人员现在可以使用立体前置摄像头来创造新的体验，将透视立体摄像头视图与其虚拟世界相结合。这将使开发人员能够使用立体 RGB 传感器执行 3D 感知和深度感应，为更具创意的交互式体验开辟新世界。

除了更新的 OpenVR 摄像头 API 现在可以处理比原始 VIVE 的单色摄像头更多的功能之外，VIVE 软件团队还为开发人员提供了对 SRWorks SDK 的早期访问权限。

SDK 包括对带有 Unity 和 Unreal 插件的原生开发的支持。
还包括一个示例伴侣：在后台运行的人类检测伴侣作为叠加层。

该VIVE SRWorks SDK扩展能力和VIVE VR系统的潜在用途直通技术。借助这个强大的工具，内容开发者可以将现实世界带入 VR。大多数情况下，佩戴耳机时现实世界的视野会被遮挡。通过使用VIVE HMD的双摄像头，耳机可以在立体视觉中接收来自现实世界的输入。大多数情况下，佩戴耳机时现实世界的视野会被遮挡。通过使用双摄像头，VIVE HMD 可以在立体视觉中接收来自现实世界的输入。

2、功能模块

使用此 SDK，您不仅可以访问原始相机图像：

  • 深度
  • 空间映射（静态和动态网格）
  • 在前景或背景中放置虚拟对象
  • 与虚拟对象的实时交互和简单的手部交互
  • 用于语义分割的 AI Vision 模块。

这些功能由四个服务模块提供，即深度模块、透视模块、3D 重建模块和 AI 视觉模块，从而使开发人员能够专注于内容。
在这里插入图片描述
双摄像头的图像通过以下 VIVE SRWorks 模块进行处理，然后输出可以通过Unity或Unreal渲染并交付给渲染引擎：
在这里插入图片描述

3、运行要求

要通过 VIVE SRWorks SDK 在 Unity/Unreal 中开发应用程序，应满足以下最低软件和硬件要求：
在这里插入图片描述

4、驱动安装

4.1 steam安装

https://store.steampowered.com/about//
在这里插入图片描述

4.2 steamvr安装

打开steam平台，然后登录，搜索如下，查找steamvr，下载它，在线安装。
在这里插入图片描述

在这里插入图片描述
在steamvr的设置里将“启动摄像头”设置打开，这样才能进行后面的AR功能测试。在这里插入图片描述
在这里插入图片描述

4.3 SRWorks Runtime

https://dl.vive.com/SDK/SRWorks/VIVE_SRWorksInstaller_0.9.7.1.msi
在这里插入图片描述

5、SDK开发包下载

官网地址：
https://developer.vive.com/resources/vive-sense/sdk/vive-srworks-sdk/
在这里插入图片描述
双摄像头具有两大优势：

3D感知由于左右眼分别使用独立的摄像头，因此在观看现实世界时可以进行 3D 感知。
深度感应一个基本的应用是真实的遮挡。您还可以利用此深度信息来实现其他更高级的场景，例如身体、手和面部跟踪。

sdk开发包下载地址：
https://developer.vive.com/resources/vive-sense/srworks-sdk/download/latest/
在这里插入图片描述
在这里插入图片描述

6、SDK开发包测试

6.1 Unity sample

解压文件：SRWorks_v0.9.7.1_Unity_Prebuild_Samples.zip

在这里插入图片描述在这里插入图片描述
在这里插入图片描述
unity的测试例子解压之后有两个例子：Plugin、Experience。

  • Plugin例子
    在这里插入图片描述
    Launch the GUI by pressing the “S” + “R” keys.
    在这里插入图片描述
    主要分为四个界面分页的内容：
    （1）PassThrough
    （2）Depth
    （3）3d
    （4）SceneUnderstanding

但这里我们主要介绍Experience例子。

  • Experience例子
    -
    在这里插入图片描述

6.1.1 Shader Effect

在这里插入图片描述
在这里插入图片描述

6.1.2 Depth Control

在这里插入图片描述

6.1.3 CameraControl

在这里插入图片描述

6.1.4 Portal

在这里插入图片描述

6.1.5 Settings

在这里插入图片描述

6.1.6 3D Preview

在这里插入图片描述

6.1.7 Enable Mesh

在这里插入图片描述
Static(MR)
在这里插入图片描述
Static(VR)
在这里插入图片描述
Dynamic(MR)
在这里插入图片描述

6.1.8 Segmentation

在这里插入图片描述
出现一个骨架人走到被识别的椅子旁，然后坐下。

6.2 UE4 sample

解压文件：SRWorks_v0.9.7.1_UE4_Samples.zip
在这里插入图片描述

6.3 C sample

解压文件：SRWorks_v0.9.7.1_Native_C_Library.zip
在这里插入图片描述
在这里插入图片描述
打开代码工程文件，编译其中的sample-vs2015，运行之后，报错，目前还没有解决。
在这里插入图片描述

后续

如果你觉得该方法或代码有一点点用处，可以给作者点个赞；╮(￣▽￣)╭
如果你感觉方法或代码不咋地//(ㄒoㄒ)//，就在评论处留言，作者继续改进。o_O???
谢谢各位童鞋们啦( ´ ▽ )ﾉ ( ´ ▽ )っ！！！

爱看书的小沐
关注
  • 3
    点赞
  • 踩
  • 22
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
专栏目录
DoDoFishSRWorksDemo：该项目使用SRWorks SDK演示了3种AR游戏，开发人员可以通过从此演示中学习使AR幻觉和互动来节省时间
02-06
DoDoFishSRWorksDemo 该项目使用SRWorks SDK演示了3种AR游戏，开发人员可以通过从此演示中学到AR幻觉和互动来节省时间。 要求 ： Geforce 10系列GPU Unity 2017 注意：需要启用双摄像头 初始步骤： 获取最新的unity 2019.4 导入VIVE SRWorks SDK – 0.9.3.0 3.导入Handtracking SDK – 0.9.2（或更高版本） 从“ Unity Package Manager”导入TextMesh Pro 导入DOTween（HOTween v2）（单位资产商店） 导入SteamVR插
Vive-SRWorks-0.7.0.0-Unity-Plugin.unitypackage
05-09
Vive-SRWorks-0.7.0.0-Unity-Plugin.unitypackage VIVE PRO 官方最新版AR sdk 需要和Vive-SRWorks-0.7.0.0-Unity-Experience.unitypackage 和steam vr plugin一起使用
Plugin is too old,please update to a more recent version,or set ANDROID_DAILY_OVERRIDE environment v
zwei1002的博客
12-31 2278
昨天晚上还好好的工程今天回来打开项目就挂了， 提示如下错误： Error:(1, 0) Plugin is too old, please update to a more recent version, or set ANDROID_DAILY_OVERRIDE environment variable to "a8faa180fc282060c9b8ec88f9bdcc907212
AR(Augmented Reality)相关SDK
jaccen的专栏
01-16 647
问题：做好用的AR SDK有哪些呢？ 1、Amazon Sumerian 特性： 基于WebGL JavaScript API 支持ARkit跟ARCore 支持标准的frameworks ：WebGL、WebAR、WebVR、WebXR和Azure Links:https://aws.amazon.com/sumerian/pricing/https://aws.amazon.com...
【SR Works】使用HTC Vive Pro结合SteamVR在Unity中制作MR内容
Endboil的博客
11-01 2715
HTC Vive Pro有两个前置RGB摄像头，官方出了一套SR Works SDK来借助这两个摄像头实现MR功能。本篇的目标是，成功运行官方的MR示例，并结合SteamVR和SR Works SDK在Unity中实现MR项目的开发准备。
处理Unity中使用HTC VIVE PRo的SRWork插件若干问题
Just do IT
10-14 1242
一、介绍 HTC VIVE Pro版本的头盔显示器可以使用一个叫SRWork的工具轻松制作混合现实功能的案例，如图1所示：功能很强大，目前据我写 图1 这篇文真为止已经更新到了SRWork0.9.7.1版本。我使用的Unity为2018.4.26版本，头盔显示器设备为Pro2版本。在使用的过程中主要碰到如下问题： 无法开启Stem VR的摄像头进行测试，也即头盔上的摄像头无法在程序运行的时候打开； 无法运行SRWork RunningTime，如图2所示 图2 使用Unity的...
基于Unity和Vive眼动SDK的VR眼动追踪研究场景开发
最新发布
CodeConscript_15x3的博客
08-18 1803
因为毕业论文的需要，我得在一年内尽快熟悉实验室的Vive pro eye并基于这套设备完成眼动追踪教育学注意力行为研究。跟随本篇文章，你将学到如何在Unity开发环境下，基于Vive pro eye硬件和SteamVR、OpenXR、SRanipaRuntime SDK三个第三方包，开发出一个能实时获取眼动追踪数据（包括3D视线碰撞坐标，2D屏幕下转换坐标、注视物体名称、时间戳等）的UnityVR场景，为之后的VR环境下眼动追踪研究提供参考。
Unity接入VIVE Focus3 SDK（4.2）HTC一体机流程记录
qq_42223582的博客
12-03 3650
前两天公司新买的设备接入，接的是3.2的SDK 嗯…跟简单直接拖进去sdk包。当时接这个sdk我记得刚到4.0，所以就没有选择接新的（怕bug太多）。 好了先说一下我遇到的问题吧：
Vive-SRWorks-0.8.0.2-Unity-Experience
05-07
htc vive pro 眼镜 官方demo 附带教学文档 一共11个案例 。
Vive-SRWorks-0.7.0.0-Unity-Experience.unitypackage
05-09
VIVE PRO 官方最新版AR sdk 需要和Vive-SRWorks-0.7.0.0-Unity-Plugin.unitypackage一起使用
WaveSDK(适用于HTC VIVE Focus)
08-15
WaveSDK，HTC VIVE Focus开发开发工具包，2.0.37版本(非最新)
ViveProSDK_Unity
10-05
这个是htc vive pro 的sdk ，里面有vive pro 支持ar拓展的案例。
SRWorks_v0.9.0.3_Plugin-Unity.zip
03-09
对于VIVE Pro，VIVE Pro Eye和Cosmos的前置摄像头，SRWorks SDK包括以下服务模块，深度模块，透视模块，3D重建模块和AI模块，从而使开发人员可以专注于内容。 该SDK通过Unity和Unreal插件支持对本机开发的支持
Vive-Teleporter-master.zip
05-24
steamvr瞬移插件，如果觉得从github上下载慢的话，可以下载这个。下载这个后直接导入unity使用，但是不要导入unity商店里的steamvr插件，否则会报错。
Htc Vive Sdk（OpenVR），Hello World
烟囱囱
08-17 7901
开发引擎：Unity3d 设备：Htc Vive Htc Vive Sdk（OpenVR），Unity3d 开发，Hello World Htc Vive Sdk（OpenVR），Unity3d 开发，手柄射线 Htc Vive Sdk（OpenVR），Unity3d 开发，UGUI界面响应 Htc Vive Sdk（OpenVR），Unity3d 开发，UGUI响应代码分析篇HelloWor
[HTC教程] HTC相关开发所需SDK等工具都在这里了。
前路漫漫的博客
07-01 7140
OpenVR SDK https://github.com/ValveSoftware/openvr  OpenVR SDK是由原本的SteamWorks SDK更新而来，新增对HTC VIVE开发者版本的支持，也包含 Steam VR的控制器及定位设备的支持。相关的API是以C++实作，已有C++经验的开发人员可以直接  学习。  SDK documentation https:
HTC Vive VRTK SDK使用入门之集成（版本3.2.0）
nicolelili1的专栏
07-09 7678
1、创建一个空物体，重命名为VRTK_SDKManager。VRTK_SDKManager用来管理任何进行设置的VRTK_SDKSetup。添加组件VRTK_SDK Manager 2、创建一个空物体，重命名为VRTK_SDKSetup。添加组件VRTK_SDKSetup 3、将Camera_Rig作为VRTK_SDKSetup的子物体。 4、在VRTK_SDK Setup中的Qui
HTC Vive开发学习——VRTK（3）更新到新版本SDK！
fcauto2012的博客
05-31 1423
上两节中，我们主要对SteamVR_Unity_Toolkit（简称旧版VRTK）中的一些基础控制器脚本进行了学习，包括VRTK_ControllerEvents（以下简写会经常省略VRTK_前缀）、SimplePointer和BasicTeleport三个主要脚本。但是最近查资料的时候发现其实VRTK早已更新了功能更强大的版本。在新的VRTK中，不仅更多的VR环境被支持，而且相比旧版本还扩展了更...
Unity的HTC VIVE SDK研究（手柄按键功能的研究，比较详细）
lizhenxiqnmlgb的博客
04-02 617
转载自：https://www.cnblogs.com/czaoth/p/5610883.html using UnityEngine; using System.Collections; //检测手柄功能的脚本 这个脚本挂到手柄上（controler（right）和controler（left））上 public class ButtonTouchAction : Mono...
HTC VIVE SDK 中的例子 hellovr_opengl 程序流程分析
05-31
hellovr_opengl 是 HTC VIVE SDK 中的一个例子，它展示了如何使用 OpenGL 渲染 VIVE 头戴式显示器的场景。以下是该程序的流程分析： 1. 初始化 OpenGL 上下文和 VIVE 系统。在程序启动时，首先要初始化 OpenGL 上下文和 VIVE 系统。在 OpenGL 中，我们需要创建一个窗口和渲染环境。在 VIVE 系统中，我们需要初始化 VR 系统、渲染器和跟踪器等组件。 2. 加载模型和纹理。在程序运行时，需要加载场景中的模型和纹理。在 hellovr_opengl 中，模型和纹理的加载是在 InitGL() 函数中完成的。该函数使用 Assimp 库加载模型，使用 SOIL 库加载纹理。 3. 渲染场景。在程序运行时，需要渲染场景。在 hellovr_opengl 中，渲染是在 RenderScene() 函数中完成的。该函数使用 OpenGL API 绘制场景中的模型和纹理。 4. 与 VIVE 系统交互。在程序运行时，需要与 VIVE 系统交互。在 hellovr_opengl 中，交互是在 MainLoop() 函数中完成的。该函数使用 VR 系统提供的接口获取跟踪器的信息，并将其应用到场景中的物体上。 5. 清理资源。在程序结束时，需要清理已分配的资源。在 hellovr_opengl 中，资源清理是在 ShutdownGL() 函数中完成的。该函数释放所有的 OpenGL 对象，包括顶点缓冲区、纹理、着色器等。 以上是 hellovr_opengl 程序的主要流程分析。程序的核心部分是渲染场景和与 VIVE 系统交互。渲染场景使用 OpenGL API，而与 VIVE 系统交互使用 VR 系统提供的接口。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值