Unity3D Pico VR 手势识别物体交互 适配 MRTK3

已于 2024-03-25 23:15:30 修改
阅读量2k 收藏 18
点赞数 11
文章标签： vr 交互 Unity3d Pico mr 手势识别 xr
于 2024-01-20 17:49:28 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_39741605/article/details/135718959
版权

 当前Pico已经支持手势识别了，但是提供的PICO Unity Integration SDK 中是没有手势和物体交互的功能，Unity XR Interaction Toolkit提供的手势识别物体交互对 Quest适配的挺好的，Pico 当前只能用指尖点触还不能对物体进行抓握以及手势控制射线对物体进行交互。

如要项目想要使用Pico 手势识别物体交互的话，微软的MRTK3进行一些修改也在Pico 上使用的，下面效果是我在Pico适配MRTK3的效果

Unity 开发 Pico VR 手势识别物体交互 适配MRTK3案例

Unity Pico VR适配 MRTK3 完整视频教程

MRTK3 介绍：

 版本说明

 Pico SDK 2.40 ,Pico  OS v5.8.2 硬件Pico 4

Unity2021.3.32f 版本

Mixed Reality Feature Tool   版本v1.0.2209.0 Preview

MixedRealityToolkit-Unity  v3.0.1~ v3.1.0

主要包含

1 配置开发环境

2 从零开始创建项目完成项目配置

3 如何添加MRTK包体至Unity工程

4 添加MRTK示例到项目

5 修复MRTK报错脚本

6 MRTK3适配PICO

7 发布并安装到Pico

Cool-浩
关注
  • 11
    点赞
  • 踩
  • 18
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
MRTK3ForPICO手部可视化脚本
03-25
MRTK3ForPICO手部可视化脚本
MRTK3ForPICO手部关节变量Inspector显示脚本
03-26
MRTK3ForPICO手部关节变量Inspector显示脚本
Pico4 MR Unity零基础开发之开启MR透视
十画的博客
06-06 858
1、在代码编辑器中打开你的脚本文件，使用 Unity.XR.PXR 命名空间，然后在 Awake 或者 Start 部分调用 EnableVideoSeeThrough，为应用开启透视。因此，需在 OnApplicationPause 里再次调用 EnableVideoSeeThrough，以便应用恢复后重启透视。场景的背景颜色已被设置为黑色，Alpha 通道已被设置为完全透明。窗口中将显示 XR Origin 挂载的组件和脚本，点击。主摄像机，负责捕捉和生成展示在显示器上的画面。脚本，然后双击将其添加。
MRTK3应用于PICO4体验包
01-25
下载体验便可 注意，PICO4设备OS版本5.7.1以上体验更佳。
Unity3D Pico VR 手势识别 二
Cool-浩
08-25 3101
PICO SDK 的 “手势追踪” 功能遵循 OpenXR 标准所提出的手势定义规范并支持以下 26 个手部关节点。值关节名称关节含义OpenXR 定义字段0Palm手掌中心点1Wrist手腕关节点2大拇指掌骨关节3大拇指近端骨关节4大拇指远端骨关节5Thumb_tip大拇指顶端骨关节6食指掌骨关节7食指近端骨关节8食指中端骨关节9食指远端骨关节10Index_tip食指顶端骨关节11中指掌骨关节12中指近端骨关节13中指中端骨关节14。
我的创作纪念日
m0_56265052的博客
05-05 1008
我的创作纪念日，感谢所有支持过我的人
pico:实时物体检测的简约框架（带有预训练的面部检测器）
04-12
基于像素强度比较的对象检测（pico） 该存储库包含用于实时面部检测的代码。 观看演示视频，为以获得更好的主意。 pico框架是标准Viola-Jones方法的修改。 基本思想是在所有合理的位置和比例下，使用级联的二元分类器扫描图像。 如果图像区域成功通过了级联的所有成员，则将其分类为感兴趣的对象。 每个二元分类器由一组决策树组成，在它们的内部节点中具有像素强度比较作为二元测试。 这使检测器能够以很高的速度处理图像区域。 有关详细信息，请参见 。 pico的一些亮点是： 处理速度快； 在检测之前无需进行图像预处理； 无需计算积分图像，图像金字塔，HOG金字塔或任何其他类似的数据结构； 树的内部节点中的所有二进制测试都基于相同的特征类型（VJ框架中不是这种情况）； 该方法可以轻松修改，以快速检测平面内旋转的物体。 可以说， pico的主要局限性还在于它的简单性：当对象类的外
Unity3D Pico VR 手势识别
Cool-浩
08-25 3235
本文章使用的 Unity3D版本: 2021.3.6 , Pico SDK 230 ,Pico OS v.5.7.1 硬件Pico 4Pico SDK可以去Pico官网下载第一步：创建Unity3D项目第二步：导入 PICO Unity Integration SDK选择 Windows > Package Manager。在 Package Manager 窗口中，点击 + > Add package from disk。
MRTK3在PICO4上的使用小结
qq_40364278的博客
07-26 3993
将下载的压缩包解压后，打开UnityProjects-->MRTKDevTemplate-->Assets，将内部的Analyzers、Audio、BuildAssets、Editor、Example Assets、Prefabs、Profiles、Scenes和Scripts文件夹复制到Unity工程的Assets路径下。将下载的项目解压缩后，打开其Assets，将Scripts路径下的PicoMRTK3Support文件夹复制到Unity工程的Scripts路径下。设置资产选择默认的便可。
Unity中PicoXR抓取物体
qq_44718259的博客
09-26 673
【代码】Unity中PicoXR抓取物体。
VR 一些识别概念
YanSl
05-23 1198
1.对象识别 在给定的图像中，您必须检测所有对象使用边界框定位它们，并将带有标签的边框标签。 可以设置不同的标签 对象检测：就像对象识别，但是在这个任务中，你只有两类对象分类，这意味着对象边界框和非对象边界框。 对象分割：像对象识别一样，您将识别图像中的所有对象，但输出应显示此对象对图像的像素进行分类。语义分割：在语义分割中，您必须使用一类对象名称来标注（Car，Person，Dog，…）和
Unity的pico开发VR输入法.7z
05-27
2. **交互方式**：由于VR环境的特殊性，输入法可能需要支持手势识别、语音识别或者通过手柄按钮来选择字母。对于Pico这样的设备，可能还需要考虑到其特定的手柄控制方案。 3. **性能优化**：在VR中，高性能和低延迟...
PicoVR Unity SDK - Teleport.unitypackage
06-04
PicoVR Unity SDK ，包含UI交互等基础场景、可传送的拓展场景。 适用于Pico Neo 2/3、Pico G2 4K系列。 SDK教程地址：https://blog.csdn.net/weixin_38239050/category_11092828.html 没有积分的可联系v skode250
PicoVR_Unity_SDK_64bit 32bit.zip
12-25
《Pico VR Unity SDK详解与应用》 在虚拟现实（VR）技术的快速发展中，Pico作为一家专注于VR硬件和软件开发的公司，为开发者提供了一系列的工具和平台，其中包括Pico VR Unity SDK。这个SDK是针对Unity引擎设计的，...
Unity XR SDK：Pico Neo 3 SDK（附教程）
04-27
Unity XR SDK v2.x 系列是底层和接口重构后的长期维护版本，目前只支持Neo3 系列设备。开发 Neo3游戏及应用，建议使用2.x 系列SDK。（可加V购买发给你：skode250） SDK教程链接：...
03MRTK导入和配置
雷小帅的博客
11-12 1360
Hololens开发系列教程，知识点+实战讲解HoloLens2的常用API和功能模块。
【Unity】【VRTK】【Pico】如何快速在VRTK中引入带动画的PICO控制器
每日出拳老爷子的博客
01-15 207
Pico的Controller可以根据想要的形态匹配相应的Model，如果不指定Model有可能在预览时会不出现控制器模型，我这里把Pico的Controller设置为PICO4 model。之前的VRTK篇章中，我只介绍了Oculus，Open VR，SImulator这三种Rig的配置方法，那么Pico如何融合VRTK进行开发呢？运行测试可以发现，此时的控制器不仅正常展示了模型，摁下后各个按钮的动画也之间正确关联演示了。
Unity HoloLens2 MRTK 空间锚点 基础教程
最新发布
Maddie_Mo的博客
06-07 1389
MRTK 提供跨平台的输入系统、基础组件以及用于空间交互的通用构建基块。它可以帮助你加快面向 Microsoft HoloLens、Windows Mixed Reality 沉浸式 (VR) 头戴显示设备和许多其他 VR/AR 设备的应用程序开发。暂时先这样吧，如果有时间的话就会更新，实在看不明白就留言，看到我会回复的。后续再更新 MRTK 插件 相关使用（如果有时间的话）路漫漫其修远兮，与君共勉。
unity XR picoVR 如何识别挥手动作
06-01
在PicoVR中，可以使用PicoArmJoint脚本来识别手部动作，包括挥手动作。 以下是基本的步骤： 1. 在Pico Unity SDK中创建一个新的场景，并将Pico G2 4K头戴式VR设备添加到场景中。 2. 在Hierarchy视图中，选择PicoGoblin和PicoArmJoint，并将它们拖到Inspector视图中。 3. 在PicoArmJoint脚本中，将Hand Type设置为Left或Right，具体取决于您想要监测的手。 4. 在PicoArmJoint脚本中，将Gesture Type设置为Wave。 5. 编写代码来响应挥手手势。例如，可以在Update函数中检测PicoArmJoint的IsGestureDetected属性是否为true，并在检测到手势后执行任何操作。 以下是示例代码： ``` public class HandGesture : MonoBehaviour { public Pvr_UnitySDKAPI.ControllerHand hand; public Pvr_UnitySDKAPI.GestureType gestureType; private Pvr_ArmJointBehaviour armJoint; void Start () { armJoint = GetComponent<Pvr_ArmJointBehaviour>(); armJoint.SetGestureType(hand, gestureType); } void Update () { if (armJoint.IsGestureDetected(hand)) { Debug.Log("Wave gesture detected!"); // 执行任何操作 } } } ``` 注意：在使用PicoArmJoint脚本之前，请确保在Pico Unity SDK中启用了ArmJoint功能。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Cool-浩

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值