独家 | 使用深度神经网络在Oculus Quest上进行准确的手部追踪

最新推荐文章于 2024-03-02 22:50:18 发布
VIP文章 最新推荐文章于 2024-03-02 22:50:18 发布
阅读量856 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/tMb8Z9Vdm66wH68VX1/article/details/103471229
版权

作者：Shangchen Han, Beibei Liu, Tsz Ho Yu, Randi Cabezas, Peizhao Zhang, Peter Vajda, Eldad Isaac, and Robert Wang

翻译：吴金笛

校对：和中华

本文约750字，建议阅读3分钟。

本文简单介绍了最新的手部跟踪技术。

 

手部跟踪技术是什么

 

Facebook Reality Labs和Oculus的研究者和工程师开发出了目前为止唯一完全依赖单色摄像机的、完全铰接的VR手部跟踪系统。该系统不使用主动式深度感知技术或任何附加设备(如配置的手套)，我们将把这项技术作为Oculus Quest的软件升级。Oculus Quest是一款无缆线、独立的VR头戴设备，现在已供消费者使用。

 

通过将Quest的四个摄像头与深度学习和基于模型跟踪的新技术结合，我们实现了一个比基于深度的解决方案更大的交互量， 我们只需要很小的尺寸，重量，电源和成本，处理完全在设备上完成，并

最低0.47元/天 解锁文章
数据派THU
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
稳健的铰接式ICP实时手势跟踪
09-06
这个文档是Robust Articulated-ICP for Real-Time Hand Tracking的一些翻译，是我本科毕设要求的论文翻译，翻译的有些不完整，只能凑合看看，很可能有翻译不正确的地方 Robust Articulated-ICP for Real-Time Hand Tracking开源了代码在github上
CVPR 2020 论文大盘点-人体姿态估计与动作捕捉篇
我爱计算机视觉
06-18 9706
本文盘点CVPR 2020 所有人体姿态估计（Human Pose Estimation）、手势识别（Gesture Recognition）、人体形状与姿态估计（HumanShape...
m基于深度学习网络的手势识别系统matlab仿真,包含GUI界面
fpga/matlab/simulink算法仿真工程
03-02 426
手势识别是指通过计算机视觉技术，对图像或视频中的人手姿态进行自动检测和识别。手势识别系统通常包括手势检测、手势跟踪和手势分类三个主要步骤。手势跟踪则对检测到的手势进行连续帧间的跟踪，以获取手势的动态信息；手势分类则根据提取的手势特征对其进行分类识别。随着人工智能和机器学习技术的飞速发展，手势识别技术在人机交互、虚拟现实、智能家居等领域的应用越来越广泛。基于深度学习网络的手势识别系统凭借其强大的特征提取和分类能力，成为了研究热点。手势识别系统利用深度学习技术对从图像或视频中提取的手势特征进行自动学习与分类。
手势跟踪论文学习：Realtime and Robust Hand Tracking from Depth（二）
ikerpeng
09-01 4031
论文细节 手势识别或者说手的跟踪在人机交互中非常重要，已经有几十年的研究。但是它存在的难点还是很多的：手的动作是由很多的复杂的手指的活动构成的，同时，在可变的大视角下面的快速移动。   目前做出来比较好的效果的做法有几种，一种使用了非常复杂的网格模型（mesh model，具体不知道是怎么做的），但局限性在于它的局部最优的方法速度也很差；另一种则是采用多边形模型（polygonal mode
光学定位与追踪技术_「主题分享」VR空间技术追踪技术
weixin_32501329的博客
12-19 3086
VR空间技术追踪技术概述VR和AR经过多年发展，现今也算小有所成，带来了全新的体验。然而，对比科幻电影里那些炫酷的虚拟世界场景还差很多。《头号玩家》电影相信很多人都看过，片中的场景应该算是VR的终极形态了。但是要达成这样的体验，必须要解决一个问题：如何定位玩家的空间位置？也就是所谓的位置追踪怎么实现。对于全沉浸式的VR而言，玩家进入虚拟世界，看不到周围的真实环境，展现在玩家周围的完全是个虚拟世界；...
Oculus Quest2 手势跟踪，裸手操控，UE4环境开发手记
cz666的专栏
06-01 5020
----2021.06.01----- 因为项目需要，需要研究VR下纯手势交互，不使用VR控制器，在VR环境下纯用人的手作为控制器，同场景中的内容交互。 当前，手势
【VR】详解 Facebook Oculus团队的手势追踪系统——MegaTrack
火火的博客
11-04 3673
文章目录一、前言补充-SIGGRAPH是什么？：二、论文分析1、这篇论文讲的啥？2、直接传感器->简间接传感器2.X【补充】两种间接传感器的对比3、实现过程3.1、DetNet3.2、KeyNetDetection model (DetNet)2.5D keypoints model (KeyNet)3.3、手部动态模型Hand kinematic modelLevenberg-MarquardtStereo camera[问题]他都有四个摄像头了，为什么不能直接生成手部的3d坐标呢？是因为位置都太靠
Oculus Rift S丨（三）实现Oculus空间出现手的效果、隔空抓取
星河造梦坊
09-26 1722
一、实现Oculus空间出现手的效果 目标 在Oculus应用中看到自己的手模型，用这个模型作为自己的手，进行交互。 出现手有三种效果： 1、只有手柄 2、只有手 3、手拿着手柄 实现步骤： 效果1：只有手柄 直接将预制件：OVRCameraRig 拖到你的场景即可。 注意，该预制件也实现了摄像头效果。 效果2：只有手 直接将预制件：Custom...
UE4 针对Oculus应用的打包及安装（UE4.24 和Oculus quest为例）
qq_45237281的博客
06-06 4098
UE4 针对Oculus应用的打包及安装（UE4.24为例）一、安卓常规配置二、Plugins配置三、Oculus的环境配置四、安装方式发现的问题 一、安卓常规配置 Project: Create compressed Cooked packages √ Supported Platforms :all √ Optimize project settings for : Mobile Scalable 3D or 2D Platforms： Android: Minimum SDK Version
QuestHands:用于新Oculus Quest手部追踪的Unreal Engine 4插件。 在Oculus正式发布之前将我们捆绑在一起
05-03
用于新Oculus Quest手部追踪的Unreal Engine 4插件。 直到我们将Oculus正式发布为止。 此插件版本需要Epics Unreal Release 4.25，其中包括手部跟踪所需的Oculus SDK版本12。 有关该插件的其他版本，请参见此存储...
Oculus桌面应用-Oculus Quest连PC用
02-18
1. Quest连PC必用官方客户端 2. 可以配合VirtualDesktop串联Rift
SuperQuest：专为Oculus Quest量身定制的AFrame组件
02-06
专为Oculus Quest和Oculus Quest 2量身定制的A-Frame VR插件。 包括针对Oculus Browser优化的轻量级物理系统以及用于虚拟手拾取和操纵虚拟对象的组件。 __ ____ _ / _\_ _ _ __ ___ _ __ /___ \_ _ ___ ___| |_ \...
android.ndk.oculus-quest-example：在Oculus Quest上将NDK与CMake结合使用的Android示例
02-06
Oculus Quest Android NDK示例 这基本上是从 （版本17.0，API 1.34.0）中获取的VrSampleBase示例，但是作为单个应用程序，可以用作自定义应用程序的起点。 它使用CMake构建C ++模块。 入门 安装Android Studio，使用...
Oculus Quest 2 完整升级包_v30固件包（含教程）.zip
09-15
最好的VR眼镜的最新升级固件包，v30的，直接写入即可，带教程和工具。
2021数学建模美赛C题代码.zip
04-24
最全的数学建模美赛C题和代码、大量刷题题库、逻辑清晰易于学习
这是一个保存Springboot+MyBaits项目的仓库.zip
最新发布
04-24
springboot框架 一、Spring Boot基础应用 Spring Boot特征 概念： 约定优于配置，简单来说就是你所期待的配置与约定的配置一致，那么就可以不做任何配置，约定不符合期待时才需要对约定进行替换配置。 特征： 1. SpringBoot Starter：他将常用的依赖分组进行了整合，将其合并到一个依赖中，这样就可以一次性添加到项目的Maven或Gradle构建中。 2,使编码变得简单，SpringBoot采用 JavaConfig的方式对Spring进行配置，并且提供了大量的注解，极大的提高了工作效率，比如@Configuration和@bean注解结合，基于@Configuration完成类扫描，基于@bean注解把返回值注入IOC容器。 3.自动配置：SpringBoot的自动配置特性利用了Spring对条件化配置的支持，合理地推测应用所需的bean并自动化配置他们。 4.使部署变得简单，SpringBoot内置了三种Servlet容器，Tomcat，Jetty,undertow.我们只需要一个Java的运行环境就可以跑SpringBoot的项目了
课设&大作业-毕业设计精品课程网站，采用的技术是 SSM 框架和 Shiro.zip
04-24
【资源说明】【毕业设计】 1、该资源内项目代码都是经过测试运行成功，功能正常的情况下才上传的，请放心下载使用。 2、适用人群：主要针对计算机相关专业(如计科、信息安全、数据科学与大数据技术、人工智能、通信、物联网、数学、电子信息等)的同学或企业员工下载使用，具有较高的学习借鉴价值。 3、不仅适合小白学习实战练习，也可作为大作业、课程设计、毕设项目、初期项目立项演示等，欢迎下载，互相学习，共同进步！
c#做的综合上位机，服务于freescale智能车&电子设计.zip
04-24
c#做的综合上位机，服务于freescale智能车&电子设计.zip
tensorflow-gpu-2.7.2-cp39-cp39-manylinux2010-x86-64.whl
04-24
bert
oculus quest2 adb连接不上
05-27
如果你的Oculus Quest 2无法通过ADB连接，请尝试以下步骤： 1. 在Oculus Quest 2上启用开发者模式。在Oculus应用程序中，转到设置>设备>开发者，然后启用开发者模式。 2. 确保你的计算机上已安装了正确的ADB驱动程序。你可以在此处下载最新的ADB驱动程序：https://developer.android.com/studio/releases/platform-tools 3. 将Oculus Quest 2连接到计算机。确保使用USB-C电缆连接，并将Oculus Quest 2设置为文件传输模式。 4. 在计算机上打开命令提示符或终端窗口，并导航到ADB驱动程序所在的文件夹。 5. 在命令提示符或终端窗口中输入“adb devices”命令，以查看您的Oculus Quest 2是否已连接。 如果您遇到其他问题，请确保您的计算机和Oculus Quest 2都已更新到最新版本，并尝试重新启动设备。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值