英特尔® 实感™ SDK R5 (v7) 的新特性

原创 2015年12月21日 11:22:23


Colleen Culbertson (Intel)


英特尔® 实感™ SDK 的 7.0.23.8048 版本(也称为 R5)现已推出。您将看到的主要变化包括:

  • 支持英特尔® 实感™ SR300 摄像头:应于 2016 年第一季度订购,并在 2016 年集成到基于英特尔的特定系统中。这款摄像头是新一代前置摄像头,将支持 Windows 10。由于 SR300 尚未用于测试,本文将不介绍相关内容,只有最后的部分将简单地提一下为面向用户的摄像头编写代码时的一些编码问题。

主要改进和新特性:

面部跟踪:改进脸部倾斜达 45 度角、吐舌和头部中心定位
面部识别:更高的准确性和更强大的面部识别,最多可支持数据库中的 20 个人

手部:更快速的校准(平均时间不到 0.75 秒),解决 OnFiredAlert 期间来自于呼叫 UnsubscribeAlert 的崩溃

Unity* 工具套件:改进的性能 (FPS)
重要提示:AcquireFrame 先前默认设置为 (true,100) 但在 WM5 中,默认设置更改为 (true,0)。“true”表示完全处理所有模块,“现在为 0,之前为 100 毫秒”是等待时间(因此 0 设置将运行高得多的 FPS)。如果 FPS 不是应用的优先事项,使用这一超时值(在 Assets/RSUnityToolkit/Internals/RealSenseInput/SenseToolkitManager.cs 中)

Blob: 更好地分离接近的不接触对象,改进最接近的稳定点,改进分割
- 将轮廓和掩码平滑整合为一  
- 根据 Blob 区域或最大或最小像素数进行过滤。
- 将 blob 映射到颜色流时,添加 Segmentetion_Image_Type。

三维扫描 - 前置:通过特定的纹理贴图、里程碑捕捉和输出改进面部扫描)
                后置:通过特定的纹理贴图和扫描区域自动调整改进头部和身体扫描
                改进样品和用法
                新:
QueryBoundingBox() 在扫描过程中返回可见对象的图像空间范围
                         
输出网络控制(最大三角形,最大顶点)

R200 特性变更:

场景感知
SaveMeshExtended 允许重建网格以任何分辨率保存。
CheckSceneQuality 现在返回正值(跟踪能力)和负值,原因是潜在跟踪失败

对于拥有集成 R200 和惯性传感器的系统,R5 添加了 EnableGravitySensorSupport 和 EnableInertialSensorSupport

增强的照片 - 消除了 DepthBlend API 并添加了撤销/重做 API

分割。
- 向层分割 API 添加了新的 MaskParam,以实现更好的过滤效果。
- 为对象分割创建子群,照片工具(增强深度、旋转、剪裁)以及在平面上粘贴到子类
- 将 PasteEffects 参数添加至子类 PXC[M]EnhancedPhoto::Paster。
- 添加设置贴纸、设置照片、预览贴纸和粘贴功能
增加实用程序 - 旋转照片、色彩调整大小、剪裁、常见 FOV
为预览图像平面膜添加了一个获取平面地图功能
GetDepthQuality API 现在将 PXCImage 作为参数,而非 PXCPhoto
-
 DepthResize 功能将宽度和增强质量作为参数,而非 PCXSize。

照片接口:
- 添加 IsXDM(检查 XDM 文件), ResetContainerImage(重设之前的效果) CheckSignature(非 XDM 兼容编辑器编辑的标志图像)

将 QueryReferenceImage 重命名为 QueryContainerImage
用索引为 0 的 QueryColorImage 替换 QueryUneditedImage。 •

R200 的全新预览特性

• 人物跟踪:通过边框和质心检测和注册单一人物跟踪
• 人物分割:4 点骨架跟踪
• 人物识别:如面部识别、集成到人的中间件
• 对象识别:使用 ROI 窗口,最多支持 20 个对象

新特性仅在 SR300 上提供

- 光标模式 - 非常敏捷地跟踪手指/手部在屏幕上的移动。仅使用一半的功率,不需要全手动模式的识别/校准,无延迟,较长距离(90 厘米)和更快速的检测(2 米/秒)。包含一个模拟鼠标点击的鼠标手势。
- Windows 通用支持。SR300 可以通过英特尔实感插件,通过 WinRT* 服务使用‘Microsoft 3D 摄像头’。 Windows 10 Hello 和 Universal App 将使用 3D 摄像头中间件,其中英特尔实感运行时调用可以使用 DCM 的摄像头 API。

F200 和 SR300 的编码

  • 不要使用任何摄像头的设备友好名称。
  • 使用像素格式 Y16,而非IR_RELATIVE ,或使用 AcquireAccess  或在访问 IR 流数据时,强制像素格式转变为 Y16 ,因为 F200 IR 是 8 位 (Y8),SR300 IR 是 10 位 (Y16)
  • 使用像素格式 DEPTH,而非 DEPTH_RAW,因为 SR300 的深度流本机数据表示为 1/8mm,F200 为 1/32mm:使用 QueryDepthUnit 函数来检索比例因子,或在访问深度流数据时,使用 AcquireAccess 函数来强制像素格式转变为 DEPTH
  • 摄像头特定的设备属性存在一些差异,包括过滤选项定义表 (QueryIVCAMFilterOptionSetIVCAMFilterOption) 和精度模式 (SetIVCAMAccuracy,应只使用 FINEST。)其他精度模式可能会影响深度质量。避免使用设备特定属性
    注:如果只使用 SDK 算法模块,无需更改任何摄像头设置。

兼容性问题将在下面的一篇文章中进行更详细的介绍,我们将在此处提供链接

系统要求

注:Windows 更新将为 Windows 10 系统自动提供最新的 DCM(驱动程序)。

下载英特尔实感 SDK


YUV格式学习:YUV422P、YV16、NV16、NV61格式转换成RGB24

对于YUV422的格式,网上有一大堆资料,这里就不说了。直奔主题,给出如何转换的函数,一如既往,只用代码说事。...
  • subfate
  • subfate
  • 2015-08-05 22:23:02
  • 3932

YUV422P、YV16、NV16、NV61格式转换成RGB24

YUV422有打包格式(Packed),一如前文所述。同时还有平面格式(Planar),即Y、U、V是分开存储的,每个分量占一块地方,其中Y为width*height,而U、V合占width*heig...
  • cupider88
  • cupider88
  • 2017-01-20 15:34:46
  • 706

自己制作npy数据集,数据格式类似于mnist数据(16)---《深度学习》

代码:import tensorflow as tf import numpy as np import os from PIL import Imagedir="/home/jobs/Picture...
  • u014038273
  • u014038273
  • 2017-10-23 17:14:40
  • 915

YUV格式

http://blog.csdn.net/airk000/article/details/25032901 http://linuxtv.org/downloads/v4l-...
  • u011270282
  • u011270282
  • 2016-02-19 11:13:46
  • 1821

Intel® RealSense™ SDK 2.0

  • 2017年11月24日 10:39
  • 66.27MB
  • 下载

Intel DCM驱动安装失败,或者缺少虚拟驱动

用于 Windows* 的英特尔®实感™摄像头驱动程序被称为“英特尔®实感™深度摄像头管理器 (DCM) 。 DCM 是所需的任何基于 Windows 的英特尔®实感™ 应用程序 或 英特尔®实感™ ...
  • qq_39689802
  • qq_39689802
  • 2017-10-15 20:00:35
  • 249

图解y420

YUV格式有两大类:planar和packed。 对于planar的YUV格式,先连续存储所有像素点的Y,紧接着存储所有像素点的U,随后是所有像素点的V。 对于packed的YUV格式,每个像素点的Y...
  • book_zhouqingjun216
  • book_zhouqingjun216
  • 2016-06-18 18:59:57
  • 569

dataTables-使用详细说明整理

本文共四部分:官网 | 基本使用|遇到的问题|属性表 一:官方网站:[http://www.datatables.net/] 二:基本使用:[http://www.guoxk.com/node/j...
  • mickey_miki
  • mickey_miki
  • 2012-11-29 18:12:56
  • 283144

走出平面-3D 捕获与分享

 转变 UI — 利用今天的技术设计明天的交互界面 融合真实与虚拟世界,借助英特尔® 实感™ 技术进行 3D 创作并分享。 环顾四周, 在我们的三维世界中,您可以从任意角度查看物体,测量其尺...
  • Intel_Software
  • Intel_Software
  • 2016-01-06 11:53:15
  • 517

[RealSense]2-实感摄像头与SDK

本次项目中使用的是F200摄像头,属于较早的摄像头。虽然摄像头的型号可能有所不同,但支持的基本功能都是具备的。具体支持的功能可以查询英特尔官网,不再累述。 在众多性能指标中我认为需要我们注意的是摄像头...
  • Zealot_Alie
  • Zealot_Alie
  • 2017-02-25 11:26:25
  • 1017
收藏助手
不良信息举报
您举报文章:英特尔® 实感™ SDK R5 (v7) 的新特性
举报原因:
原因补充:

(最多只允许输入30个字)