#基于VR环境下的手指识别键盘输入# 利用OpenCV for Unity初步完成的手指识别效果（二）

最新推荐文章于 2023-12-09 00:51:55 发布

okurusT

最新推荐文章于 2023-12-09 00:51:55 发布

阅读量3k

点赞数

本文链接：https://blog.csdn.net/zxycs1996/article/details/80669060

版权

本文介绍了如何在VR环境下利用OpenCV for Unity进行手指识别，特别是通过convexityDefects函数确定手掌范围。首先，对图像进行高斯滤波和HSV处理以提取肤色轮廓，然后膨胀并提取轮廓，找到最小外接矩形。接着，获取凸包并计算凸包缺陷，确定起始点、结束点和最远点。最后，这些信息用于VR项目中的手指键盘输入模拟。

摘要由CSDN通过智能技术生成

在前一篇文章中，我们完成了对手指肌肤颜色的检测。检测到肌肤颜色之后，接下来就是要确定手掌的范围。

在这个过程中，将要使用到的核心函数是Opencv中的convexityDefects。

如上图所示，黑色的轮廓线为convexity hull, 而convexity hull与手掌之间的部分为convexity defects. 每个convexity defect区域有四个特征量：起始点（startPoint），结束点(endPoint)，距离convexity hull最远点(farPoint)，最远点到convexity hull的距离(depth)。

void convexityDefects(InputArray contour, InputArray convexhull, OutputArrayconvexityDefects)
参数：
coutour: 输入参数，检测到的轮廓，可以调用findContours函数得到；
convexhull: 输入参数，检测到的凸包，可以调用convexHull函数得到。注意，convexHull函数可以得到vector<vector<Point>>和vector<vector<int>>两种类型结果，这里的convexhull应该为vector<vector<int>>类型，否则通不过ASSERT检查；
convexityDefects：输出参数，检测到的最终结果，应为vector<vector<