关于Kinect根据深度图对齐彩色图抠人比彩色图像人大的问题

最新推荐文章于 2021-12-02 16:04:06 发布

清风似水流

最新推荐文章于 2021-12-02 16:04:06 发布

阅读量5k

点赞数

分类专栏： Kinect C/C++ 文章标签： Kinect C++ OpenCV

本文链接：https://blog.csdn.net/ilyhlf5201314/article/details/9838537

版权

本文探讨了使用Kinect进行图像处理时，通过NuiImageGetColorPixelCoordinateFrameFromDepthPixelFrameAtResolution函数抠取的人物在彩色图像中显得过大的问题。作者提出使用MapColorFrameToDepthFrame函数可以解决这个问题，该函数能确保抠出的人物大小与彩色图像一致，从而改善边缘抖动的修复效果。

摘要由CSDN通过智能技术生成

我根据Kinect自带的那个绿色抠人Demo，大家有没有发现抠出来的人比彩色图像中人变大了，该Demo是根据一个函数NuiImageGetColorPixelCoordinateFrameFromDepthPixelFrameAtResolution来对齐，导致我根据帧差法得到的前景图无法与抠出人的大小对齐，因此无法修复抠出来人边缘的抖动。下面，我介绍一个函数MapColorFrameToDepthFrame，次函数是将一帧的彩色图像映射到深度图像，然后抠出来的人才是和彩色图像中的人是一样大的。次函数的用法也比较有意思，看代码：

HRESULT ProcessDepth(Mat &depth)
{
        HRESULT hr = S_OK;
        NUI_IMAGE_FRAME imageFrame;

        //得到当前帧深度消息图像信息
        hr = g_pNuiSensor->NuiImageStreamGetNextFrame(g_pDepthStreamHandle, 0, &imageFrame);

        if (FAILED(hr))
        {
                return hr;
        }

        BOOL nearMode;
        INuiFrameTexture* pColorToDepthTexture;
        hr = g_pNuiSen