SLAM初探（四）

为什么80%的码农都做不了架构师？>>>   

OpenCV基础

这里我就不做过多的描述性问题，现在OpenCV在许多有关计算机视觉方面得到许多的应用。

OpenCV获取视频的方法及其图像转化问题

1. 获取视频及图像的方式呢有多种多样的方式
2. 我们知道OpenCV它本身是基于开源GUI框架GTK编写，但是在实际的使用GTK GUI的操作过程中会遇到我们不使用原有GUI窗口，需要在一个有更多操作按钮的窗口中去操作，在我搜集了众多的资料无果后的一个尝试性动作，让我得出了结果。

Mat image= video->getVideo();//此操作直接获取摄像头的图像矩阵
IplImage img = IplImage(image);
GdkPixbuf  pixbuf=img.data;
GtkWidget *gtk_image_new_from_pixbuf(GdkPixbuf *pixbuf );

是的，从上面的代码中呢可以看出，OpenCV存在缓存中的data数据，在Ipimage结构体状态保存的时候呢，是可以和GdkPixbuf通过为char类型的data图像数据互相转化的。这点GTK上与QT5基本苟同。

初步要搞清楚的事情，就是我们需要从Intel RealSence获取视频流数据其数据包括几种类型

1. 图像RGB数据
2. 深度数据
   在整个计算过程中，需要把图像数据和深度数据赋值给OpenCV的Mat，操作如下:

#include <pxcsensemanager.h>
#include <pxcsession.h>
#include "util_render.h"
#include <iostream>
#include <string>
#include <stdio.h>
#include <opencv2\opencv.hpp>
using namespace cv;
using namespace std;
int main()
{
    //初始化图像流
    UtilRender *renderColor = new UtilRender(L"COLOR_STREAM");
    //初始化深度数据流
    UtilRender *renderDepth = new UtilRender(L"DEPTH_STREAM");
    //打开摄像头
    PXCSenseManager *psm = PXCSenseManager::CreateInstance();
    //如果摄像头打开失败，则报错
    if (!psm)
    {
        wprintf_s(L"Unabel to create the PXCSenseManager\n");
        return 1;
    }

    //初始化接收图像数据流和深度数据流
    psm->EnableStream(PXCCapture::STREAM_TYPE_COLOR);
    psm->EnableStream(PXCCapture::STREAM_TYPE_DEPTH);
    //确认初始化成功
    if (psm->Init() != PXC_STATUS_NO_ERROR)
    {
        wprintf_s(L"Unable to Init the PXCSenseManager\n");
        return 2;
    }
    //初始化接收的数据
    PXCImage *colorIm, *depthIm;
    PXCImage::ImageData depth_data;
    PXCImage::ImageData color_data;
    PXCImage::ImageInfo depth_information;
    PXCImage::ImageInfo color_information;

    Mat img = Mat(480, 640, CV_8UC1);

    while (waitKey(1))
    {
        if (psm->AcquireFrame(true) < PXC_STATUS_NO_ERROR) break;

        PXCCapture::Sample *sample = psm->QuerySample();

        colorIm = sample->color;
        depthIm = sample->depth;

        colorIm->AcquireAccess(PXCImage::ACCESS_READ,PXCImage :: PIXEL_FORMAT_RGB24, &color_data);
        depthIm->AcquireAccess(PXCImage::ACCESS_READ, &depth_data);
        depth_information = sample->depth->QueryInfo();
        color_information = sample->color->QueryInfo();

        ushort *dpixels = (ushort*)depth_data.planes[0];
        for (int y = 0; y < depth_information.height; y++)
            for (int x = 0; x < depth_information.width; x++)
            {
                uchar d = dpixels[y * depth_information.width + x];
                img.at<uchar>(y, x) = min((int)((double)d / 600 * 255), 255);
            }
        Mat color_img = Mat(color_information.height, color_information.width, CV_8UC3);
        uchar * dp = (uchar*)color_data.planes[0];
        int cnt = 0;
        for (int y = 0; y < color_information.height; y++)
            for (int x = 0; x < color_information.width; x++)
            {
                color_img.at<Vec3b>(y, x)[0] = dp[cnt++];
                color_img.at<Vec3b>(y, x)[1] = dp[cnt++];
                color_img.at<Vec3b>(y, x)[2] = dp[cnt++];
            }
        namedWindow("a", 0);
        imshow("a", color_img);

        //imwrite("100.jpg", img);
        //depthIm->ReleaseAccess(&depth_data);
        //colorIm->ReleaseAccess(&color_data);

        //if (!renderColor->RenderFrame(sample->color)) break;
        //if (!renderDepth->RenderFrame(sample->depth)) break;

        psm->ReleaseFrame();
        cv::imshow("ok", img);
        /*Mat cur;
        medianBlur(img, cur, 5);
        cv::imshow("ok1", cur);*/
    }
    psm->Release();
}

转载于:https://my.oschina.net/VenusV/blog/1486564