opencv多线程读取视频的问题

想使用多线程对同一个视频进行处理，加快处理速度。首先进行一个最简单的多线程处理的视频的功能：两个线程同时读取视频，并在两个线程中分别显示读取的视频。

首先，为了实现这个功能，我的代码一开始是这样的：

#include <iostream>
#include "opencv2/opencv.hpp"
#include <Windows.h>

using namespace std;
using namespace cv;

char tmp[]="IMG";
LPCWSTR name=(WCHAR *)tmp;
HANDLE hMutex = CreateMutex(NULL, false,name);
DWORD WINAPI TL_FRAME(LPVOID lpParamter)
{
    WaitForSingleObject(hMutex,INFINITE);
    cout<<"Into the sub thread"<<endl;
    IplImage* frame=(IplImage*)lpParamter;
    cvShowImage("TL",frame);
    cvWaitKey(5);
    cout<<"leave the sub thread"<<endl;
    ReleaseMutex(hMutex);
    return 0;
}

void videoMultiThread()
{
    CvCapture * cap=cvCreateFileCapture("D:\\JY\\JY_TrainingSamples\\TrafficSignVideo\\trafficSign6.avi");
    IplImage * frame;

    while(1)
    {
        WaitForSingleObject(hMutex,INFINITE);
        cout<<"Into the main thread"<<endl;
        frame=cvQueryFrame(cap);
        if(!frame)break;
        cvShowImage( "frame",frame); 
        //MultiThread
        HANDLE hThread =    CreateThread(NULL,0,TL_FRAME,frame,0,NULL);
        CloseHandle(hThread);

        char c=waitKey(5);
        if (c==27)break;
        cout<<"leave the main thread"<<endl;
        ReleaseMutex(hMutex); 
    }
    cvReleaseCapture(&cap);
    cvDestroyAllWindows();
}

int main()
{
    videoMultiThread();
    return 0;
}

然后问题出现了。这段代码运行的结果是：只有main线程的视频可以显示，而TL_FRAME线程的视频闪了一下秒退，之后就再也没有出现。但是控制台的输出信息是没有问题得，交替输出：

Into the main thread
leave the main thread
Into the sub thread
leave the sub thread

解决的方法

在主线程创建从线程TL_FRAME之前，添加cvNamedWindow("TL"),同时在从线程TL_FRAME中的图像显示之前，添加cvNamedWindow("TL")。且把线程锁去掉，才可以在两个视频中同时显示图像。

需要注意的是：之前我们显示图像时，喜欢偷懒，直接imshow图像，会自动创建窗口然后图像在上面显示。但是在多线程中会出现问题。必须要在显示之前添加上cvNamedWindow()。

使用openMP解决多线程读取问题

使用上述windows的多线程API处理，发现效率不高，CPU占用率很高，速度也不是很快，还会一卡一卡的，尝试使用openMP来解决，发现效果要好多了，CPU占用率下降好多，速度也比上一种方式快，而且使用起来要更加简单。代码如下：

#include <opencv2/highgui/highgui.hpp>
#include <opencv2/imgproc/imgproc.hpp>
#include <opencv2/video/background_segm.hpp>
#include <opencv2/objdetect/objdetect.hpp>
#include <omp.h>

//C++
#include <iostream>
#include <sstream>

using namespace cv;
using namespace std;

int main(int argc, char* argv[])
{
    //print help information
            VideoCapture capture("video.avi");
            if(!capture.isOpened()){
                //error in opening the video input
                cerr << "Unable to open video file: " <<0 << endl;
                exit(EXIT_FAILURE);
            }

            Mat imgGrayScale;

            for(;;)
            {

                bool bSuccess = capture.read(imgGrayScale); // read a new frame from video

                if (!bSuccess) //if not success, break loop
                {
                    cout << "Cannot read the frame from video file" << endl;
                    break;
                }
                //    capture >> imgGrayScale;

                Mat img1(imgGrayScale);
                Mat img2(imgGrayScale);


                #pragma omp parallel sections
                {
                    #pragma omp section
                    {
                        Mat img1Gray;
                        cvtColor(img1,img1Gray,CV_BGR2GRAY);
                        namedWindow("img1Gray");
                        imshow("img1Gray",img1Gray);
                        waitKey(5);
                    }

                    #pragma omp section
                    {
                        Mat img2Gray;
                        cvtColor(img1,img2Gray,CV_BGR2GRAY);
                        namedWindow("img2Gray");
                        imshow("img2Gray",img2Gray);
                        waitKey(5);
                    }
                }
            }
            waitKey();
            getchar();
        }