最近做了一个可以视频的聊天程序,设定的是没33微秒发送一帧,但是视频的效果不咋的,一卡一卡的,所以对要发送的图片做了一些处理。
首先和之前做的实时监控一样,先得到前后两张图片的差
cvCvtColor (frame,frImg,CV_BGR2GRAY); //将frame转成灰度图
cvConvert(frImg,frameMat); //然后再转成矩阵,方便操作
cvSmooth (frameMat,frameMat,CV_GAUSSIAN,3,0,0); //高斯平滑(不是很懂)
cvAbsDiff (frameMat,bkMat,frMat); //得到当前帧和上一帧差值
cvThreshold (frMat,frImg,ui->horizontalSlider->value (),255.0,CV_THRESH_BINARY);//通过阈值得到一个黑白的矩阵
cvErode (frImg,frImg,0,1);
cvDilate (frImg,frImg,0,1);
whiteNum = cvCountNonZero (frImg); //得到有多少个白色的点,白色的点表示发生变化的点
如果白色的点大于某一个自己设定的值后,直接将这张图片发送给对方,如果变化的比较小,也就是白色的点比较少,那么得到这个变化的区域,可以从四个方向逼近,上下左右,如果遇到白色的点,记录。此时得到了4个值,及从上方逼近,得到y1,从下方逼近,得到y2,则变化区域的高度为y2-y1,依次类推,得到宽度为x2-x1,以及发生变化的起点(x1,y1)。
得到坐标(x1,y1)、高度(y2-y1)和宽度(x2-x1)后,将这个区域的图片裁剪下来,这里就要用到ROI
cvSetImageROI(frame, cvRect(x1, y1,x2-x1 , y2-y1));
IplImage *img2 = cvCreateImage(cvGetSize(frame),frame->depth,frame->nChannels);
cvCopy(frame, img2, NULL);
cvResetImageROI(frame);
发送图片信息给对方
buffer.setBuffer (&array);
buffer.open (QIODevice::ReadWrite);
totalBytes = buffer.data ().size ();
QDataStream sendOut(&outBlock, QIODevice::WriteOnly);
sendOut.setVersion(QDataStream::Qt_4_0);
sendOut <<qint64(0)<<qint64(0)<<qint64(0)<<qint64(0); //保留4个位置用来放四个参数
totalBytes += outBlock.size();
sendOut.device()->seek(0);
sendOut <<totalBytes<<x1<<y1<<x2-x1<< y2-y1; //将坐标(x1,y1)、高度(y2-y1)和宽度(x2-x1)发送给对方
bytesToWrite = totalBytes - tcpClient->write(outBlock);
另一方收到信息以后,进行如下处理
CvRect rect = cvRect(x, y, width,height);
cvSetImageROI(lastImage, rect);
cvAdd(lastImage, img2, lastImage, NULL);
cvResetImageROI(lastImage);
然后将图像显示出
完成