使用FFmpeg的视频解码功能,可以接受rtsp 的H264码流,得到YUV数据;
解码后的数据放在AVFrame 结构中,
可参考雷神的博客FFMPEG结构体分析:AVFrame_sample_aspect_ratio-CSDN博客
现将YUV数据转到Mat中
AVFrame *frame;
int width = frame->width, height = frame->height;
cv::Mat tmp_img = cv::Mat::zeros( height*3/2, width, CV_8UC1 );
memcpy( tmp_img.data, frame->data[0], width*height );
memcpy( tmp_img.data + width*height, frame->data[1], width*height/4 );
memcpy( tmp_img.data + width*height*5/4, frame->data[2], width*height/4 );
cv::imshow( "yuv_show", tmp_img );
cv::Mat bgr;
cv::cvtColor( tmp_img,