1 调试问题总结
1.1 无法创建capture设备
运行encode程序,串口输出以下提示信息。
经过核查代码,发现是在ColorSpace.c中的switch语句中少写了一个break。
switch(attrs->colorSpace) { case ColorSpace_UYVY: fmt.fmt.pix.pixelformat = V4L2_PIX_FMT_UYVY; break; case ColorSpace_YUV420PSEMI: fmt.fmt.pix.pixelformat = V4L2_PIX_FMT_NV12; break; case ColorSpace_YUV422PSEMI: fmt.fmt.pix.pixelformat = V4L2_PIX_FMT_NV16; break; case ColorSpace_YUV422_10bit: fmt.fmt.pix.pixelformat = V4L2_PIX_FMT_YUYV; break; default: //printf("Unsupported color format %g\n", attrs->colorSpace); cleanup(hCapture); return NULL; } |
1.2 不支持的像素空间格式
第一个错误调试好之后,再运行程序,得到以下输出错误信息。
跟踪相关代码后发现,DMAI只支持两种颜色空间格式:YUV420PSEMI和UYVY。
if (BufferGfx_getColorSpace(hInBuf) == ColorSpace_YUV420PSEMI) { inBufDesc.bufDesc[0].bufSize = hVe->minInBufSize[0]; inBufDesc.bufDesc[1].bufSize = hVe->minInBufSize[1];
inBufDesc.bufDesc[0].buf = inPtr; inBufDesc.bufDesc[1].buf = inPtr + Buffer_getSize(hInBuf) * 2/3; inBufDesc.numBufs = 2; } else if (BufferGfx_getColorSpace(hInBuf) == ColorSpace_UYVY) { inBufDesc.bufDesc[0].bufSize = Buffer_getSize(hInBuf); inBufDesc.bufDesc[0].buf = inPtr; inBufDesc.numBufs = 1; } else { Dmai_err0("Unsupported color format of input buffer\n"); return Dmai_EINVAL; } |
1.3 视频格式设置错误
修改DMAI和encode demo中的capture.c文件将传递给video线程的buffer设置为YUV420PSEMI格式,再次运行程序,得到以下输出信息。
跟踪代码,发现是因为在初始化buffer时未设置颜色空间参数。
gfxAttrs.colorSpace = ColorSpace_UYVY; hBufTab = BufTab_create(NUM_DRIVER_BUFS, bufSize, BufferGfx_getBufferAttrs(&gfxAttrs)); |
1.4 程序卡死
再次运行程序,在输出以下信息之后,程序卡死,无法继续运行,也无法使用Ctrl+C中断。
查看codec server(h264enc)的datasheet,发现里面直接说明了视频像素空间格式只支持YUV420PSEMI格式。
1.5 视频偏绿
在添加了自己编写的YUYV422转YUV420PSEMI功能之后,程序能够运行,但是采集的视频图像非常绿,如下所示。
经过长时间查看程序,没有发现错误。后来将使用自己编写的转换函数转换过后的YUV420PSEMI图像与使用Matlab转换的图像进行16进制对比,发现其中很多数据不一样,并且没有发现规律。所以可以推测是该转换函数错误,经过修改之后再次运行程序,编码获得的视频时正常的。
1.6 帧率错误
在视频颜色正常之后,发现视频编码过程中的帧率不对,只有1fps。
后来发现是在编码器初始化参数中设置的参考帧率太小,修改为30之后就正常了,为8帧每秒。
2 编码视频播放效果
最后,视频编码的效果如下所示,可以看出,编码后的视频非常清晰。