OpenGL Shader编程:NV12 转 RGB
最近在学习FFmpeg调用Nvidia硬件编解码,其中在解码这里计划做一个多路硬件解码加显示。由于使用了显卡来干活那么CPU注定是个酱油角色,初步规划CPU只完成解码后的scale工作。据我观察老黄的显卡里面有个视频引擎应该是个独立的部分只负责处理编解码,视频引擎之外的计算能力当然不能浪费,格式转换准备拿到GPU中完成。
和一般的FFmpeg H264解码不同,调用硬件解码后输出的格式是NV12不是正常的YUV420P,网上这方面的文档很少,当时还找了好久BUG。。。由于OpenGL只支持RGB格式输入,所以问题来了,如何使用OpenGL完成NV12转RGB
YUV420P和YUV420SP
这两个格式不过多介绍,网上资料挺多的比如http://blog.csdn.net/vblittleboy/article/details/10945143,主要区别在于UV分量的排布
- FFmpeg的AV_PIX_FMT_YUV420P:AVFrame的data数组有三个,分别是YUV三分量
- AV_PIX_FMT_NV12则只有 data[0]和data1,分别是Y分量和UV分量
当然我们可以使用sws_scale完成格式转换,但是