【ISP】YU12、I420、YV12、NV12、NV21、YUV420P、YUV420SP、YUV422P、YUV444P

mjiansun

已于 2024-01-22 15:17:27 修改

阅读量651

点赞数

分类专栏： ISP专栏文章标签：视频流标准 YUV YCbCr

于 2024-01-22 15:16:48 首次发布

原文链接：https://blog.csdn.net/idols_man/article/details/109037796

版权

ISP专栏专栏收录该内容

71 篇文章 33 订阅

订阅专栏

本文详细介绍了YUV颜色模型及其在图像处理中的存储方式，包括YUV4:4:4、YUV4:2:2、YUV4:2:0的不同采样格式，如YUV420P、YUV422P、YUV444P等。文章还涉及YUV与RGB之间的转换，并提供了实际操作示例，如使用FFmpeg转换图像格式和分离YUV分量的代码实现。

摘要由CSDN通过智能技术生成

2.4YV12，YU12格式（属于YUV420P）

2.5NV12、NV21（属于YUV420SP）

4.1YUV4 ：2： 2 和YUV4：2：0 转换

1.YUV是什么

YUV定义：分为三个分量，“Y”表示明亮度（Luminance或Luma），也就是灰度值；而“U”和“V” 表示的则是色度（Chrominance或Chroma），作用是描述影像色彩及饱和度，用于指定像素的颜色。

YUV格式：两大类，planar和packed。对于planar的YUV格式，先连续存储所有像素点的Y，紧接着存储所有像素点的U，随后是所有像素点的V。对于packed的YUV格式，每个像素点的Y,U,V是连续交错存储的。

YUV存储：码流存储格式其实与其采样的方式密切相关，主流的采样方式有三种，YUV4:4:4，YUV4:2:2，YUV4:2:0，关于其详细原理，可以通过网上其它文章了解，这里我想强调的是如何根据其采样格式来从码流中还原每个像素点的YUV值，因为只有正确地还原了每个像素点的YUV值，才能通过YUV与 RGB的转换公式提取出每个像素点的RGB值，然后显示出来。

YUV特点：与RGB类似，YUV也是一种颜色编码方法，主要用于电视系统以及模拟视频领域，它将亮度信息（Y）与色彩信息（UV）分离，没有UV信息一样可以显示完整的图像，只不过是黑白的，这样的设计很好地解决了彩色电视机与黑白电视的兼容问题。并且，YUV不像RGB那样要求三个独立的视频信号同时传输，所以用YUV方式传送占用极少的频宽。

图：用三个图来直观地表示采集的方式吧，以黑点表示采样该像素点的Y分量，以空心圆圈表示采用该像素点的UV分量

下面单个像素点的数据位均为8位

YUV 4:4:4采样，每一个Y对应一组UV分量，一个YUV占8+8+8 = 24bits 3个字节。

YUV 4:2:2采样，每两个Y共用一组UV分量，一个YUV占8+4+4 = 16bits 2个字节。

YUV 4:2:0采样，每四个Y共用一组UV分量，一个YUV占8+2+2 = 12bits 1.5个字节。

我们最常见的YUV420分为两种：YUV420P和YUV420SP，都是基于4:2:0采样的，所以如果图片的宽为width，高为heigth，在内存中占的空间为width*height*3/2，其中前width*height的空间存放Y分量，接着width*height/4存放U分量，最后width*height/4存放V分量。

2.存储方式

下面我用图的形式给出常见的YUV码流的存储方式，并在存储方式后面附有取样每个像素点的YUV数据的方法，其中，Cb、Cr的含义等同于U、V。

2.1YUVY 格式（属于YUV422）

YUYV为YUV422采样的存储格式中的一种，相邻的两个Y共用其相邻的两个Cb、Cr，分析，对于像素点Y'00、Y'01 而言，其Cb、Cr的值均为 Cb00、Cr00，其他的像素点的YUV取值依次类推。

2.2UYVY 格式（属于YUV422）

UYVY格式也是YUV422采样的存储格式中的一种，只不过与YUYV不同的是UV的排列顺序不一样而已，还原其每个像素点的YUV值的方法与上面一样。

2.3YUV422P（属于YUV422）

YUV422P 也属于YUV422的一种，它是一种Plane模式，即平面模式，并不是将YUV数据交错存储，而是先存放所有的Y分量，然后存储所有的U（Cb）分量，最后存储所有的V（Cr）分量，如上图所示。其每一个像素点的YUV值提取方法也是遵循YUV422格式的最基本提取方法，即两个Y共用一个UV。比如，对于像素点Y'00、Y'01 而言，其Cb、Cr的值均为 Cb00、Cr00。

2.4YV12，YU12格式（属于YUV420P）

YU12和YV12属于YUV420格式，又叫Plane模式，Y , U , V分别在不同平面，也就是有三个plane。将Y、U、V分量分别打包，依次存储。其每一个像素点的YUV数据提取遵循YUV420格式的提取方式，即4个Y分量共用一组UV。注意，上图中，Y'00、Y'01、Y'10、Y'11共用Cr00、Cb00，其他依次类推。 YU12格式在android平台下也叫作I420格式，首先是所有Y值，然后是所有U值，最后是所有V值。

该图仅仅是YV12的示意图。

2.5NV12、NV21（属于YUV420SP）

NV12和NV21属于YUV420格式，是一种two-plane模式，即Y和UV分为两个Plane，但是UV（CbCr）为交错存储，而不是分为三个plane。其提取方式与上一种类似，即Y'00、Y'01、Y'10、Y'11共用Cr00、Cb00。

该图仅仅是NV12的示意图。

YUV420 planar数据存储，以720×488大小图象YUV420 planar为例：

其存储格式是：共大小为(720×480×3>>1)字节，分为三个部分:

Y分量：　　　(720×480)个字节

U(Cb)分量：　　(720×480>>2)个字节

V(Cr)分量：　　 (720×480>>2)个字节

三个部分内部均是行优先存储，三个部分之间是Y,U,V 顺序存储。

即YUV数据的0->720×480字节是Y分量值, 720×480->720×480×5/4字节是U分量 ,720×480×5/4 ->720×480×3/2字节是V分量。

3.举例说明（以6*4图像为例）

3.1排列方式（以6*4图像为例）

YUV444

Y Y Y Y Y Y 
Y Y Y Y Y Y 
Y Y Y Y Y Y 
Y Y Y Y Y Y 
U U U U U U
U U U U U U
U U U U U U
U U U U U U
V V V V V V
V V V V V V
V V V V V V
V V V V V V

YUV422（YUV422P）

Y Y Y Y Y Y 
Y Y Y Y Y Y 
Y Y Y Y Y Y 
Y Y Y Y Y Y 
U U U U U U
U U U U U U
V V V V V V
V V V V V V

YU12

Y Y Y Y Y Y 
Y Y Y Y Y Y 
Y Y Y Y Y Y 
Y Y Y Y Y Y 
U U U U U U
V V V V V V

YV12

Y Y Y Y Y Y 
Y Y Y Y Y Y 
Y Y Y Y Y Y 
Y Y Y Y Y Y 
V V V V V V
U U U U U U

NV12

Y Y Y Y Y Y 
Y Y Y Y Y Y 
Y Y Y Y Y Y 
Y Y Y Y Y Y 
U V U V U V 
U V U V U V

NV21

Y Y Y Y Y Y 
Y Y Y Y Y Y 
Y Y Y Y Y Y 
Y Y Y Y Y Y 
V U V U V U
V U V U V U

3.2存储空间（以6*4图像为例）

YUV444：Y、U、V各占8bit，总占用=（6 * 4 + 6 * 4 * 2）= 72字节
YUV422：Y占8bit、UV各占4bit，总占用=（6 * 4 + 6 * 4 / 2 * 2）= 48字节
YUV420：Y占8bit、UV各占2bit，总占用=（6 * 4 + 6 * 4 / 4 * 2）= 36字节
I420：等同于YUV420，36字节
YV12：等同于YUV420，36字节
NV12：等同于YUV420，36字节
NV21：等同于YUV420，36字节

3.3存储格式

planar 平面格式:指先连续存储所有像素点的 Y 分量，然后存储 U 分量，最后是 V 分量。
       (以YU12格式6*4图像为例)  Y Y Y Y Y Y  
                               Y Y Y Y Y Y
                               Y Y Y Y Y Y
                               Y Y Y Y Y Y
                               U U U U U U
                               V V V V V V
 
packed 打包模式:指每个像素点的 Y、U、V 分量是连续交替存储的。
       (以YU12格式6*4图像为例)  Y Y U Y Y V
                               Y Y U Y Y V
                               Y Y U Y Y V 
                               Y Y U Y Y V
                               Y Y U Y Y V
                               Y Y U Y Y V

4.转换

4.1YUV4 ：2： 2 和YUV4：2：0 转换

最简单的方式：YUV4:2:2 ---> YUV4:2:0 Y不变，将U和V信号值在行(垂直方向)在进行一次隔行抽样。 YUV4:2:0 ---> YUV4:2:2 Y不变，将U和V信号值的每一行分别拷贝一份形成连续两行数据。

在YUV420中，一个像素点对应一个Y，一个4X4的小方块对应一个U和V。对于所有YUV420图像，它们的Y值排列是完全相同的，因为只有Y的图像就是灰度图像。YUV420sp与YUV420p的数据格式它们的UV排列在原理上是完全不同的。420p它是先把U存放完后，再存放V，也就是说UV它们是连续的。而420sp它是UV、UV这样交替存放的。(见下图) 有了上面的理论，我就可以准确的计算出一个YUV420在内存中存放的大小。 width * hight =Y（总和） U = Y / 4 V = Y / 4 。

所以YUV420 数据在内存中的长度是 width * hight * 3 / 2。

4.2YUV和RGB转换

转换方式的内容还需要补充

Y      =  (0.257 * R) + (0.504 * G) + (0.098 * B) + 16
Cr = V =  (0.439 * R) - (0.368 * G) - (0.071 * B) + 128
Cb = U = -(0.148 * R) - (0.291 * G) + (0.439 * B) + 128
 
B = 1.164(Y - 16) + 2.018(U - 128)
G = 1.164(Y - 16) - 0.813(V - 128) - 0.391(U - 128)
R = 1.164(Y - 16) + 1.596(V - 128)

5.分离示例

5.1分离YUV420P

下面基于实例来理解Y，U，V分量的作用 ：

（1）先使用ffmpeg将指定的图片转为yuv420p格式

ffmpeg -i input.jpg -s 510x510 -pix_fmt yuv420p input.yuv

（2）分离YUV分量

使用的是ubuntu系统，因此运行yuvplayer.exe文件，需要提前安装好wine：sudo apt install wine，运行yuvplayer之后，需要先设置像素格式为Y，否则你看到的图像可能会有问题。

先看output_420_y.y文件：(分辨率设置为510x510)

output_420_u.y显示如下：(分辨率设置为255x255)

output_420_v.y显示如下：(分辨率设置为255x255)

（3）生成灰度图（保留Y分量）

上面的例子实际上已经生成了一个灰度图了，但是只保留了Y分量，你如果直接用ffplay工具查看会有问题，下面的函数将会生成一个标准的YUV文件并且保留Y分量，你可能会有疑问，为什么U分量和V分量要写入0x80，其实你可以参考上面的YUV转RGB的公式，YUV数据是无法直接显示的，最终需要转成RGB显示，因此我这里是只需要保留Y分量，忽略UV分量的影响，因此根据上面的公式，我在Y和U分量中都写入128就是十六进制的0x80。

void yuv420p_y(char *inputPath, char *outputPath, int width, int height) {
 
    FILE *inFile = fopen(inputPath, "rb+");
    FILE *outFile = fopen(outputPath, "wb+");
 
    unsigned char *data = (unsigned char *) malloc(width * height * 3 / 2);
 
    fread(data, 1, width * height * 3 / 2, inFile);
 
    //Y分量
    fwrite(data, 1, width * height, outFile);
 
    unsigned char *buffer = (unsigned char *) malloc(width * height / 4);
    memset(buffer, 0x80, width * height / 4);
    //U分量
    fwrite(buffer, 1, width * height / 4, outFile);
    //V分量
    fwrite(buffer, 1, width * height / 4, outFile);
 
    free(buffer);
    free(data);
    fclose(inFile);
    fclose(outFile);
}
 
int main() {
 
    yuv420p_y("/home/byhook/media/input.yuv", "/home/byhook/media/output.yuv", 510, 510);
 
    return 0;
}

（4）使用ffplay来播放yuv格式的文件

ffplay -f rawvideo -video_size 510x510 output.yuv

注：这里的分辨率不能错。

2. 分离YUV422P

YUV422P基于YUV 4:2:2采样，每两个Y共用一组UV分量,一个YUV占8+4+4 = 16bits 2个字节。分离代码如下：

void split_yuv422(char *inputPath, int width, int height) {
 
    FILE *fp_yuv = fopen(inputPath, "rb+");
 
    FILE *fp_y = fopen("output_422_y.y", "wb+");
    FILE *fp_u = fopen("output_422_u.y", "wb+");
    FILE *fp_v = fopen("output_422_v.y", "wb+");
 
    unsigned char *data = (unsigned char *) malloc(width * height * 2);
 
    fread(data, 1, width * height * 2, fp_yuv);
    //Y
    fwrite(data, 1, width * height, fp_y);
    //U
    fwrite(data + width * height, 1, width * height / 2, fp_u);
    //V
    fwrite(data + width * height * 3 / 2, 1, width * height / 2, fp_v);
 
    //释放资源
    free(data);
 
    fclose(fp_yuv);
    fclose(fp_y);
    fclose(fp_u);
    fclose(fp_v);
}

3. 分离YUV444P

YUV444P基于YUV 4:4:4采样，每一个Y对应一组UV分量,一个YUV占8+8+8 = 24bits 3个字节。分离代码如下：

void split_yuv444(char *inputPath, int width, int height) {
 
    FILE *fp_yuv = fopen(inputPath, "rb+");
 
    FILE *fp_y = fopen("output_444_y.y", "wb+");
    FILE *fp_u = fopen("output_444_u.y", "wb+");
    FILE *fp_v = fopen("output_444_v.y", "wb+");
 
    unsigned char *data = (unsigned char *) malloc(width * height * 3);
 
    fread(data, 1, width * height * 3, fp_yuv);
    //Y
    fwrite(data, 1, width * height, fp_y);
    //U
    fwrite(data + width * height, 1, width * height, fp_u);
    //V
    fwrite(data + width * height * 2, 1, width * height, fp_v);
 
    //释放资源
    free(data);
 
    fclose(fp_yuv);
    fclose(fp_y);
    fclose(fp_u);
    fclose(fp_v);
}

参考

https://blog.csdn.net/leixiaohua1020/article/details/50534150

https://en.wikipedia.org/wiki/YUV

图解YU12、I420、YV12、NV12、NV21、YUV420P、YUV420SP、YUV422P、YUV444P的区别-CSDN博客

笔记：YUV444、YUV422、YUV420、YU12、YV12、NV12、NV21的区别_nv12 nv21-CSDN博客

图像格式 YUV444、YUV422_yuv444和yuv422-CSDN博客

mjiansun

关注

0
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
【ISP】YU12、I420、YV12、NV12、NV21、YUV420P、YUV420SP、YUV422P、YUV444P

分为三个分量，“Y”表示明亮度（Luminance或Luma），也就是灰度值；而“U”和“V” 表示的则是色度（Chrominance或Chroma），作用是描述影像色彩及饱和度，用于指定像素的颜色。
复制链接

扫一扫