音视频基础知识之视频基础总结

目录

视频基础知识

RGB数字图像表示

数字图像表示 YUV格式

视频编码技术总结

 

视频基础知识

RGB数字图像表示

什么是RGB，对于一幅图像来说，我们应该怎么去保存它呢？一张图片在计算机中其实是用一个个正方形得小方块组成得，每一个小方块就是一个像素点。像这样：

 

那么我们所谓得RGB图像表示，就是任何一种颜色都是可以由这三种基础颜色组合得到，所以一张图片就是有很多像素点构成，每个像素点都是一种颜色得小方块，RGB就是用来表示每个小方块的颜色的，那么这样就是RGB表示小方块（像素点），像素点构成图像。

具体是怎么样表示的？

请看下面的关系：

红光（R）绿光（G）蓝光（B）每个RGB分量用8bit表示 = 2568bit 256颜色 256 * 256 * 25610bit 1024颜色 1024 * 1024 * 1024计算机中用RGB_888表示像素点

那么我们常用的一张1280x720分辨率的图片大小就是：1280x720x3=2.673MB,也就是说一张图片大概就这么大了。

我们知道视频就是连续的图片，对于视频帧率25的视频来说，假如90分钟：2.637MB * 90 * 60 * 25 = 347.651GB

什么你的电脑好像不止能存一个小电影吧，请继续往下看。

数字图像表示 YUV格式

YUV，分为三个分量，“Y”表示明亮度（Luminance或Luma），也就是灰度值；而“U”和“V” 表示的则是色度（Chrominance或Chroma），作用是描述影像色彩及饱和度，用于指定像素的颜色。

tips：与我们熟知的RGB类似，YUV也是一种颜色编码方法，主要用于电视系统以及模拟视频领域，它将亮度信息（Y）与色彩信息（UV）分离，没有UV信息一样可以显示完整的图像，只不过是黑白的，这样的设计很好地解决了彩色电视机与黑白电视的兼容问题。并且，YUV不像RGB那样要求三个独立的视频信号同时传输，所以用YUV方式传送占用极少的频宽。

YUV格式有两大类：planar和packed。一般好像用planar对于planar的YUV格式，先连续存储所有像素点的Y，紧接着存储所有像素点的U，随后是所有像素点的V。对于packed的YUV格式，每个像素点的Y,U,V是连续交*存储的。

 

1. YUV 4:4:4采样，每一个Y对应一组UV分量。

2. YUV 4:2:2采样，每两个Y共用一组UV分量。

3. YUV 4:2:0采样，每四个Y共用一组UV分量（常用）。

关于YUV它是可以跟RGB相互转换的，实际上在图像处理中往往都是在处理YUV数据，然后整个过程就是它们的转换，这里不做过多解释。

Y = 0.298R + 0.612G + 0.117B;
​
U = -0.168R - 0.330G + 0.498B + 128;
​
V = 0.449R - 0.435G - 0.083B + 128;
​
R = Y + 1.4075( V - 128);
​
G = Y - 0.3455( U - 128) - 0.7169( V - 128);
​
B = Y + 1.779( U - 128);
​

如果采用YUV420一张图片大概是1280 * 720 * 1 + 1280* 720 *0.5 = 1.318MB

那么一部电影大概是173.76GB，好像还是很大。那应该怎么办呢，硬盘还是不够存啊。

视频编码技术

以H264编码技术为例：

 

这是整个视频的处理过程，视频编码技术就是利用编码算法把每一个图像进行压缩编码，从而让整个视频的体积变小便于网络传输的技术，原理就是：每一张图片内部变化不大或者说多余的图像信息就少记录或者说是参考记录，通过编码后的图片还原回来还是基本差不多的，这些跟一些参数有关。

视频码率：kb/s，是指视频文件在单位时间内使用的数据流量，也叫码流率。码率越大，说明单位时间内取样率越大，数据流精度就越高。视频帧率：fps，通常说一个视频的25帧，指的就是这个视频帧率，即1秒中会显示25帧。帧率越高，给人的视觉就越流畅。视频分辨率：分辨率就是我们常说的640x480分辨率、1920x1080分辨率，分辨率影响视频图像的大小。

常用的视频编码技术：

MPEG2 MPEG阵营H264 MPEG阵营H265 MPEG阵营AVS 中国阵营VP8 Google阵营VP9 Google阵营

关于视频编码技术一般只能做到了解它的原理，对于真正研究编码算法的要涉及很多知识，比如数学。。。我们这里主要记住一句话：视频编码就是为了达到尽量用更小的存储体积存储更多的内容，并且解码后不能失真太多。

这里就是一个取舍问题了，压缩过度势必会造成视频质量不好。

总结

对于视频基础，我觉得总结起来就是：

1、要知道计算机是怎么存储图像的

2、要知道视频编码是为了干什么的