视音频数据的数据源分析

一、视频数据源分析

一）、视频数据源分析

      数字技术就是用数字编码来描述和表达图像、声音等各种媒体信息。其信息处理的流程是：模拟信息→数字化→压缩编码→存储或传输→解码再现。

     数字化视频的过程．通常被叫做数字化视频采集。模拟信号到数字信号的转换中通常用8 bit来表示．对于专业或广播级的信号转换等级会更高。对于彩色信号，无论是RGB还是YUV方式，只需用24 bit来表示。因此采样频率的高低是决定数字化视频图像质量的重要指标。
    视频采集中计算机的处理设备通常有3种类型，即帧采集卡、动态图像连续采集卡、电视节目接受卡。帧采集卡的工作原理是把偶合视频信号解码成RGB或YUV，RGB或YUV信号经过A／D转换后进入帧存体，帧存体内的数据根据同步信号不断被刷新。帧存体内的数据需要保存时，计算机给出控制信号，帧存体数据不再被刷新．这时计算机可以读出帧存体数据传送到计算机内存或存放到硬盘中。

二）、RGB转YUV

采集到的图像是RGB格式，每一帧图像都分成红、绿、蓝3个通道，RGB三个分量分别用8bit来表示，其取值范围为0--255，然后将其转换成YUV格式进行压缩编码。

1、RGB颜色模型

    颜色模型是用来精确标定和生成各种颜色的一套规则和定义。某种颜色模型所标定的所有颜色就构成了一个颜色空间。颜色空间通常用三维模型表示，空间中的颜色通常使用代表三个参数的三维坐标来指定。理论上绝大部分可见光谱都可用红、绿和蓝 (RGB) 三色光按不同比例和强度的混合来表示。 颜色C＝R(红色的百分比)＋G(绿色的百分比)＋ B(蓝色的百分比)。RGB模型称为相加混色模型，用于光照、视频和显示器。例如，显示器通过红、绿和蓝荧光粉发射光线产生彩色。

2、YUV

YUV是被欧洲电视系统所采用的一种颜色编码方法（属于PAL），是PAL和SECAM模拟彩色电视制采用的颜色空间。在现代彩色电视系统中，通常采用三管彩色摄影机或彩色ccd摄影机进行取像，然后把取得的彩色图像信号经分色、分别放大校正后得到RGB，再经过矩阵变换电路得到亮度信号Y和两个色差信号B－Y（即U）、R－Y（即V），最后发送端将亮度和色差三个信号分别进行编码，用同一信道发送出去。这种色彩的表示方法就是所谓的YUV色彩空间表示。采用YUV色彩空间的重要性是它的亮度信号Y和色度信号U、V是分离的。

主要的采样格式有YCbCr 4:2:0、YCbCr 4:2:2、YCbCr4:1:1和 YCbCr 4:4:4。其中YCbCr4:1:1 比较常用，其含义为：每个点保存一个 8bit 的亮度值(也就是Y值)，每 2x2 个点保存一个 Cr 和Cb 值,图像在肉眼中的感觉不会起太大的变化。所以， 原来用 RGB(R，G，B 都是 8bitunsigned) 模型， 1个点需要 8x3=24 bits（如下图第一个图），（全采样后，YUV仍各占8bit）。按4:1:1采样后，而现在平均仅需要 8+(8/4)+(8/4)=12bits（4个点，8*4（Y）+8(U)+8(V)=48bits）, 平均每个点占12bits。这样就把图像的数据压缩了一半。

3、YUV与RGB空间的相互转换

由电视原理可知，亮度和色差信号的构成如下：

Y＝0.2990R+0.5870G+0.1140B

R-Y＝0.7010R-0.5870G-0.1140B

B-Y＝-0.2990R-0.5870G+0.8860B

为了使色差信号的动态范围控制在0.5之间，需要进行归一化，对色差信号引入压缩系数。归一化后的色差信号为：

U＝-0.1684R-0.3316G+0.5B

V＝0.5R-0.4187G-0.0813B

 

4、码电平分配及数字表达式

（1）亮电平信号量化后码电平分配

在对分量信号进行8比特均匀量化时，共分为256个等间隔的量化级。为了防止信号变动造成过载，在256级上端留20级，下端留16级作为信号超越动态范围的保护带。

（2）色差信号量化后码电平分配

色差信号经过归一化处理后，动态范围为-0.5－0.5，让色差零电平对应码电平128，色差信号总共占225个量化级。在256级上端留15级，下端留16级作为信号超越动态范围的保护带。

 

5、色度格式

人眼分辨景物彩色细节的能力很差，只有对黑白细节分辨力的1/3--1/5，因此一般将亮度信号用全带宽传送，而色差信号则用半带宽或1/4带宽传送，以YUV取样格式4:2:0为例来说明，如图2：

图2. 4:2:0格式中亮度信号和色差信号样点位置

UV分量在压缩前甩去3/4的数据量，如图3：