软件设计师笔记：多媒体基础

考察1到3分

一、音频相关概念

采样将连续的模拟信号离散化，采样频率越高，还原性越好，采样精度为取值的精度。

采样频率应为声音最高频率的两倍，这样才能保证声音不失真。

二、图像相关概念

亮度是明亮程度。

色调是色温差异。

饱和度是色彩艳丽程度。

彩色空间：电脑显示器采用的是RGB彩色空间。

YUV是电视中常用的色彩空间。彩色电视出现前用的是黑白电视的信号，为了让同一组信号可以在黑白和彩色电视上使用，发明了YUV彩色空间，其中包括了灰度值（亮度值），黑白电视只需要接受其中的亮度值即可。

CMY是印刷领域用到的彩色空间，C对应艳青，M对应洋红，Y对应黄。但是光的颜色是叠加的原理，而印刷的颜色是采用相减的原理。比如假设印刷的一种涂料显示为黄颜色，是因为涂料能吸收除了黄颜色以外的任何颜色的光，并反射黄色光，其三种颜色重叠为黑色，实践上调出的黑色不够黑，显棕色，且重叠而产生黑色的成本高昂，于是提出了CMYK，单独提出来了黑色颜料。

HSV和HSB彩色空间，称为艺术家彩色空间

电视上还能够应用YIQ，YCBCR彩色空间，其中YCBCR是YUV衍生出来的。

三、媒体的种类

感觉媒体包括人接触信息的感觉形式。

显示媒体（表现媒体）：输入设备输出设备都算是显示媒体。

四、多媒体相关计算问题

图像容量中可以求出像素点的数量，乘以每个像素点的字节数就是图像容量。

未知位数，已知色数的情况下，可以知道，像素的每一位代表一个色，256色代表有${\log }_2(256)$位。即8位，即1个字节。

练习：

五、常见的多媒体标准

JPEG是目前最常见的图像文件标准，是有损压缩标准。有比较高的压缩比，升级版是JPEG-2000，在专业领域应用广泛，如医学，其压缩包括有损和无损。

MPEG-1/2/4/7/21：

1：最大贡献是定义了VCD和MP3格式，MP3取名是因为在MPEG-1的第三层定义的。

2：定义了DVD格式

4：最大的改变和革新就是增加了增强交互性，在1和2中都是VCD，MP3，DVD等标准，而4中已经有了网络和可视电话等应用。

7：已经不是具体的应用，是多媒体内容描述接口。

21：是标准集成，是融合其他的标准。

六、数据压缩

6.1 数据压缩基础

有冗余是压缩的前提。

空间冗余：比如拍照片，背景是白色的墙，那么大面积相同的像素点就存在空间冗余

时间冗余：视频中老师讲课，只有老师在视频中随时间有形态变化，背景不动，不动的部分下一帧可以不刷新，这就是时间冗余。

视觉冗余：人的视觉感知是有限的，比如几种颜色在人的视觉里是分辨不出来的，那么照片可以将这几种颜色统一为一种颜色。

信息熵冗余：不同信息编码，冗余度不一样，可以合理编码降低冗余度

结构冗余：某个结构部件有大量冗余，比如每个地砖花纹是一样的，照片有若干地砖，可以只记录一个地砖的花纹。

知识冗余：可以通过知识得到，不需要再去记录的冗余。

6.2 有损压缩与无损压缩

无损压缩称熵编码法：通过编码的方式做压缩。

有损压缩称熵压缩法：熵压缩即已经损害了原始信息。

最常见的无损编码是变长编码中的Huffman编码，把使用频度高的编码编的短一些，频度低的编码编的长一点。

常见的有损编码：离散，余弦，变换，预测