互联网上的音频和视频

一、多媒体信息的特点

1、多媒体信息包括:声音和图像信息。

2、多媒体信息的两个最主要特点:

■多媒体信息的信息量往往很大。

标准语音: 64 kbit/s;高质量的立体声音乐: 1 .4 Mbit/s;

数码照片(1280 x 960): 3.52 MB;彩色电视: 250 Mbit/s。

在传输多媒体数据时，对时延和时延抖动均有较高的要求。

二、音频和视频在传播过程中的缓存

1、互联网是非等时的

■模拟的多媒体信号经过采样和模数转换变为数字信号，再组装成分组。这些分组的发送速率是恒定的(等时的)。

■传统的互联网本身是非等时的。因此经过互联网的分组变成了非恒定速率的分组。如下图所示：

 2、解决非等时问题——在接收端设置缓存

■要解决非等时问题，接收端需设置适当大小的缓存，如下图所示。

■当缓存中的分组数达到一定的数量后再以恒定速率按顺序把分组读出进行还原播放。

■缓存实际上就是一个先进先出的队列。下图中标明的T叫做播放时延。

 3、缓存的影响

■缓存使所有到达的分组都经受了迟延。

■早到达的分组在缓存中停留的时间较长，而晚到达的分组在缓存中停留的时间则较短。

■以非恒定速率到达的分组，经过缓存后再以恒定速率读出，就能够在一定程度上消除了时延的抖动。但我们付出的代价是增加了时延。

三、互联网提供的音频和视频类型

1、目前互联网提供的音频/视频服务大体上可分为三种类型:

●流式(streaming)存储音频/视频——边下载边播放。

●流式实况音频/视频——边录制边发送。

●交互式音频/视频——实时交互式通信。

2、注意：

■对于流式音频/视频的“下载”,实际上并没有把“下载”的内容存储在硬盘上。

■“边下载边播放” 结束后，在用户的硬盘上没有留下有关播放内容的任何痕迹。

■流媒体即流式音频/视频。

■流媒体特点就是“边下载边播放”。

四、流媒体的传输

1、使用媒体服务器传输

注意： 媒体播放器不是向万维网服务器而是向媒体服务器请求音频/视频文件。

2、一般使用TCP传输

现在对流式存储音频/视频的播放，如YouTube和Netflix,都是采用TCP来传送。如下图所示：

传输分为四个步骤：

①.用户使用HTTP获取存储在万维网服务器中的视频文件，然后把视频数据传送到TCP发送缓存中。若发送缓存已填满，就暂时停止传送。

②.从TCP发送缓存通过互联网向客户机中的TCP接收缓存传送视频数据，直到接收缓存被填满。

③.从TCP接收缓存把视频数据再传送到应用程序缓存(即媒体播放器的缓存)。当这个缓存中的视频数据存储到一定程度时，就开始播放。这个过程一般不超过1分钟。

④.在播放时，媒体播放器等时地(即周期性地)把视频数据按帧读出，经解压缩后，把视频节目显示在用户的屏幕上。

3、不过如果是观看实况转播，那么最好首先考虑使用UDP来传送。