音视频简单了解

相信大家都知道flv，MP4等格式视频，其实这些都只是封装格式，也就是把音频压缩和视频的压缩封装起来，然后形成这些视频格式。我们播放视频时，这些封装格式并不能直接播放，而是需要一系列的过程才显示到我们的屏幕上。

我来形容一下具体的流程，首先我们得到一个视频数据，视频都包含音频。如果是网络上获取的，我们需要解协议，去除头信息和一些无关紧要的数据，解协议后得到封装格式数据（mp4，flv…），如果我们直接读取的是本地文件，解协议这一步就省略了。所谓的封装格式就是音视频的压缩（编码）数据的封装，我们需要解封装得到压缩的音视频，解封装后需要解压缩（解码）得到音频采样数据和视频像素数据，然后就是音视频的同步播放。
常见的协议层有http，rtmp，file等。
常见的封装格式层有mkv，mp4，flv，rmvb，avi，ts等
常见的视频压缩（编码）算法：h264，h265（HEVC），mpeg2，mpeg4等
常见的视频像素数据格式有yuv420p，yuv422p，rgb24
常见的音频编码算法：AAC，AC-3，MP3，WMA
常见的音频采样数据格式：pcm