FFmpeg基础知识（一）

FFmpeg 简介和基础知识

1.1 FFmpeg 简介

FFmpeg的名称来自MPEG视频编码标准，前面的“FF”代表“Fast Forward”，FFmpeg是一套可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序。可以轻易地实现多种视频格式之间的相互转换。包括如下几个部分：

1. libavformat：用于各种音视频封装格式的生成和解析，包括获取解码所需信息以生成解码上下文结构和读取音视频帧等功能，包含demuxers和muxer库。
2. libavcodec：用于各种类型声音/图像编解码。 libavutil：包含一些公共的工具函数。
3. libswscale：用于视频场景比例缩放、色彩映射转换。 libpostproc：用于后期效果处理。
4. ffmpeg：是一个命令行工具，用来对视频文件转换格式，也支持对电视卡实时编码。
5. ffsever：是一个HTTP多媒体实时广播流服务器，支持时光平移。 ffplay：是一个简单的播放器，使用ffmpeg库解析和解码，通过SDL显示。
6. ffprobe：收集多媒体文件或流的信息，并以人和机器可读的方式输出。

容器(Container)：一种文件格式，比如flv，mkv等。
流(Stream)：一种视频数据信息的传输方式，5种流：音频，视频，字幕，附件，数据。
帧(Frame)：帧代表一幅静止的图像，分为I帧，P帧，B帧。
编解码器(Codec)：是对视频进行压缩或者解压缩，codec = code（编码） +decode（解码）。
复用/解复用(mux/demux)：把不同的流按照某种容器的规则放入容器，这种行为叫做复用（mux）。
                       把不同的流从某种容器中解析出来，这种行为叫做解复用(demux)。
帧率：帧率也叫帧频率，帧率是视频文件中每一秒的帧数，肉眼想看到连续移动图像至少需要15帧。
码率：比特率(也叫码率，数据率)是一个确定整体视频/音频质量的参数，秒为单位处理的字节数，码率和视频质量成正比，在视频文件中中比特率用bps来表达。

生活中音视频技术

其实我们生活中就有很多的音视频技术，像我们下载电影后我们会发现我们的电影文件名的后缀名都是五花八门的，有avi，rmvb，mp4，flv，mkv等等的后缀名文件，其实这就是我们FFmpeg中所说的封装格式，也是上面的**容器(Container)**一说，为什么会用到这些音视频技术呢？
因为未经压缩的数字视频的数据量巨大，存储困难，传输起来数据量巨大消耗的时间会比较久

视频播放器播放一个互联网上的视频文件，需要经过以下几个步骤：解协议，解封装，解码视音频，视音频同步。如果播放本地文件则不需要解协议，为以下几个步骤：解封装，解码视音频，视音频同步。
解协议的作用，就是将流媒体协议的数据，解析为标准的相应的封装格式数据。视音频在网络上传播的时候，常常采用各种流媒体协议，例如HTTP，RTMP，或是MMS等等。这些协议在传输视音频数据的同时，也会传输一些信令数据。这些信令数据包括对播放的控制（播放，暂停，停止），或者对网络状态的描述等。解协议的过程中会去除掉信令数据而只保留视音频数据。例如，采用RTMP协议传输的数据，经过解协议操作后，输出FLV格式的数据。

解封装的作用，就是将输入的封装格式的数据，分离成为音频流压缩编码数据和视频流压缩编码数据。封装格式种类很多，例如MP4，MKV，RMVB，TS，FLV，AVI等等，它的作用就是将已经压缩编码的视频数据和音频数据按照一定的格式放到一起。例如，FLV格式的数据，经过解封装操作后，输出H.264编码的视频码流和AAC编码的音频码流。

解码的作用，就是将视频/音频压缩编码数据，解码成为非压缩的视频/音频原始数据。音频的压缩编码标准包含AAC，MP3，AC-3等等，视频的压缩编码标准则包含H.264，MPEG2，VC-1等等。解码是整个系统中最重要也是最复杂的一个环节。通过解码，压缩编码的视频数据输出成为非压缩的颜色数据，例如YUV420P，RGB等等；压缩编码的音频数据输出成为非压缩的音频抽样数据，例如PCM数据。

视音频同步的作用，就是根据解封装模块处理过程中获取到的参数信息，同步解码出来的视频和音频数据，并将视频音频数据送至系统的显卡和声卡播放出来。（本段文字复制雷大神的文章）