直播推流基础知识笔记

采集 —>处理—>编码和封装—>推流到服务器—>服务器流分发—>播放器流播放

一.采集

音频采集 音频的采集过程主要通过设备将环境中的模拟信号采集成 PCM 编码的原始数据，然后编码压缩成 MP3 等格式的数据分发出去。常见的音频压缩格式有：MP3，AAC，HE-AAC，Opus，FLAC，Vorbis (Ogg)，Speex 和 AMR等。

图像采集 图像的采集过程主要由摄像头等设备拍摄成 YUV 编码的原始数据，然后经过编码压缩成 H.264 等格式的数据分发出去。常见的视频封装格式有：MP4、3GP、AVI、MKV、WMV、MPG、VOB、FLV、SWF、MOV、RMVB 和 WebM 等。

二.处理

视频或者音频完成采集之后得到原始数据，为了增强一些现场效果或者加上一些额外的效果，我们一般会在将其编码压缩前进行处理。
视频 美颜、水印、路径、自定义
音频 混音、降噪、特效、自定义

三.编码和封装

1.编码

对流媒体传输来说，编码非常重要，它的编码性能、编码速度和编码压缩比会直接影响整个流媒体传输的用户体验和传输成本。

• 常见的视频编码器：

  1）H.264/AVC

  2）HEVC/H.265

  3）VP8

  4）VP9

  5）FFmpeg

• 音频编码器：Mp3, AAC等。

<