知识：视频流媒体播放的一些知识

1.概述

常用的流媒体协议主要有：

• 基于 RTSP/RTP 的实时流媒体协议
• HTTP 渐进下载
• 基于浏览器插件，页面嵌入一个 flash 播放器

内嵌 flash 的方式必须要有浏览器支持。这样的方式已经被各大浏览器放弃，在谷歌浏览器中已经不再支持flash。本文不再说明。

这三种方式完全不同，在开发阶段技术选型时，又和 开发的方向是 C/S 程序或者 B/S 程序相关。目前比较方便又好用的是用 HTTP 渐进下载方法。

2.知识

2.1 传输协议

RTMP、RTSP、HTTP协议，这些是互联网 TCP/IP 五层体系结构中应用层的协议，都可以用来做视频直播或点播。通常来说，直播一般用 RTMP、RTSP，点播用 HTTP。

概念

RTMP： 即 Real Time Messaging Protocol(实时消息传输协议)，基于TCP，是一种设计用来进行实时数据通信的网络协议。主要用来在 流媒体/交互服务器 之间进行音视频和数据通信

RTSP: 即 Real Time Streaming Protocol (实时流传输协议)，它使用TCP或UDP完成数据传输。使用RTSP时，客户机和服务器都可以发出请求，即RTSP可以是双向的。

HTTP: 超文本传输协议(Hypertext Transfer Protocol，HTTP)是一个简单的请求-响应协议，它通常运行在 TCP 之上。它是 请求-响应 的方式，即 客户端发出请求，服务端收到后做出响应。

对比表

名称	特征	传输的内容	特征	传输方式	说明
RTMP	是流媒体协议	一般传输的是 flv，f4v 格式流	基于TCP	基于TCP	它是Adobe 的私有协议
RTSP	是流媒体协议	一般传输的是 ts、mp4 格式的流	可以双向，即客户机和服务器都可以发出请求	使用TCP或UDP完成数据传输	共有协议，并有专门机构做维护
HTTP协议	超文本传输协议，它不是流媒体协议	传输的是HTML，浏览器使用	单向，即客户端发出请求，服务端做出响应	基于TCP	请求-响应协议

2.2 后来呢

从上面我们看到 RTSP 不方便在 浏览器上使用。于是就有了这些解决方案。

HLS : 基于HTTP的自适应码率流媒体传输协议 (HTTP Live Streaming)，它是Apple的动态码率自适应技术。它最初是苹果公司针对移动设备而开发的流。后来桌面也有很多应用了，HTML5 是直接支持了。

WebRTC：即 网页即时通信 ( Web Real-Time Communication)的缩写，是一个支持网页浏览器进行实时语音对话或视频对话的API。它实现了基于网页的视频会议(标准是WHATWG 协议)，目的是通过浏览器提供简单的javascript就可以达到实时通讯 (RTC))能力。

Flash Player： 基于浏览器插件，页面嵌入一个 flash 播放器。缺点是必须要有浏览器支持。这样的方式已经被各大浏览器放弃，在谷歌浏览器中已经不再支持flash。

3. 流媒体相关的工具和库

3.1 编码解码工具 FFmpeg

FFmpeg 是一个库和工具的集合，用于处理多媒体内容，如音频、视频、字幕和相关元数据。

常用到的功能有：

• 视频采集
• 视频格式转换
• 视频截图
• 给视频加水印

功能	说明
视频采集	采集摄像头的图像，进行屏幕录制，将视频流传送给流媒体服务器，支持直播应用。
视频格式转换	视频格式转换，比如可以将多种视频格式转换为flv格式。
视频截图	截取指定时间的缩略图。视频抓图，获取静态图和动态图
给视频加水印	可使用ffmpeg 视频添加水印(logo)

它包含了这些软件包

库	说明
libavcodec	提供多种格式的 视频/音频 编解码器的实现；
libavformat	用于各种音视频封装格式的生成和解析，包括获取解码所需信息以生成解码上下文结构和读取音视频帧等功能；
libavutil	包括散列、解压缩器和其他实用程序函数
libavfilter	提供一种通过过滤器链改变解码音频和视频的方法。
libavdevice	提供访问捕获和回放设备的抽象。
libswresample	实现音频混合和重采样例程。
libswscale	实现颜色转换和缩放例程。

FFmpeg 的 Github地址：https://github.com/FFmpeg/FFmpeg

它包含了这些工具

工具	说明
Ffmpeg	是一个用于操作、转换和流媒体内容的命令行工具箱。
Ffplay	是一个极简的多媒体播放器。
Ffprobe	是一个简单的多媒体内容检测分析工具。
附加的小工具	如aviocat, ismindex和qt-faststart。

还有这些工具

工具	说明
libpostproc	用于后期效果处理；
ffsever	一个 HTTP 多媒体即时广播串流服务器；

3.2 SRS 简单流媒体服务

SRS是一个简单高效的实时视频服务器，支持RTMP/WebRTC/HLS/HTTP-FLV/SRT/GB28181。

3.3 OBS 推流

Open Broadcaster Software(简称 OBS)是一款好用的第三方开源程序直播流媒体内容制作软件，为用户提供免费使用，它可支持 OS X、Windows、Linux 操作系统

FFmpeg的命令行方式不太友好，可考虑使用主流的OBS开源推流软件，很多网络主播都是用它做直播，该软件支持本地视频文件以及摄像头推流。

软件长这样：

image.png

主站：https://obsproject.com/
Github: https://github.com/jp9000/OBS

3.3 播放

产生了媒体流，就可以播放了。比较常用的 VLC 播放器。

VLC 是一款自由、开源的跨平台多媒体播放器及框架，可播放大多数多媒体文件，以及 DVD、音频 CD、VCD 及各类流媒体协议。

主站：https://www.videolan.org/

3.4 DVR 录像

DVR: SRS支持将RTMP流录制成FLV或MP4文件。下面的描述以FLV为例，但是对MP4也是一样的。

DVR的难点在于写入flv和文件命名，SRS的做法是随机生成文件名，用户可以使用http-callback方式，使用外部程序记录这个文件名，或者改成自己要的文件命名方式。

4.参考

https://github.com/ossrs/srs/tree/3.0release#usage

https://gitee.com/ChinaFFmpeg/ffmpeg?utm_source=alading&utm_campaign=repohttp://www.ffmpeg.org/https://baike.baidu.com/item/ffmpeg/2665727?fr=aladdin

https://help.aliyun.com/document_detail/45212.html