由于ESP32是单片机,不需要实现RTSP的所有方法,所以Micro-RTSP只是实现了部分的RTSP方法。
本文是部分代码解析。
RTSP介绍
RTSP(Real Timing Streaming Procotol)全称“实时流协议”,是TCP/IP协议体系下的一个应用层协议,定义了一对多应用程序如何有效地通过IP网络传送多媒体数据, 用于多媒体数据的网络控制。
1. RTSP会话交互过程
会话交互过程如下图:
首先发OPTION cmd请求服务器可使用的方法。
然后发DESCRIBE cmd请求服务器返回媒体的matedata,对于audio和video分开传输的情况,返回信息里面还有各自的url。
然后发送SETUP cmd请求服务器创建会话,请求体中需带数据传输协议以及客户端RTCP和RTP的接收端口号。
服务器返回会话ID和对应的服务器端口,客户端拿到服务器IP和端口,通过RTCP和RTP协议与服务器连接。
最后发送PLAY cmd请求服务器传输数据,此时客户端开始接收数据并播放。
播放结束后,发送TERADOWN cmd请求服务销毁会话。
2.RTSP请求与回应
RTSP方法有很多种,Micro-RTSP只是实现了4种方法,见红框处。
对应的Micro-RTSP代码:
// RTSP request command handlers
void Handle_RtspOPTION();
void Handle_RtspDESCRIBE();
void Handle_RtspSETUP();
void Handle_RtspPLAY();
3.RTP包传输方式
RTP包的传输方式在SETUP cmd中指定,分为两种:Over UDP传输 和 Over TCP传输。
代码如下:
CRtspSession.cpp:
CStreamer.cpp:
Over UDP传输,SETUP带的参数为RTP/AVP/UDP或者RTP/AVP****,如下:
可以看到通过UDP传输,RTP接收端口是4588,对应发送端口为6256;RTCP交互端口为4589,对应端口为6257.
这样的话,对于ts stream,需要创建3个socket(rtsp, ts rtp, ts rtcp);
而对于fMP4,需要创建5个socket(rtsp, audio rtp, audio rtcp, video rtp, video rtcp)。
连接示意图:
Over TCP传输,SETUP带的参数为RTP/AVP/TCP,如下:
通过TCP传输的话,RTSP cmd、RTP packet和RTCP packet是在同一个TCP连接上传输的,示意图如下:
4.RTSP原理
可以参考下面这篇博文:
原文链接:https://blog.csdn.net/Ritchie_Lin/article/details/121734033
RTSP组合使用了可靠传输协议TCP(控制信息)和高效传输协议UDP(媒体数据)来串流内容给用户。支持点播和直播。
RTSP协议本身只负责传输媒体控制信息,并不负责数据传输,使用RTP(Real-time Transport Protocol)和RTCP(Real-time Control Protocol)完成数据传输和数据检测。
会话参与者(发送端和接收端)周期性的向所有参与者发送RTCP包。主要功能是为应用程序提供会话质量或广播性能质量的信息,这些信息包括发送的信息包数目、丢失的信息包数目和信息包抖动等情况。
简而言之:
RTSP(over TCP) --> 媒体控制
RTCP(over UDP) --> 监控媒体数据传输质量
RTP(over UDP) --> 媒体数据传输
协议在网络中的结构图: