Mediasoup源码分析（1）——架构分析

最新推荐文章于 2024-11-28 04:42:03 发布
最新推荐文章于 2024-11-28 04:42:03 发布
阅读量7.7k 收藏 21
点赞数 1
分类专栏： WebRTC 文章标签： mediasoup 源码分析 架构分析
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/cgs1999/article/details/100133917
版权

1. 设计架构图

在这里插入图片描述

  • Worker
    一个Worker代表着一个运行在单核CPU上并处理Router实例的mediasoup C++子进程；

  • Router
    Router用于注入、选择和转发通过Transport实例创建的媒体流；

  • Transport
    Transport将终端与MediaSoup Router连接起来，并通过在其上创建的Producer和Consumer实例实现双向媒体传输，实现了下面3种Transport：

    • WebRtcTransport
      一个WebRtcTransport代表着一个WebRTC终端和MediaSoup通过ICE和DTLS过程协商的网络路径。WebRtcTransport可用于接收媒体、发送媒体或同时接收和发送媒体。MediaSoup没有限制。但是，由于其设计，mediasoup-client和libmediasoupclient要求区分用于发送和接收的WebRtcTransport。

    • PlainRtpTransport
      一个PlainRtpTransport代表着一个通过它传输纯RTP和RTCP的网

最低0.47元/天 解锁文章
mediasoup 源码分析（二十二） XR包
lcalqf的专栏
12-14 806
目录 协议介绍 协议分析 1、BT=4 2、BT=5 协议介绍 XR 包是RTCP 扩展报告的一种，PT=207，主要用来提供更加详细的时间、丢包等统计信息。XR包总共有七个报告块，mediasoup主要第四和第五即BT=4 ,BT=5两个。 代码见：XR.cpp 、XrDelaySinceLastRr.cpp、XrReceiverReferenceTime.cpp 协议分析 协议文档：https://datatracker.ietf.org/doc/rfc3611/?include.
mediasoup 源码分析（三） room 和 router 创建过程
lcalqf的专栏
08-07 1586
一、server启动WebSockerServer server.js会通过protoo 启动WebSocketServer // Run a protoo WebSocketServer. await runProtooWebSocketServer(); 当用户请求连接时会带着roomId，server接收到用户请求后会判断当前房间是否存在，如果不存在会就创建一个。 具体详情见server.js的runProtoWebSockerServer()函数 async function run.
mediasoup客户端C++库：构建实时通信应用的高效工具
最新发布
gitblog_01008的博客
11-28 325
mediasoup客户端C++库：构建实时通信应用的高效工具 libmediasoupclient mediasoup client side C++ library 项目地址: https://gitcode.com/gh_mi...
【网络通信 -- WebRTC】MediaSoup 源码分析 -- 总体架构分析
CopperSun 技术博客
08-20 1484
【网络通信 -- WebRTC】MediaSoup 源码分析 -- 总体架构分析 【1】MediaSoup 的整体架构 Worker A worker represents a mediasoup C++ subprocess that runs in a single CPU core and handles Router instances Worker 表示 MediaSoup C++ 的子进程，该子进程运行在一个单独的 CPU 核心中，用于处理 Router 实例 Router A .
mediasoup 源码分析 （二十七）simulcast
lcalqf的专栏
08-15 1220
原理介绍 simulcast ：字面意思是多播，在webrtc中指大小流。推流的客户端同时发生多路不同分辨率、帧率的视频到服务器，服务器根据下行用户网络情况，选择一路合适流进行转发。 它的主要应用场景： 一次视频会议时不同参会人员的网络带宽不一样，不能仅仅因为一个人的网络不好就降低分辨率，因为那样网络好的人体验效果也变差了。所以应该探测出谁的网络不好，只给他降码率、帧率就行了。 如下图所示：pc客户端上行推送了1080p、720p、360p三路流，服务器在转发时给手机端下发了360p，给网络状...
mediasoup架构分析
weixin_29405665的博客
12-29 2814
1.客户端通过websocket发送消息，服务器端处理处理websocket消息函数位于 Peer.js 209行。 2.node.js向workder发送的消息，将会在worker里面的src/RTC/Router.cpp的HandleRequest函数被处理。 3.服务器的IceCandidate由worker进程产生，对应消息WORKER_CREATE_ROUTER。 先创建router，router下面再创建WebRtcTransport。多个终端进入同一个房间，共用一个router，一个终.
WebRTC进阶流媒体服务器开发（四）Mediasoup源码分析之底层库
irainsa的博客
02-28 442
若被占用，就根据PortManager的策略往后跳。接收端能够知道有没有丢包，因为数据包有Sequence，比如发送了100个数据，前50个数据是连续的，但假设当50之后是55，Recv端就知道丢了 51、52、53、54 这4个包了。因为数据的接收有可能会丢包，丢包重传的也算作一路流，对应的音频的丢包也是需要重传）服务端推送给客户端的数据流是会重新排序的，排序的时候便会依靠这个SeqManager，它会记录某个SSRC所对应的Sequence，以此为起始位置，然后后面的每个包都向下递增一个数。
mediasoup源码分析（一） 编译过程
lcalqf的专栏
08-05 3262
注意:mediasoup最终是作为一个node-module 模块，不要单独编译mediasoup，而是下载编译mediasoup-demo，在 编译demo的过程中会自动下载编译c++代码mediasoup 一、安装依赖环境 1、下载安装nvm ，通过nvm管理安装node git地址：https://github.com/nvm-sh/nvm 安装nvm： curl -o- https://raw.githubusercontent.com/nvm-sh/nvm/v0.35.3/insta
mediasoup源码分析 （一）大纲
lcalqf的专栏
08-02 3676
一、mediasoup编译过程 内容： centos7环境下编译mediasoup-demo，搭建好demo环境可进行1V1视频通话。 二、分析mediasoup 源码编译过程 内容：介绍Makefile是如何编译worker项目 ，gyp如何管理项目。 三 、数据传输过程 内容：分析从socket收到数据到音视频stream处理的整个过程。 四、Transport模块 内容：介绍mediasoup各个Transport功能，如WebrtcT...
mediasoup源码分析（二十）服务端架构设计
lcalqf的专栏
11-07 1331
目录 简介 信令服务（房间服务） 调度服务 媒体服务 简介 流媒体服务器大的方向上可以分为上述三个模块。目前行业内都是分布式服务，独立部署。mediasoup信令与媒体之间虽然可以管道通信。但在行业内，服务之间通过管道通信用的少。 一般是rpc、mq，或者传统的tcp。这块licode架构比较不错，licode是信令和媒体服务通过MQ消息队列解耦。 下面介绍一下这三个服务主要功能，当然文中所说也是一家之言。 信令服务（房间服务） 信令服务也称为房间服务。有的企业把信令和房间分开，信..
mediasoup数据转发 源码剖析
椛茶的博客
10-31 1713
Worker：mediasoup 流媒体处理进程Router：路由对象，类似于房间的功能，保存了流之间的订阅关系，它接收 Producer 的数据并转发给订阅该 Producer 的 ConsumerProducer：音视频流生产者，一路音频就算一个单独的生产者，一路视频也算一个单独的生产者Consumer：音视频流消费者Transport：传输通道，有 WebRtcTransport，PlainRtpTransport 以及 PipeTransport。
mediasoup 源码分析（二十四）stun 协议分析
lcalqf的专栏
01-16 1085
目录 stun介绍 stun 协议分析 属性消息 stun介绍 stun 即:Session Traversal Utilities for NAT。用于NAT穿透的网络协议。 作用： stun协议主要用来得到自己的外网IP，然后进行连通性检测。 客户端比如chrome会向stun服务器发送stun包得到自己的外网IP。 对于mediasoup和srs等webrtc服务器，本身实现了ice-lite，不需要单独部署stun服务，只需要响应客户端发送的stun request就表明连接.
mediasoup 源码分析 （八）分析PlainTransport
littleboy_IT
06-23 614
PlainTransport 可以接收裸RTP流，也可以接收AES加密的RTP流。源码中提供了一个通过ffmpeg发送裸RTP流到mediasoup的脚本，具体地址为：mediasoup-demo/broadcasters/ffmpeg.sh。脚本就是通过HTTP Post发送创建PlainTranport请求，然后通过ffmpeg向指定地址+端口，发送RTP流。真正绑定的地方在PortManager::BindUdp(ip)中，随机从指定Port范围中选出可用Port，然后绑定。
mediasoup源码分析之-网络基础库libuv
cynic_liu的博客
07-13 426
开源的网络事件库有很多种，大家最熟悉的莫过于集成在nginx里的event模块，很灵巧也很好的支撑了nginx的高性能服务。但是分析源码后，大家其实都比较类似，底层采用epoll机制探测事件，从而驱动上层业务运行。libuv也是一个开源的网络事件库，它的设计也比较巧妙，很轻量级。 mediasoup中，libuv使用由以下两个函数启动，ClassInit负责生成uv_loop_t对象，并初始化相关对象，类似nginx的ngx_worker_process_cycle，RunLoop调用uv_run，启动循
mediasoup 源码分析（十三） 丢包重传 webrtc nack 机制
lcalqf的专栏
08-21 1376
一、丢包介绍 由于webrtc所用的rtp协议底层是基于udp传输，所以并不能保证数据的可靠性。在发生丢包时，为了保证音视频的质量需要进行 重传，而 nack机制就是用来处理重传逻辑的，需要注意一点由于udp本身是无序的，所以在进行丢包重传时要做一定的特殊处理。 二、nack 报文介绍 文档 ：RFC4585 其中PT=205,FMT=1 ,Packet identifier即为丢失的RTP数据包的序列号，BitMap of lost packets指从,Packet ident...
【MediaSoup---源码篇】（二）Router
用可见的方式来记录和分享每一次收获
09-22 310
Router
【网络通信 -- WebRTC】MediaSoup 源码分析 -- 拥塞控制
CopperSun 技术博客
01-13 517
【网络通信 -- WebRTC】MediaSoup 源码分析 -- 拥塞控制 【1】MediaSoup -- TransportCongestionControlServer 类的结构图示 【2】MediaSoup -- TransportCongestionControlClient 类的结构图示 【3】MediaSoup -- SenderBandwidthEstimator 类的结构图示 参考致谢 本博客为博主的学习实践总结，并参考了众多博主的博文，在此表示感谢，博主若有不...
mediasoup 源码分析（二十八）rtx 重传包
lcalqf的专栏
08-24 852
文章目录rtx 协议格式字段细节上行rtx处理下行rtx处理 rtx 主要用来进行封装重传包 rtx 协议格式 The format of a retransmission packet is shown below: 0 1 2 3 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 2 3 4 5 6 7 8 9 0 1 +-+-+-+-
mediasoup架构
06-07
Mediasoup 的架构分为两部分：客户端和服务端。 1. 客户端：客户端是指使用 Mediasoup 的应用程序或浏览器，客户端需要通过 WebRTC 技术与 Mediasoup 服务器建立连接，并且通过 Mediasoup 提供的 API 来控制和管理...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值