WebRTC系列-漏桶算法FrameDropper

已于 2022-11-07 15:16:14 修改
阅读量799 收藏 3
点赞数 2
分类专栏： WebRTC进阶 文章标签： webrtc 音视频
于 2022-05-24 17:29:36 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lym594887256/article/details/124943372
版权
本文深入探讨WebRTC中的FrameDropper类，解释了ExpFilter算法在处理帧率和码率控制中的作用。文章通过分析Fill、Leak、DropFrame等方法，展示了在实时视频传输中如何通过动态调整丢帧策略来适应网络状况变化，确保流畅的通信体验。
摘要由CSDN通过智能技术生成

文章目录


本文将详细介绍WebRTC中QOS中对于帧率控制的核心方法，编码前帧的控制主要使用漏桶算法类DropFrame,漏桶算法在之前的文章 WebRTC系列–带宽估计影响码率和硬件编码H264 simulcast有提到过，但是没有详细分析其算法，这篇文章就此算法展开分析；
需要注意的是：漏桶算法主要是保证：编码器在某种情况下无法保证输出的比特率稳定，从而导致输出的比特率太高；
示意图：
在这里插入图片描述

1. 关键类ExpFilter介绍

这个类定义在rtc_base/numerics/exp_filter.h中，提供ExpFilter有参构造函数：

explicit ExpFilter(
了解本专栏 订阅专栏 解锁全文 超级会员免费看
简简单单lym
关注
专栏目录
订阅专栏
WebRTC帧率调整策略
chinabinlang的专栏
03-22 9636
与实时视频相关参数包含：帧率、码率、时延、抖动等。帧率体现了视频的流畅性，要想达到较好的流畅性体验要求——网络视频帧率不低于24帧，视频会议帧率不低于15帧。在实际开发中，我们遇到了不少问题，主要包括：发送端帧率较低接收端帧率较低帧率波动较大本文主要研究WebRTC中的帧率调整策略，解决上述实际开发中帧率较低的问题，以期达到较好的流畅性体验。帧率计算方法帧率并非恒定值，帧率大小反映的是每秒多少视频...
webRTC 框架下的视频主动丢帧
Es_trella的博客
08-06 1721
互联网之上的视频传输经常会遇到网络不稳定，终端性能不足等问题。将有限资源的能力最大化，提供良好的视频体验，是视频传输方案一直追逐的目标。除了不断优化软硬件的处理能力，可以采用的方法不外乎调整视频清晰度（分辨率），丢帧，调整编码码率等体验损伤性手段，来提供降级的服务。本文重点关注在丢帧的使用上，以webRTC m79基线h264编解码为参考探讨一下丢帧手段的使用。 视频传输关键路径 要了解丢帧的发生最好先了解视频传输的全路径，之前写了视频传输的关键路径，可以先行阅读https://xie.infoq.cn/a
WebRTC 视频流发送统计报告
我的玻璃盒子
10-13 988
在每次视频推流或拉流结束后，WebRTC都会输出本次视频推拉流的统计报告。其中包含了关于评价本次推拉流质量相关的若干参数。本文的主要目的是介绍视频推流相关的统计指标含义。
dropframe
weixin_33736649的博客
12-31 171
ok 转载于:https://www.cnblogs.com/lnlvinso/p/10203616.html
WebDrop:使用WebRTC in在浏览器中最简单的P2P组文件和消息传输。 跨平台替代Apple的AirDrop，Xender，ShareIT的方式，具有通过局域网的相同速度。 没有安装，只有一个网站
03-31
Web拖放 浏览器中的P2P文件传输类似于Apple的AirDrop。 只需在设备上访问网站，选择文件并共享即可！ 没有任何安装，只有一个网站！ 用 ，WebRTC制作 :fire: 。 不涉及服务器，99％的浏览器，1％的WebTorrent跟踪器。 特征 易于使用 自动发现同一网络（LAN）中的设备 恢复连接中断下载 没有文件下载限制 直接下载到您的下载文件夹，无需等待 通过互联网共享房间代码！ 轻松分享短信！ 为什么 情况1：我想与朋友的手机或计算机共享文件，但是我们没有USB电缆。 我有一个文件共享应用程序A，我的朋友有B。我们俩都争辩说“ A更好”，“不，B更好”。 该应用程序的安装大小为50MB，是一半的膨胀软件，争论花费了我们15分钟的时间。 如果是iPhone和Android，那就好了。 奖金：iPhone + Android + Windows PC一起 :slightly_smiling_face: 情况2：我
Webrtc FrameBuffer实现原理
liwf616的专栏
09-05 2047
Webrtc jitterbuffer实现串讲（未完待续） InsertPacket int64_t FrameBuffer::InsertFrame(std::unique_ptr<EncodedFrame> frame) { TRACE_EVENT0("webrtc", "FrameBuffer::InsertFrame"); RTC_DCHECK(frame); i...
webrtc精读之丢帧，降分辨率
a617505352的专栏
05-12 681
webrtc精读之丢帧，降分辨率
webrtc基于webrtc-streamer推流实现直播
02-02
在本项目中，我们将探讨如何利用WebRTC-Streamer来实现直播功能，前端则采用Vue3技术栈。 WebRTC的核心组件包括：PeerConnection用于处理音视频数据的实时传输，MediaStream用于捕捉和操作媒体流，以及Signaling...
webrtc-streamer-v0.8.1
11-16
【标题】"webrtc-streamer-v0.8.1" 是一个特定版本的 WebRTC 流媒体服务器软件。WebRTC（Web Real-Time Communication）是一种开放的API框架，它允许网页浏览器进行实时通信，无需插件或者第三方软件。这个版本 v...
webrtc-streamer-v0.8.1-dirty-Windows-AMD64-Release.zip
01-26
在"webrtc-streamer-v0.8.1-dirty-Windows-AMD64-Release.zip"这个压缩包中，我们看到的是一个针对Windows操作系统，AMD64架构的WebRTC流媒体服务器的发行版本。 WebRTC-Streamer是基于WebRTC的开源项目，它提供了...
webrtc-streamer
最新发布
05-22
`webrtc-streamer.exe -o -H 0.0.0.0:9001` 这条命令是启动WebRTC-streamer服务的命令。这里的参数有以下含义： - `-o` 表示启用日志输出，这有助于调试和查看服务运行时的状态信息。 - `-H 0.0.0.0:9001` 指定了...
ShareDrop - 基于WebRTC的简单P2P文件传输-受Apple AirDrop启发
m0_48452771的博客
06-08 1241
ShareDrop is a web application inspired by Apple AirDrop service. It allows you to transfer files directly between devices, without having to upload them to any server first. It uses WebRTC for secure peer-to-peer file transfer and Firebase for presence ma
【网络通信 -- WebRTC】项目实战记录 (调试工具) -- chrome 与 WebRTC
CopperSun 技术博客
07-27 3327
【网络通信 -- WebRTC】项目实战记录(调试工具) -- chrome 与 WebRTC 【1】chrome://webrtc-internals/ 分析工具 RTCIceCandidate_XXX -- ICE 候选描述信息 timestamp 时间戳 transportId 传输 ID isRemote 是否为远端 networkType 网卡 ip IP 地址 address IP 地址 port 端口 protocol 传输...
webrtc QOS方法五.1（帧率调整）
CrystalShaw的博客
10-24 7811
一、框架图 二、帧率调控算法 根据上图所示，发送端帧率调整算法有两个： 1、视频采集帧率与编码器输入帧率之间的FrameDropper算法。 2、编码器输入与编码器输出之间的MediaOptimization算法。 三、webrtc的帧率 如上框架图，webrtc的帧率从左到右，帧率是持递减状态的。摄像头的采集帧率是发送端帧率的极限值。 1、摄像头采集帧率 视频采集卡帧率...
webrtc 判断是否支持_WebRTC Qos 杂问
weixin_42513387的博客
12-24 351
为什么一开始fps会降到1，后来有了正常的两方通话后又恢复到30WebRTC对每一帧调用 VideoStreamEncoder::OnFrame，然后调用VideoStreamEncoder::MaybeEncodeVideoFrame 这个方法中可能会执行最终的编码。定义了一个 posted_frames_waiting_for_encode_变量表示当前等待编码的帧数，通过它判断是否应该跳过来...
WebRTC开发之iOS15.4快速晃动，远端观看卡顿掉帧问题
hbblzjy的博客
03-30 1729
前两周刚刚更新了iOS15.4的系统，然后就发现了一个奇怪的问题，在iOS15.4的手机上安装音视频Demo，快速晃动时，远端看到的画面会卡顿，并且掉帧、帧率下降、不断变化，然而在其他系统手机上，却没有问题，所以是为什么？ 1、难道是iOS15.4系统的采集修改，所以丢掉了部分帧？ 2、难道是iOS15.4系统的硬编码修改，所以丢掉了部分帧？ 3、难道是iOS15.4系统与WebRTC不匹配，所以WebRTC丢掉了部分帧？ 根据这些猜想和疑问，在采集和编码处分别添加输出语句，测试多次发现：设置帧率1
FEC系列（一）webrtc中的媒体保护策略
weixin_43587544的博客
06-28 963
对webrtc中的FEC策略及实现进行解读，这是第一部分
WebRTC QoS方法（汇总篇）
热门推荐
CrystalShaw的博客
05-24 1万+
目前总结出webrtc用于提升QOS的方法有： NACK、FEC、SVC、JitterBuffer、IDR Request、PACER、Sender Side BWE、VFR（动态帧率调整策略）。 这几种方法在webrtc架构分布如下： 具体实现原理如下： 一、NACK 与NACK对应的是ACK，ACK是到达通知技术。以TCP为例，他可靠因为接收方在收到数据后会给发送方返回一个“已收......
WebRTC ：NetEQ几种数据缓冲区的代码实现
无聊科技
08-16 2329
      WebRTC音频引擎NetEQ在处理音频数据时，主要用到了4块内存区域用于暂存处理过程中间的临时数据，分别是抖动缓冲区，解码缓冲区，DSP算法缓冲区和语音缓冲区。       抖动缓冲区用于暂存网络中到来的未解码的音频数据包，然后这些数据包会通过解码器解码成为pcm原始音频数据，这些pcm数据存放的位置就是解码缓冲区，在需要经过音频信号处理的情况下，NetEQ会将解码缓冲区中的数据进...
webrtc framedropper 漏桶算法
12-30
webrtc framedropper 漏桶算法是一种网络传输中用于控制帧率的算法。在实时通信中，为了减少网络传输过程中的延迟和丢包，需要对视频帧进行控制，以保证视频流的稳定性和流畅性。 在webrtc framedropper 漏桶算法中，视频帧以固定的速率进入“桶”中，这个速率可以根据网络条件和设备性能进行调整。如果视频帧的到达速率超过了“桶”的容量，多余的帧将被丢弃，以确保网络传输的稳定性。 漏桶算法通过控制帧率来平衡视频质量和网络传输的稳定性。当网络状况较好时，可以增加帧率提高视频质量；而当网络条件不佳时，可以通过丢弃多余的帧来降低带宽占用，从而保证视频传输的流畅性。 综上所述，webrtc framedropper 漏桶算法在实时通信中起到了非常重要的作用，可以有效地控制帧率，平衡视频质量和网络传输的稳定性，提升了用户的使用体验。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

简简单单lym

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值