webrtc 代码学习（十二）Video rtp 发送数据流程

最新推荐文章于 2022-01-20 17:33:23 发布
最新推荐文章于 2022-01-20 17:33:23 发布
阅读量1.9k 收藏 3
点赞数 1
分类专栏： webrtc学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/baozi520cc/article/details/103015156
版权
本文详细解析了WebRTC中Video RTP的数据发送流程，从Capture获取数据到通过Pace发送到网络，包括编码、丢帧判断、VP8编码、RTP封装、FEC处理、Pacing以及最终通过网络接口发送的过程。
摘要由CSDN通过智能技术生成

Video rtp 发送数据
作者：LanPZzzz

文章目录

1. 从Capture 中获取到数据，发送到Pace 中

-> VideoStreamEncoder::OnBitrateUpdated （video\video_stream_encoder.cc 925） 编码的VideoFrame 是 pending_frame_ 在 VideoStreamEncoder::MaybeEncodeVideoFrame 中设置
->VideoStreamEncoder::EncodeVideoFrame （video\video_stream_encoder.cc 819） 这里创建了I420 buffer
-> VideoSender::AddVideoFrame （modules\video_coding\video_sender.cc 243）
-> 设置encode 参数
-> _mediaOpt.DropFrame() 判断是否要丢帧，丢帧调用 post_encode_callback_->OnDroppedFrame
-> VCMGenericEncoder::Encode （modules\video_coding\generic_encoder.cc 85）
-> VP8EncoderSimulcastProxy::Encode （media\engine\vp8_encoder_simulcast_proxy.cc 47） 这里就调用了vp8 的编码
-> LibvpxVp8Encoder::Encode （\modules\video_coding\codecs\vp8\libvpx_vp8_encoder.c

最低0.47元/天 解锁文章
LanPZzzz
关注
  • 1
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【RTP】3： RTPSenderVideo::SendVideo 入口到发送
突围
11-27 244
rtpsendervideo
WebRTC代码走读（十）：rtp_rtcp模块分析
wanghorse的专栏
06-20 5182
1. 对外提供的主要流程接口      收包的调用接口RtpReceiverImpl::IncomingRtpPacket      发包的调用接口ModuleRtpRtcpImpl::SendOutgoingData      收包处理之后的回调接口RtpData 2. 主要处理类      ModuleRtpRtcpImpl， 控制模块，是个Module，自己能够独立处理
webrtc-m79-VideoRtpSender、VideoRtpReceiver、RtpTransceiver
hclbeloved的博客
05-23 576
1VideoRtpSender的创建 BEGIN_SIGNALING_PROXY_MAP(RtpSender) PROXY_SIGNALING_THREAD_DESTRUCTOR() PROXY_METHOD1(bool, SetTrack, MediaStreamTrackInterface*) PROXY_CONSTMETHOD0(rtc::scoped_refptr<MediaStreamTrackInterface>, track) PROXY_CONSTMETHOD0(rtc::.
webrtc代码走读十三（RTPSenderVideo::SendVideo视频打包）
CrystalShaw的博客
05-24 2403
一、编码到发包函数调用图 二、编码函数代码走读 encoded_image_缓存的是编码后的数据。frag_header是NALS组信息。 encoded_image_缓存数据格式为：4个字节起始码+NALHead+date+4个字节起始码+NALHead+date....... RTPFragmentationHeader* frag_header参数fragmentati...
流媒体协议介绍（rtp/rtcp/rtsp/rtmp/mms/hls）
热门推荐
热爱工作，快乐生活
09-25 12万+
RTP           参考文档 RFC3550/RFC3551          Real-time Transport Protocol)是用于Internet上针对多媒体数据流的一种传输层协议。RTP协议详细说明了在互联网上传递音频和视频的标准数据包格式。RTP协议常用于流媒体系统（配合RTCP协议），视频会议和一键通（Push to Talk）系统（配合H.323或SIP），使它成
rtp:RTP 的 Go 实现
08-04
Pion RTPRTP 的 Go 实现 路线图该库用作我们 WebRTC 实现的一部分。 请参阅该以跟踪我们的主要里程碑。社区Pion 在上有一个活跃的社区。 注册并加入#pion频道以获得讨论和支持。 您还可以使用。 我们一直在寻求支持...
WebRTC Video/Voice Engine 音视频引擎
06-13
基于最新版本的WebRTC封装的High Level的音视频引擎SDK，支持如下功能： 提供一个简单的呼叫控制协议 音频： 支持729，711，iLBC，GSM，ISAC等多种Codec 支持RTP/RTCP 支持EC（Echo Control），VAD，NS等 支持...
webrtc库源代码目录分析
10-25
### WebRTC库源代码目录分析 #### 一、概述 WebRTC（Web Real-Time Communication）是一种开源项目，旨在实现浏览器间的实时通信功能，包括音频、视频通话以及数据传输。其核心库提供了高质量的音视频处理能力，...
webrtc实现h5播放rtsp流
04-25
在实现H5播放RTSP流时，我们首先需要一个服务器来处理RTSP流并将其转换为WebRTC兼容的数据格式，通常是RTP（Real-time Transport Protocol）。这个过程通常称为“RTSP到WebRTC的适配”。有几种开源项目如Medialooks...
h5实现播放RTSP视频流WebRTC.docx
04-18
5. **转换方案**：一种常见的解决方案是使用服务器端的转码服务，如FFmpeg，将RTSP流转换为WebRTC兼容的格式，然后通过WebSocket或其他信令通道将数据发送到Web客户端。客户端通过WebRTC的PeerConnection接收并播放...
java rtcp生成视频_使用rtcp实现音视频同步
weixin_28743405的博客
02-19 606
imageimage正文一 基础知识音视频同步是指音视频的rtp时间戳同步. audio/video rtp 时间戳不能自己同步，需要audio/video rtcp同步。1 RTCP时间戳发送端以一定的频率发送RTCP SR(Sender Report)这个包，SR分为视频SR和音频SR，SR包内包含一个RTP时间戳和对应的NTP时间戳，可以用对做音视频同步.(同步过程在后面)rtcp sr 格...
WebRtc VideoRtpSender
闲敲棋子落灯花
10-25 2446
VideoTrack的定义如下:class VideoTrack : public MediaStreamTrack<VideoTrackInterface>, public rtc::VideoSourceBase, public ObserverInterface { public: static rtc::sco
webrtc 二------从视频中获取图片
guoang
10-04 520
从视频中获取图片用到canvas。 将video当作源使用drawImage截取一帧数据就实现拍照功能。 //html <video autoplay playsinline id="player"></video> <button id="snapshot">拍照</button> <canvas id="picture"></canvas> //js 'use strict' if (!navigator.mediaDevice
WebRTC代码走读（六）：视频发送流程
wanghorse的专栏
05-07 4460
转载注明出处http://blog.csdn.net/wanghorseJNI调用 ProvideCameraFrame VideoCaptureAndroid::OnIncomingFrame VideoCaptureImpl::IncomingFrame 申请内存，转换层I420 VideoCaptureImpl::Deli
WebRTC实时通信系列教程9 数据通道图片传输
08-11 816
转载地址：https://blog.csdn.net/leytton/article/details/76838194 1、你将学到 拍照并通过canvas标签获取图片数据. 与远程用户交换图片数据.   完整示例代码在 step-06 目录下. 2、工作原理 前面你学习了如何使用 RTCDataChannel 交换文本消息. 这一节将讲解如何传输整个文件: 案例中通过 getUse...
webrtc中视频采集后到发送过程
airmanisvip的专栏
01-20 2050
VideoStreamEncoder::OnFrame | VideoStreamEncoder::MaybeEncodeVideoFrame | VideoStreamEncoder::EncodeVideoFrame | VideoSender::AddVideoFrame | VCMGenericEncoder::Encode | H264EncoderImpl::Encode | .
android webrtc 视频流源码获取帧图像VideoFrame转bitmap 作为图像识别
b275518834的专栏
08-05 2899
由于需要使用opencv等项目识别webrtc中的画面 需要对webrtc的摄像头进行采集 该方法在EglRenderer implements VideoSink 类的onFrame中增加saveImgBitmap(frame)方法来获取图像具体代码如下 // VideoSink interface. @Override public void onFrame(VideoFrame frame){ //将org.webrtc.VideoFrame转bitmap并保存 saveImgBitm.
rtp_rtcp模块分析，webrtcrtp_rtcp
sunxiaopengsun的专栏
02-17 227
1. 对外提供的主要流程接口 收包的调用接口RtpReceiverImpl::IncomingRtpPacket 发包的调用接口ModuleRtpRtcpImpl::SendOutgoingData 收包处理之后的回调接口RtpData 2. 主要处理类 ModuleRtpRtcpImpl， 控制模块，是个Module，自己能...
webrtc-自定义视频流-实现篇(基于release-54)
llsixly
05-11 8041
我所使用的webrtc是release-54版本，后续我也看过release-56版本的代码，发现有许多的代码差别很大，所以如果版本不同很大可能无法直接使用代码，请注意。我所开发的webrtc是基于centos7进行开发的，所以如果我没有特意标注的情况下都指的是linux下的webrtc，看官请知悉。 总记 步骤 1.整体介绍 2.EncodedImage和CodecSpecificInfo...
pion webrtc中RTPSender没有SetMaxBitrate方法
最新发布
06-01
在 Pion WebRTC 中，`RTPSender` 确实没有 `SetMaxBitrate` 方法。实际上，可以通过设置 `RTPSender` 的 `Track` 对象的 `MaxBitrate` 属性来限制轨道的最大传输比特率。 下面是一个设置视频轨道最大传输流量的例子...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值