WebRTC系列-视频VideoBroadcaster与视频流

最新推荐文章于 2023-03-08 14:44:42 发布
最新推荐文章于 2023-03-08 14:44:42 发布
阅读量700 收藏 1
点赞数 1
分类专栏： WebRTC进阶 文章标签： webrtc
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lym594887256/article/details/128477344
版权

文章目录


在前面的文章视频的采集流程中，视频数据采集完成后到编码器之前，如果需要渲染处理那里需要两路视频，WebRTC是实现了一个视频分发器VideoBroadcaster；用来分发采集的视频帧；
这篇文章主要以iOS为例介绍VideoBroadcaster分发视频流的过程，需要强调的是iOS的本地渲染没有使用VideoBroadcaster，而是直接通过系统提供的预览类直接显示；Android和pc端的实现都是经过 VideoBroadcaster流转数据后显示；

1. VideoBroadcaster 添加sink

在VideoBroadcaster类的AddOrUpdateSink方法中断点，当peerconnection添加视频的track后，首次断点的调用堆栈如下：
在这里插入图片描述
这里从堆栈的最上层开始分析，在VideoRtpSender类的SetSend()方法中，主要是找到source然

了解本专栏 订阅专栏 解锁全文 超级会员免费看
简简单单lym
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
webrtc视频采集
chinabinlang的专栏
07-27 1986
webrtc\src\webrtc\test 目录中的vcm_capturer.h 和 vcm_capturer.cc 如果仅仅是采集视频，可以参考或直接用这个例子； 一般仅仅是视频数据采集，Windows上直接用directshow就可以了； 移动端用相关平台sdk接口就可以了； webrtc只是实现了上层接口的统一封装而已；
webrtc-video-broadcast:WebRTC视频广播
05-26
WebRTC视频广播 通过WebRTC将视频从设备（broadcast.html）发送到查看器（index.html）。 使用WebRTC的getUserMedia（），RTCPeerConnection（）， <video> ， <canvas> ，Node.js和Socket.io | |
WebRTC VideoEngine 本地Video数据处理-Encode
EasyWater
11-13 3153
这里详细分析ViEEncoder对Video数据的处理过程
WebRTC之视频采集
shichaog的专栏
05-17 2980
基于WebRTC的实时音视频会议中对于视频处理流水，第一级就是视频采集，视频内容可以摄像头、屏幕和视频文件，视频来源的操作系统可以是Linux、Windows、Mac，IOS以及Android，不同的平台由不同的公司开发设计，因而他们从camera获取视频的底层框架并不一样，Linux系统使用V4L2（Video for Linux Version 2），Mac和IOS都是苹果公司开发的，都使用AVFoundation框架，Windows使用的是微软开发的DS（Direct Show）框架，Android使
WebRTC Video JitterBuffer
椛茶的博客
06-11 904
音视频传输通常使用 UDP，由于网络中存在丢包，抖动，乱序等现象，接收端收到的媒体包需要有个包缓冲区存放，对于视频而言，一帧数据可能被打包到多个 RTP 包传输，因此接收端收到 RTP 包后会判断是否可以组成视频帧，如果可以组成视频帧还要判断其参考帧是否存在，如果存在则将该帧送入帧缓冲区，等待解码线程进行解码。 如上所示，RtpVideoStreamReceiver 是收视频包的处理类，其中的 Video JitterBuffer 逻辑主要由 PacketBuffer，RtpFrameRefe
WebRTC源码分析——视频流水线建立（上）
yinshipin007的博客
03-08 546
视频源可以是摄像头，也可以是桌面、窗口抓屏(远程桌面，基于视频流的电子白板等应用)，甚至可以是磁盘上的视频文件，图片文件。VideoTrackSource没有实现VideoSinkInterface接口，因此，实质上视频数据是不会流入到VideoTrackSource中的，但其组合了VideoSource对象，并且实现了VideoSourceInterface接口，添加到VideoTrackSource中的VideoSink会被添加到VideoSource，然后进一步添加到VideoBroadcast中。
webrtc源码分析 视频采集发送流程
liuhongxian的专栏
03-01 1085
1、简述 video_loopback demo演示了怎么从call这一层创建流，接下来看一下视频的采集，编码，发送流程，本文只是粗略的跟踪流程，具体细节知识点后续分析。 webrtc的更新太快，模块有些调整，也加了些处理流程，所以得重复的去看流程，也是因为脑子不好使，看完接着忘。 2、跟踪代码 ...
WebRTC实践视频聊天室
xxxlllbbb的博客
09-03 1104
技术前言 通过前几次教程已经可以轻松的实现两个浏览器之间的文本信令交互和视频对讲功能。本次课程要融合以前所有技术点，做一次综合性实例，采用nodejs实现一个完整的聊天室功能。其界面样式仿照微信的界面搭建。 接口方法 在此我根据实例代码用到的接口做如下讲解,为了方便本实例我们采用nodejs开发，其中用到了socket.io技术。如果对socket.io（https://socket.io/）不明白的话可以先学习一下socket.io再回来看本教程。 1. io.sockets.on(‘connection
本地的VideoFrame渲染一（VideoTrack）
奔向火星的博客
05-23 6466
VideoTrack是webrtc中视频流最上层的接口，它内部其实是经过层层封装，对于本地的VideoTrack(远端的还没研究)，它最终通过VideoCaptureImpl完成本地视频的采集，VideoCaptureImpl实际上是通过DirectShow(windows平台上)与硬件打交道的。可以先看下它简化后的关系： 那么视频帧是如何通过ViedoTrack渲染出来的呢，先看另一个接口：
webrtc-streamer0.7的ubuntu18.04版本
11-08
webrtc-streamer在国内编译相当困难，这里是本人花了一周时间编译完成的webrtc-streamer最新版本，可在ubuntu18.04及以上版本中使用，如果提示libstdc++版本过低，请升级系统的libstdc++。
LiveVideoBroadcaster,原生android应用程序，可以通过rtmp广播和播放实时视频.zip
09-26
Please submit your issues on Ant-Media-Server Native Android app that can broadcast and play live video via RTMP - It is developed by Ant Media How to Develop a Live Streaming Mobile App in 3 Steps? Developing a live streaming mobile app is not a very quick and easy job if you develop every piece on
webrtc-streamer
04-18
vue2、vue3播放rtsp视频流
webrtc基于webrtc-streamer推流实现直播
最新发布
02-02
webrtc基于webrtc-streamer推流实现直播，前端基于vue3实现，下载可用
webrtc-android-jni.rar
05-15
webrtc-android-jni
Web网页实现多路播放RTSP视频流（使用WebRTC）
08-03
本demo采用web网页作为客户端，webrtc作为服务端，实现多路rtsp视频流在网页端同时实时预览。 其中包含两个文件夹：webrtc-qmy为客户端；webrtc-streamer-v0.7.0-dirty-Windows-AMD64-Release问服务端。具体使用流程...
WebRTC系列 - 源码编译等
HOSTEN的博客
07-06 6580
WebRTC在编译中也会编译大量的test测试文件，如果不需要编译，找到。要将其集成到您的项目中，请在Podfile中添加以下几行。也就是WebRTC的示例demo，在文件中找到。鉴于国内网络环境，下载源码前需要搭建好梯子；是编译库的保存路径，这个可以自定义，只需要。打开文件后如果不想编译WebRTC源码的。运行gclient sync，提示錯誤，，需要生成.gclient的配置文件，将其值修改成false；修改成false即可；进入源代码的src执行。
WebRTC视频分辨率限制 及调整策略
HOSTEN的博客
05-13 6283
WebRTC 中码率影响视频的帧率和分辨率的调整,在高硬件占用的情况下通过调整码率和帧率也会影响码率;视频评判的重要参数是QP; 外部设置帧率和分辨率参数 webrtc中的media/base目录下的video_adapter.cc,是视频分辨率和码率调整的重要类;改类主要对外提供一下接口: void OnOutputFormatRequest(const absl::optional<VideoFormat>& format); OnOutputFormatRequest提供了多
socket.io基本使用及介绍
HOSTEN的博客
04-14 4976
主要介绍socketio的特性及 消息解析后的格式
WebRTC系列- turn及stun网络分析法
HOSTEN的博客
04-24 4752
文章目录1. TCPDUMP分析法1.1 简述1.2 使用2. WireShark 基本使用简述实战 之前的文章有分析各种协议包的组成，那么实际上在使用的时候是不是和分析的一样，这就需要获取到请求的包进行分析；在分析网络协议最好能抓取到数据包，然后看分析数据包是不是和规定的协议一致； 一般的网络数据包分析我们有两个常用的工具： Linux端的一般经常使用tcpdump 其他客户端一般使用WireShark 当然可以将tcpdump抓取的数据拿到wireShark中分析。 1. TCPDUMP分析法 1.
webrtc-streamer支持哪些视频格式？
11-27
根据提供的引用[1]，webrtc-streamer支持RTSP、H264、H265等格式的视频流传输。但是并没有提到webrtc-streamer支持哪些视频格式。 根据提供的引用，webrtc-streamer最新版本可以在ubuntu18.04及以上版本中使用，...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

简简单单lym

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值