webrtc部分手机黑屏的原因排查

解码前: 是webrtc 指这里
中使用了timestamp_ns作为key,缓存帧信息在 frame_extra_infos_ 中

解码前: 这个帧信息,在这里入frameInfo队列


解码后:输出的时候使用了mediacodec输出的presentationTimeUs 作为key,获得缓存的帧信息,指这里,从 frame_extra_infos_取回缓存的帧信息。

解码后:这个帧信息,解码后在frameInfo队列中查找

注意到 frameInfo 队列的长度为9,在队列中查不到,就认为是过期的视频帧,就会走丢弃逻辑。

被丢弃了就导致黑屏掉帧。

对于发送端来说,要避免这种情况,需要保证timestamp_ns和编码中携带的pts一致。

为什么同样的流有的手机不会黑?

mediacodec的presentationTimeUs有两个来源。

一是

codec.queueInputBuffer(index, 0, size,frame.captureTimeNs, 0);

二是 部分手机的 mediacodec 会在timing_info_present_flag=1的时候,会根据码流中的信息,重设presentationTimeUs

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
要在WebRTC中切换手机摄像头,你可以使用JavaScript编写以下代码: 首先,通过`getUserMedia`方法获取用户媒体设备(即摄像头和麦克风)的访问权限: ```javascript navigator.mediaDevices.getUserMedia({ video: true, audio: true }) .then(function(stream) { // 获取到了媒体流,可以进行后续操作 }) .catch(function(error) { // 发生错误,处理错误情况 console.log('getUserMedia error: ', error); }); ``` 接下来,你可以使用`MediaStreamTrack.getSources()`方法获取所有可用的媒体源,包括摄像头和麦克风: ```javascript MediaStreamTrack.getSources(function(sourceInfos) { var videoSources = []; for (var i = 0; i !== sourceInfos.length; ++i) { var sourceInfo = sourceInfos[i]; if (sourceInfo.kind === 'video') { videoSources.push(sourceInfo); } } // videoSources数组中包含了所有可用的摄像头 }); ``` 一旦你获得了可用的摄像头列表,你可以使用`MediaStreamTrack.applyConstraints()`方法来切换摄像头: ```javascript var videoTrack = stream.getVideoTracks()[0]; // 获取当前使用的摄像头轨道 // 通过切换设备ID来切换摄像头 var constraints = { video: { deviceId: { exact: videoSources[1].deviceId } } }; videoTrack.applyConstraints(constraints) .then(function() { // 摄像头切换成功 }) .catch(function(error) { // 摄像头切换失败,处理错误情况 console.log('applyConstraints error: ', error); }); ``` 在上述代码中,`videoSources[1].deviceId`是你要切换到的摄像头的设备ID。你可以根据需要修改该值。 注意:由于WebRTC的浏览器兼容性问题,上述代码在某些浏览器中可能无法正常工作。你可以使用适当的浏览器前缀或使用第三方库(如adapter.js)来处理兼容性问题。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值