音视频
音视频相关
靑笺画卿颜
绝大多数人每天都做着重复的工作,但凡自己有规划,有深入的去努力一下,你就和别人不一样。
1 长期的职业和人生规划。
2 短期的学习规划。
3 不定期的反省。
展开
-
音视频技术之《移动直播场景的坑与规避措施》
移动平台上视频直播的坑主要可以总结为两个方面:设备差异,以及网络环境这些场景下带来的技术考验。移动直播场景的坑与规避措施1 不同芯片平台上的编码差异iOS 平台上无论硬编还是软编,由于是 Apple 一家公司出厂,几乎不存在因为芯片平台不同而导致的编码差异。然而,在 Android 平台上,Android Framework SDK 提供的 MediaCodec 编码器,在不同的芯片平台...原创 2020-04-13 14:30:23 · 850 阅读 · 0 评论 -
音视频技术之《影响视觉体验的直播性能指标》
影响视觉体验的直播性能指标是 延迟、卡顿和首屏耗时一 直播第一个性能指标是延迟延迟是数据从信息源发送到目的地所需要的时间。1 物理延迟根据爱因斯坦的狭义相对论,光速是所有能量、物质和信息运动所能达到的最高速度,这个结论给传播速度设定了上限。因此,即便我们肉眼感觉到的实时,实际上也是有一定的延迟。2 逻辑延迟由于 RTMP/HLS 是基于 TCP 之上的应用层协议,TCP 三次握手,...原创 2020-04-13 13:42:10 · 1185 阅读 · 0 评论 -
直播基本流程
直播基本流程这里不涉及到业务相关音视频采集通过摄像头和麦克风获得实时的音频原数据,例如PCM数据。视频原数据,例如yuv420p,rgb数据。注意:有关音频特效(变声)和视频特效(大眼瘦脸)就是对音视频原数据的处理编码音频编码:将音频采样数据(PCM等)压缩成音频码流,从而降低音频的数据量视频编码:视频编码的主要作用是将视频像素数据(RGB,YUV等)压缩成视频码流,从而降低视频的...原创 2020-01-03 17:16:25 · 14944 阅读 · 1 评论 -
音视频技术之《WebRTC实时音视频技术的整体架构介绍》
WebRTC 简介WebRTC,名称源自网页实时通信(Web Real-Time Communication)的缩写,是一个支持网页浏览器进行实时语音通话或视频聊天的技术,是谷歌2010年以6820万美元收购Global IP Solutions公司...转载 2019-12-31 14:28:05 · 10589 阅读 · 0 评论 -
音视频技术之《WebRTC实时音视频技术基础:基本架构和协议栈》
概述本文主要介绍WebRTC的架构和协议栈。最基本的三角形WebRTC架构为了便于理解,我们来看一个最基本的三角形WebRTC架构(见下图): 在这个架构中,移动电话用“浏览器M”表示,笔记本电脑用“浏览器L”表示,通过Web服务器将它们...转载 2019-12-31 14:08:03 · 10378 阅读 · 0 评论 -
音视频技术总结
音视频相关文章链接(持续更新)1 音视频技术之直播概念和流程框架2 音视频技术之直播架构3 音视频技术之移动直播秒开优化经验4 音视频技术之回声消除...原创 2019-12-27 09:37:27 · 463 阅读 · 0 评论 -
音视频技术之《移动直播秒开优化经验》
现今移动直播技术上的挑战要远远难于传统设备或电脑直播,其完整的处理环节包括但不限于:音视频采集、美颜/滤镜/特效处理、编码、封包、推流、转码、分发、解码/渲染/播放等。直播常见的问题包括主播在不稳定的网络环境下如何稳定推流?偏远地区的观众如何高清流畅观看直播?直播卡顿时如何智能切换线路?如何精确度量直播质量指标并实时调整?移动设备上不同的芯片平台如何高性能编码和渲染视频?美颜等滤镜特...转载 2019-12-24 17:09:36 · 11493 阅读 · 0 评论 -
音视频技术之《直播概念和流程框架》
一、了解直播热门直播产品映客,斗鱼,熊猫,虎牙,花椒等等1.一个完整直播app功能(来自落影loyinglin分享)1、聊天私聊、聊天室、点亮、推送、黑名单等;2、礼物普通礼物、豪华礼物、红包、排行榜、第三方充值、内购、礼物动态更新、提现等;3、直播列表关注、热门、最新、分类直播用户列表等;4、自己直播录制、推流、解码、播放、美颜、心跳、后台切换、主播对管理员操作、管...转载 2019-12-24 16:50:30 · 11345 阅读 · 0 评论 -
音视频技术之《直播架构》
直播相关知识之一 基本架构一. 引子-直播基本架构下面是服务器的整体架构图:上面上整体流程 相信一个开发者应该可以看的懂并理解吧! 主要分为四部分东西吧: 推流端SDK 负责 采集视频音频进行编码传输到服务端(某云), 服务端SDK负责 直播流的创建,分发到各个cdn节点,加快流的解析,以及各种流的管理统计等等 拉流端SDK负责 拉取流 进行...转载 2019-12-24 16:35:08 · 11104 阅读 · 0 评论 -
音视频技术之《回声消除》
本文讲的回声(Echo)是指语音通信时产生的回声,即打电话时自己讲的话又从对方传回来被自己听到。回声在固话和手机上都有,小时还可以忍受,大时严重影响沟通交流,它是影响语音质量的重要因素之一。可能有的朋友要问了,为什么我打电话时没有听见自己的回声,那是因为市面上的成熟产品回声都被消除掉了。回声分为线路回声(line echo)和声学回声(acoustic echo),线路回声主要存在于固话中,是由于...转载 2019-12-24 16:25:24 · 10866 阅读 · 0 评论