webRTC介绍与运行机制
webRTC是 Google在2011年开源的跨平台的音视频引擎,可用于浏览器,提供简单的javascript就可以达到实时通讯。提供了视频会议的核心技术,包括音视频的采集、编解码、网络传输、显示等功能,并且还支持跨平台:windows,linux,mac,android。
可应用于游戏、即时通讯、文件传输等领域,对音视频处理有完整的解决方案,如回音消除、降噪等。
目录结构
紫色区域为应用层,为web开发者接口API
绿色区域为核心层,分为四层
1)提供C++API(peerconection)
2)session层,上下文管理层,包括音视频,非音视频信息处理
3)音频引擎:包括编解码器、音频缓冲buffer,用于适配、回音消除、降噪,静音检测
视频引擎:包括编解码器,视频缓冲buffer,图像增强
传输:SRTP、RTCP、复用、P2P等
4)音频采集、视频采集、网络IO,虚线代表可重载,可以自己实现模块代替它
webRTC源码目录结构
目录 | 功能 |
---|---|
api | WebRTC接口层,浏 |