一.接口层
接口层有web的接口层和c++的接口层。
二.session层
session层主要包括了呼叫,媒体协商相关逻辑。
三.核心引擎层
核心引擎层包含了音频引擎,视频引擎,以及网络传输。
音频引擎包括NetEQ,拿到网络数据之后,首先经过NetEQ做平滑处理,之后的数据调用音频解码器解码,获取pcm数据,再经过3A算法优化之后再播放出来。
视频引擎通过Jitter Buffer对视频包进行平滑处理,然后通过视频解码器进行解码,最后经过图像增强算法,输出图像。
传输层经过SRTP保证数据传输过程中的安全性,之后是多路复用以及p2p。
四.设备层
设备层主要是音视频的采集级渲染,底层的网络传输。