Android nuplayer 两种音频解码流程

本文详细介绍了Android nuplayer的两种音频解码模式:non-offload和offload模式。non-offload模式涉及MediaCodec解码,PCM数据经过AV sync送至AudioTrack,适合多路解码但延迟较大。offload模式则通过passthrough直接将ES发送至硬件解码,减少延迟和系统负担,但仅支持一路解码且需要处理PTS问题。
摘要由CSDN通过智能技术生成

Android nuplayer 有两种音频解码流程,一种是non-offload 模式,另一种是offload 模式,本文章依次对两种解码流程进行简要流程说明。说明信息包含,流程图,以及两种模式下支持的Codec 决定参数。

一、non-offload 模式

non-offload 模式,这种模式,需要把ES 送给MediaCodec ,再从MediaCodec 拿到解码后的PCM data, 解码后的PCM data 经有nuplayer render 做AV sync 后,送给AudioTrack ->AudioFlinger ->AudioHal ->Alsa playback device ->Vendor SOC 进行播放。

这种模式,需要playback+capture compress device, playback compress device 用与传输ES 给hardware decoder ,capture compress device 用与从hardware decoder capture 解码后的pcm。

流程图如下,

1.红色箭头,表示单独的控制信息。

2.蓝色实线箭头,表示ES FLow 以及控制信息.

3.蓝色虚线箭头,表示PCM FLow 以及控制信息.

 

 

non-offload 模式优缺点有,

优点:

1.可以支持多路同时解码ÿ

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值