Android音视频 原生api解码mp4并实现播放功能

原生api解码mp4并实现播放功能

基础知识

Android系统提供了三个类MediaExtractor，MediaFormat，MediaCodec来帮助用户实现音视频解码，接下来分别介绍一下各自的功能。

• MediaExtractor
  -Extractor抽油烟机，负责将指定类型的媒体文件从文件中找到轨道，并填充到MediaCodec的缓冲区中
• MediaFormat
  封装描述媒体数据格式的信息，无论是音频还是视频。媒体数据的格式被指定为字符串/值对。所有格式通用的键，所有未标记为可选的键都是必需的：

名称 值类型 描述
KEY_MIME 串 格式的类型。
KEY_MAX_INPUT_SIZE 整数 可选，输入数据缓冲区的最大大小
KEY_BIT_RATE 整数 仅编码器，所需比特率（以比特/秒为单位）

• MediaCodec
  -访问底层媒体编码，能够完成媒体编码和解码
• -

功能实现

解码播放实现的步骤为：

1. 将资源加载到extractor
2. 获取视频所在轨道
3. 设置extractor选中视频所在轨道
4. 创将解码视频的MediaCodec，decoder
5. 开始循环，直到视频资源的末尾
6. 将extractor中资源以一个单位填充进decoder的输入缓冲区
7. decoder将解码之后的视频填充到输出缓冲区
8. decoder释放输出缓冲区的同时，将缓冲区中数据渲染到surface

实现代码如下所示
音频解码的代码如下

private class AudioThread extends Thread {
   
        private int audioInputBufferSize;

        private AudioTrack audioTrack;

        @RequiresApi(api = Build.VERSION_CODES.JELLY_BEAN)
        @Override
        public void run() {
            MediaExtractor audioExtractor = new MediaExtractor();
            MediaCodec audioCodec = null;
            try {
                audioExtractor.setDataSource(filePath);
            } catch (IOException e) {
                e.printStackTrace();
            }
            for (int i = 0; i < audioExtractor.getTrackCount(); i++) {
                MediaFormat mediaFormat = audioExtractor.getTrackFormat(i);
                String mime = mediaFormat.getString(MediaFormat.KEY_MIME);
                if (mime.startsWith("audio/")) {
                    audioExtractor.selectTrack(i);
                    int audioChannels = mediaFormat.getInteger(MediaFormat.KEY_CHANNEL_COUNT);
                    int audioSampleRate = mediaFormat.getInteger(MediaFormat.KEY_SAMPLE_RATE);
                    int minBufferSize = AudioTrack.getMinBufferSize(audioSampleRate,
                            (audioChannels == 1 ? AudioFormat.CHA