MediaCodec理解和使用(包含demo)

概念:

1.MediaCodec是一个Codec，通过硬件加速解码和编码。它为芯片厂商和应用开发者搭建了一个统一接口。MediaCodec几乎是所有安卓播放器硬解的标配.
2.MediaCodec是Android提供的用于对音视频进行编解码的类，它通过访问底层的codec来实现编解码的功能。是Android media基础框架的一部分，通常和 MediaExtractor,MediaSync, MediaMuxer, MediaCrypto, MediaDrm, Image, Surface和AudioTrack 一起使用。

与MediaRecorder区别:

MediaCodec更偏向原生，而MediaRecorder偏向的上层封装,MediaCodec效率更高一点.
优点: MediaRecorder这个类相对于MediaCodec简单，因为他封装的很好，直接就是几个接口来完成视频录制
缺点: MediaRecorder有一个问题就是不能接触到视频流数据了,他完成不了视频的叠加技术的.

使用流程:
1.解封视频

//           MediaExtractor媒体萃取器 在播放视频前，需先解封装，MediaExtractor可以负责解封装。
            extractor = new MediaExtractor();
            try {
                extractor.setDataSource(mVideoPath);
            } catch (IOException e) {
                e.printStackTrace();
                Toast.makeText(CodecVideoActivity.this, "视频文件不存在!", Toast.LENGTH_SHORT).show();
            

2.创建MediaCodec

 // 创建MediaCodec
            for (int i = 0; i < extractor.getTrackCount(); i++) {
                MediaFormat format = extractor.getTrackFormat(i);
                String mime = format.getString(MediaFormat.KEY_MIME);
                LogUtils.d("dddddd mime==",mime);
                // 选择视频轨道
                if (mime.startsWith("video/")) {
                    extractor.selectTrack(i);
                    try {
                        //createDecoderByType 为特定MIME类型创建首选的 编解码器 但是，这不能用于注入特性，并且可能会
                        //创建一个不能处理特定媒体格式的编解码器。这里采用createByCodecName 方式创建.
                    // decoder = MediaCodec.createDecoderByType(mime);
                     MediaCodecList codecList = new MediaCodecList(MediaCodecList.REGULAR_CODECS);
                     decoder = MediaCodec.createByCodecName(codecList.findDecoderForFormat(format));
                    } catch (IOException e) {
                        e.printStackTrace();
                    }
                    decoder.configure(format, surface, null, 0);
                    break;
                }
            }

            if (decoder == null) {
                Log.e("DecodeActivity", "Can't find video info!");
                return;
            }
            decoder.start();

MediaCodec处理数据的一般流程在一个循环内不断调用 dequeueInputBuffer -> queueInputBuffer填充数据 -> dequeueOutputBuffer -> releaseOutputBuffer显示画面
3.给MediaCodec喂数据

    if (!isEOS) {
                    int inIndex = decoder.dequeueInputBuffer(10000);
                    if (inIndex >= 0) {
                        ByteBuffer buffer = inputBuffers[inIndex];
//                        通过MediaExtractor的readSampleData和advance我们可以从视频文件中不断取到所选轨道的未解码数据
                        int sampleSize = extractor.readSampleData(buffer, 0);
                        //如果返回值小于0，说明已经到的文件末尾
                        if (sampleSize < 0) {
                            Log.d("DecodeActivity", "InputBuffer BUFFER_FLAG_END_OF_STREAM");
                            decoder.queueInputBuffer(inIndex, 0, 0, 0, MediaCodec.BUFFER_FLAG_END_OF_STREAM);
                            isEOS = true;
                        } else {
                            decoder.queueInputBuffer(inIndex, 0, sampleSize, extractor.getSampleTime(), 0);
                            //提前到下一个样品。如果没有更多的示例数据，则返回false 去掉后只能渲染第一帧.
                            boolean advance = extractor.advance();
                            Log.e("eeeeeeee advance==",advance+"");
                        }
                    }
                }

4.从MediaCodec取解码后的数据流程.

//                 从MediaCodec取解码后的数据（实际拿到的是一个Index），一般流程是这样的
                int outIndex = decoder.dequeueOutputBuffer(info, 10000);
                Log.e("eeeeeeee outIndex==",outIndex+"");
                switch (outIndex) {
                    case MediaCodec.INFO_OUTPUT_BUFFERS_CHANGED:
                        Log.d("DecodeActivityssss", "INFO_OUTPUT_BUFFERS_CHANGED");
                        outputBuffers = decoder.getOutputBuffers();
                        break;
                    case MediaCodec.INFO_OUTPUT_FORMAT_CHANGED:
                        Log.d("DecodeActivityssss", "New format " + decoder.getOutputFormat());
                        break;
                    case MediaCodec.INFO_TRY_AGAIN_LATER:
                        Log.d("DecodeActivityssss", "dequeueOutputBuffer timed out!");
                        break;
                    default:
                        ByteBuffer buffer = outputBuffers[outIndex];
                        Log.v("DecodeActivity", "We can't use this buffer but render it due to the API limit, " + buffer);

                        // We use a very simple clock to keep the video FPS, or the video
                        // playback will be too fast
                        while (info.presentationTimeUs / 1000 > System.currentTimeMillis() - startMs) {
                            try {
                                sleep(10);
                            } catch (InterruptedException e) {
                                e.printStackTrace();
                                break;
                            }
                        }
//                        通过 releaseOutputBuffer (outIndex, true)就可以让MediaCodec将这一帧输出到Surface上。
                        decoder.releaseOutputBuffer(outIndex, true);
                        break;
                }

1.MediaCodec的官方文档 https://developer.android.google.cn/reference/android/media/MediaCodec

MediaCodec+SurfaceView实现视频播放demo