硬解直显模式实现抓图功能（一）

最新推荐文章于 2023-03-31 13:26:24 发布

Nipuream

最新推荐文章于 2023-03-31 13:26:24 发布

阅读量495

点赞数

分类专栏： Android 文章标签： android opengles java

本文链接：https://blog.csdn.net/YanghuiNipurean/article/details/116567792

版权

本文介绍了在Android中如何利用MediaCodec和SurfaceTexture实现硬解码直显模式的抓图功能。通过将流媒体数据解封装并配置硬解码器，数据解码后渲染到自定义Surface，然后更新纹理进行截图。这种方法不适合视频录制，但适用于抓图需求。

摘要由CSDN通过智能技术生成

一、综述

之前做车载行车记录仪的时候，从摄像头拿到yuv数据经过shader脚本转化为rgb数据，再转化为纹理进行渲染。现在做的这个项目数据源主要是流媒体进行解封装获取到的压缩数据，现在Android 的MediaCodec是允许surface作为输入的，结合SurfaceTexture进行updateTexImage()，然后读取到外部纹理，一方面可满足抓图功能的需求，另外也可以通过egl直接交换缓冲区去显示。这只是我们在性能和功能需求实现成本方面一个权衡，因为从gpu拷贝数据到cpu，然后在到虚拟机处理保存还是有一定的时间成本的，特别是4k的码流。如果是录像，这样方式肯定是不可取的。下面来介绍下具体实现。

二、实现

拿到流媒体数据解封装后，肯定是需要配置我们的硬解码器的，这个虽然是用到我们原生的接口MediaCodec，但是具体的实现都是厂商实现的，例如rk,qcom等。这边贴个简单的实现，具体的见demo。

extractor = MediaExtractor()
extractor!!.setDataSource(inputFile.toString())
val trackIndex = selectTrack(extractor!!)
if(trackIndex < 0){
   
throw RuntimeException("No video track found in : $inputFile")
}

extractor!!.selectTrack(trackIndex)
val format = extractor!!.getTrackFormat(trackIndex)

val mime = format.getString(MediaFormat.KEY_MIME)
decoder = MediaCodec.createDecoderByType(mime