编码surface android,android – 将位图帧渲染到Surface进行编码

我的目标是接收M4V视频文件,将视频片段解码为PNG帧,修改这些帧,并重新编码修剪后的视频(也转换为M4V).

工作流程如下：[输入视频] – >导出框架 – >修改框架 – >编码帧 – > [输出视频].

对于解码过程,我一直在参考bigflake示例.使用ExtractMpegFramesTest示例代码,我能够从.m4v文件生成位图帧并将帧导出为PNG文件.

现在我正在尝试重新编码过程,使用EncodeAndMuxTest示例尝试创建另一组用于编码的类.

我遇到的问题是,示例代码似乎在OpenGL中生成原始帧.我有一系列的Bitmaps,我想编码/渲染到CodecInputSurface对象.几乎与解码过程的作用相反.

大多数示例代码都很好,似乎我只需要修改generateSurfaceFrame()以使用OpenGL将Bitmap渲染到Surface.

这是我到目前为止的代码：

// Member variables (see EncodeAndMuxTest example)

private MediaCodec encoder;

private CodeInputSurface inputSurface;

private MediaMuxer muxer;

private int trackIndex;

private boolean hasMuxerStarted;

private MediaCodec.BufferInfo bufferInfo;

// This is called for each frame to be rendered into the video file

private void encodeFrame(Bitmap bitmap)

{

int textureId = 0;

try

{

textureId = loadTexture(bitmap);

// render the texture here?

}

finally

{

unloadTexture(textureId);

}

}

// Loads a texture into OpenGL

private int loadTexture(Bitmap bitmap)

{

final int[] textures = new int[1];

GLES20.glGenTextures(1, textures, 0);

int textureWidth = bitmap.getWidth();

int textureHeight = bitmap.getHeight();

GLES20.glBindTexture(GLES20.GL_TEXTURE_2D, textures[0]);

GLUtils.texImage2D(GLES20.GL_TEXTURE_2D, 0, bitmap, 0);

GLES20.glTexParameteri(GLES20.GL_TEXTURE_2D,

GLES20.GL_TEXTURE_MIN_FILTER, GLES20.GL_LINEAR);

GLES20.glTexParameteri(GLES20.GL_TEXTURE_2D,

GLES20.GL_TEXTURE_MAG_FILTER, GLES20.GL_NEAREST);

GLES20.glTexParameteri(GLES20.GL_TEXTURE_2D, GLES20.GL_TEXTURE_WRAP_S,

GLES20.GL_CLAMP_TO_EDGE);

GLES20.glTexParameteri(GLES20.GL_TEXTURE_2D, GLES20.GL_TEXTURE_WRAP_T,

GLES20.GL_CLAMP_TO_EDGE);

return textures[0];

}

// Unloads a texture from OpenGL

private void unloadTexture(int textureId)

{

final int[] textures = new int[1];

textures[0] = textureId;

GLES20.glDeleteTextures(1, textures, 0);

}

我觉得我应该可以使用ExtractMpegFramesTest示例中的STextureRender来实现类似的功能,但它不是为了点击我.

另一件事是性能,我真的想要获得有效的编码.我将编码90-450帧视频(3-15秒@ 30fps),所以这应该只需要几秒钟.