android opengl录制水印视频,Android 仿抖音之使用OpenGL实现抖音视频录制

### 使用OpenGL在Android上实现视频录制与特效处理

#### 前言

最近我在研究如何在Android平台上使用OpenGL进行视频录制，并且为视频添加一些特效，比如磨皮、美颜、滤镜等。这让我想起了抖音的视频录制功能，用户可以在录制过程中实时添加各种效果。于是，我决定尝试实现一个类似的功能。

#### 工程结构整理

在之前的项目中，我已经实现了一个`ScreenFilter`类，用于渲染摄像头数据到屏幕上。然而，随着特效的增加，`ScreenFilter`类变得越来越臃肿，代码中充满了大量的`if-else`语句来判断是否开启某个特效。这显然不是一个好的设计。

于是，我决定将每个特效都封装成一个独立的`Filter`类，并通过FBO（Frame Buffer Object）来实现特效的叠加。FBO允许我们将摄像头数据先渲染到一个离屏缓冲区中，然后再将这个缓冲区的数据渲染到屏幕上。这样，`ScreenFilter`类只需要处理最终的渲染逻辑，而不需要关心每个特效的具体实现。

#### 需求分析

我的目标是实现一个长按按钮进行视频录制的功能，并且支持五种不同的录制速度：极慢、慢、正常、快、极快。当用户抬起手指时，录制停止，并将视频以MP4格式保存到SD卡中。

为了实现这个功能，我需要解决以下几个问题：

1. **视频编码**：摄像头采集到的视频数据通常是AVC格式的，我需要将其编码为H.264格式，并封装为MP4文件。

2. **速度控制**：在将视频数据写入MP4文件之前，我需要通过修改时间戳来控制视频的播放速度。

3. **特效叠加**：在录制过程中，我需要实时为视频添加各种特效。

#### 实现过程

##### 1. 使用MediaCodec进行视频编码

Android提供了`MediaCodec`类来进行视频编码。`MediaCodec`有一个输入缓冲区和一个输出缓冲区。我们将要编码的数据放入输入缓冲区，`MediaCodec`会自动进行编码，并从输出缓冲区中取出编码后的数据。

为了简化编码过程，我使用了`MediaCodec#createInputSurface()`方法创建一个`Surface`，然后将OpenGL渲染的图像绘制到这个`Surface`上。这样，`MediaCodec`会自动将`Surface`上的图像数据编码为H.264格式。

##### 2. 配置EGL环境

由于视频录制和图像显示是在不同的线程中进行的，因此我需要为录制线程配置一个独立的EGL环境。这个EGL环境需要与显示线程共享上下文资源，以便能够访问显示线程中的纹理等资源。

##### 3. 特效叠加与录制

在录制过程中，我首先将摄像头数据渲染到FBO中，然后依次应用各种特效滤镜。最后，将处理后的图像绘制到`MediaCodec`的`Surface`上，完成视频的编码和录制。

#### 代码实现

以下是一个简化的代码示例，展示了如何使用`MediaCodec`和OpenGL进行视频录制：

java

public class MediaRecorder {

    private MediaCodec mediaCodec;

    private Surface inputSurface;

    private EGLDisplay eglDisplay;

    private EGLContext eglContext;

    private EGLSurface eglSurface;

    public void startRecording(int width, int height) {

        // 配置MediaCodec

        mediaCodec = MediaCodec.createEncoderByType("video/avc");

        MediaFormat format = MediaFormat.createVideoFormat("video/avc", width, height);

        format.setInteger(MediaFormat.KEY_BIT_RATE, 125000);

        format.setInteger(MediaFormat.KEY_FRAME_RATE, 30);

        format.setInteger(MediaFormat.KEY_COLOR_FORMAT, MediaCodecInfo.CodecCapabilities.COLOR_FormatSurface);

        format.setInteger(MediaFormat.KEY_I_FRAME_INTERVAL, 5);

        mediaCodec.configure(format, null, null, MediaCodec.CONFIGURE_FLAG_ENCODE);

        inputSurface = mediaCodec.createInputSurface();

        mediaCodec.start();

        // 配置EGL环境

        eglDisplay = EGL14.eglGetDisplay(EGL14.EGL_DEFAULT_DISPLAY);

        EGL14.eglInitialize(eglDisplay, null, 0, null, 0);

        int[] attribList = {

                EGL14.EGL_RED_SIZE, 8,

                EGL14.EGL_GREEN_SIZE, 8,

                EGL14.EGL_BLUE_SIZE, 8,

                EGL14.EGL_ALPHA_SIZE, 8,

                EGL14.EGL_RENDERABLE_TYPE, EGL14.EGL_OPENGL_ES2_BIT,

                EGL14.EGL_NONE

        };

        EGLConfig[] configs = new EGLConfig[1];

        int[] numConfigs = new int[1];

        EGL14.eglChooseConfig(eglDisplay, attribList, 0, configs, 0, configs.length, numConfigs, 0);

        eglContext = EGL14.eglCreateContext(eglDisplay, configs[0], EGL14.EGL_NO_CONTEXT, new int[]{EGL14.EGL_CONTEXT_CLIENT_VERSION, 2, EGL14.EGL_NONE}, 0);

        eglSurface = EGL14.eglCreateWindowSurface(eglDisplay, configs[0], inputSurface, new int[]{EGL14.EGL_NONE}, 0);

        EGL14.eglMakeCurrent(eglDisplay, eglSurface, eglSurface, eglContext);

    }

    public void stopRecording() {

        mediaCodec.stop();

        mediaCodec.release();

        EGL14.eglDestroySurface(eglDisplay, eglSurface);

        EGL14.eglDestroyContext(eglDisplay, eglContext);

        EGL14.eglTerminate(eglDisplay);

    }

    public void encodeFrame(int textureId) {

        // 将纹理绘制到MediaCodec的Surface上

        GLES20.glBindFramebuffer(GLES20.GL_FRAMEBUFFER, 0);

        GLES20.glViewport(0, 0, width, height);

        GLES20.glClear(GLES20.GL_COLOR_BUFFER_BIT);

        // 绘制纹理

        EGL14.eglSwapBuffers(eglDisplay, eglSurface);

    }

}

#### 总结

通过使用`MediaCodec`和OpenGL，我成功实现了在Android平台上进行视频录制并添加特效的功能。虽然过程中遇到了一些挑战，比如EGL环境的配置和线程间的资源共享，但最终的效果还是令人满意的。希望这篇文章能对正在尝试类似功能的开发者有所帮助。

如果你有任何问题或建议，欢迎在评论区留言讨论！