该原创文章首发于微信公众号:字节流动
OpenGL ES 相机预览
相机开发是 OpenGL ES 的重要应用,利用 OpenGL 可以很方便地实现相机美颜、滤镜、塑型以及一些动态特效,其性能显著优于对应功能的 CPU 实现。
相机的预览实现一般有 2 种方式,一种是基于 Android 原生 SurfaceTexture 的纯 GPU 实现方式,另一种是通过相机的预览回调接口获取帧的 YUV 数据,利用 CPU 算法处理完成之后,传入显存,再利用 GPU 实现 YUV 转 RGBA 进行渲染,即 CPU + GPU 的实现方式。
基于 Android 原生 SurfaceTexture 的纯 GPU 实现方式,相机可以使用 SurfaceTexture 作为预览载体,SurfaceTexture 可来自于 GLSurfaceView、TextureView 或 SurfaceView 这些独立拥有 Surface 的封装类,也可以自定义实现。
作为预览载体的 SurfaceTexture 绑定的纹理需要是 OES 纹理,即 GLES11Ext.GL_TEXTURE_EXTERNAL_OES
纹理,来自于 GLES 的扩展 #extension GL_OES_EGL_image_external
中,使用 OES 纹理后,我们不需要在片段着色器中自己做