IOS：Camera的特性分析与使用3_OPENGL特效

本来想用2个篇幅结束Camera软件部分的介绍，后来发现，非常重要的一点OpenGL还没介绍，所以又增加了这一篇。

这篇主要描述一下几个方面的内容：

（1）录像界面OPENGL展示

（2）录像实时特效处理

（3）视频等比例缩放、旋转 如：等比例、16:9 4:3 1:1等

这个部分我思来想去缺失不太好讲，设计到的知识太多，尤其是OpenGL的一些专业知识，通过一篇博客普及OpenGL的知识显然不科学，所以只能了解一个流程，至于里面到底是怎么回事，请大家找本OpenGL的书看看，我想等这几个博客完工之后，也写几篇OpenGL的博客呵呵。

我们的整个流程是，首先从AVCaptureSession拿到视频拍摄时候的数据流，然后特效处理（特效这块可以参考另一个Image&Animation专栏），然后初始化OpenGL开始进行纹理贴图。

（1）如何拿到视频数据流？

- (void)captureOutput:(AVCaptureOutput *)captureOutput didOutputSampleBuffer:(CMSampleBufferRef)sampleBuffer fromConnection:(AVCaptureConnection *)connection

{

    if ( videooutput == captureOutput ) {

        OSStatus err = CMBufferQueueEnqueue(previewBufferQueue, sampleBuffer);

        if ( !err ) {

            dispatch_async(dispatch_get_main_queue(), ^{

                CMSampleBufferRef sbuf = (CMSampleBufferRef)CMBufferQueueDequeueAndRetain(previewBufferQueue);

                if (sbuf) {

                    CVImageBufferRef pixBuf = CMSampleBufferGetImageBuffer(sbuf);

                    if (effectflag) {

                        特效处理

                    }

                        OpenGL纹理展示

                    CFRelease(sbuf);

                }

            });

        }

    }

}

AVCaptureSession初始化完成之后我们可以设置一个回调方法，在这个回调方法中，可以很方便的拿到我们需要处理的图像数据。

（2）如何进行图片的特效处理

这又是一个非常复杂的内容，我也专门为此写了另外一篇博客：

这中间牵扯到各种图像处理算法，neon、汇编优化，ARM内部寄存器的使用等等。

这里我们只说如何吧ImageBuffer转化为RGBA像素：

unsigned char *pixel = (unsigned char *)CVPixelBufferGetBaseAddress(pixelBuffer);

这里pixel存放的就是图片的RGBA像素值。

（3）OpenGL纹理贴图

3.1//在使用Opengles的时候需要重构CAEAGLLayer图层

+ (Class)layerClass

{

    return [CAEAGLLayer class];

}

3.2//      设置CAEAGLLayer

        CAEAGLLayer*eaglLayer = (CAEAGLLayer *)self.layer;

3.3设置CAEAGLLayer层的属性