绿幕抠图中的外部美颜接口和推流接口

美颜的接口

android

• android 的接口如下, 工作在内部opengles2.0纹理语境中.
• 对应的演示代码在GreenMattingLiveActivity中的startCamera方法中.

public interface OnLayerTextureOutListener {

    /**
     * 引出的纹理 工作在内部的OpengGLES线程中.
     * 没有创建方法, 如果你需要创建,则在这个方法中初始化您的参数.
     *
     * @param textureId 纹理, sample2D格式, 此纹理是图像流的fbo用到的纹理, 返回的也是fbo用到的纹理.
     * @param width 纹理的宽度
     * @param height 纹理的高度;
     * @return 返回处理后的纹理. 返回需要sample2D格式的纹理. 如果不需要执行此方法(比如关闭美颜等),则返回-1;
     */
    int textureProcessOnGPU(int textureId, int width,int height);

    /**
     * 释放纹理, 在整个图层释放时, 释放
     */
    void onReleaseOnGPU();
}

iOS

• ios的接口接口如下,只有一个方法, 外部处理完毕后, 返回的数据放到同一个对象sampleBuffer中. 格式是RGBA.
• 对应的演示代码在LSOLiveBroadController.m中的 startPreview中.

@property(nonatomic, copy) void(^cameraSampleBufferBlock)(CMSampleBufferRef sampleBuffer);

推流接口

android

• 引出的是是NV21格式的图像数据.

/**
     *
     * 引出图像数据.
     * 宽高建议不要大于1080P, 不然读取数据会卡顿;
     * @param width 数据的缩放到的宽度,内部会缩放到16的倍数
     * @param height 数据缩放到的高度,内部会缩放到16的倍数
     * @param listener 引出数据监听, 工作在内部的opengles线程中.
     */
    public void  setOnPlayerDataOutListener(int width, int height, OnPlayerDataOutListener listener){
        if(render!=null){
            render.setOnPlayerDataOutListener(width,height,listener);
        }
    }

iOS

• 在LSOCameraView.h中, 引出的 数据格式是kCVPixelFormatType_32BGRA

/**
 设置的输出数据的大小, 仅可设置一次, 并且宽高等于16的倍数, 建议是720x1280;或1080x1920
 */
@property (nonatomic, assign) CGSize outDataSize;


/**
 LSNEW
 设置outDataSize后, 每一帧都会通过这个block输出,工作在其他线程;
 输出的格式是: kCVPixelFormatType_32BGRA ; 宽高是设置的outDataSize
 len: 等于outDataSize.width * outDataSize.height *4;
 bgraPtr 是内部使用, 外部不要释放;
 */
@property(nonatomic, copy) void(^frameDataOutBlock)(int len , void *bgraPtr);

其他注意事项:

1. 尽量在我们的演示工程里测试后, 再判断是否可以接入,
2. 建议外部美颜的处理耗时(主流手机): android小于15毫秒, ios小于10毫秒;