Android技术分享| 超简单！给 Android WebRTC增加美颜滤镜功能

anyRTC

于 2021-10-19 13:13:12 发布

阅读量1.3k

点赞数 3

分类专栏：音视频 Android技术分享美颜滤镜文章标签： android webrtc 移动开发美颜滤镜

本文链接：https://blog.csdn.net/anyRTC/article/details/120844174

版权

视频采集渲染流程分析

在增加滤镜功能之前，需要对 WebRTC 视频采集的流程有一定了解。

WebRTC 中定义了 VideoCapture 接口类，其中定义了相机的初始化，预览，停止预览销毁等操作。

实现类是 CameraCapture，并且封装了Camera1Capture、Camera2Capture 两个子类，甚至还有屏幕共享。

WebRTC 中开始视频采集非常的简单：

val videoCapture = createVideoCapture()
videoSource = videoCapture.isScreencast.let {
    factory.createVideoSource(it) }
videoCapture.initialize(surfaceTextureHelper,applicationContext,videoSource?.capturerObserver)
videoCapture.startCapture(480, 640, 30)

这里主要看一下 VideoSource类和capturerObserver。

VideoSource 中有以下方法

@Override
    public void onFrameCaptured(VideoFrame frame) {
   
      final VideoProcessor.FrameAdaptationParameters parameters =
          nativeAndroidVideoTrackSource.adaptFrame(frame);
      synchronized (videoProcessorLock) {
   
        if (videoProcessor != null) {
   
          videoProcessor.onFrameCaptured(frame, parameters);
          return;
        }
      }
      VideoFrame adaptedFrame = VideoProcessor.applyFrameAdaptationParameters(frame, parameters);
      if (adaptedFrame != null) {
   
        nativeAndroidVideoTrackSource.onFrameCaptured(adaptedFrame)<