webrtc 渲染_iOS下 WebRTC 视频渲染

最新推荐文章于 2023-05-10 17:47:58 发布

Hu??

最新推荐文章于 2023-05-10 17:47:58 发布

阅读量248

点赞数

文章标签： webrtc 渲染

本文链接：https://blog.csdn.net/weixin_39800918/article/details/111955653

版权

本文详细介绍了在iOS环境下，如何利用OpenGL的FBO（帧缓冲对象）进行WebRTC视频渲染。文章阐述了FBO、纹理和renderbuffer之间的关系，强调了FBO在视频美颜技术中的应用。通过FBO，OpenGL可以执行渲染到纹理和离屏渲染。文章还提供了创建FBO、renderbuffer以及将它们附加到FBO的步骤，以及如何检查FBO的状态以确保完整性。通过实例展示了如何使用FBO进行渲染到纹理，从而避免数据拷贝并提高效率。

摘要由CSDN通过智能技术生成

原标题：iOS下 WebRTC 视频渲染

前言

在OpenGL中，有一个非常重要的知识点就是 FBO(Frame Buffer Object)。它为做视频美颜提供了技术手段。

在网上可以找到很多介绍 FBO 的文章，但很少有将 FBO、Texture及Render Buffer 之间关系讲清楚的。

本篇文章在介绍 FBO 的同时，清楚的描述了三者之间的关系。希望本文对大家有所帮助。

FBO

OpenGL 默认把 framebuffer 当作渲染的目的地。它由窗口系统创建并管理。framebuffer Object 是个二维数组的集合，它包括 color buffers, depth buffer, stencil buffer。

OpenGL扩展，GL_ARB_framebuffer_object 提供了创建额外非可显示的 framebuffer object(FBO)的接口。FBO 称作应用程序可创建的 framebuffer 以区别默认的窗口系统提供的framebuffer。通过使用FBO，OpenGL 应用可以重定向渲染输出，让它输出到FBO而不是传统的窗口系统提供的 framebuffer.

与窗口系统提供的帧缓冲区类似，FBO包含一系列渲染目的地的集合；包括颜色，深度和模板缓冲区。 FBO中的这些逻辑缓冲区称为可附着的 frame buffer。

有两种类型的可附着的 framebuffer;纹理(Texture)和renderbuffer。如果纹理被附加到FBO，OpenGL将执行“渲染到纹理”。如果renderbuffer被附加到FBO，则OpenGL会执行“离屏渲染”。

顺便说一下，renderbuffer是在GL_ARB_framebuffer_object扩展中定义的一种新类型的存储对象。它在渲染过程中用作单个2D图像的渲染目的地。

下图显示了FBO，纹理和renderbuffer之间的连接。多个纹理对象或renderbuffer对象可以通过附着点附加到FBO上。

FBO中，

有多个颜色附加点(GL_COLOR_ATTACHMENT0，...，GL_COLOR_ATTACHMENTn)，

一个深度附加点(GL_DEPTH_ATTACHMENT)

一个模板附加点(GL_STENCIL_ATTACHMENT)。

颜色附着点的数量取决于实现，但每个FBO必须至少具有一个颜色附加点。您可以使用GL_MAX_COLOR_ATTACHMENTS查询最大数量的颜色附加点，这些数据由显卡支持。

FBO具有多个颜色附加点的原因是允许在同一时间将颜色缓冲区渲染到多个目的地。这个“多个渲染目标”(MRT)可以由GL_ARB