从ffmpeg的AVFrame得到iOS的CVPixelBuffer

最新推荐文章于 2023-06-29 18:03:55 发布
VIP文章 最新推荐文章于 2023-06-29 18:03:55 发布 8734 收藏 7
分类专栏： iOS音视频开发 文章标签： ffmpeg 视频 AVSampleBufferDispla 渲染
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/fernandowei/article/details/52180840
版权

个人在之前的一篇文章《在iOS端使用AVSampleBufferDisplayLayer进行视频渲染》中提到，可以使用iOS8.0新出的AVSampleBufferDisplayLayer进行视频的渲染，那么如果这个时候解码使用的是ffmpeg，解码后得到的是AVFrame，就需要把AVFrame转成CVPixelbuffer在送给AVSampleBufferDisplayLayer渲染。

如何进行转化呢？如下：

- (void)dispatchAVFrame:(AVFrame*) frame{
    if(!frame || !frame->data[0]){
        return;
    }

    CVReturn theError;
    if (!self.pixelBuff
最低0.47元/天 解锁文章
阅读终点，创作起航，您可以撰写心得或摘录文章要点写篇博文。去创作
fernandowei
关注
  • 6
    点赞
  • 踩
  • 7
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 11
    评论
专栏目录
ffmpeg avframe to jpeg
07-06
ffmpeg avframe to jpeg
FFmpeg与其他库的交互
yaningli的博客
11-25 504
FFmpeg与其他库的交互
FFMPEG 实现 YUV，RGB各种图像原始数据之间的转换（swscale）
晚晴小筑
08-24 697
FFMPEG中的swscale提供了视频原始数据（YUV420，YUV422，YUV444，RGB24...）之间的转换，分辨率变换等操作，使用起来十分方便，在这里记录一下它的用法。 swscale主要用于在2个AVFrame之间进行转换。下面来看一个视频解码的简单例子，并将解码后的数据保存为原始数据文件（例如YUV420，YUV422，RGB24等等）。 /** * 使用FFmpeg解析...
iOS CVPixelBufferRef深入解析及视频渲染方法
程序猿老樊的博客
03-30 3564
在iOS里，我们经常能看到 CVPixelBufferRef 这个类型，在Camera 采集返回的数据里得到一个CMSampleBufferRef，而每个CMSampleBufferRef里则包含一个 CVPixelBufferRef，在视频硬解码的返回数据里也是一个 CVPixelBufferRef（里面包好了所有的压缩的图片信息）。 CVPixelBufferRef：是一种像素图片类型，由于CV开头，所以它是属于 CoreVideo 模块的。 iOS 对象命名前面用缩写表示它属于的模块，如： CF
FFmpeg源码分析：图像常用操作
Lce的专栏
09-25 1170
FFmpeg有封装图像的常用操作，位于libavutil/imgutils.c，包括图像拷贝、图像填充、获取图像大小、分配图像、检测图像宽高比是否有效。在视频图像缩放、像素格式转换、视频截图保存等操作，经常需要用到图像操作方法。
FFPLAY的原理
编程菜鸟---正在努力进阶
11-13 7162
概要 电影文件有很多基本的组成部分。首先，文件本身被称为容器Container，容器的类型决定了信息被存放在文件中的位置。AVI和Quicktime就是容器的例子。接着，你有一组流，例如，你经常有的是一个音频流和一个视频流。（一个流只是一种想像出来的词语，用来表示一连串的通过时间来串连的数据元素）。在流中的数据元素被称为帧Frame。每个流是由不同的编码器来编码生成的。编解码器描述了实际的数
iOS利用FFmpeg实现Video硬解码
weixin_34396103的博客
06-19 1047
需求 将编码的视频流解码为原始视频数据,编码视频流可以来自网络流或文件,解码后即可渲染到屏幕. 实现原理 正如我们所知,编码数据仅用于传输,无法直接渲染到屏幕上,所以这里利用FFmpeg解析文件中的编码的视频流,并将压缩视频数据(h264/h265)解码为指定格式(yuv,RGB)的视频原始数据,以渲染到屏幕上. 注意: 本例主要为解码,需要借助FFmpeg搭建模块,视频解析模块,渲染模块,这些...
iOS硬解H.264：-VideoToolboxDemo源码分析
dongtinghong的专栏
03-03 2254
标签：des   算法   class   log   com   http   si   使用   代码    来源：http://www.cnblogs.com/michaellfx/p/understanding_-VideoToolboxDemo.html   iOS硬解H.264：-VideoToolboxDemo源码分析[草稿] iOS硬解H.264：-Vide
39.FFmpeg学习笔记 - iOS硬编码视频到h264
周洪伟的博客
08-14 2851
一、概述 硬编码使用场景通常是从摄像头采集图像数据，然后利用系统提供的接口进行硬编码。 从摄像头采集数据用的是AVFoundation框架，硬编码用的是iOS 8开放的VideoToolbox框架。 二、用AVFoundation采集数据 用AVFoundation采集摄像头的数据步骤基本固定，下面详细说一说： 1.初始化会话，并设置摄像头采集图像的分辨率 //初始化会话 ...
YUV420格式的CVPixelBuffer转换为RGB格式
irainsa的博客
03-06 148
ARKit中提取到的CVPixelBuffer为YUV420格式，很多时候我们需要把它转换为RGB格式，然后再进行各种后续操作。
FFMPEG学习【libavcodec】：编解码器：硬件加速器桥：VDA
一世豁然的专栏
05-09 2465
一、文件 vda.h 公共libavcodec VDA头文件。 二、数据结构 struct   vda_context{ VDADecoder decoder； VDA解码器对象。 编码：未使用。 解码：通过libavcodec设置/取消。 CVPixelBufferRef cv_buffer； 包含当前图像数据的Core Video像素缓冲
FFmpeg Demo for iOS
11-03
FFmpeg Demo.支持 armv7 arm64,i386,x86_64架构。把kxMovie相关代码移进。可播放mp4,avi,rmvb.3gp,mov,flv,m3u8,rm等格式。编译包较大，60多Ｍ，请熟悉FFmpeg的屏蔽不要的包，以减小编译包大小。
ffmpeg4.0.2_ios
11-13
ffmpeg4.0.2版本，iOS库已经编译完成，可直接下载使用
IOS 音视频 ffmpeg 录音并播放
06-22
关键词：iOS平台，音视频处理，FFmpeg库，录音，播放功能 引言 音视频处理在移动应用开发中具有广泛的应用，其中录音和播放是常见的功能需求。为了实现高质量的录音和播放，我们选择使用FFmpeg库，它是一个功能强大...
FFmpeg-iOS_v4.2.zip
09-02
本库包含FFmpeg-iOS & x264-iOS, 版本4.2 摘要需要至少50个字, 我今早吃了两个包子喝了一瓶牛奶, 正准备去吃午饭...
【Android FFMPEG 开发】FFMPEG AVFrame 图像格式转换 YUV -> RGBA ( 获取 SwsContext | 初始化图像数据存储内存 | 图像格式转换 )
让 学习 成为一种 习惯 ( 韩曙亮 の 技术博客 )
03-10 2121
I . FFMPEG AVFrame 图像数据帧处理 前置操作 II . FFMPEG 解码 AVPacket 数据到 AVFrame 流程 III. FFMPEG 解码前后的图像格式 IV . FFMPEG 获取 SwsContext V . FFMPEG 初始化图像数据存储内存 VI . FFMPEG 初图像格式转换 VII . FFMPEG AVFrame 图像格式转换 YUV -> RGBA 代码示例
ffmpeg开发播放器学习笔记 - Metal 渲染YUV
yinshipin007的博客
06-10 119
该节是的第五节《Metal 渲染YUV》Metal是Apple开发的适用于iOS/macOS/iPadOS平台的图形渲染与硬件加速库。Metal 提供对图形处理器 (GPU) 的接近直接访问，使您能最大程度地发挥 iOS、macOS 和 Apple tvOS app 中的图形和计算潜能。Metal 构建于易用的低开销架构之上，而且提供预编译的 GPU 着色器和精细的资源控制，并支持多线程处理。相对于OpenGL,它是采用了面向对象的设计更易于使用,在Apple的系统平台上可发挥更大的性能优势。
基于 FFmpeg 的跨平台视频播放器简明教程（四）：像素格式与格式转换
最新发布
记录学习的过程
06-29 847
经过前面三章的学习，我们快要完成我们的目标任务了：使用 ffmpeg 解码视频，并将解码后的视频帧保存在本地（就像对视频截图一样）。现在就差临门一脚，如何将解码后的视频帧保存到本地呢？这是今天要讨论的内容。本文参考文章来自。这个系列对新手较为友好，但 2015 后就不再更新了，以至于文章中的 ffmpeg api 已经被弃用了。幸运的是，有人对该教程的代码进行重写，使用了较新的 api，你可以在找到这些代码。本文的代码在。本文讲述了如何将一帧视频保存到本地 PPM 文件，以便浏览。
ffmpeg学习 结构体分析AVFrame
yinshipin007的博客
03-31 331
sws_getContext(video_decoder_ctx->width, video_decoder_ctx->height, video_decoder_ctx->pix_fmt, // 输入格式。使用av_image_alloc分配1字节对齐的yuv420p缓冲区内存后，三个分量对应的内存区域是连续的，无填充的。后两种方式一种是使用裸指针，一种借助AVFrame，虽然访问管理缓冲区的方式不同，但是都用到了av_image_alloc，都需要传递缓冲区指针和接收linesize的数组。
FFmpeg AVFrame转yuv420的完整代码
03-06
以下是FFmpeg AVFrame转yuv420的完整代码： ``` // 初始化AVFrame AVFrame* frame = av_frame_alloc(); frame->format = AV_PIX_FMT_YUV420P; frame->width = width; frame->height = height; // 分配AVFrame的数据空间 int ret = av_frame_get_buffer(frame, 32); if (ret < ) { // 错误处理 } // 将AVFrame转换为YUV420格式 struct SwsContext* sws_ctx = sws_getContext( width, height, AV_PIX_FMT_RGB24, width, height, AV_PIX_FMT_YUV420P, SWS_BILINEAR, NULL, NULL, NULL); if (!sws_ctx) { // 错误处理 } uint8_t* in_data[1] = { rgb_data }; int in_linesize[1] = { 3 * width }; ret = sws_scale(sws_ctx, in_data, in_linesize, , height, frame->data, frame->linesize); if (ret < ) { // 错误处理 } // 释放SwsContext sws_freeContext(sws_ctx); ```

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 11
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

fernandowei

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值