FFmpeg拉流教程

已于 2022-09-05 17:01:23 修改
阅读量3.9k 收藏 13
点赞数 1
分类专栏： QT入门 Qt For Android 文章标签： c++
于 2022-08-02 19:22:15 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_37759974/article/details/126128296
版权

FFmpeg拉流教程
做了一个项目学习下FFmpeg拉流的过程。在此记录下。
开发环境：
QT：MSVC 2017 64bit和Qt for android （跨平台）
FFmpeg：4.4.2
一、.pro的配置（此处贴出我的示例，请根据自己的环境配置）：

win32{
	INCLUDEPATH += $$PWD/ffmpeg/include
	LIBS += $$PWD/ffmpeg/bin/avdevice.lib\
	        $$PWD/ffmpeg/bin/avfilter.lib\
	        $$PWD/ffmpeg/bin/avformat.lib\
	        $$PWD/ffmpeg/bin/avutil.lib\
	        $$PWD/ffmpeg/bin/postproc.lib\
	        $$PWD/ffmpeg/bin/swresample.lib\
	        $$PWD/ffmpeg/bin/swscale.lib\
	        $$PWD/ffmpeg/bin/avcodec.lib
}
android{
INCLUDEPATH += $$PWD/AndroidFFmpeg/include
LIBS += $$PWD/AndroidFFmpeg/lib/libavformat.a\
        $$PWD/AndroidFFmpeg/lib/libavcodec.a\
        $$PWD/AndroidFFmpeg/lib/libavdevice.a\
        $$PWD/AndroidFFmpeg/lib/libavfilter.a\
        $$PWD/AndroidFFmpeg/lib/libavutil.a\
        $$PWD/AndroidFFmpeg/lib/libswresample.a\
        $$PWD/AndroidFFmpeg/lib/libswscale.a
}
note：据说FFmpeg库的加载顺序还有要求。
二、引入FFmpeg的头文件
extern "C" {
#include "libavutil/opt.h"
#include "libavutil/time.h"
#include "libavutil/frame.h"
#include "libavutil/pixdesc.h"
#include "libavutil/avassert.h"
#include "libavutil/imgutils.h"
#include "libavutil/ffversion.h"
#include "libavcodec/avcodec.h"
#include "libswscale/swscale.h"
#include "libavformat/avformat.h"
#include "libavfilter/avfilter.h"
}

note:因为FFmpeg是用C语言的规则，所以此处引用头文件要加上extern “C”
三、FFmpeg的拉流

  1. FFmepg库的初始化(该语句必须且只能执行一次)
    avformat_network_init();

  2. 相关变量的定义
    int videoStreamIndex; //视频流索引
    AVPacket *avPacket; //包对象
    AVFrame *avFrame; //帧对象
    AVFormatContext *avFormatContext;//格式对象
    AVCodecContext *videoCodec; //视频解码器
    SwsContext *swsContext; //处理图片数据对象
    AVCodec *videoDecoder; //视频解码
    uint8_t *VideoData[AV_NUM_DATA_POINTERS];
    int lines[AV_NUM_DATA_POINTERS];
    QTime m_CurTime; //计算av_read_frame超时时间时使用
    QString m_strUrl;

  3. 打开URL
    . /*

  • 功能：判断av_read_frame是否超时返回
  • 入参：
  • context 到达该时间后av_read_frame 超时返回
  • 返回值：1表示让av_read_frame返回，否则表示不返回
    */
static int interruptCallback(void *context){
    QTime *pStartTime = (QTime *)(context);
    if (pStartTime == NULL) {
        return 0;
    }
    if( QTime::currentTime() > *pStartTime)
    {
        //超时
        qDebug()<<"Timeout;QTime::currentTime() =  "<<QTime::currentTime() <<"Start = "<<*pStartTime;
        return 1;
    }
    return 0;

}
 int FFmpegThread::init(QString strUrl)
{
    m_strUrl = strUrl;
    qDebug()<<"URL = " << strUrl;
    AVDictionary *options = NULL;          //参数对象
    //在打开码流前指定各种参数比如:探测时间/超时时间/最大延时等
    //设置缓存大小,1080p可将值调大
    av_dict_set(&options, "buffer_size", "8192000", 0);
    //以tcp方式打开,如果以udp方式打开将tcp替换为udp
    av_dict_set(&options, "rtsp_transport", "tcp", 0);
    //设置超时断开连接时间,单位微秒,3000000表示3秒
    av_dict_set(&options, "stimeout", "3000000", 0);
    av_dict_set(&options, "rw_timeout", "3000", 0);//单位:ms
    //打开视频流
    avFormatContext = avformat_alloc_context();
    //这里是设置超时的防止调用FFmpeg库时卡死。必须设置在这里不然功能可能失效，interruptCallback是回调函数，m_CurTime是传入回调函数的参数，详情请百度。
    avFormatContext->interrupt_callback.callback = interruptCallback;
    avFormatContext->interrupt_callback.opaque =(void *)(&m_CurTime);
    avFormatContext->avio_flags |= AVIO_FLAG_NONBLOCK;
    const AVCodec *pCodec = NULL;
    m_CurTime = QTime::currentTime().addSecs(3);
    int result = avformat_open_input(&avFormatContext, m_strUrl.toStdString().c_str(), NULL, &options);
    if (result < 0) {
        return RET_ERROR_OPEN_INPUT;
    }
    //释放设置参数
    if (options != NULL) {
        av_dict_free(&options);
    }
     //查找流信息
     m_CurTime = QTime::currentTime().addSecs(3);
     if (avformat_find_stream_info(avFormatContext, NULL) < 0)
     {
        // emit ErrofInfo(QString("获取流信息错误"));
        return RET_ERROR_FIND_STREAM;
     }
     //查找输入流
     videoStreamIndex = -1;
     for (uint32_t i = 0; i < avFormatContext->nb_streams; i++)
     {
       AVStream *pStream = avFormatContext->streams[i];
       if (pStream->codecpar->codec_type == AVMEDIA_TYPE_VIDEO)
       {
         videoCodec = avcodec_alloc_context3(NULL);
         avcodec_parameters_to_context(videoCodec, pStream->codecpar);
        pCodec = avcodec_find_decoder(videoCodec->codec_id);
         videoStreamIndex = i;
         break;
       }
     }
     if (!videoCodec)
     {
         return RET_ERROR_FIND_CODEC;
     }
     //打开视频流解码器失败
     int iRet = avcodec_open2(videoCodec, pCodec, NULL);
     if (iRet != 0)
     {
         emit ErrofInfo(QString("打开视频流解码器失败"));
         return RET_ERROR_OPEN_CODEC;
     }
     //打印关于输入或输出格式的详细信息
      av_dump_format(avFormatContext,videoStreamIndex, m_strUrl.toStdString().data(), 0);
      avPacket = av_packet_alloc();
      avFrame = av_frame_alloc();
      //获取缩放上下文失败
      swsContext = sws_getContext(videoCodec->width,videoCodec->height,videoCodec->pix_fmt\
                                  ,videoCodec->width, videoCodec->height,AV_PIX_FMT_RGB24\
                                  ,SWS_BICUBIC, NULL, NULL, NULL);
      if (swsContext == NULL)
     {
         return RET_ERROR_SWS_GET_CONTEXT;
     }

    char *rgb = new char[videoCodec->width*videoCodec->height*3];
    memset(rgb, 0 , videoCodec->width*videoCodec->height*3);
    VideoData[0] = (uint8_t *)rgb;
    lines[0] = videoCodec->width * 3;
    m_bInitFlag = true;
    return RET_SUCCESS;
}

通过线程拉流

void FFmpegThread::run()
{
    int index;
    int temp_ret = 0;
    char errors[1024] = "";
    while(!isInterruptionRequested()){
        m_CurTime = QTime::currentTime().addSecs(5);
        av_packet_unref(avPacket); //如果没有该语句av_read_frame会导致内存泄漏
       temp_ret = av_read_frame(avFormatContext, avPacket);
       if ( temp_ret < 0) {
           av_strerror(temp_ret,errors,sizeof(errors));
           qDebug()<<"av_read_frame return error" << (uint32_t)temp_ret << "info" << errors;
           emit ErrofInfo("视频连接断开，请检查网络连接!");
           break;
       }
       //判断当前包是视频还是音频
       index = avPacket->stream_index;
       if (index != videoStreamIndex) {
           //非视频流
            continue;
       }
       //解码视频流
       temp_ret = avcodec_send_packet(videoCodec,avPacket);
       if (0 != temp_ret) {
           //解码错误
           continue;
       }
        if(avcodec_receive_frame(videoCodec, avFrame) != temp_ret)
        {
            //从解码器中读取数据错误
           continue;
        }
       //将数据转成一张图片
        sws_scale(swsContext, (const uint8_t *const *)avFrame->data, avFrame->linesize, 0\
                  , videoCodec->height, VideoData, lines);
       QImage image(VideoData[0], videoCodec->width,  videoCodec->height, QImage::Format_RGB888);
       if (!image.isNull()) {
           emit receiveImage(image);
       }
       av_packet_unref(avPacket);
    }
    //线程结束后释放资源
    free();
}

释放资源

void FFmpegThread::free()
{
    m_bInitFlag = false;
    if (swsContext != NULL) {
        sws_freeContext(swsContext);
        m_bInitFlag = NULL;
    }

    if (avPacket != NULL) {
        av_packet_unref(avPacket);
        avPacket = NULL;
    }

    if (avFrame != NULL) {
        av_frame_free(&avFrame);
        avFrame = NULL;
    }
    if (videoCodec != NULL) {
        avcodec_close(videoCodec);
        videoCodec = NULL;
    }
    if (avFormatContext != NULL) {
        avformat_close_input(&avFormatContext);
        avFormatContext = NULL;
    }
    if(VideoData[0]!= NULL)
    {
        delete []VideoData[0];
    }
}

音视频流程图（这两张图从公众号八小时码字员中摘取。链接: 八小时码字员）
音视频解码流程：
在这里插入图片描述
音视频播放流程：
在这里插入图片描述
android版FFmpeg库资源：链接: Android版FFmpeg
本人新手，有什么问题欢迎指教

zxz520zmg
关注
  • 1
    点赞
  • 踩
  • 13
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
专栏目录
【FFmpeg】使用 ffmpeg 命令实现直播推拉流 ( 推流和拉流简介 | 流媒体服务器搭建 | 使用 ffmpeg 命令进行推流操作 | 使用 ffmpeg/ffplay 命令进行拉流操作 )
让 学习 成为一种 习惯 ( 韩曙亮 の 技术博客 )
05-05 1万+
一、推流和拉流简介 1、直播推流和拉流操作 2、直播推流和拉流涉及到的软件 3、推流 -> 拉流 流程 二、流媒体服务器搭建 1、相关文件准备 2、创建 ECS 云服务器实例 3、配置安全组 4、使用 WinSCP 上传流媒体服务器软件及配置脚本 5、使用 SecureCRT 连接服务器 6、搭建流媒体服务器 三、使用 ffmpeg 命令进行推流操作 四、使用 ffplay 命令进行拉流操作 五、使用 ffmpeg 命令进行拉流操作
ffmpeg推流拉流
2401_85241911的博客
06-06 592
使用ffmpeg将本地视频推流到服务器
基于FFmpeg进行rtsp推流及拉流（详细教程）
热门推荐
12-07 8万+
基于FFmpeg进行rtsp推流及拉流
node ffmpeg jsmpeg 拉流 展示笔记
qq_38388578的博客
07-03 853
下载完 用vscode 打开jsmpeg-master目录。新建app.js并运行。
音视频开发---ffmpeg rtsp拉流
挥剑踏苍穹的博客
08-14 3062
使用rtsp拉取rtsp服务器的视频，为了方便测试，在本地linux虚拟机中搭建了一个rtsp服务器（参考搭建rtsp服务器），rtsp拉流端通过ffmpeg实现(rtsp拉流和rtmp拉流类似). 代码 /** laliu1： 将rtsp流保存到本地视频文件 usage: ./a.out rtsp://localhost/rango.ts xx.ts ...
Linux下C语言实现ffmpeg 视频+音频拉流
pk296256948的博客
04-07 1365
Linux下C语言实现ffmpeg 视频+音频拉流 1.环境需求 ①ffmpeg源码编译 https://trac.ffmpeg.org/wiki/CompilationGuide/Ubuntu官网编译教程 一定要支持h264 ②alsa支持 2.源码 #include <alsa/asoundlib.h> #include <stdio.h> #include <sys/time.h> #include <libavformat/avformat.h> #i
docker中的java程序运行ffmpeg拉流
左直拳的马桶_日用桶
03-28 3695
差点就放弃了。搞这些东西没有什么意义。 有个java项目，需要开启ffmpeg拉流，然后想将这个程序部署在docker。不料颇多波折。幸而最后成功，差点就放弃了。记录如下。 一、基本情况 1、我们写了个视频拉流控制程序，依赖JDK1.8。运行过程中，需要启动操作系统的ffmpeg进行拉流。 2、部署环境是统信欧拉版（UOS Euler） + docker。统信欧拉版是基于华为的OpenEuler（其前身是华为的服务器操作系统EulerOs)，是将OpenEuler的内核 + 统信的桌面操作模块DDE。 “统
音视频系列5：ffmpeg拉流并引入ROS库
追
03-19 1282
音视频系列5：ffmpeg拉流并引入ROS系统前言封装引入ROS库 前言 音视频系列博客： 音视频系列1：ffmpeg+rtmp拉流 音视频系列2：ffmpeg将H.264解码为RGB 音视频系列3：使用ffmpeg + nginx搭建本地转发服务器 音视频系列4：新手如何入门ffmpeg（以FLV解码H.264为例） 有兴趣的小伙伴们可以看看。 上节我们更新了ffmpeg拉流中过时的API，本...
（二）ffmpeg 下载安装以及拉流推流示例
m0_67254672的博客
04-09 730
在这里，选用的流媒体服务器是mediamtx。系统不同选择的压缩包不同，我用的是ubuntu系统。下载下来之后进行解压，可以看到里面有三个文件打开命令窗口，执行命令启动服务器。./mediamtx。
win10下用ffmpeg推流拉流
kmil_chun的博客
07-26 2508
win10下用ffmpeg推流拉流
Android平台使用的FFmpeg静态库版本4.4.2。支持RTP拉流
08-02
其他说明：在网上没有找到android平台的FFmpeg库，就自己编译了一个，我用的事RTP拉流的功能，教程上说功能挺全的但是其他的功能没有使用过。本人的开发环境为：Qt For Android，感兴趣的朋友见链接：...
ffdoc （FFMPEG的最完整教程）
12-18
- FFmpeg 可以通过RTMP、HLS、DASH等方式推流和拉流，支持实时视频传输和直播。 - 它还可以录制网络流并保存为本地文件，或者从本地文件中提取流进行广播。 6. **FFmpeg脚本编写**： - 学习FFmpeg教程，用户将...
C++ 视频处理 2G9章视频教程 FFmpeg音视频核心技术精讲与实战.zip
08-18
6. **实时流处理**：了解RTMP、HTTP Live Streaming (HLS) 和 MPEG-DASH 等流媒体协议，学习如何使用FFmpeg进行直播推流和拉流，以及如何处理延迟和适应性播放问题。 7. **音视频同步与时间戳处理**：音视频同步是...
C语言——函数
attitude_lu的博客
08-01 769
函数的主要思想是：函数其实是从上到下逐步求解的过程，把一个大的问题拆成多个小的子问题或者说把一个大的功能拆成小的功能模块，通过实现小的功能最终实现大的功能的过程。
【C++】输入输出
2401_83948390的博客
08-02 306
在C++中，输入输出操作主要通过标准库中的iostream头文件提供的一系列对象和函数来完成。
【C++】类和对象（中）
最新发布
2302_81149370的博客
08-02 579
✨✨欢迎大家来到Celia的博客✨✨。
C++｜设计模式（八）｜⭐️工厂模式？错！是工厂模式群！
糖炒栗子
08-02 502
首先我们按照与 Employee 类相同的方式来创建所有不同项目对应的基类（父类）Project，在这个类中我们还定义了与项目相关的接口 assignTo ，这个接口可以将某个项目指派给对应账户ID的员工，还是相同的方式我们定义 ITProject 与 UIProject 这两个不同项目的子类，并提供 assignTo 接口的不同实现。
第六章 - c语言中的数组-二维数组（下）
百知_zmj的博客
08-02 205
二维数组案例：杨辉三角形。
python ffmpeg 拉流并硬解码
12-20
使用Python和FFmpeg可以实现拉流并硬解码的功能。下面是一个示例代码： ```python import subprocess def decode_stream(input_url, output_file): # 使用subprocess模块调用FFmpeg命令行进行拉流和硬解码 cmd = ['ffmpeg', '-hwaccel', 'cuda', '-i', input_url, '-c:v', 'h264_nvenc', '-vf', 'hwdownload,format=nv12', '-pix_fmt', 'yuv420p', '-c:a', 'copy', output_file] subprocess.call(cmd) # 拉流并硬解码 input_url = '输入流的URL' output_file = '输出文件路径' decode_stream(input_url, output_file) ``` 请注意，上述代码中的`input_url`是输入流的URL，可以是网络流媒体地址或本地文件路径。`output_file`是输出文件的路径，可以是本地文件路径。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

zxz520zmg

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值