qq_40170041的博客

这就是pts的转换。一个音频帧的AVFrame有nb_samples个sample，所以一个AVFrame耗时是nb_samples（1/44100）秒 即标准时间下duration_s=nb_samples（1/44100）秒， 转换成AVStream时间基下 duration=duration_s / av_q2d(st->time_base) 基于st->time_base的num值一般等于采样率,所以duration=nb_samples. pts=nduration=nnb_samples。

需要提供路径， 让ffmpeg ffprobe等命令找到需要的依赖。需要让os能够找到 ffmpeg ffprobe等命令。

在格式为YUV420的情况下，分辨率为1280x1024，帧率为60，每秒传输1280x1024x60X1.5x8 = 943,718,400 bit = 943.7184 Mbps,因此至少需要944Mb/s。这时设置H264的编码码率为9440kpbs，此时H264的压缩率为100:1。若是300:1则倒推设置码率为3146kbps，压缩比为80:1就是倒推码率11800。实际上264的压缩率没有这么高，这里只是进行举例介绍。265压缩率：500倍,实际300倍。264压缩率：250倍。

https://www.cnblogs.com/leisure_chn/p/10623968.htmlhttps://www.bilibili.com/read/cv12294853

vlc-qt源码下载：https://github.com/ntadej/vlc-qt。下载cmake源码：http://www.cmake.org/download/Qt第三方库libvlc-qt——ubuntu16.04上编译、安装，测试。下载VLC源码，进入网页等待几秒钟自动下载最新版。解压到 /usr/local。Qt配置 ：5.14.2版本。

视频和音频是各自独立播放的，并不同步。本文主要描述了如何以音频的播放时长为基准，将视频同步到音频上以实现视音频的同步播放的。主要有以下几个方面的内容视音频同步简单介绍一般来说，视频同步指的是视频和音频同步，也就是说播放的声音要和当前显示的画面保持一致。想象以下，看一部电影的时候只看到人物嘴动没有声音传出；或者画面是激烈的战斗场景，而声音不是枪炮声却是人物说话的声音，这是非常差的一种体验。在视频流和音频流中已包含了其以怎样的速度播放的相关数据，视频的帧率（Frame Rate）指示视频一秒显示的帧数（图像

在这里记录下FFmpeg各主要结构体创建、释放的方式2. 取流参数AVDictionary创建：AVDictionary* opts = NULL;配置：（官方参数列表）av_dict_set(&opts, “rtsp_transport”, “tcp”, 0);释放：av_dict_free(&opts);3. 媒体流AVFormatContext创建：AVFormatContext* ictx = NULL;释放：avformat_close_input(&ictx);4.

AVFrame结构，av_frame_alloc申请内存，av_frame_free释放内存。容易混淆的是av_frame_unref，它的作用是释放音视频数据资源，而av_frame_free是释放所有资源，包括音视频数据资源和结构体本身的内存。可以从源码中看到，av_frame_free函数体内是先调用了av_frame_unref释放数据缓存，再free本身结构体内存。AVPacket结构，比较神奇的是，av_read_frame执行过程中，内部为形参pkt自动申请一块缓存用来存储音视频数据，而释放资

由于sonic库处理的数据为short类型或者float类型，但是ffmpeg重采样后的数据和SDL使用的数据都是uint8类型，所以这里数据长度就需要重新计算：原始的数据长度/(音频通道数 * S16类型数据所占字节数)其中audio->getAudioBuff() 以及audio->audioBuff就是音频解码后的PCM数据。

计算视频长度： time(秒) = st->duration * av_q2d(st->time_base) ffmpeg内部的时间与标准的时间转换方法： ffmpeg内部的时间戳 = AV_TIME_BASE * time(秒) AV_TIME_BASE_Q=1/AV_TIME_BASE av_rescale_q(int64_t a, AVRational bq, AVRational cq)函数 这个函数的作用是计算a*bq / cq来把时间戳从一个时间基调整到另外一个时间基。PTS和DTS的时间基。

11、释放所有vlc对象(注：在释放libvlc_media_player_t之前，记得先将视频停止，避免的不必要麻烦)（注：用Qt的话，比如用QLabel，要用它的winID，并且强转成(void *)类型）8、检测媒体是否正在播放（注：这里的返回值可以强转成bool类型方便一点）//从发送事件的媒体播放器对象那里获取一个事件管理器。10、正在播放的媒体停止（停止再点击播放则重头播放）9、正在播放的媒体暂停（暂停再点击播放可以继续）2、根据给定的媒体对象创建一个播放器对象。

解决方法：加上-llzma选项。

答案是不能，那怎样才能同时播放两个播放器的内容，比如声卡固定设置为48Khz，S16格式的，这个时候不管什么格式什么采样率的音频最终都要转为48Khz，S16格式的音频进行输出。将麦克风采集的和背景音乐的音频合并叠加，也就是混音，就需要统一格式，统一采样率，这样才能混音(amix)进行编码。重采样就是改变音频的采样率、sample format(采样格式)、声道数(channel)等参数。播放器1 44.1Khz(采样率) f32(格式) 2chn(通道数)1、音频重采样是为了将音频统一格式。...

采样格式最后一个字母如果是P就代表数据格式是平面模式，存储时其左声道和右声道的数据是分开存储的，左声道的数据存储在data[0]，右声道的数据存储在data[1]，每个声道的所占⽤的字节数为linesize[0]和linesize[1]；如果最后一个字母不是P就代表是交错模式，存储时是按照LRLRLR…的格式交替存储在data[0]中，linesize[0]表示总的数据量。（每个LR为一个音频样本）linesize表示一个平面内总比特数(经过内存对齐)， nb_samples表示一帧音频帧的采样点数。...

同一个 AVCodecID 可能对应多个不同的编解码器 (AVCodec),他们有不同的 AVCodec.name。avcodec_find_decoder 根据AVCodecID查找，找到先注册的decoder则退出avcodec_find_decoder_by_name 根据decoder name去查找匹配的decoder，比如同样的AV_CODEC_ID_AAC，但它有“aac_fixed”、“libfdk_aac”等不同的decoder，如果我们要指定aac decoder，则可以使用AVCo

首先ffmpeg的解码器很多，但是当两个不同的流或者文件使用了同一个编解码器进行编解码，如果两个不同的流或者文件的数据都存在编解码器中，会造成编解码器的数据混乱，这时加入上下文保存两个流的数据，就不会造成编解码器中数据混乱。编解码器只需要从上下文读取原始数据，然后将经过编解码后的数据再次放回上下文，就不会造成数据混乱。为什么分配编解码器的上下文。

ffmpeg基础五：单独解码裸流aac或MP3或H264用于解析输入的数据流并把它们分成一帧一帧的压缩编码数据。比较形象的说法就是把长长的一段连续的数据“切割”成一段段的数据。av_parser_parse2()：解析数据获得一个Packet， 从输入的数据流中分离出一帧一帧的压缩编码数据。读取文件流，使用av_parser_parse2就可以获取出packet。这也是为什么后面使用。

协议学习方法1、协议是什么：双方约定好如何传输消息，比如视频传输协议，要告诉你这个包是h264包，还是aac音频包，这个信息一般放在协议头，对方收到网络包，可以直接在协议头部获取出这些信息，所以协议的组成一般都是：协议头 + 数据2、学习这个协议的作用：这个协议用来干什么的3、将协议抽象成可靠传输机制，他要保证能把数据发送给对方如何保证传输，并且还让对方能够快速使用数据：加一些字段来告诉对方一些属性，比如TCP协议头里的字段，序列号，确认号，标志位，这些都是保证数据传输的4、如何通信呢。

也就是说，对某个IDR帧之后的帧，解码器不会参考这个IDR帧之前的任何帧做解码,对某个I帧之后的帧，解码器可能会参考这个I帧之前的帧做解码。核心作用：H.264 引入 IDR 帧是为了解码的重同步，当解码器解码到 IDR 帧时，立即将参考帧队列清空，将已解码的数据全部输出或抛弃，重新查找参数集，开始一个新的序列。I 帧和 IDR 帧都是使用帧内预测，本质上是同一个东西，在解码和编码中为了方便，将视频序列中第一个 I 帧和其他 I 帧区分开，所以把第一个 I 帧称作 IDR，这样就方便控制编码和解码流程。

是AAC⾳频的传输流格 式。有的时候当你编码AAC裸流的时候，会遇到写出来的AAC⽂件并不能在PC和⼿机上播放，很⼤的可能就是AAC⽂件的每⼀帧⾥缺少了ADTS头信息⽂件的包装 拼接。⼀个AAC原始数据块⻓度是可变的，对原始帧加 上ADTS头进⾏ADTS的封装，就形成了ADTS帧。这种格式的特 征是可以确定的找到这个⾳频数据的开始，不需进⾏在⾳频数据流中间开始 的解码，即它的解码必须在明确定义的开始处进⾏。这两种的header的格式也是不同的，⽬前⼀般编码后的和抽取出的都是 ADTS格式的⾳频流。

AAC的 ADTS格式可以在任意帧解码，也就是说它每⼀帧都有头信息。ADIF只有⼀ 个统⼀的头，所以必须得到所有的数据后解码

ffmpeg基础一：解封装

window编译ffmpeg mingw，因此要在windows搭建一个模拟linux环境，下载安装MSYS-1.0.11, 网址：https://www.msys2.org/但是编译x264的时候出现了 No working C compiler found的错误，有可能是X264版本太高的问题。安装完成后，将Qt的mingw32的库全部转移过来（直接拷贝就可以）写一个helloword的小程序测试一下。拷贝完成后，运行mingw32.exe。可以看到有输出，证明可以使用。我这里安装在了默认的路径。...

使用Cmake通过mingw32编译SDL报错：Error inconfiguration process，preject files may be invalid（已解决）

YUV 4：2：0，每四个 Y 分量共用一对 UV 分量，每像素占用 （Y + 0.25U + 0.25V = 8 + 2 + 2 = 12bits）1.5 字节。YUV 4：2：2，每两个 Y 分量共用一对 UV 分量，每像素占用 （Y + 0.5U + 0.5V = 8 + 4 + 4 = 16bits）2 字节；YUV 4：4：4，每一个 Y 分量对于一对 UV 分量，每像素占用 （Y + U + V = 8 + 8 + 8 = 24bits）3 字节；

metaRTC使用hisiv400编译指南

int nListCnt=0, ret; ST_VIDEO_DB_DATA *pstVideoDbData; SearchList.clear(); QDateTime qttime; qttime= QDateTime::currentDateTime(); QString str = qttime.toString("yyyyMMdd_hhmmss"); char out_file[265] = {0}; strcpy(out_file,tr("

QSlider::groove:horizontal {border: 1px solid #4A708B;background: #C0C0C0;height: 30px;border-radius: 1px;padding-left:-1px;padding-right:-1px;}QSlider::sub-page:horizontal {background: qlineargradient(x1:0, y1:0, x2:0, y2:1, stop:0 #B1B1B1.

/** 获取MP4文件时长，ffmpeg库实现 */int record::getMP4_duration_ffmpeg(const char *filename,long long *seconds){ if(filename == NULL) { printf("getMp4_duration_filename erro"); return -1; } AVFormatContext *ifmt_ctx = NULL;

最近写ffmpeg保存rtsp流的程序，会使用到goto语句goto end;然后在程序中计入了end：结果编译的时候会报一个错误error: jump to label 'end' [-fpermissive]解决以上问题就是要把全部变量初始化都放在函数开头，要么全部变量就不让它初始化，也就是在goto end调用之前把所有的变量初始化完，不能在goto和end定义之间出现任何初始化变量的步骤...