FFmpeg解封装

FFmpeg SDK软硬解码基础

解封装，软硬件解码，像素格式转换，重采样，pts/sts，同步策略

解封装

·av_register_all();		//注册所有格式
·avformat_network_init();	//要打开网络摄像头
·avformat_open_input(...);	//打开视频、摄像头
·avformat_find_stream_info(..);//查找流
·av_find_best_stream(...);//查找格式

//涉及三个结构体
AVFormatContext AVStream AVPacket
AVFormatContext;
AVStream;
AVPacket;

av_read_frame();//读取AVPacket一帧的信息;

int avformat_open_input

确保av_register_all avformat_network_init 已调用
AVFormatContext **ps;
const char *url;//地址
AVInputFormat *fmt;//输入封装格式，输入NULL,自动探测
AVDictionary **options;//一组类似键值对，参数设置，打开文件几乎用不到，打开视频流

AVFormatContext

AVIOContext *pb;//文件io上下文
char fileanem[1024];//文件名
unsigned int nb_streams;//所有流的数
AVStream **streams;//音视频信息
int64_t duration;//以AV_TIME_BASE单位，微秒值，不一定能获取到，音视频长度
int64_t bit_rate;//比特率

//释放函数
void avformat_close_input(AVFormatContext **s);

AVStream

AVCodecContext *codec;//过时了
AVRational time_base;//时间基数,有理数，是一个分数，
int64_t duration;//转换成毫秒 duration*((double)time_base.num/(double)time_base.den)*1000
AVRational avg_frame_rate;//一秒钟有多少帧


AVCodecParameters *codecpar;//(音视频参数)用来替代codec

AVCodecParameters

enum AVMediaType codec_type;
enum AVCodecID codec_id;
uint32_t codec_tag;//四个字节表示编码器
int format;//表示像素格式或者音频采样格式
int width; int height;//宽高
uint64_t channel_layout;//声道
itn channels;//声道数
int sample_rate;//样本率
int frame_size;//一帧音频的大小

av_read_frame

AVFormatContext *s;
AVPacket *pkt;//需要考虑内存释放问题,不能传入NULL，重复使用的时候需要清理

//返回0正确，返回<0 文件末尾，或者错误

AVPacket

AVBufferRef *buf;
int64_t pts;//pts * (num/den) 显示时间
int64_t dts;//解码时间
uint8_t *data;int size;


//创建并初始化(只创建对象，不创建里面的内容)
AVPacket *av_packet_alloc(void);

//创建并克隆,增加引用计数
AVPacket * av_packet_clone(const AVPacket * src);

//增加引用计数
int av_packet_ref(AVPacket *dts,const AVPacket *src);

//减少引用计数
int av_packet_unref(AVPacket *pkt);

//清空对象并减引用计数
void av_packet_free(AVPacket **pkt);

//默认值
void av_init_packet(AVPacket *pkt);

//手动生成内存
int av_packet_from_data(AVPacket * pkt ,uint8_t *data int size);

av_seek_frame

int av_seek_frame(AVFormatContext *s,
                  int stream_index,//-1 default
                 int64_t timestamp,//AVStream.time_base
                 int flags//方法
                 )
/*
问题思考
stream_index 默认一般为视频，视频存在B帧，音频不存在，如果为音频，可能当时没有关键帧，解码的时候会出现错误

timestamp 传入的时间不是关键帧，需要判断前一帧，后一帧

flag
#define AVSEEK_FLAG_BACKWARD 1 ///< seek backward
#define AVSEEK_FLAG_BYTE     2 ///< seeking based on position in bytes
#define AVSEEK_FLAG_ANY      4 ///< seek to any frame, even non-keyframes
#define AVSEEK_FLAG_FRAME    8 ///< seeking based on frame number
*/