FLV格式分析

已于 2022-05-02 10:41:21 修改
阅读量2.1k 收藏 3
点赞数 3
分类专栏： 音视频 ffmpeg 文章标签： 音视频
于 2022-05-02 09:42:59 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_41643938/article/details/124531096
版权

简介

FLV(Flash Video)是Adobe公司推出的⼀种流媒体格式，由于其封装后的⾳视频文件体积小、封装简单等特点，非常适合于互联⽹上使用。目前主流的视频网站基本都⽀持FLV。采用 FLV格式封装的⽂件后缀为.flv。

FLV封装格式是由⼀个**⽂件头(file header)和 ⽂件体(file Body)**组成。其中，FLV body由⼀ 对对的(Previous Tag Size字段 + tag)组成。Previous Tag Size字段 排列在Tag之前，占用4个字节。Previous Tag Size记录了前⾯⼀个Tag的大小，用于逆向读取处理。FLV header 后的第⼀个Pervious Tag Size的值为0。

Tag⼀般可以分为3种类型：脚本(帧)数据类型、音频数据类型、视频数据。FLV数据以⼤端序 进行存储，在解析时需要注意。⼀个标准FLV文件结构如下图：
在这里插入图片描述

FLV文件的详细内容结构如下图

在这里插入图片描述

大体的解析框架

在这里插入图片描述

FLV header

注：在下⾯的数据type中，UI表示⽆符号整形，后⾯跟的数字表示其⻓度是多少位。⽐如 UI8，表示⽆符号整形，⻓度⼀个字节。UI24是三个字节,UI[8*n]表示多个字节。UB表示位域，UB5表示⼀个字节的5位。可以参考c中的位域结构体。 FLV头占9个字节，⽤来标识⽂件为FLV类型，以及后续存储的⾳视频流。⼀个FLV⽂件，每种 类型的tag都属于⼀个流，也就是⼀个flv⽂件最多只有⼀个⾳频流，⼀个视频流，不存在多个 独⽴的⾳视频流在⼀个⽂件的情况。
00000 1 0 1

FLV头的结构如下：

FieldTypeComment
签名UI8‘F’(0x46)
签名UI8‘L’(0x4C)
签名UI8‘V’(0x56)
版本UB5FLV的版本。0x01表示FLV版本为1
保留字段UB1前五位都为0
⾳频流标识UB1是否存在⾳频流
保留字段UB1为0
视频流标识UB1是否存在视频流
⽂件头⼤⼩UI32FLV版本1时填写9，表明的是FLV头的⼤⼩，为后期的 FLV版本扩展使⽤。包括这四个字节。数据的起始位置 就是从⽂件开头偏移这么多的⼤⼩。

FLV Body

FLV Header之后，就是FLV File Body。FLV File Body是由⼀连串的back-pointers + tags构成。 Back-pointer表示Previous Tag Size(前⼀个tag的字节数据⻓度)，占4个字节。
计算出⼤⼩ 383= 0x0000017F

在这里插入图片描述

FLV Tag

每⼀个Tag也是由两部分组成:tag header和tag data。Tag Header⾥存放的是当前tag的类 型、数据区(tag data)的⻓度等信息。

tag header
tag header⼀般占11个字节的内存空间。FLV tag结构如下：

FieldTypeComment
Tag类型 TypeUI88:audeo
9:video
18:Script data(脚本数据)
all Others:reserved 其他所有值未使⽤
数据区⼤⼩UI24当前tag的数据域的⼤⼩，不包含tag header。 Length of the data in the Data field
时间戳TimestampUI24当前帧时戳，单位是毫秒。相对值，第⼀个tag的时戳总是为0
时戳扩展字段 TimestampExtendedUI8如果时戳⼤于0xFFFFFF，将会使⽤这个字节。这个字节是 时戳的⾼8位，上⾯的三个字节是低24位。
StreamIDUI24总是为0
数据域UI[8*n]数据域数据

注意：

  1. flv⽂件中Timestamp和TimestampExtended拼出来的是dts。也就是解码时间。 Timestamp和TimestampExtended拼出来dts单位为ms。(如果不存在B帧，当然dts等于 pts)
  2. CompositionTime 表示PTS相对于DTS的偏移值， 在每个视频tag的第14~16字节， 。 显示时间(pts) = 解码时间（tag的第5~8字节） + CompositionTime CompositionTime的单位也是ms
    Script data脚本数据就是描述视频或⾳频的信息的数据，如宽度、⾼度、时间等等，⼀个⽂ 件中通常只有⼀个元数据，⾳频tag和视频tag就是⾳视频信息了，采样、声道、频率，编码等 信息。

Script data脚本数据就是描述视频或⾳频的信息的数据，如宽度、⾼度、时间等等，⼀个⽂ 件中通常只有⼀个元数据，⾳频tag和视频tag就是⾳视频信息了，采样、声道、频率，编码等信息。

Script Tag Data结构(脚本类型、帧类型)

该类型Tag⼜被称为MetaData Tag,存放⼀些关于FLV视频和⾳频的元信息，⽐如：duration、width、 height等。通常该类型Tag会作为FLV⽂件的第⼀个tag，并且只有⼀个，跟在File Header后。该类型Tag DaTa的结构如下所示（source.200kbps.768x320.flv⽂件为例）:
在这里插入图片描述
第⼀个AMF包： 第1个字节表示AMF包类型，⼀般总是0x02，表示字符串。第2-3个字节为UI16类型值， 标识字符串的⻓度，⼀般总是0x000A（“onMetaData”⻓度）。后⾯字节为具体的字符串，⼀般总 为“onMetaData”（6F,6E,4D,65,74,61,44,61,74,61）。
第⼆个AMF包： 第1个字节表示AMF包类型，⼀般总是0x08，表示数组。第2-5个字节为UI32类型值，表 示数组元素的个数。后⾯即为各数组元素的封装，数组元素为元素名称和值组成的对。常⻅的数组元素如 下表所示。

值Comment例如
duration时⻓(秒)210.732
width视频宽度768.000
height视频⾼度320.000
videodatarate视频码率207.260
framerate视频帧率25.000
videocodecid视频编码ID7.000 (H264为7)
audiodatarate⾳频码率29.329
audiosamplerate⾳频采样率44100.000
stereo是否⽴体声1
audiocodecid⾳频编码ID10.000 (AAC为10)
major_brand格式规范相关isom
minor_version格式规范相关512
compatible_brands格式规范相关isomiso2avc1mp41
encoder封装⼯具名称Lavf54.63.104
filesize⽂件⼤⼩（字节）6636853.000

注：Lavf54.63.104即是 Libavformat version 54.63.104. 即是ffmpeg对于库的版本
在这里插入图片描述
在这里插入图片描述

Audio Tag Data结构(⾳频类型)

⾳频Tag Data区域开始的：

  • 第⼀个字节包含了⾳频数据的参数信息
  • 第⼆个字节开始为⾳频流数据。
    （这两个字节属于tag的data部分，不是header部分）

第⼀个字节为⾳频的信息（仔细看spec发现对于AAC⽽⾔，⽐较有⽤的字段是 SoundFormat），格式如下：

FieldTypeComment
⾳频格式
SoundFormat		UB40 = Linear PCM, platform endian
1 =ADPCM 2 = MP3
3 = Linear PCM, little endian
4 = Nellymoser 16-kHz mono
5 = Nellymoser 8-kHz mono
6 = Nellymoser
7 = G.711 A-law logarithmic PCM
8 = G.711 mu-law logarithmic PCM
9 = reserved
10 = AAC
11 = Speex
14 = MP3 8-Khz
15 = Device-specific sound
采样率
SoundRate		UB20 = 5.5kHz
1 = 11kHz
2 = 22.05kHz
3 = 44.1kHz
对于AAC总是3。但实际上AAC是可以⽀持到48khz以上的频率 (这个参数对于AAC意义不⼤)。
采样精度
SoundSize		UB10 = snd8Bit
1 = snd16Bit
此参数仅适⽤于未压缩的格式，压缩后的格式都是将其设为1
⾳频声道
SoundType		UB10 = sndMono 单声道
1 = sndStereo ⽴体声，双声道
对于AAC总是1

第⼆个字节开始为⾳频数据（需要判断该数据是真正的⾳频数据，还是⾳频config信息）。

FieldTypeComment
音频数据UI[8*n]if SoundFormat == 10 (AAC类型)
AACAUDIODATA
else
Sound data—varies by format

AAC AUDIO DATA
在这里插入图片描述
The AudioSpecificConfig is explained in ISO 14496-3. AAC sequence header存放的是 AudioSpecificConfig结构，该结构则在“ISO-14496-3 Audio”中描述。
在这里插入图片描述

Video Tag Data结构(视频类型)

视频Tag Data开始的：

  • 第⼀个字节包含视频数据的参数信息，
  • 第⼆个字节开始为视频流数据。

第⼀个字节包含视频信息，格式如下:

FieldTypeComment
帧类型UB41: keyframe (for AVC, a seekable frame)——h264的IDR，关键帧
2: inter frame (for AVC, a non- seekable frame)——h264的普通帧
3: disposable inter frame (H.263 only)
4: generated keyframe (reserved for server use only)
5: video info/command frame
编码IDUB4使⽤哪种编码类型：
1: JPEG (currently unused)
2: Sorenson H.263
3: Screen video
4: On2 VP6
5: On2 VP6 with alpha channel
6: Screen video version 2
7: AVC

第⼆个字节开始为视频数据

FieldTypeComment
视频数据UI[8*n]If CodecID == 2
H263VIDEOPACKET
If CodecID == 3
SCREENVIDEOPACKET
If CodecID == 4
VP6FLVVIDEOPACKET
If CodecID == 5
VP6FLVALPHAVIDEOPACKET
If CodecID == 6
SCREENV2VIDEOPACKET
if CodecID == 7 （AVC格式）
AVCVIDEOPACKET

AVCVIDEOPACKET
在这里插入图片描述

  1. CompositionTime 单位毫秒 CompositionTime 每个视频tag（整个tag）的第14~16字节（如果是tag data偏移[3]~[5], [0],[1][2:AVCPackettype] ）（表示PTS相对于DTS的偏移值 ）。 CompositionTime 单位为ms : 显示时间 = 解码时间（tag的第58字节,位置索引[4][7]） + CompositionTime
  2. AVCDecoderConfigurationRecord AVC sequence header就是AVCDecoderConfigurationRecord结构，该结构在标准⽂ 档“ISO-14496-15 AVC file format”

FLV时间戳计算

题记：时间戳将每⼀秒分成90000份，即将每⼀毫秒分成90份 在flv中直接存储的都是毫秒级 在TS存储 的是时间戳级
其中TS、flv⼀般按照编码顺序排列
⼀个视频tag⼀般只包含⼀帧视频的码流
其中视频tag的时间戳对应的是解码时间戳（DTS/90）
当前序列：
编码顺序 I P P B B B…
对应帧号 0 1 5 3 2 4…
flv对每⼀个tag都规定了它将要播放的时间戳
每个时间戳都可以对应转换特性的时间
其中script（脚本）、video（视频）、audio（⾳频）的第⼀个tag的时间戳值都为0
时间戳占4个字节 其中第四个字节是⾼位 前三个字节是低位(每个tag的5~8字节)
如6E 8D A8 01 = 0x 01 6E 8D A8 = 24022440

CompositionTime 每个视频tag的第14~16字节（表示PTS相对于DTS的偏移值 ）
CompositionTime 单位为ms 显示时间 = 解码时间（tag的第5~8字节） + CompositionTime
例如（注意显示时间最后⼀个字节是⾼位）

tag0 （脚本） ：时间戳为0
tag1 （视频） ：第⼀个视频时间戳 值为0 ⽆CompositionTime (头信息)
tag2 （⾳频） ：第⼀个⾳频时间戳 值为0
tag3 （视频） ：00 00 00 00 值：0 00:00:00:00 (解码时间) CompositionTime：0x 00 00 50 值：80 00:00:00:80 I帧 显示时间： 00:00:00: 80 poc=0
tag4 （视频） ：00 00 28 00 值：40 00:00:00:40 (解码时间) CompositionTime：0x 00 00 50 值：80 00:00:00:80 P帧 显示时间： 00:00:00: 120 poc=1
tag5 （视频） ：00 00 50 00 值：80 00:00:00:80 (显示时间) CompositionTime：0x 00 00 C8 值：200 00:00:00:200 P帧 显示时间： 00:00:00: 280 poc=5
tag6 （⾳频） ：00 00 50 00 值：80 00:00:00:80(显示时间)
tag7 （⾳频） ：00 00 67 00 值：103 00:00:00:103(显示时间)
tag8 （视频） ：00 00 78 00 值：120 00:00:00:120 (解码时间) CompositionTime：0x 00 00 50 值：80 00:00:00:80 B帧 显示时间： 00:00:00: 200 poc=3
tag9 （⾳频） ：00 00 7E 00 值：126 00:00:00:126(显示时间)
tag10 （⾳频） ：00 00 96 00 值：150 00:00:00:150(显示时间)
tag11 （视频） ：00 00 A0 00 值：160 00:00:00:160(解码时间) CompositionTime：0x 00 00 00 值：00 00:00:00:00 b帧 显示时间： 00:00:00: 160 poc=2
tag12 （⾳频） ：00 00 AD 00 值：173 00:00:00:173(显示时间)
tag13 （⾳频） ：00 00 C4 00 值：196 00:00:00:196(显示时间)
tag14（视频） ：00 00 C8 00 值：200 00:00:00:200(解码时间) CompositionTime：0x 00 00 28 值：40 00:00:00:40 b帧 显示时间： 00:00:00: 240 poc=4
我们可以看到每个视频tag相差约 40ms 刚好是25fps视频 每帧视频的播放时⻓
在上例中，我们会看到按照解码时间排列
编码顺序 I P P B B B…
对应帧号 0 1 5 3 2 4…

生椰_李点点
关注
专栏目录
Flv 格式分析
fdsafwagdagadg6576的专栏
11-03 3563
目录 1 h264 基础知识 2 FLV封装格式 1 h264 基础知识 H264流是由一个接一个nalu单元组成的。 1.1 h264 结构 原始的NALU单元组成：[start code] + [NALU header] + [NALU payload]. h264 NALU: 0x00 00 00 01 | nalu_type(1字节)| nalu_data (N 字节) | 0x00 00 00 01 | ... 起始码(4字节) 类型...
flvAnalyser flv流分析工具
12-26
《FLV Analyser：深入解析FLV流数据的利器》 在数字媒体处理领域，FLV（Flash Video）格式作为一种广泛使用的视频格式，被众多在线流媒体服务所采纳。为了更好地理解和优化FLV流，开发者和技术人员需要强大的分析...
flv文件格式解析!!!
elesos.com
11-17 1139
flv头 FLV header 总体上看，FLV包括文件头（File Header）和文件体（File Body）两部分，其中文件体由一系列的Tag组成。 Signature: FLV 文件的前3个字节为固定的‘F’‘L’‘V’,用来标识这个文件是flv格式的.在做格式探测的时候，如果发现前3个字节为“FLV”，就认为它是flv文件. Version: 第4个字节表
FLV格式详解
热门推荐
JT同学的博客
03-19 1万+
前言 最近因为要使用rtmp推H.264，了解到rtmp只能推flv格式，不能直接推H.264，所以专门学习了flv格式，自己将H.264格式封装成Flv，盯着一堆二进制看了两天，哈哈哈，有点头大。 这篇文章将介绍Flv格式，至于如何将H.264封装成Flv，以及如何使用rtmp推H.264将在后面的文章介绍。 Flv文件格式 Flv由 “Flv header” 和 “Flv Body”组成。 F...
FLV文件格式解析
liyangbing的专栏
11-28 543
最近要用到flv，整理了一些flv格式的资料，供参考。 flv文件主要由两部分组成：header和body。 1.header header部分记录了flv的类型、版本等信息，是flv的开头，一般都差不多，占9bytes。具体格式如下： 文件类型 3 bytes “FLV” 版本 1 byte 一般为0x01 流信息 1 byte 倒数第一位是1
FLV格式解析.xlsx
08-18
FLV格式解析
FLV格式分析-FLV封装格式剖析1
08-04
在FLV格式中，数据以大端序存储，解析时需特别注意。Tag Data部分根据不同的Tag类型，会有不同的结构，如Audio Tag会包含音频类型信息，Video Tag则包含视频类型信息，如AAC AUDIO DATA和AVCVIDEO PACKET。 FLV的...
FLV 格式详解
crl6的博客
07-21 4853
一、FLV格式介绍： 是Adobe发布的一种可以用于直播也可以用于点播的封装格式，以FLVTAG的形式存在，每一个TAG都是独立存在的，我们先用FlvAnalyzer.exe打开一个flv视频看看。 从上图可以看到FLV包括文件头（File Header）和文件体（File Body）两部分，其中文件体由一系列的Tag组成。 1. 文件头 Header 部分记录了FLV的类型、版本等信息，是FLV的开头。一般差不多占9bytes。具体格式如下： a. ...
FLV 文件格式分析
11-27 334
这里需要说明一下的是，当 flv 包含的是 h264 的时候，CodecID 值是 7。FLV 文件有 9 个字节的文件头，文件以 3 字节签名 0x46、0x4C、0x 56 开始，分别是 ‘F’、’L’、’V’ 三个字母的 ascii 编码。flv tag 的 body 部分其实就是音频的 tag 部分了，图中每一个字段都有简单说明。flv 格式虽然结构简单，但是也有很多字段，每一个字段取值也有很多，这些细节需要参考具体的规范。下来以音频、视频为例，分析一下 FLV 格式的 header、tag。
FLV封装格式剖析
locahuang的博客
02-23 797
一、FLV格式组成 FLV (Flash Video) 是由 Adobe 公司推出的一种流媒体格式，它是随着Flash MX的推出发展而来的视频格式。由于其封装后的音视频文件体积小、封装简单等特点，非常适合于互联网上使用。目前主流的视频网站基本都支持FLV。采用FLV格式封装的文件，一般文件后缀定义为.flv。 FLV封装格式是由一个文件头(header)和 文件体(Body)组成。其中Body又由“PreviousTagSize 和 Tag”模块组成。 【FLV封装格式 图1】 1、 FLV He..
FLV格式解析
夏天Alex
07-09 4122
一、FLV文件格式FLV是流媒体格式的一种FLV是一个二进制文件，由文件头（FLV header）和很多tag组成。tag又可以分成三类：audio,video,script，分别代表音频流，视频流，脚本流（关键字或者文件信息之类）。FLV文件=FLV头文件+ tag1+tag内容1 + tag2+tag内容2 + ...+... + tagN+tag内容N。FLV包括文件头（File Heade...
也说FLV格式分析（C语言从0开始，详解，完整版）
spygg的专栏
12-27 5412
也说FLV格式分析（C语言完整版） 最近想写一个在线视频播放软件，经研究得知某视频网站会将一个视频成很多段来投放从而方便在线缓冲，以及加Ad之类的目的。下载后大概如下图所示（星哥的九品芝麻官），于是就想合并这些视频，所以就研究了下FLV的格式，然后用C语言写了一个很丑陋的版本。 本教程暂且分成两部分：FLV格式分析和FLV文件
FLV格式讲解
qq_54089476的博客
03-29 1008
FLV流媒体协议是美国Adobe公司推出来的一种流媒体协议。FLV流媒体格式的特点是封装过后的音视频数据非常小、并且封装的规范相对更加简单，所以FLV流媒体格式非常适合网络传输。但是FLV格式是Adobe公司的私有协议，所以它支持的网络传输协议比较有限：如RTMP、HTTP-FLV。
FLV 文件格式解析 -- 速通版
最新发布
L2010pc_web的专栏
05-11 1163
对有一定音视频基础知识的人群，可参考本文快速了解音视频 FLV (即 Flash Video 的缩写) 文件的重点信息和内容。
音视频学习（四、FLV格式解析）
酱油师兄的博客
05-05 1365
由于上一节使用到了rtmp推流，然后一直推一直出错，用rtmp推流的数据格式是FLV，所以这一节分析一下FLV的格式，补充补充知识。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值