DASH（Dynamic Adaptive Streaming over HTTP）自适应流媒体

最新推荐文章于 2025-04-07 14:39:22 发布
转载 最新推荐文章于 2025-04-07 14:39:22 发布
· 5.1k 阅读 · 5

http://blog.csdn.net/nonmarking/article/details/50397153


DASH（Dynamic Adaptive Streaming over HTTP）即自适应流媒体传输，典型的系统框图如下


简单概括来说，就是在服务器端提前存好同一内容的不同码率、不同分辨率的多个分片以及相应的描述文件MPD，客户端在播放时即可以根据自身性能以及网络环境选择最适宜的版本。更多详细的内容可以参见MPEG组织出台的标准，标准号ISO/IEC 23009-1。

在这篇文章中主要说一下如何生成服务器端的媒体内容和相应的MPD文件。通过上面的框图可以看到，主要的流程即输入-编码-分片-组织MPD。下面将首先介绍一下目前网络上有的一些能在服务器端完成相应全部或部分工作的开源工程，然后介绍一个本人开发的用于完成这一任务的开源项目以及一个整合了此项目的java web示例。

网络上已有的开源项目

1、MPD验证器 MPEG-DASH MPD Validator 

这是一个在线的MPD验证器，通过上传自己的MPD文件，就可以检验该文件与标准的一致性。该验证器支持到ISO/IEC 23009-1:2012。验证结果如下图


但实际上最保险的方法还是用播放器试着播放一下看看

2、DASHEncoder 

该项目可以通过读入配置文件或命令行来完成DASH媒体内容和MPD文件的生成。并且支持计算PSNR值并存入mysql数据库。它的实现方法基本是通过调用x264\ffmpeg\mp4box来实现的。但是其作者表示目前该项目的维护已经结束，在github上下载的代码也已经无法正确运行。下面贴一个它的配置文件的示例

[plain]  view plain  copy
  1. #========================================  
  2. #     Config File for DASH Encoder  
  3. #========================================  
  4.   
  5. #========================================  
  6. #             General Options  
  7. #========================================  
  8.   
  9. dest-directory : /opt/lampp/htdocs/tests_updates/  
  10.   
  11.   
  12. video-encoder : x264  
  13. audio-encoder : ffmpegAAC  
  14. multiplexer : mp4box  
  15.   
  16. #store-psnr   
  17. sql-host : localhost  
  18. sql-user : root  
  19. sql-pw :   
  20. sql-database : dash  
  21.   
  22. add-non-segmented  
  23.   
  24. #use-ffmpeg-pipe  
  25. ffmpeg-opt : -f rawvideo  
  26. #input-res : 384x208  
  27. #input-res : 352x288  
  28. input-res : 854x480  
  29. #========================================  
  30. #             x264 Options  
  31. #========================================  
  32.   
  33. bitrate : 300  
  34.   
  35. #bitrate : 250@480x360|500@480x360|1000  
  36. #bitrate : 200|400|600|1000  
  37. statistics : stat.temp  
  38. gop : 48  
  39. scenecut : 0   
  40. profile : baseline  
  41. preset : slow  
  42. input : /home/stefan/sintel_trailer_2k_480p24.y4m  
  43. #input : /home/stefan/foreman_cif.y4m  
  44. #input : /home/stefan/kingkong.mp4  
  45. #input : /media/Volume/MI200802010028-video_newsroom_hd_1080_p29_97-channelSelectionT0C0_T0C1.mp4  
  46. passes : 1  
  47. const-filesize : 0  
  48.   
  49. #Additional Options for Encoding  
  50.   
  51. #pass1 : --frames 500 --fps 29.970029  
  52. pass1 : --verbose --fps 24  
  53. pass2 : --verbose --psnr   
  54.   
  55. #========================================  
  56. #             FFMPEG AAC Options  
  57. #========================================  
  58.   
  59. # [channels, samplerate, bitrate]  
  60. #audio-quality : 2,44100,48|2,44000,128  
  61. #audio-quality : 2,44100,48  
  62. audio-quality :    
  63.   
  64. audio-input : /home/stefan/sintel_trailer-audio.flac  
  65. audio-codec : libfaac  
  66.   
  67. #========================================  
  68. #             MP4Box Options  
  69. #========================================  
  70.   
  71. #AV Muxing  
  72. #mux-combi : 300@48|600@128  
  73. mux-combi :    
  74.   
  75. fragment-size : 2000  
  76. segment-size : 2000  
  77. rap-aligned  
  78. segment-name :  sintel  
  79. folder-prefix : sintel  
  80.   
  81.   
  82. #========================================  
  83. #             MPD Options  
  84. #========================================  
  85. mpd-name : sintel.mpd  
  86. url-root : http://localhost/tests_updates/  
  87. #set-base-url   
  88. mpdActStandardPostfix : _actVersion.mpd  
  89. duration : 9M4S  
  90. transform-mpd  
  91. minBufferTime : 2.0S  
  92. segDuration : 2  
  93. #========================================  
  94. #             Other Options  
  95. #========================================  
3、 bitcodin
前面说到DASHEncoder的作者表示已经不再对其进行维护了，其实是在他们转而开发了这个在线的编码分片与MPD生成平台。和许多类似的平台的一样，要体验完整的功能、更大的云端空间是需要付费的。此平台除了可以生成DASH内容外，也支持HLS，而且生成的媒体内容可以直接存储在他们的服务器上。界面如下


4、Bento4 

该项目提供了用于MP4和DASH格式的一套工具集，例如用于查看mp4封装格式信息的mp4info、生成HLS内容的mp4-hls等。用于生成DASH内容的工具主要有两个，mp4-dash和mp4-dash-encoder。mp4-dash-encode可以将单个序列编码为多个不同码率的序列，并进行分片，不过默认的码率是在一个最低值（默认500k）和最高值（默认2M）之间进行平均分配，不能随意选择码率。mp4-dash则可以利用已有的单个或多个文件组织生成MPD。所以二者往往合作使用。具体使用教程看这里。

在这里简单描述一下使用方法

首先需要自己使用ffmpeg将原始视频编码为你需要的码率和分辨率等，然后使用mp4fragment工具将mp4 fragment化，接下来就可以使用mp4-dash工具完成dash内容的生成工作了

5、GPAC 

与Bento4类似，GPAC也是一个开源的多媒体工具包，包括用于MP4打包的mp4box等。用于生成DASH内容的工具是DASHCast，也是通过读取输入文件和配置文件来生成DASH内容和对应的MPD文件，但是测试发现生成直播内容时一切正常，但是生成点播内容时会出现错误，无法使用。此外，这个工具包里还有一个mp4box也支持DASH内容和MPD的生成，不过需要搭配x264或ffmpeg来完成编码的工作。一个简单的使用教程看这里 。

本人制作的开源示例

1、DASHEncoder2

+++++++++++++++++++++++++++

20170518更新

点击这里查看最新的DASHEncoder2工具。最新工具基于ffmpeg和bento4工具集开发，简单来说就是python调用命令行工具，目前只做了windows版本，linux版本有需求的也可以自行修改出来，应该是比较简单的。

因为Bento4工具集只能处理MP4封装的媒体资源，并且没有编解码功能，这意味着无法直接将任意输入媒体资源转化为需求的DASH内容，为了解决这一问题，实现根据设置参数自动生成DASH内容和对应MPD文件的功能，开发了新版DashEncoder2工具，该工具的数据处理流程如下图


该工具支持如下的常用命令

命令参数

含义

-h, --help

输出帮助信息

-v, --verbose

输出verbose级别日志信息

-d, --debug

输出debug级别日志信息

-f, --force

当指定输出路径已经存在时，强制覆盖路径

-k, --keep-files

保留编码分片过程中的中间文件

--encfiles-output-dir=<encfiles-output-dir>

转码文件的保存路径

-b BITRATES, --bitrates=BITRATES

视频码率，若同时转码为多个码率，则以逗号区分各个码率

-r RESOLUTIONS, --resolutions=RESOLUTIONS

视频分片，以宽x高的形式记录，若同时转码为多个分辨率，则以逗号区分各个分辨率

-c VIDEO_CODEC, --video-codec=VIDEO_CODEC

视频编码器，可选libx264（默认）或libx265

-a AUDIO_BITRATES, --audio-bitrates=AUDIO_BITRATES

音频码率，若同时转码为多个码率，则以逗号区分各个码率

--select-streams=SELECT_STREAMS

仅编码文件在选中的流

-s SEGMENT_SIZE, --segment-size=SEGMENT_SIZE

DASH内容的分片时长，以帧数为单位，默认为3*fps，即3秒

-e ENCODER_PARAMS, --encoder-params=ENCODER_PARAMS

其他自定义编码参数

-o <output-dir>, --output-dir=<output-dir>

DASH内容的保存路径

--mpd-name=<filename>

MPD文件名

--profiles=<profiles>

选择DASH profile

--init-segment=<filename>

初始化分片的名称

--no-split

是否要对媒体文件进行分片

--use-segment-list

使用SegmentList标识DASH内容

--use-segment-template-number-padding

使用递增数字的SegmentTemplate标识DASH内容

--use-segment-timeline

使用Segment Timeliness标识DASH内容

--min-buffer-time=<duration>

指定DASH内容的最小缓冲时间，以秒为单位

只需输入如下的示例命令，即可将媒体资源转化为DASH内容并且生成对应的MPD文件

[html]  view plain  copy
  1. dashencode.bat -v -d -f --encfiles-output-dir=dashencode -b 100,300 -a 64,128 -r 512x288,640x360 -s 60 -o dashtest --mpd-name=cuc_ieschool.mpd --use-segment-timeline cuc_ieschool.mp4  

实验性功能：

通过修改python脚本的源码，还可以在mpd中输出自定义内容，比如我们可以在编码分片的同时计算每一个分片文件的视频特性信息，也就是TI值和SI值，前者代表时间复杂度，利用帧差计算，后者代表空间复杂度，利用sobel滤波计算，具体来说，调用TIandSIprocmd工具完成计算。此时，数据处理流程如下


当选择输出segmentList的时候，就会同时记录TI和SI值，可以得到如下的mpd内容，可以看到在SegmentURL元素的属性中记录了TI和SI值。

[html]  view plain  copy
  1. <?xml version="1.0" ?>  
  2. <MPD mediaPresentationDuration="PT14.040S" minBufferTime="PT4.00S" profiles="urn:mpeg:dash:profile:isoff-live:2011" type="static" xmlns="urn:mpeg:dash:schema:mpd:2011">  
  3.   <!-- Created with Bento4 mp4-dash.py, VERSION=1.7.0-613 -->  
  4.   <Period>  
  5.     <!-- Video -->  
  6.     <AdaptationSet maxHeight="1080" maxWidth="1920" mimeType="video/mp4" minHeight="360" minWidth="640" segmentAlignment="true" startWithSAP="1">  
  7.       <Representation bandwidth="760472" codecs="avc1.42C01E" frameRate="25" height="360" id="video/1" scanType="progressive" width="640">  
  8.         <SegmentList duration="4000" timescale="1000">  
  9.           <Initialization sourceURL="video/1/init.mp4"/>  
  10.           <SegmentURL SI="62.66" TI="26.09" media="video/1/seg-1.m4s"/>  
  11.           <SegmentURL SI="78.02" TI="15.77" media="video/1/seg-2.m4s"/>  
  12.           <SegmentURL SI="66.68" TI="14.83" media="video/1/seg-3.m4s"/>  
  13.           <SegmentURL SI="72.02" TI="11.77" media="video/1/seg-4.m4s"/>  
  14.         </SegmentList>  
  15.       </Representation>  
  16.       <Representation bandwidth="1167336" codecs="avc1.42C01F" frameRate="25" height="720" id="video/2" scanType="progressive" width="1280">  
  17.         <SegmentList duration="4000" timescale="1000">  
  18.           <Initialization sourceURL="video/2/init.mp4"/>  
  19.           <SegmentURL SI="43.08" TI="26.05" media="video/2/seg-1.m4s"/>  
  20.           <SegmentURL SI="64.89" TI="16.14" media="video/2/seg-2.m4s"/>  
  21.           <SegmentURL SI="50.92" TI="15.09" media="video/2/seg-3.m4s"/>  
  22.           <SegmentURL SI="58.49" TI="11.98" media="video/2/seg-4.m4s"/>  
  23.         </SegmentList>  
  24.       </Representation>  
  25.       <Representation bandwidth="1683750" codecs="avc1.42C028" frameRate="25" height="1080" id="video/3" scanType="progressive" width="1920">  
  26.         <SegmentList duration="4000" timescale="1000">  
  27.           <Initialization sourceURL="video/3/init.mp4"/>  
  28.           <SegmentURL SI="32.57" TI="25.99" media="video/3/seg-1.m4s"/>  
  29.           <SegmentURL SI="54.54" TI="16.21" media="video/3/seg-2.m4s"/>  
  30.           <SegmentURL SI="40.21" TI="15.18" media="video/3/seg-3.m4s"/>  
  31.           <SegmentURL SI="48.33" TI="12.04" media="video/3/seg-4.m4s"/>  
  32.         </SegmentList>  
  33.       </Representation>  
  34.     </AdaptationSet>  
  35.     <!-- Audio -->  
  36.     <AdaptationSet mimeType="audio/mp4" segmentAlignment="true" startWithSAP="1">  
  37.       <Representation audioSamplingRate="48000" bandwidth="68943" codecs="mp4a.40.2" id="audio/und/mp4a/1">  
  38.         <AudioChannelConfiguration schemeIdUri="urn:mpeg:dash:23003:3:audio_channel_configuration:2011" value="2"/>  
  39.         <SegmentList duration="4000" timescale="1000">  
  40.           <Initialization sourceURL="audio/und/mp4a/1/init.mp4"/>  
  41.           <SegmentURL media="audio/und/mp4a/1/seg-1.m4s"/>  
  42.           <SegmentURL media="audio/und/mp4a/1/seg-2.m4s"/>  
  43.           <SegmentURL media="audio/und/mp4a/1/seg-3.m4s"/>  
  44.           <SegmentURL media="audio/und/mp4a/1/seg-4.m4s"/>  
  45.           <SegmentURL media="audio/und/mp4a/1/seg-5.m4s"/>  
  46.         </SegmentList>  
  47.       </Representation>  
  48.       <Representation audioSamplingRate="48000" bandwidth="134618" codecs="mp4a.40.2" id="audio/und/mp4a/2">  
  49.         <AudioChannelConfiguration schemeIdUri="urn:mpeg:dash:23003:3:audio_channel_configuration:2011" value="2"/>  
  50.         <SegmentList duration="4000" timescale="1000">  
  51.           <Initialization sourceURL="audio/und/mp4a/2/init.mp4"/>  
  52.           <SegmentURL media="audio/und/mp4a/2/seg-1.m4s"/>  
  53.           <SegmentURL media="audio/und/mp4a/2/seg-2.m4s"/>  
  54.           <SegmentURL media="audio/und/mp4a/2/seg-3.m4s"/>  
  55.           <SegmentURL media="audio/und/mp4a/2/seg-4.m4s"/>  
  56.           <SegmentURL media="audio/und/mp4a/2/seg-5.m4s"/>  
  57.         </SegmentList>  
  58.       </Representation>  
  59.     </AdaptationSet>  
  60.   </Period>  
  61. </MPD>  

目前默认在segmentLIst模式下会记录TI和SI值，如果想要关闭这一功能，修改mp4-dash.py文件即可。

+++++++++++++++++++++++++++

正如这个示例的名字所示，我是在DASHEncoder的基础上进行修改制作的这个示例，修改的内容包括：重新设计了结构，将编码、分片和MPD生成这三个步骤完全分离；编码工作全部使用ffmpeg完成，不再需要x264；生成的媒体分片内容根据属性组织存放在各自的文件夹中；暂时去掉了与数据库相关的功能；增加了一些文档，易于使用；修改了一些bug。经过测试，是可以使用的，当然也可能会有一些暂未发现的bug，希望大家提出，我计划持续维护这个项目。

源码下载地址在这里，会进行更新的github地址在这里。

更新：目前的dashencoder基于ffmpeg和gpac的mp4box工具，但就实际使用来看，mp4box生成的dash流有很多播放器不支持，例如vlc，在下一步的修改计划中，将改成利用bento4工具．

2、DASH website demo

在以上项目的基础上，我还制作了一个示例网站，利用这个网站可以实现bitcodin类似的功能，当然界面就没有那么绚丽了，基本的选择文件、上传文件、自动生成DASH内容、播放DASH内容的功能都包括了。在使用的时候需要将DASHEncoder2添加到系统环境变量中。这个网站是在我师哥的代码的基础上做的，原本是一个不支持DASH内容的视频网站示例。还是一样，如果有一些bug，希望大家提出，我同样计划持续维护这个项目。

源码下载在这里，会进行更新的github源码地址。

自适应流媒体传输（一）——DASH媒体内容的生成
张晖的专栏
01-02 3万+
DASH（Dynamic Adaptive Streaming over HTTP）即自适应流媒体传输，典型的系统框图如下 简单概括来说，就是在服务器端提前存好同一内容的不同码率、不同分辨率的多个分片以及相应的描述文件MPD，客户端在播放时即可以根据自身性能以及网络环境选择最适宜的版本。更多详细的内容可以参见MPEG组织出台的标准，标准号ISO/IEC 23009-1。 在这篇文章中主要说...
DASH切片介绍（Dynamic Adaptive Streaming over HTTP）（DASH协议：基于HTTP的自适应比特率流媒体传输协议）视频分段传输
Dontla的博客
01-01 2155
DASH (Dynamic Adaptive Streaming over HTTP) 是一个基于HTTP的自适应比特率流媒体传输协议。在这篇文章中，我们将详细讨论其工作原理、主要特点以及如何实现。
WebVTT 教程
最新发布
wscfan的博客
04-07 1074
WebVTT (Web Video Text Tracks) 是一种用于显示定时文本轨道的格式，主要用于在 HTML5 视频中添加字幕、标题和描述。它是 HTML5 <track> 元素的标准文本轨道格式，支持多语言字幕、样式设置以及其他高级功能。
DASH( Dynamic Adaptive Streaming over HTTP )协议
bingshanzhu的专栏
06-26 3080
DASH(Dynamic Adaptive Streaming over HTTP)是在2011年底由MPEG和ISO共同制定的标准，通过HTTP共同影音档案通讯协定，可使高品质影音内容通过网路传送到联网电视、机顶盒及移动终端设备。在MPEG-DASH之前，市场上已有Apple的HLS、Microsoft的Smooth Streaming以及Adobe的Dynamic Streaming等渐进式流...
浅谈HTTP Adaptive Streaming技术及其前景
csallen的专栏
08-14 2352
关键词：OTT  流媒体  HTTP Adaptive Streaming 本文已发表于《世界宽带网络》2011.6 第18卷第5期 总200期   HTTP Adaptive Streaming（以下简称“HAS”）技术结合了传统的流媒体技术和HTTP渐进式下载播放的特点，以HTTP的方式向用户传送媒体内容，该技术的采用可以大大提升用户的媒体播放体验，同时该技术降低了头端服务器的技术复杂度
Dynamic Adaptive Streaming over HTTP Dataset
北雨南萍
05-12 2567
Dynamic Adaptive Streaming over HTTP Dataset Stefan Lederer, Christopher Müller, and Christian Timmerer Alpen-Adria-Universit?t Klagenfurt Universit?tsstra?e 65-67 9020 Klagenfurt am W?rth
Dynamic adaptive streaming over HTTP standards and design principles
12-06
标题中提到的“Dynamic adaptive streaming over HTTP”，中文可以翻译为“基于HTTP的动态自适应流媒体”。这里的动态自适应流媒体（DASH）是一种通过HTTP协议来传输视频或音频流的技术。DASH允许流媒体在不同带宽...
Dynamic Adaptive Streaming over HTTP
07-07
首先，DASH标准定义了一个分层的数据模型，包括媒体呈现描述（Media Presentation Description, MPD）和实际的媒体流分段。MPD提供了关于视频流的元数据信息，例如视频的大小、时长、质量等。MPD的更新机制允许动态...
Dynamic-Adaptive-Streaming over HTTP_c057623_ISO_IEC_23009-1_2012
03-14
DASH标准文档ISO/IEC 23009-1详细描述了动态自适应流媒体传输（Dynamic Adaptive Streaming over HTTP，简称DASH）协议，这是一种基于HTTP协议的媒体流式传输技术。DASH允许视频内容以不同质量和格式的分段形式发送...
“为了满足不断增长的视频流量并提供流畅的流媒体视频体验，流媒体传输系统广泛采用HTTP自适应流媒体（HTTP Adaptive Streaming，简称HAS）的传输框架[5]。在这一框架下，动态图像专家组（Moving Picture Experts Group，简称MPEG）提出了基于HTTP的动态自适应传输标准（Dynamic Adaptive Streaming over HTTP，DASH），其中包括MPEG-DASH[6]和低时延版本的LL-DASH[7]。”换种说法
05-24
为了应对流媒体传输系统中不断增长的视频流量和提供更加流畅的流媒体视频体验，HTTP自适应流媒体（HTTP Adaptive Streaming）被广泛采用作为传输框架。这个框架下，动态图像专家组（Moving Picture Experts Group，...
HTTP动态自适应流媒体：3GP-DASH与MPEG-DASH的深度解析与发展前景
为此，MPEG-DASH和3GPP-DASH（3GP Dynamic Adaptive Streaming over HTTP）等HTTP自适应码流技术应运而生。 MPEG-DASH是由国际标准化组织MPEG制定的标准，旨在提供一个开放、灵活的平台，允许媒体内容提供商根据...
MPEG-DASH视频流传输Python仿真
04-04
MPEG-DASH仿真算法的python实现，容易读懂，科研仿真利器！
DASH 流媒体协议（Dynamic Adaptive Streaming over HTTP）概述——起源、MPD文件解析、相关项目
farewellyi的博客
10-18 5527
简单介绍DASH的起源与发展、MPD文件简要解析、相关项目，以及常见流媒体协议的比较
mpeg-DASH (Dynamic Adaptive Streaming over HTTP)
haima1998的专栏
07-24 2104
Dynamic Adaptive Streaming over HTTP (DASH), also known as MPEG-DASH, enables high quality streaming of media content over the Internet delivered from conventional HTTP web servers. Similar to Apple
HTTP Adaptive Streaming简介
小罗卜的博客
09-19 2900
HTTP Adaptive Streaming是指基于HTTP协议的自适应传输流技术。流媒体技术是为了解决音视频多媒体文件在普通非流式传输方案中文件必须下载完成之后才能播放的问题。为了实现边下载边播放的问题，即直播技术。 流式传输方式首先将音视频多媒体文件切分成若干个小块，然后服务器以小块为单位进行分发，客户端播放器只需要去请求下载资源，即能实现边下载边播放的流媒体传输方式。 目前主流的HTT...
DASH流
leek5533的博客
06-09 738
eg1: <?xml version="1.0" encoding="UTF-8" standalone="yes"?> <MPD id="f08e80da-bf1d-4e3d-8899-f0f6155f6efa" profiles="urn:mpeg:dash:profile:isoff-main:2011" type="static" availabilityStartTime="2015-08-04T09:33:14.000Z" publishTime="2015-08-04T10.
DASH Streaming Support
kevin_Android_123456的专栏
10-29 4390
DASH Streaming Support Posted on 1 February 2012 by Jean For lunch today DASH Basics: MPD and Segments ISO Base Media File Format MPEG-2 TS  Multiple Representations Osmo4 P
DASH MPD规范解析：HTTP动态自适应流媒体
"DASH MPD 规范是信息技术领域中关于动态自适应流媒体(Dynamic Adaptive Streaming over HTTP)的一部分，具体涉及媒体呈现描述和片段格式。该规范引用了ISO/IEC14496-12:2012(E)标准，即ISO基础媒体文件格式。" 在...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值