OpenCore音视频同步分析

原创 2005年04月27日 13:24:00

    OpenCore作为Android系统的多媒体框架,在音视频编解码及播放功能上起着至关重要的作用。OpenCore的音视频同步相对来说比较简单。在播放引擎初始化的时候,会在ParserNode里创建一个时钟,这个时钟里有两个时间,一个是绝对时间,即系统时间,另一个是相对时间,即相对于播放起始点的时间。系统时间是一直在走的,而相对时间跟绝对时间的映射并不是一成不变的。比如说播放暂停时,相对时间不走了,而绝对时间还在走,这样当恢复播放的时候,二者之间的映射关系要重新设置。还有做Seek的时候也会发生变化。

    时钟是以音频的播放为起始点的,意思就是说,当音频解完一个数据包,通过解码Node和输出Node之间的Port将数据发送到输出Node,输出Node又写入AudioTrack的缓冲区时,时钟才开始启动,由于时钟的精度有限,累计一段时间会有误差,当误差累积到一个阈值时,时钟会校对一次,设置成音频的PTS。视频解完码之后会将视频的PTS同这个时钟的相对时间比较,如果比时钟小说明视频慢了,如果差值在50ms之内,输出Node还是会将视频数据发送到SurfaceOutput输出显示,如果大于50ms就丢弃视频数据。反过来,如果PTS大于时钟时间,说明视频提前了,要等一段时间才能播放,这时就启动一个定时器,等到与pts时间一致了才送去播放。

ffmpeg转码MPEG2-TS的音视频同步机制分析

一、FFmpeg忽略了adaptation_field()数据 FFmpeg忽略了包含PCR值的adaptation_filed数据; 代码(libavformat/mpegts.c)分析如下: ...

ffplay的音视频同步分析

在ffplay里的视频图像更新是在一个timer里面更新的,当有timer事件时就会调用video_refresh_timer()函数,而在这个函数里面会调用compute_frame_delay()...
  • eastlhu
  • eastlhu
  • 2013年07月20日 09:14
  • 851

ffplay的音视频同步分析

2013-03-06 16:45:42 分类: 嵌入式       以前工作中参与了一些音视频程序的开发,不过使用的都是芯片公司的SDK,没有研究到更深入一层,比如说音视频同步是怎么回事...

ffmpeg转码MPEG2-TS的音视频同步机制分析

一、FFmpeg忽略了adaptation_field()数据 FFmpeg忽略了包含PCR值的adaptation_filed数据; 代码(libavformat/mpegts.c)分析如下: ...

ffmpeg转码MPEG2-TS的音视频同步机制分析

一、FFmpeg忽略了adaptation_field()数据 FFmpeg忽略了包含PCR值的adaptation_filed数据; 代码(libavformat/mpegts.c)分析如下: ...

ffplay的音视频同步分析

以前工作中参与了一些音视频程序的开发,不过使用的都是芯片公司的SDK,没有研究到更深入一层,比如说音视频同步是怎么回事。只好自己抽点时间出来分析开源代码了,做音视频编解码的人都知道ffmpeg,他在各...

ffplay音视频同步分析(一)

先给出与同步有关的Clock的结构体,为了简化分析,我把Clock的一些字段删掉了,如有有兴趣可查看源码:typedef struct Clock { double pts; ...

WebRTC音视频同步机制实现分析

2016-11-25 dora WebRTC编风网 WebRTC编风网 来源:编风网 作者:weizhenwei,编风网专栏作家 音视频同步事关多媒体产品的最直观用户体验,是音视频媒体数据传输...
  • dj0379
  • dj0379
  • 2016年11月25日 14:32
  • 1212

ffmpeg转码MPEG2-TS的音视频同步机制分析

http://blog.chinaunix.net/uid-26000296-id-3483782.html   一、FFmpeg忽略了adaptation_field()数据 FFmpeg...

ffmpeg转码MPEG2-TS的音视频同步机制分析

一、FFmpeg忽略了adaptation_field()数据 FFmpeg忽略了包含PCR值的adaptation_filed数据; 代码(libavformat/mpegts.c)分析如下: ...
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:OpenCore音视频同步分析
举报原因:
原因补充:

(最多只允许输入30个字)