深入理解Android音视频同步机制（五）如何从零开始写一个音视频同步的播放器

最新推荐文章于 2024-08-13 08:14:20 发布
最新推荐文章于 2024-08-13 08:14:20 发布
阅读量1.1w 收藏 31
点赞数 6
分类专栏： 音视频进阶之路 文章标签： android 视频 多媒体播放器 音视频同步
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/nonmarking/article/details/78747369
版权
本文介绍如何从零开始构建一个音视频同步播放器，参考了cts中的MediaCodec示例，通过逐步改造实现了与ijkPlayer相近的avsync效果。通过分析不同步骤的改造，如音频延迟调整、时间戳的精确获取、基于vsync的优化等，揭示了avsync逻辑的关键点和优化策略。
摘要由CSDN通过智能技术生成

前面我们分析了三个播放器的av sync逻辑，可以看到他们都各有不同，那么究竟哪种方法可以达到最好的avsync结果？哪些逻辑是必要的？如果我们想自己从零开始写一个av同步的播放器，都需要做哪些工作？

了解本专栏 订阅专栏 解锁全文 超级会员免费看
zhanghui_cuc
关注
专栏目录
订阅专栏
深入理解Android音视频同步机制（一）概述
张晖的专栏
12-07 1万+
音视频同步，即avsync，是影响多媒体应用体验质量的一个重要因素。 本系列文章将从四个角度来深入研究Android平台上的音视频同步机制，以求为遇到音视频不同步问题的朋友提供一个思路：
android基于UDP局域网实现视频同步播放
08-19
android基于udp局域网实现视频同步播放
音视频同步原理及实现
KQe397773106的博客
02-23 1293
在介绍DTS/PTS之前，我们先了解I/P/B帧的概念。I/P/B帧本身和音视频同步关系不大，但理解其概念有助于我们了解DTS/PTS存在的意义。视频本质上是由一帧帧画面组成，但实际应用过程中，每一帧画面会进行压缩（编码）处理，已达到减少空间占用的目的。编码方式可以分为帧内编码和帧间编码。内编码方式：即只利用了单帧图像内的空间相关性，对冗余数据进行编码，达到压缩效果，而没有利用时间相关性，不使用运动补偿。所以单靠自己，便能完整解码出一帧画面。
Syncplay 安装与使用指南
最新发布
gitblog_00358的博客
08-13 912
Syncplay 安装与使用指南 syncplayClient/server to synchronize media playback on mpv/VLC/MPC-HC/MPC-BE on many computers项目地址:https://gitcode.com/gh_mirrors/sy/syncplay 1. 项目介绍 Syncplay 是一个开源软件，旨在同步多个媒体播放器，使远在...
android万能播放器,Android万能视频播放器05-音视频同步
weixin_29446109的博客
05-26 587
1、概念由于视频播放器中音频和视频是分别播放和渲染的，就会出现声音和画面不同步的现象。为了使同一时刻声音和画面的一致性，我们就需要音视频同步来实现，这就是音视频同步。2、播放时间2.1、音频播放时间音频播放的时长是PCM数据决定的，根据数据大小和采样率、通道数和位深度就能计算出播放的时长。只要采样率、通道数、位深度不变，扬声器播放同一段PCM数据的时间就是固定不变的。2.2、视频播放时间视频其实没...
音视频同步
wangbuji的博客
01-14 1820
视频：帧率，表示视频一秒显示的帧数。 音频：采样率，表示音频一秒播放的sample数。 声卡和显卡均是以一帧数据来作为播放单位，如果单纯依赖帧率及采样率来进行播放，在理想条件下，应该是同步的，不会出现偏差。 一个AAC音频frame每声道1024个sample，一帧播放时长duration=(1024/44100)×1000ms = 23.22ms；一个视频frame播放时长duration=1000ms/24 = 41.67ms。理想情况下，音视频完全同步，音视频播放过程如下图所示： ..
深入理解Android音视频同步机制（二）ExoPlayer的avsync逻辑
热门推荐
张晖的专栏
12-07 1万+
本文深入的介绍了ExoPlayer的avsync逻辑
深入理解Android音视频同步机制（四）MediaSync的使用与原理
张晖的专栏
12-07 1万+
MedaiSync是android M新加入的API，可以帮助应用视音频的同步播放，通过一个demo示例我们可以深入了解MediaSync的同步原理
深入理解Android音视频同步机制（三）NuPlayer的avsync逻辑
张晖的专栏
12-07 1万+
本文深入介绍了NuPlayer的avsync逻辑和原理
音视频同步方案
10-23
一般来说，视频同步指的是视频和音频同步，也就是说播放的声音要和当前显示的画面保持一致。想象以下，看一部电影的时候只看到人物嘴动没有声音传出；或者画面是激烈的战斗场景，而声音不是枪炮声却是人物说话的声音，这是非常差的一种体验。 在视频流和音频流中已包含了其以怎样的速度播放的相关数据，视频的帧率（Frame Rate）指示视频一秒显示的帧数（图像数）；音频的采样率（Sample Rate）表示音频一秒播放的样本（Sample）的个数。可以使用以上数据通过简单的计算得到其在某一Frame（Sample）的播放时间，以这样的速度音频和视频各自播放互不影响，在理想条件下，其应该是同步的，不会出现偏差。但，理想条件是什么大家都懂得。如果用上面那种简单的计算方式，慢慢的就会出现音视频不同步的情况。要不是视频播放快了，要么是音频播放快了，很难准确的同步。这就需要一种随着时间会线性增长的量，视频和音频的播放速度都以该量为标准，播放快了就减慢播放速度；播放快了就加快播放的速度。所以呢，视频和音频的同步实际上是一个动态的过程，同步是暂时的，不同步则是常态。以选择的播放速度量为标准，快的等待慢的，慢的则加快速度，是一个你等我赶的过程。
音视频同步算法
12-28
音视频同步算法, 使用pts同步 音频流、视频流 流程图
流媒体：音视频同步
uianster的博客
07-20 657
音频和视频都是单独以一条流的形式存在，互不干扰。
音视频同步技术
程序猿老樊的博客
01-31 986
1.什么是音视频同步？ 音视频同步顾名思义就是视频画面与音频能够对应起来，尤其是对于视频画面中能看到声源动作（如：嘴型）的场景，音视频同步问题非常影响体验。 在视频源采集端作为音视频的生产者，如果采集端产生的音视频源本身就无法保证同步，那么后面不管经过什么处理，都很难再让用户看到音视频同步的画面了，因此，在采集端保证音视频同步上尤其重要。 2.音视频同步原理 音视频采集的数据分别来自于麦克风与摄像头，而摄像头与麦克风其实是两个独立的硬件，而音...
六、音视频同步
forward
11-07 586
FFmpegAudio.h// // Created by ygdx_lk on 17/11/4. //#ifndef VIDEOPLAYER_FFMPEGAUDIO_H #define VIDEOPLAYER_FFMPEGAUDIO_H #include <queue> #include <jni.h> #include <unistd.h> #include <string> #include
音视频开发—音视频同步
irainsa的博客
04-25 841
严格地讲，基频和音调是两个不同的概念，基频是指声带振动的频率，音调是指人类对基频的主观感知，但是两者变化基本一致，即基频越高，音调越高，基频越低，音调越低，音调是由基频决定的。解码器中会缓存一定数量的帧，一个新的解码动作启动后，向解码器送入好几个 packet 后解码器才会输出第一个 packet，这比较容易理解，因为解码时帧之间有信赖关系，例如 IPB 三个帧被送入解码器后，B 帧解码需要依赖 I 帧和 P 帧，所以在 B 帧输出前，I 帧和 P 帧必须存在于解码器中而不能删除。B帧不可以作为参考帧。
评论 4
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

zhanghui_cuc

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值