Android音视频开发之音视频基础知识

Android音视频开发之音视频基础知识

一.多媒体播放组件
Android多媒体播放组件包含MediaPlayer，MediaCodec, OMX, StageFright, AudioTrack等。
1.MediaPlayer
播放控制
2.MediaCodec
音视频编解码
3.OMX
多媒体部分采用的编解码标准
4.StageFright
一个框架，替代之前的OpenCore，主要做了一个OMX层，对OpenCore的omx-component部分做了引用。
5.AudioTrack
音频播放

二.常见的多媒体框架及解决方案
1.VLC:
即Video LAN Client 是一款自由，开源的跨平台多媒体播放器及框架。
2.FFmpeg
多媒体解决方案，不是多媒体框架，广泛用于音视频开发中。
3.Gstreamer
一套构建流媒体应用的开源多媒体框架。

三.相关知识点
1.帧率
每秒显示的帧数表示图形处理器处理场时每秒能够更新的次数，60fps可以明显提升交互感，但是超过75fps就不容易察觉到明显流畅度的提升了。如果帧率超过屏幕刷新率，则只会浪费图像处理能力。
2.刷新率
屏幕每秒画面被刷新的次数。一般指垂直刷新率，表示屏幕上图像每秒重绘多少次。刷新率越高，图像显示越稳定，图像显示也就越自然清晰。如能达到80hz以上的刷新率，可以完全消除图像闪烁和抖动感。
3.DTS
Decode Time Stamp:主要用于标示读入内存中的比特流在什么时候开始送入解码器中进行解码。
4.PTS
Presentation Time Stamp:主要用于度量解码后的视频帧什么时候被显示出来。