1. 模块分割
首先对这个视频播放器所采用的一些部件要清楚。这个播放器主要可以拆分为4个部分:
1.解码:FFmpeg
2.音频输出:OpenSLES
3.视频渲染:OpenGLES
这些框架都是基于C的api,因此这次我们的主要工作将会集中在NDK部分。而关于NDK的一些知识,之前的博客也有讲过,所以这个工程会是对之前知识的一次综合运用。
按照视频播放器的功能,我们将分出以下几个模块:
- 图像显示
- 音频输出
- 解码
- 播放控制
- 音视频同步
为了提高可移植性,对关键部件使用接口来规范其API接口。
1. IAudioPlayer:音频播放器接口。它规定的接口如下
class IAudioPlayer {
public:
virtual bool create() = 0;
virtual void release() = 0;
virtual void start() = 0;
virtual void stop() = 0;
virtual bool isPlaying() = 0;
virtual void setAudioFrameProvider(IAudioFrameProvider *provider) = 0;
virtual void removeAudioFrameProvider(IAudioFrameProvider *provider) = 0;
};
2. IVideoPlayer:视频播放接口。
class IVideoPlayer {
public:
virtual bool create() = 0;
virtual void release() = 0;
virtual void refresh() = 0;
virtual void setVideoFrameProvider(IVideoFrameProvider *provider) = 0;
virtual void removeVideoFrameProvider(IVideoFrameProvider *provider) = 0;
virtual void setWindow(void *window) = 0;
virtual void setSize(int32_t width, int32_t height) = 0;
virtual bool isReady() = 0;
};
3. AudioFrame:存储解码好的音频数据。
对于播放器内部,播放的音频数据格式为16位PCM,44.1kHz采样率,双声道。为了避免每一段音频数据都要重新申请内存,我们将会复用AudioFrame,因此要给它设置一个最大音频数据存储空间。
struct AudioFrame{
// present time stamp
int64_t pts;
int16_t *data;
int32_t sampleCount;
int32_t maxDataSizeInByte = 0;
AudioFrame(int32_t dataLenInByte)
{
this->maxDataSizeInByt