播放器音视频同步及网络抖动解决方案

直接上代码看注释吧可能理解的更深刻一点：

音视频同步有三种，视频同步音频，音频同步视频，音视频同步到其他时钟，本文介绍视频同步音频，其他方式不适用。项目采用openal做音频渲染，sdl同理，opengl做视频渲染。

//具体算法方案请看注释

[cpp] view plain copy

1. //得到当前音频从包里拿出的pts减去第一帧pts所得时间再减去openal缓存的时间。//解决网络抖动问题  
2. long long m_audio_real_pts = (m_audio_list_node_pts - m_first_audio_pts) - lvs_openal_getnumqueuedsize_realpts();  
3.   
4. int delay = 0;  
5. int diff = 0;;  
6. //算出一帧视频本应该显示的时间  
7. delay = 40;  
8. // update delay to sync to audio   
9. long long video_real_pts = yuv_data_node.pts - m_first_video_pts;  
10.   
11. printf("yuv_data_node.ActualLen : %lld video_real_pts :%lld\n",yuv_data_node.ActualLen,video_real_pts);  
12.   
13. //音频过快大于200毫秒 并且有音频存在的情况下 ,以及音频队列或缓存不为传输中间空     //解决网络抖动问题  
14. if (m_audio_real_pts - video_real_pts > 200 && m_isfind_first_audio_pts == 1 &&   
15.     (m_list_Raw_data_pcm.size() != 0 || lvs_openal_getnumqueuedsize() != 0 ))  
16. {  
17.     m_timer_realtime_video = 1;  
18. }  
19. //视频过快大于200毫秒 并且有音频存在的情况下,以及音频队列或缓存不为传输中间空      //解决网络抖动问题  
20. else if (video_real_pts - m_audio_real_pts > 200 && m_isfind_first_audio_pts ==1 &&  
21. (m_list_Raw_data_pcm.size() != 0 || lvs_openal_getnumqueuedsize() != 0 ))  
22. {  
23.     m_timer_realtime_video = delay* 5; //如果 视频显示过快 则停留 5帧的时间  
24. }  
25. else  
26. {  
27.     diff = video_real_pts - m_audio_openal_pts;   
28.   
29.     if(abs(diff) < AV_NOSYNC_THRESHOLD) //求浮点数x的绝对值  
30.     {  
31.         if(diff <= -delay)   
32.         {  
33.             delay = 10;       //如果 视频显示过慢，离音频 过于远 则 显示时间为10ms  
34.         }   
35.         else if(diff >= delay)  
36.         {  
37.             delay = 2 * delay;  //如果 视频显示过快 则停留 两帧的时间  
38.         }  
39.     }  
40.     m_timer_realtime_video = delay;  
41. }  

//变量名称

[cpp] view plain copy

1. static int m_timer_realtime_video ;            //每一次回调渲染数据定时器时间，可根据时间戳变化，毫秒  
2. static long long m_audio_list_node_pts;                //当前从pcm的list中取出的时间最新  //解决网络抖动问题  
3. static long long m_audio_openal_pts;                   //音频当前正在播放时间戳          //解决网络抖动问题  
4. //存放解码后yuv数据的list  
5. static list<Raw_data_yuv> m_list_Raw_data_yuv;  
6. //存放解码后pcm数据的list  
7. static list<Raw_data_pcm> m_list_Raw_data_pcm;  

//实现效果