呵呵,我也是刚刚开始搞,今年整整学习了一个学期,现在的成果是:可以支持一对多的视频通话,在局域网下测试时,视频还是蛮清晰的,不过音视频同步这一块搞得有点头大,流媒体数据是以H264格式发送,使用的RTP协议,发送给服务器,服务器再转发给客户端,客户端使用FFMPEG解码,,将H264解码为YUV420P格式,最后转化为RGB565,再显示在Android的SurfaceView上,我现在可以一秒钟解码20帧,不过问题就是视频显示的有点慢,因为是直接绘图的,今天正式开始使用OpenGL直接在底层绘图,这样视频显示帧率应该至少能达到30 FPS,不过都是底层的,有点复杂。
建议
1.先简单学习一下NDK的开发,会写简单的Android.mk文件,然后要会移植FFMPEG,网上的很多教程都是基于NDK-r4的,有些老了,我的是使用NDK-r7的,编译好多次,最后成功了,我稍候会在博客上写下简单编译的过程,希望能对你有所帮助!
2.视频的话,建议直接看YUV420P,和RGB565,注意光YUV格式就有很多种,建议只看YUV420P,我稍候会在博客上写出来,这里有一篇博客http://blog.csdn.net/SearchSun/article/details/2443867,还有一个YUV的英文详述http://www.fourcc.org/yuv.php 建议先看看。
3.学习FFMPEG吧,看这里http://dranger.com/ffmpeg/tutorial01.html,注意,这个教程有点老,里面一些方法已经被替换了,我现在的FFMPEG都是8.0版本的了,建议你使用6.0。
4.音视频同步,这才是最难搞的一块,我也没有什么经验,现在没有做,用到时间戳概念,比较复杂,如果你有什么好办法,@一下我哈
5.视频的显示,我之前是解码出来的RGB 比特数组,直接在SurfaceView的OnDraw方法里面drawBitmap,但是效果非常差,一秒钟最多播放5帧,后来又使用Android的Hanler通知去刷新,最高也只能到13帧,很无奈,现在又准备移植SDL,还是依靠底层,使用OpenGL来渲染视频,学习中~