推流上层ui示意图

 

 

 

-----------------------------------------------------------

android手机通过camera类拍摄视频，把拍摄的视频通过h264编码，可以采用软编码（使用x264库或者opencore软件 库），java类通过jni调用编译后的so文件来实现。然后通过基于udp的rtp协议传输到服务器。为什么不使用tcp协议呢，因为tcp的重传机制 会产生延时和抖动，而单独使用udp传输协议本身是面向无连接的，不能提供质量保证，需要在udp协议只上采用rtp或者rtcp提供流量控制和拥塞控制 服务。服务器通过ffmpeg对接收的h264解码并播放。播放可以使用VLC media player。如果对c++比较熟悉，可以看看live555这个开源项目。

缺点：需要懂得的知识很多，jni啊，h264编码解码 ，rtp协议等。使用软编码，效率比较低，耗cpu耗电啊。

 

5.android手机通过mediaRecorder类拍摄视频，其中当然包括音频了。把拍摄的视频通过h264编码，可以采用硬编码（面向手机的硬件直接操作），只能针对3gp，mp4视频格式。方法参考  http://blog.csdn.net/zblue78/article/details/6078040

这篇博客，里面讲的很详细，提取h264的sps，pps，可以参考      http://blog.csdn.net/peijiangping1989/article/details/6934317     

winHex是一款好用的16进制查看工具，下载地址           http://download.csdn.net/detail/xiaoliouc/4928773

 

代码网上有很多，个人理解是：mediaRecorder录制视频（3gp，MP4），可以通过 mMediaRecorder.setPreviewDisplay(mSurfaceHolder.getSurface());预览视频，通过 localsocket发送到本地的localserversocket的h264实时视频流。

这个过程涉及到硬编码，硬编码个人理解是，在预览过程或者提前确定视频的sps，pps，head（一般为0x00000001），不同的手机硬件 不一样。把得到的这些参数写入h264，得到正确的h264视频流文件，然后把流通过rtp协议（或者其他）发送到服务器。服务器端对得到的h264用 ffmepg解码，播放