android udp传输h264,使用MediaCodec进行H264流式传输

我对MediaCodec或MediaExtractor一无所知,但我对MediaRecorder非常熟悉,并成功实现了基于SpyDroid的RTSP服务器,该服务器捕获MediaRecorder的H264 / AMRNB输出。 基本思想是代码创建一个本地套接字对,并使用MediaRecorder的setOutputFile将输出写入该对中的一个套接字。 然后,程序从另一个套接字读取video或音频流,将其解析为数据包,然后将每个数据包包装成一个或多个通过UDP发送的RTP数据包。

MediaRecorder确实在它完成后添加了MOOV标头,但如果您以RTP格式提供H264video,则不会出现问题。 基本上,video流的开头有一个“mdat”标题。 它的头部长度为4个字节,后跟4个字节“mdat”。 读取长度以找出标头的长度,validation它是mdat标头,然后跳过其余的标头数据。 从那里开始,您将获得一个NAL单元流,以单位长度的4个字节开头。 小型NAL单元可以在单个RTP数据包中发送,较大的单元可以分解为FU数据包。 对于RTSP,您还需要提供描述流的SDP标头。 SpyDroid通过将非常短的电影写入文件来计算SDP标头中的信息,然后读取此文件以从末尾提取MOOV标头。 我的应用程序总是使用相同的大小,格式和比特率,所以我只提供一个静态字符串:

public static final String SDP_STRING = "m=video 5006 RTP/AVP 96\n" + "b=RR:0\n" + "a=rtpmap:96 H264/90000\n" + "a=fmtp:96 packetization-mode=1;profile-level-id=428028;sprop-parameter-sets=Z0KAKJWgKA9E,aM48gA==;\n" + "a=control:trackID=0\n" + "m=audio 5004 RTP/AVP 96\n" + "b=AS:128\n" + "b=RR:0\n" + "a=rtpmap:96 AMR/8000\n" + "a=fmtp:96 octet-align=1;\n" + "a=control:trackID=1\n";

这是我的标题为640x480x10fps,H264video,具有8000/16/1 AMRNB音频。

有一点我可以警告你:如果你正在使用MediaRecorder,你的预览回调永远不会被调用。 这仅适用于相机模式,而不适用于录制video时。 在录制video时,我无法find任何以未压缩格式访问预览图像的方法。

我强烈建议查看SpyDroid的代码。 这需要一些挖掘,但我打赌你想要的东西已经存在。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值