h264拆包方法

h264拆包方法

关于h264拆包： http://bbs.rosoo.net/archiver/tid-26.html

关于解析h264视频流： http://bbs.rosoo.net/archiver/tid-578.html

h264 RTP Payload 格式： http://bbs.rosoo.net/archiver/tid-23.html

可以通过生成SDP文件给播放器在指定端口接收数据播放,如果你不用动态调整编码器什么的就不用考虑另外发送RTCP. 
而且RTCP必须自己实现RTSP服务结合起来用,没有实现RTSP服务,就谈不上实现RTCP. 

具体H264字节流拆包和RTP封包方法如下: 

UINT MediaStreamH264::TransportData(PBYTE pData, UINT dataSize, int pts) { PBYTE p_buffer = pData; int i_buffer = dataSize; UINT writeSize = 0; while( i_buffer > 4 && ( p_buffer[0] != 0 || p_buffer[1] != 0 || p_buffer[2] != 1 ) ) { i_buffer--; p_buffer++; } /* Split nal units */ while( i_buffer > 4 ) { int i_offset; int i_size = i_buffer; int i_skip = i_buffer; /* search nal end */ for( i_offset = 4; i_offset+2 < i_buffer ; i_offset++) { if( p_buffer[i_offset] == 0 && p_buffer[i_offset+1] == 0 && p_buffer[i_offset+2] == 1 ) { /* we found another startcode */ i_size = i_offset - ( p_buffer[i_offset-1] == 0 ? 1 : 0); i_skip = i_offset; break; } } /* TODO add STAP-A to remove a lot of overhead with small slice/sei/... */ UINT iWrite = TransportH264Nal(p_buffer, i_size, pts, (i_size >= i_buffer) ); if (iWrite > 0 ) writeSize += iWrite; i_buffer -= i_skip; p_buffer += i_skip; } return writeSize; } UINT MediaStreamH264::TransportH264Nal(const PBYTE pNal, UINT nalSize, INT32 pts, BOOL isLast) { ATLock atlock(&m_tlockRun); if (m_bRun == FALSE) return 0; if( nalSize < 5 ) return 0; UINT mtu = m_nMTU; const int i_max = mtu - RTP_HEADER_SIZE; /* payload max in one packet */ int i_nal_hdr; int i_nal_type; i_nal_hdr = pNal[3]; i_nal_type = i_nal_hdr&0x1f; string sps; string pps; if( i_nal_type == 7 || i_nal_type == 8 ) { /* XXX Why do you want to remove them ? It will break streaming with * SPS/PPS change (broadcast) ? */ return 0; } /* Skip start code */ PBYTE p_data = pNal; int i_data = nalSize; p_data += 3; i_data -= 3; int writeSize = 0; if( i_data <= i_max ) { /* Single NAL unit packet */ //writeSize = m_pRtpTransport->SetRtpData(p_data, i_data, pts, isLast); writeSize = m_pRtpTransport->Write(p_data, i_data, m_nRtpPayloadType, pts, 0, isLast); if (writeSize <= 0) return 0; return writeSize; } else { /* FU-A Fragmentation Unit without interleaving */ const int i_count = ( i_data-1 + i_max-2 - 1 ) / (i_max-2); int i; p_data++; i_data--; for( i = 0; i < i_count; i++ ) { const int i_payload = (i_data < (i_max-2)) ? i_data : (i_max-2); const int nalSize = 2 + i_payload; m_Packet.ExtendBuffer(nalSize); /* FU indicator */ m_Packet.m_pData[0] = 0x00 | (i_nal_hdr & 0x60) | 28; /* FU header */ m_Packet.m_pData[1] = ( i == 0 ? 0x80 : 0x00 ) | ( (i == i_count-1) ? 0x40 : 0x00 ) | i_nal_type; /* FU payload */ memcpy( &m_Packet.m_pData[2], p_data, i_payload ); m_Packet.m_DataSize = nalSize; //int iWrite = m_pRtpTransport->SetRtpData(m_Packet.m_pData, m_Packet.m_DataSize, pts, isLast && (i == i_count-1)); int iWrite = m_pRtpTransport->Write(m_Packet.m_pData, m_Packet.m_DataSize, m_nRtpPayloadType, pts, 0, isLast && (i == i_count-1)); if (iWrite > 0) writeSize += iWrite; i_data -= i_payload; p_data += i_payload; } } return writeSize; }


如何把MPEG4(或H.264)的视频流拆分成一个个的RTP包?
MPEG-4和H.264拆分RTP包的方法原理基本上相同的，具体实现上还是有差别的，可以查看不同的RFC文档，H.264的是RFC3984。

 

一个rtp包的最大长度为多少,rtp包头信息怎么填,payload type等于多少?
一 个rtp包如果是经过UDP传输的原则上不要超过1460，

原因如下：RTP基于UDP之上的传输协议，而UDP属于运输层，我们知道以太网数据帧的长度 必须在46-1500字节之间，这是由以太网的物理特性决定的，这个1500字节被成为链路层的MTU(最大传输单元)，去除IP数据报的首部20字节和 UDP首部的8字节，所以UDP数据报的数据区最大长度为1472字节，考虑到RTP包头的12个字节，这样RTP载荷的最大尺寸为1460字节。

如果要 封装进RTP载荷的数据大于1460字节，而且不在应用层数据装载进RTP分组之前进行载荷的拆分，这样就会产生大于IP网络MTU的分组。

如此一来底层 的协议（IP）将会对这种大的分组进行拆分，分为几个小于IP MTU尺寸的IP分组。这样就无法检测数据是否丢失，

原因如下：IP和UDP协议都没有提供分组到达的检测，如果拆分后第一个分组成功接收，而后续分组丢 失。由于第一个分组中包含完整的RTP头信息，而RTP头中也没有关于RTP载荷长度的指示，因此不能判读该RTP分组是否有丢失，而只能认为是完成接收 了，这样就会造成解码时的错误信息。

rtp头的信息就按照RFC标准填写。

payload type因为没有定义，所以可以是96-127之间的任意值.

RTCP包要不要我来发送,如何发送,什么时候发送,发什么内容??
如果用jrtplib会自动发送RTCP包。