从 IP 传过来的 IP包对于以太网来说就是数据。给这些数据附加上以太网首部并进行发送处理,生成的以太网数据包将通过物理层传输给接收端。
经过层层转发后,服务器就会收到我们的请求报文,经过4-3-2-1的顺序将网络上传递的数据包再变成我们服务端程序可以处理的数据,整个过程如图所示:
但是在实际发送时有可能发生所谓的粘包和半包这种现象,比如:
假设客户端分别发送了两个数据包D1和D2给服务端,可能存在以下4种情况。
(1)服务端分两次读取到了两个独立的数据包,分别是D1和D2,没有粘包和半包;
(2)服务端一次接收到了两个数据包,D1和D2粘合在一起,被称为TCP粘包;
(3)服务端分两次读取到了两个数据包,第一次读取到了完整的D1包和D2包的部分内容,第二次读取到了D2包的剩余内容,这被称为TCP半包;
(4)服务端分两次读取到了两个数据包,第一次读取到了D1包的部分内容D1_1,第二次读取到了D1包的剩余内容D1_2和D2包的整包,这样同时存在着TCP粘包和TCP半包。
TCP粘包半包产生的原因
从前面的描述我们知道,TCP/IP每一层都有自己的分包格式和大小,每一层都存在着将上一层发给自己的报文按本层格式进行拆分的可能。
所以,细分起来,原因包括:
1、进行MSS大小的TCP分段。MSS是最大报文段长度的缩写,它是TCP报文段中的数据字段的最大长度。数据字段加上TCP首部才等于整个的TCP报文段。
2、如果IP层有一个数据包要传,而且数据的长度比链路层的大,那么IP层就会进行分片,把数据包分成若干片,以方便链路层进行传输。注意,分片可以发生在原始发送端主机上,也可以发生在中间路由器上。
当然,如果应用程序写入数据的字节大小大于套接字发送缓冲区的大小,也会产生所谓的分包现象。
而且从实际使用的TCP/IP实现来说,为了提高网络传输的效率,还存在着将多个较小的数据包进行合并然后再发送的情况。于是在这种情况下就会产生所谓的粘包。
解决粘包半包问题
由于底层的TCP无法理解上层的业务数据,所以在底层是无法保证数据包不被拆分和重组的,这个问题只能通过上层的应用协议栈设计来解决,根据业界的主流协议的解决方案,可以归纳如下。
(1)在包尾增加分割符,比如回车换行符进行分割;
(2)消息定长,例如每个报文的大小为固定长度200字节,如果不够,空位补空格;
(3)将消息分为消息头和消息体,消息头中包含表示消息总长度(或者消息体长度)的字段,通常设计思路为消息头的第一个字段使用int32来表示消息的总长度。
如果我们自己使用JDK的原生网络通信API进行网络程序的编写,则这些问题全部需要我们自行处理,而如果我们使用Netty进行网络程序的编写,作为优秀而成熟的网络通信框架,Netty已经为我们提供了很多网络通信方面的组件来解决我们在网络通信上所遇到的问题,比如我们上面所说的粘包半包。
在包尾增加分割符的方式,Netty为我们提供了LineBasedFrameDecoder,以回车换行符进行分割,保证数据的完整性,如果想要自定义分割符,可以使用DelimiterBasedFrameDecoder。
定长类的消息发送,可以使用Netty为我们提供的FixedLengthFrameDecoder。如果是不定长的消息,那么就可以使用LengthFileldBasedFrameDecoder,通过在消息中增加一个消息的长度字段,来告诉Netty如何从网络数据中正确的拆分完整的数据消息。
现在都说互联网寒冬,其实只要自身技术能力够强,咱们就不怕!我这边专门针对Android开发工程师整理了一套【Android进阶学习视频】、【全套Android面试秘籍】、【Android知识点PDF】。如有需要获取资料文档的朋友,可以点击我的GitHub免费获取!
小福利:
在当下这个碎片化信息环境的时代,很多资源都可以在网络上找到,只取决于你愿不愿意找或是找的方法对不对了
很多朋友不是没有资料,大多都是有几十上百个G,但是杂乱无章,不知道怎么看从哪看起,甚至是看后就忘
如果大家觉得自己在网上找的资料非常杂乱、不成体系的话,我也分享一套给大家,比较系统,我平常自己也会经常研读。
2021大厂最新Android面试真题解析
各个模块学习视频:如数据结构与算法
只有系统,有方向的学习,才能在段时间内迅速提高自己的技术。
这份体系学习笔记,适应人群:**第一,**学习知识比较碎片化,没有合理的学习路线与进阶方向。**第二,**开发几年,不知道如何进阶更进一步,比较迷茫。第三,到了合适的年纪,后续不知道该如何发展,转型管理,还是加强技术研究。如果你有需要,我这里恰好有为什么,不来领取!说不定能改变你现在的状态呢!点赞+评论即可获得!
《Android学习笔记总结+移动架构视频+大厂面试真题+项目实战源码》,点击传送门,即可获取!
频+大厂面试真题+项目实战源码》,点击传送门,即可获取!**