网络通信编程----Netty核心技术之(TCP拆包和粘包问题)

熟悉tcp编程的可能都知道,无论是服务器端还是客户端,当我们读取或者发送数据的时候,都需要考虑TCP底层的粘包/拆包机制。

TCP是一一个“流”协议,所谓流就是没有界限的遗传数据。大家可以想象下如果河里的水就好比数据,他们是连成一片的,没有分界线,TCP底层并不.了解.上层的业务数据具体的含义,它会根据TCP缓冲区的实际情况进行包的划分,也就是说,在业务上,我们一个完整的包可能会被TCP分成多个包进行发送,也可能把多个小包封装成-一个大的数据包发送出去, 这就是所谓的TCP粘包、拆包问题

分析TCP粘包、拆包问题的产生原因:

1应用程序write写入的字节大小大于套接口发送缓冲区的大小

2进行MSS大小的TCP分段

3以太网帧的payload大于MTU进行IP分片

ChannelHandlerContext.writeAndFlush();之后分辨不出个数

粘包拆包问题的解决方案,根据业界主流协议,的有三种方案:

1消息定长,例如每个报文的大小固定为200个字节,如果不够,空位补空格;

2在包尾部增加特殊字符进行分割,例如加回车等(在实际工作中相对简单方便)

3讲消息分为消息头和消息体,在消息头中包含表示消息总长度的字段,然后进行业务逻辑的处理

1分隔符类DelimiterBasudFrameDecoder (自定义分隔符)

Server端

 Server响应

 Client端

Client端相应

通道激活(可处理一些业务)

 直接输出服务端响应

2 FixedLengthFrameDecoder (定长)

server

 serverHandle

 Client端

 Clienthandler

定长如果发送的长度不够可能会出现丢数据的情况(长度不够会丢数据,例如定长是5,如果最后的长度是2,最后的两个内容会丢失)建议长度长些可以补位

3自定义协议 

将消息分为消息头和消息体,在消息头中包含表示消息总长度的字段,然后进行业务逻辑的处理(类似http请求)

4  Netty核心技术(编解码技术)

编解码技术,说白了就是java序列化技术,序列化目的就两个,第一进行网络传输,第二对象持久化。

虽然我们可以使用java进行对象序列化,netty去传输,但是java序列化的硬伤太多,比如java序列化没法跨语言、序列化后码流太大、序列化性能太低等等..

主流的编解码框架:

JBossMarshalling

googleProtobuf

基于ProtobufKyro

MessagePack框架

JBoss Marshalling

Jboss Marshalling是一个java对象序列化包,对JDK默认的序列化框架进行了优化,但又保持跟java.io.Serializable接口的兼容,同是增加了一些可调的参数和附加特性,

类库:jboss-marshalling-1.3.0、jboss-marshalling-serial-1.3.0

下载地址:https:/lwww.jboss.orgljbossmarshallingldownloads

Jboss Marshalling与Netty结合后进行序列化对象

Client

 Server

 MarshallingCodeCFactory

GzipUtil是Java提供的压缩文件的工具类

压缩

 解压缩

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
Netty中的TCP包和问题是由于底层的TCP协议无法理解上层的业务数据而导致的。为了解决这个问题,Netty提供了几种解决方案。其中,常用的解决方案有四种[1]: 1. 固定长度的器(FixedLengthFrameDecoder):将每个应用层数据分成固定长度的大小。这种器适用于应用层数据长度固定的情况。 2. 行器(LineBasedFrameDecoder):将每个应用层数据以换行符作为分隔符进行分割分。这种器适用于应用层数据以换行符作为结束符的情况。 3. 分隔符器(DelimiterBasedFrameDecoder):将每个应用层数据通过自定义的分隔符进行分割分。这种器适用于应用层数据以特定分隔符作为结束标志的情况。 4. 基于数据长度的器(LengthFieldBasedFrameDecoder):将应用层数据的长度作为接收端应用层数据分依据。根据应用层协议中含的数据长度进行。这种器适用于应用层协议中含数据长度的情况。 除了使用这些器,还可以根据业界主流协议的解决方案来解决包和问题[3]: 1. 消息长度固定:累计读取到长度和为定长LEN的报文后,就认为读取到了一个完整的信息。 2. 使用特殊的分隔符:将换行符或其他特殊的分隔符作为消息的结束标志。 3. 在消息头中定义长度字段:通过在消息头中定义长度字段来标识消息的总长度。 综上所述,Netty提供了多种解决方案来解决TCP包和问题,可以根据具体的业务需求选择合适的解决方案[1][3]。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

JAVA代码搬运工

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值