Netty实战：深度解析分包处理与LengthFieldBasedFrameDecoder的运用

于 2024-07-19 08:44:15 发布
阅读量693 收藏 8
点赞数 4
CC 4.0 BY-SA版权
分类专栏： JAVA 文章标签： 经验分享 其他
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kiingking/article/details/140539129

在Netty中，分包（splitting packets）和粘包（sticking packets）问题是网络编程中常见的挑战，特别是在处理基于字节流的协议，如TCP，其中数据可能不会恰好按照消息边界进行传输。Netty通过其强大的编解码器来解决这些问题，特别是针对分包和粘包的处理。

分包原理

分包指的是一个完整的消息被拆分成多个数据包进行传输。这通常发生在数据量较大的情况下，或者是由于网络拥塞导致的数据包大小限制。

Netty中的分包处理

Netty提供了几种不同的编解码器来帮助处理分包问题：

  1. 基于固定长度的分包处理使用 FixedLengthFrameDecoder，这个解码器会根据固定的长度来切分数据包。这对于已知消息长度的情况非常有效，但不适用于长度可变的消息。
  2. 基于长度字段的分包处理使用 LengthFieldBasedFrameDecoder，这是一种更通用的解包方法，它通过查找消息中的长度字段来确定消息的实际长度，从而正确地分离出完整的消息。
int maxFrameLength = 1024;
int lengthFieldOffset = 0; // 假设长度字段位于消息的起始位置
int lengthFieldLength = 4; // 假设长度字段有4个字节
int lengthAdjustment = 0;
int initialBytesToStrip = 4; // 读取完长度字段后要跳过的字节数
boolean networkByteOrder = true;

ChannelPipeline pipeline = channel.pipeline();
pipeline.addLast("frameDecoder", new LengthFieldBasedFrameDecoder(
    maxFrameLength, lengthFieldOffset, lengthFieldLength,
    lengthAdju
最低0.47元/天 解锁文章

200万优质内容无限畅学
【Netty入门】解决TCP粘包/分包的实例
白夜行
06-13 4277
回顾TCP粘包/分包问题的解决方法1.消息定长2.在包尾都增加特殊字符进行分割3.将消息分为消息头和消息体针对这三种方法，下面我会分别举例验证FixedLengthFrameDecoder类对应第一种解决方法：消息定长（1）例1：服务端代码：public class Server4 { public static void main(String[] args) throws SigarEx
跟闪电侠学Netty：Netty即时聊天实战与底层原理-book-netty.zip
11-07
《跟闪电侠学Netty：Netty即时聊天实战与底层原理》是一本深入浅出的Netty技术指南，旨在帮助读者掌握Netty框架，并利用它实现即时聊天应用，同时理解其底层工作原理。Netty是Java领域的一款高性能、异步事件驱动的...
netty——LengthFieldBasedFrameDecoder实例（解决半包）
一念永恒
09-17 3949
1,使用LengthFieldPrepender编码，LengthFieldBasedFrameDecoder解码的netty传输 可以解决半包粘包 2 代码部分 tcpserver [java] view plain copy  print? package com.bimatrix.revit.nettyTest;      impo
netty 分包处理
shion1986_0514的专栏
05-16 876
public class PackageFrameDecoder extends ByteToMessageDecoder { @Override protected void decode(ChannelHandlerContext arg0, ByteBuf arg1, List<Object> arg2) throws Exception { int
LengthFieldBasedFrameDecoder 真实案例使用
joyu的专栏
11-23 652
LengthFieldBasedFrameDecoder 的真实使用案例。
netty 数据分包、组包、粘包处理机制
cluzax的专栏
07-09 8417
转载自 断鸿零雁 blog.163.com/linfenliang@126 1.            frame包整体功能描述 此包主要作用于对TCP/IP数据包的分包和包重组，常用于数据的流传输，是扩展的解码器。 包目录结构如下：     2.            包中各类功能详解 (1)  FrameDecoder 抽象类，将ChannelBuffers中的二进制数据转
netty分包的问题
wangbingqi的专栏
09-23 1567
使用netty做硬件设备通讯的服务端，有时候会出现一条数据被分成几个片段 解决办法：继承解码器ByteToMessageDecoder，覆盖decode方法，在decode方法中进行数据的验证和解析，验证通过后，decode方法参数List<Object> out，使用这个参数把解析的数据放进去，如何验证不通过，不做任何处理（也就是不放进out参数，netty会把下次接收的数据和这次的数据拼接，放进参数out中就会传递到Handler的ChannelInboundHandlerAdapter类
Netty 入门与实战：仿写微信 IM 即时通讯系统
06-26
在本文中，我们将深入探讨Netty框架，并通过实战项目——仿写微信IM即时通讯系统，来深入了解其在高性能网络应用中的应用。Netty是Java领域中一个高效的异步事件驱动的网络应用程序框架，它为快速开发可维护的高性能...
Netty 入门与实战：仿写微信 IM 即时通讯系统.pdf
06-12
### Netty 入门与实战：仿写微信 IM 即时通讯系统 #### 一、引言 随着移动互联网技术的飞速发展，即时通讯(IM)应用已成为人们日常生活中不可或缺的一部分。微信作为中国最成功的即时通讯软件之一，其背后的架构和...
Netty入门与实战：仿写微信IM即时通讯系统
01-12
6. **Pipeline与ChannelHandler的运用**：深入理解Netty的事件处理模型，合理配置处理链。 7. **心跳机制的设计**：确保长连接的有效性，防止连接断开导致的消息丢失。 #### 七、客户端程序逻辑结构 客户端程序...
netty 数据分包、组包、粘包处理机制(部分)1
08-04
netty 数据分包、组包、粘包处理机制(部分)1
netty-server中采用的分包拆包源码，java开发用于实战项目
02-27
@Component public class RabbitmqConfig { private final static String message = "web.socket.message"; private final static String messages = "send.socket.message"; @Bean public Queue queueMessage() { return new Queue(RabbitmqConfig.message); } @Bean public Queue queueMessages() { return new Queue(RabbitmqConfig.messages); } @Bean TopicExchange exchange() { return new TopicExchange("exchange"); } @Bean Binding bindingExchangeMessage(Queue queueMessage, TopicExchange exchange) { return BindingBuilder.bind(queueMessage).to(exchange).with("web.#"); } @Bean Binding bindingExchangeMessages(Queue queueMessages, TopicExchange exchange) { return BindingBuilder.bind(queueMessages).to(exchange).with("send.#"); } } ServerBootstrap bootstrap = new ServerBootstrap() .group(bossGroup, workGroup) .channel(NioServerSocketChannel.class) .childHandler(new ServerChannelInitializer()) .localAddress(socketAddress) //设置队列大小 .option(ChannelOption.SO_BACKLOG, 1024) // 两小时内没有数据的通信时,TCP会自动发送一个活动探测数据报文 .childOption(ChannelOption.SO_KEEPALIVE, true); //绑定端口,开始接收进来的连接 完整代码，下载有详细说明，使用于长报文通讯，将报文长度截取一定字节发送，便于网速传输中丢包
Netty粘包分包服务器端客户端完整例子
06-22
LineBaseFrameDecoder 换行符解码器 DelimiterBaseFrameDecoder 定界符解码器
netty 数据分包、组包、粘包处理机制（二）
weixin_33982670的博客
02-08 341
2019独角兽企业重金招聘Python工程师标准>>> ...
Netty解决粘包和分包问题
blwinner的专栏
02-27 2462
Netty提供的解码器 Netty提供的解码器的基类是ByteToMessageDecoder, netty默认提供的几个非常有用的解码器都是它的子类 FixedLengthFrameDecoder: 适用于业务包长度固定的情况, 比如TS流, 构造器传入每个业务包的固定长度值, 解码器接收到数据后, 会按照定长来划分业务包并包业务交给后续的处理器(如自定义的handler), 如果当前接收的数...
Netty如何解决粘包以及半包问题，以及目前最常用的LengthFieldBasedFrameDecoder
字节叔叔
02-01 1815
要自定义，你需要创建一个继承自该解码器的子类，并覆盖其中的方法，以满足你的特定需求。// 构造函数需要设置参数，这里假设我们使用的是大端字节序 public MyLengthFieldBasedFrameDecoder(int maxFrameLength , int lengthFieldOffset , int lengthFieldLength , int lengthAdjustment , int initialBytesToStrip) {
关于netty对于客户端不同定长包分包处理
Lmianhuatang的博客
05-03 1559
业务需求为一固定客户端发送固定包长为25的数据包，且只能注册发送一包，其他还有不同长度的包需要接收，且都来源于同一客户端方案一 （不可行）：使用netty的定长解码器进行粘包/分包处理，但如果长度定为25，那大于25的包必定会被分包。如果超过25，那注册第一包且只能发送一包的数据将会丢失。因为客户端协议已经定好，不好修改，所以采用最大定长，不够补0的方法也不方便。方案2（可行）：只能自己根据包的类...
Netty粘包分包分析
蹊源的奇思妙想的博客
07-07 1934
粘包分包分析 消息如何在管道中流通？ 一个管道中存在多个Handler(事件处理器)，消息在通道中通过Handler以事件的形式进行传递。 handler往下传递对象的方法是:sendUpstream(event) 粘包现象：两个数据包连在一起，导致无法区分。 分包现象：一个数据包中的数据被间隔。 粘包和分包出现的原因是：没有一个稳定数据结构。 FraneDecoder Netty借助继承f...
netty LengthFieldBasedFrameDecoder 根据动态长度分包粘包
qq690452074的专栏
06-03 420
netty LengthFieldBasedFrameDecoder 根据动态长度分包粘包
Netty在处理网络通信时如何解决粘包和分包问题？请结合实战案例进行说明。
最新发布
10-28
参考资源链接：[Java游戏服务器端开发全攻略：Netty、NIO、AIO与Mina深度讲解](https://wenku.csdn.net/doc/7oqc8izyur?utm_source=wenku_answer2doc_content) 粘包和分包是网络编程中经常遇到的问题，尤其是在基于TCP协议的网络通信中。Netty通过其设计的协议栈和编码器/解码器机制有效解决了这一问题。具体来说，Netty提供了LengthFieldBasedFrameDecoder解码器来解决粘包和分包的问题。 在实战案例中，比如开发一个聊天室应用，我们可能会遇到消息被拆分或者多个消息合并为一条消息的情况。使用LengthFieldBasedFrameDecoder可以按照自定义的消息长度字段来解析数据包，从而区分不同消息的边界。假设我们在消息的开始定义一个4字节的长度字段，我们可以这样配置Netty的ChannelInitializer： ```java @Override protected void initChannel(SocketChannel ch) throws Exception { ChannelPipeline pipeline = ch.pipeline(); // 添加解码器，参数依次为：长度字段的偏移量、长度字段所占的字节数、长度字段后是否还有其他数据 pipeline.addLast(new LengthFieldBasedFrameDecoder(Integer.MAX_VALUE, 0, 4, 0, 4)); // 添加自定义的协议解码器 pipeline.addLast(new MyProtocolDecoder()); // 添加业务处理的Handler pipeline.addLast(new ChatRoomServerHandler()); } ``` 在上面的代码中，LengthFieldBasedFrameDecoder负责按照消息长度字段来拆分消息。接着我们定义了MyProtocolDecoder作为自定义协议的解码器，来处理粘包和分包后的消息。这样，我们的聊天室服务端就能正确地处理每个用户的独立消息了。 掌握了Netty如何处理粘包和分包问题之后，你将能够构建更加稳定和高效的网络通信应用。为了进一步深入学习Netty的高级应用，建议查看视频教程《Java游戏服务器端开发全攻略：Netty、NIO、AIO与Mina深度讲解》，该教程详细介绍了Netty以及NIO和AIO在Java中的应用，包括实战案例和项目构建，帮助你全面了解并应用这些网络编程技术。 参考资源链接：[Java游戏服务器端开发全攻略：Netty、NIO、AIO与Mina深度讲解](https://wenku.csdn.net/doc/7oqc8izyur?utm_source=wenku_answer2doc_content)
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值