一文了解 Netty 整体流程

最新推荐文章于 2024-07-29 09:50:27 发布
最新推荐文章于 2024-07-29 09:50:27 发布
阅读量88 收藏
点赞数
文章标签： 中间件 netty epoll rpc 微软
原文链接：http://www.iocoder.cn/zhishixingqiu/?vip\x26amp;amp;mp
版权

点击上方“芋道源码”，选择“设为星标”

管她前浪，还是后浪？

能浪的浪，才是好浪！

每天 8:55 更新文章，每天掉亿点点头发...

源码精品专栏

 

来源：fredal.xin/netty-process

本文基于版本 4.1.46，同时只描述类而不展示具体源码。

Netty 的整体流程

Netty 的整体流程相对来说还是比较复杂的，初学者往往会被绕晕。所以这里总结了一下整体的流程，从而对 Netty 的整体服务流程有一个大致的了解。从功能上，流程可以分为服务启动、建立连接、读取数据、业务处理、发送数据、关闭连接以及关闭服务。整体流程如下所示(图中没有包含关闭的部分)：

图片

服务启动

服务启动时，我们以 example 代码中的 EchoServer 为例，启动的过程以及相应的源码类如下：

  1. EchoServer#new NioEventLoopGroup(1)->NioEventLoop#provider.openSelector() : 创建 selector

  2. EchoServer#b.bind(PORT).sync->AbstractBootStrap#doBind()->initAndRegister()-> channelFactory.newChannel() / init(channel) : 创建 serverSocketChannel 以及初始化

  3. EchoServer#b.bind(PORT).sync->AbstractBootStrap#doBind()->initAndRegister()-> config().group().register(channel) ：从 boss group 中选择一个 NioEventLoop 开始注册 serverSocketChannel

  4. EchoServer#b.bind(PORT).sync->AbstractBootStrap#doBind()->initAndRegister()->config().group().register(channel)->AbstractChannel#register0(promise)->AbstractNioChannel#javaChannel().register(eventLoop().unwrappedSelector(), 0, this) : 将 server socket channel 注册到选择的 NioEventLoop 的 selector

  5. EchoServer#b.bind(PORT).sync()->AbstractBootStrap#doBind()->doBind0()->AbstractChannel#doBind(localAddress)->NioServerSocketChannel#javaChannel().bind(localAddress, config.getBacklog()) : 绑定地址端口开始启动

  6. EchoServer#b.bind(PORT).sync()->AbstractBootStrap#doBind()->doBind0()->AbstractChannel#pipeline.fireChannelActive()->AbstractNioChannel#selectionKey.interestOps(interestOps|readInterestOp): 注册 OP_READ 事件

上述启动流程中，1、2、3 是由我们自己的线程执行的，即 mainThread，4、5、6 是由 Boss Thread 执行。相应时序图如下：

图片

建立连接

服务启动后便是建立连接的过程了，相应过程及源码类如下：

  1. NioEventLoop#run()->processSelectedKey() NioEventLoop 中的 selector 轮询创建连接事件（OP_ACCEPT）

  2. NioEventLoop#run()->processSelectedKey()->AbstractNioMessageChannel#read->NioServerSocketChannel#doReadMessages()->SocketUtil#accept(serverSocketChannel) 创建 socket channel

  3. NioEventLoop#run()->processSelectedKey()->AbstractNioMessageChannel#fireChannelRead->ServerBootstrap#ServerBootstrapAcceptor#channelRead-> childGroup.register(child) 从worker group 中选择一个 NioEventLoop 开始注册 socket channel

  4. NioEventLoop#run()->processSelectedKey()->AbstractNioMessageChannel#fireChannelRead->ServerBootstrap#ServerBootstrapAcceptor#channelRead-> childGroup.register(child)->AbstractChannel#register0(promise)-> AbstractNioChannel#javaChannel().register(eventLoop().unwrappedSelector(), 0, this) 将 socket channel 注册到选择的 NioEventLoop 的 selector

  5. NioEventLoop#run()->processSelectedKey()->AbstractNioMessageChannel#fireChannelRead->ServerBootstrap#ServerBootstrapAcceptor#channelRead-> childGroup.register(child)->AbstractChannel#pipeline.fireChannelActive()-> AbstractNioChannel#selectionKey.interestOps(interestOps | readInterestOp) 注册 OP_ACCEPT 事件

同样，上述流程中 1、2、3 的执行仍由 Boss Thread 执行，直到 4、5 由具体的 Work Thread 执行。

读写与业务处理

连接建立完毕后是具体的读写，以及业务处理逻辑。以 EchoServerHandler 为例，读取数据后会将数据传播出去供业务逻辑处理，此时的 EchoServerHandler 代表我们的业务逻辑，而它的实现也非常简单，就是直接将数据写回去。我们将这块看成一个整条，流程如下：

  1. NioEventLoop#run()->processSelectedKey() NioEventLoop 中的 selector 轮询创建读取事件（OP_READ）

  2. NioEventLoop#run()->processSelectedKey()->AbstractNioByteChannel#read() nioSocketChannel 开始读取数据

  3. NioEventLoop#run()->processSelectedKey()->AbstractNioByteChannel#read()->pipeline.fireChannelRead(byteBuf)把读取到的数据传播出去供业务处理

  4. AbstractNioByteChannel#pipeline.fireChannelRead->EchoServerHandler#channelRead在这个例子中即 EchoServerHandler 的执行

  5. EchoServerHandler#write->ChannelOutboundBuffer#addMessage 调用 write 方法

  6. EchoServerHandler#flush->ChannelOutboundBuffer#addFlush 调用 flush 准备数据

  7. EchoServerHandler#flush->NioSocketChannel#doWrite 调用 flush 发送数据

在这个过程中读写数据都是由 Work Thread 执行的，但是业务处理可以由我们自定义的线程池来处理，并且一般我们也是这么做的，默认没有指定线程的情况下仍然由 Work Thread 代为处理。

关闭连接

服务处理完毕后，单个连接的关闭是什么样的呢？

  1. NioEventLoop#run()->processSelectedKey() NioEventLoop 中的 selector 轮询创建读取事件（OP_READ)，这里关闭连接仍然是读取事件

  2. NioEventLoop#run()->processSelectedKey()->AbstractNioByteChannel#read()->closeOnRead(pipeline)当字节<0 时开始执行关闭 nioSocketChannel

  3. NioEventLoop#run()->processSelectedKey()->AbstractNioByteChannel#read()->closeOnRead(pipeline)->AbstractChannel#close->AbstractNioChannel#doClose() 关闭 socketChannel

  4. NioEventLoop#run()->processSelectedKey()->AbstractNioByteChannel#read()->closeOnRead(pipeline)->AbstractChannel#close->outboundBuffer.failFlushed/close 清理消息：不接受新信息，fail 掉所有 queue 中消息

  5. NioEventLoop#run()->processSelectedKey()->AbstractNioByteChannel#read()->closeOnRead(pipeline)->AbstractChannel#close->fireChannelInactiveAndDeregister->AbstractNioChannel#doDeregister eventLoop().cancel(selectionKey()) 关闭多路复用器的 key

时序图如下：

图片

关闭服务

最后是关闭整个 Netty 服务：

  1. NioEventLoop#run->closeAll()->selectionKey.cancel/channel.close 关闭 channel，取消 selectionKey

  2. NioEventLoop#run->confirmShutdown->cancelScheduledTasks 取消定时任务

  3. NioEventLoop#cleanup->selector.close() 关闭 selector

时序图如下，为了好画将 NioEventLoop 拆成了 2 块：

图片

至此，整个 Netty 的服务流程就结束了。

- END -

欢迎加入我的知识星球，一起探讨架构，交流源码。加入方式，长按下方二维码噢：

已在知识星球更新源码解析如下：

最近更新《芋道 SpringBoot 2.X 入门》系列，已经 20 余篇，覆盖了 MyBatis、Redis、MongoDB、ES、分库分表、读写分离、SpringMVC、Webflux、权限、WebSocket、Dubbo、RabbitMQ、RocketMQ、Kafka、性能测试等等内容。

提供近 3W 行代码的 SpringBoot 示例，以及超 4W 行代码的电商微服务项目。

获取方式：点“在看”，关注公众号并回复 666 领取，更多内容陆续奉上。

文章有帮助的话，在看，转发吧。
谢谢支持哟 (*^__^*）
公众号-芋道源码
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
深度解读Netty：有没有学java的公众号
m0_58590364的博客
07-22 93
应聘求职 每年这个时候，都是应届生求职以及在职人员跳槽的高峰期。对于即将成为程序员的应届毕业生们。在求职过程中怎样确定目标公司和目标职位，大家在求职过程中要注意哪些细节?这些都是大家所关心的话题。 ①应聘渠道： ⑴学校招聘会； ⑵社会招聘渠道：Boss，企业官网等等。 ②应聘流程： 编写简历→投递简历→筛选简历→电话面试→（笔试）→面试→确定薪酬→入职→后续流程 简历书写 据统计，80%的简历都是不合格的。不少人事管理者抱怨收到的许多简历在格式上很精权。简历应该如何做到在格式上简洁明了，重点突出?求职信应该
Netty彻底入门
玄霄
07-07 723
Netty线程模型Netty介绍Netty使用场景Netty线程模型Netty组件Netty示例代码 Netty介绍 NIO的类库和API复杂，需要熟练掌握Selector、ServerSocketChannel、SocketChannel，ByteBuffer等；导致开发工作量和难度都非常大；例如：断线重连、网络闪断、心跳处理，网络阻塞、异常处理等； Netty对JDK自带的NIO的API进行了良好的封装，解决了上述问题。且Netty具有高性能、吞吐量、低延迟； Netty使用场景 互联网行业：Du
netty执行流程及核心模块详解(入门必看系列)
浪里小白龙nbw的博客
02-07 2070
netty执行流程及核心模块详解，建议收藏！
二、Netty服务端/客户端启动整体流程
cristianoxm的博客
05-12 1530
一、综述 Netty 的整体流程相对来说还是比较复杂的，初学者往往会被绕晕。所以这里总结了一下整体的流程，从而对 Netty 的整体服务流程有一个大致的了解。从功能上，流程可以分为服务启动、建立连接、读取数据、业务处理、发送数据、关闭连接以及关闭服务。整体流程如下所示(图中没有包含关闭的部分)： 二、启动流程概述 Netty服务端的启动流程如下： 启动流程大致分为五步 创建ServerBootstrap实例，ServerBootstrap是Netty服务端的启动辅助类，其存在意义在于其整合了Nett
一文了解Netty整体流程
Java烂猪皮
10-13 605
本文基于版本 4.1.46，同时只描述类而不展示具体源码。 Netty 的整体流程 Netty 的整体流程相对来说还是比较复杂的，初学者往往会被绕晕。所以这里总结了一下整体的流程，从而对 Netty 的整体服务流程有一个大致的了解。从功能上，流程可以分为服务启动、建立连接、读取数据、业务处理、发送数据、关闭连接以及关闭服务。整体流程如下所示(图中没有包含关闭的部分)： 服务启动 服务启动时，我们以 example 代码中的 EchoServer 为例，启动的过程以及相应的源码类如下： EchoSe
Netty使用最佳实践！
weixin_45727359的博客
10-14 567
点击上方“肉眼品世界”，选择“设为星标”深度价值体系传递来源 |https://urlify.cn/3eAZBj最近很多同学给我发邮件或者微博私信我，咨询推送服务相关的问题。问题五花八...
netty-启动流程
01-07
netty启动流程 启动实例： public final class EchoServer { static final boolean SSL = System.getProperty(ssl) != null; static final int PORT = Integer.parseInt(System.getProperty(port, 8007)); public...
netty启动流程和关闭流程.md
10-25
自我介绍和反问.md
Netty源码核心流程
02-03
1. 蓝色方框为某一分支或者某一块的详细作用 2. 白色长条为类名 3.黄色长条为方法名 4. 线上的为进入到下一环节的源码 按步骤走都能找到对应的类方法.包括重载等都进行了标注
通过入门demo简单了解netty使用方法
08-25
Netty 入门 Demo 详解 Netty 是一个 Java 库，用于快速开发可维护的高性能网络服务器和客户端。...通过这个简单的入门 Demo，我们可以了解 Netty 的基本使用方法，并为后续的学习和应用打下基础。
NanguoCoffee 分析Netty工作流程
04-20
本文将深入探讨Netty的工作流程，通过分析其核心组件和机制，帮助理解如何利用Netty构建高效的网络应用。 Netty 的工作流程主要基于Reactor模式，它包含以下几个关键组件： 1. **BossGroup**：BossGroup 负责接收...
netty全过程图解（最详细清晰版）
热门推荐
PANDA博客
03-01 1万+
前言：为了让大家对Netty有个整体认知，本文首先会对Netty的整个运作过程捋一遍，先不管什么异步、Reactor模式、NIO、零拷贝这些，细节的东西后面再说，直接淦图： 结合图示进行全过程讲解： ServerBootStrap作为Netty的服务端入口，会对BossGroup和WorkGroup进行相关初始化操作，在BossGroup中，主要是对客户端的新连接请求进行处理（即OP_ACCEPT事件，但其实OP_ACCEPT事件的具体处理也会涉及到读写事件，因为数据不是读就是写），在WorkGro
Netty到底是什么
程序猿杂货铺
11-03 757
作者：lyowish 原文链接：https://juejin.im/post/5bdaf8ea6fb9a0227b02275a Netty到底是什么 从HTTP说起 有了Netty，你可以实现自己的HTTP服务器，FTP服务器，UDP服务器，RPC服务器，WebSocket服务器，Redis的Proxy服务器，MySQL的Proxy服务器等等。 我们回顾一下传统的HTTP服务器的原理 1、创建...
Netty
freellf的专栏
11-24 701
Netty Netty是由JBOSS提供的一个java开源框架。Netty提供异步的、事件驱动的网络应用程序框架和工具，用以快速开发高性能、高可靠性的网络服务器和客户端程序。 也就是说，Netty 是一个基于NIO的客户，服务器端编程框架，使用Netty 可以确保你快速和简单的开发出一个网络应用，例如实现了某种协议的客户，服务端应用。Netty相当简化和流线化了网络应用的编程开
一文理解Netty模型架构
weixin_34082789的博客
11-01 1236
作者 陈彩华 贝聊后端开发工程师 文章转载交流请联系 caison@aliyun.com 复制代码本文基于Netty4.1展开介绍相关理论模型，使用场景，基本组件、整体架构，知其然且知其所以然，希望给读者提供学习实践参考。 1 Netty简介 Netty是 一个异步事件驱动的网络应用程序框架，用于快速开发可维护的高性能协议服务器和客户端。 JDK原生NIO程序的问题 JDK原生也有一套网络应用...
.NET 中的高性能队列 Channel
学习和分享
07-25 932
在 .NET 中，Channel类是 .NET Core 3.0 引入的一个用于实现生产者-消费者场景的高性能队列。它属于命名空间，并提供了基于通道的通信机制，使得在不同线程或任务之间传递数据变得更加简单和高效。
netty入门-7 ByteBuf
保存我对一些技术的思考
07-27 693
ByteBuffer基本使用
从零手写实现 nginx-35-proxy_pass netty 如何实现？
07-28 637
大家好，我是老马。很高兴遇到你。我们为 java 开发者实现了 java 版本的 nginx如果你想知道 servlet 如何处理的，可以参考我的另一个项目：手写从零实现简易版 tomcatminicat。
网络编程 - 粘包与拆包第二弹 - Netty粘包与拆包问题的技术解决方案
最新发布
逍遥Sean的博客
07-29 810
Netty是一个高性能的异步事件驱动的网络应用框架，专注于快速开发可维护的高性能协议服务器和客户端。它提供了一系列的解决方案来处理TCP粘包与拆包问题，使得开发者可以专注于业务逻辑而不必过多关注底层网络细节。通过使用Netty提供的解码器和编码器，我们可以有效地处理TCP粘包与拆包问题，提升网络应用的稳定性和性能。选择合适的解决方案取决于你的具体业务需求和协议设计。希望本文能帮助读者深入理解和解决TCP粘包与拆包问题，在实际应用中获得更好的开发体验和性能优化。
netty启动流程图
03-07
下面是Netty的启动流程图： 1. 创建ServerBootstrap对象，用于启动和配置Netty服务器。 2. 设置服务器的线程模型，包括Boss和WorkerGroup。BossGroup负责接收客户端的连接请求，WorkerGroup负责处理客户端的请求。 ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值