并发编程 | Netty - [常用组件概要]

已于 2022-10-11 17:25:55 修改
阅读量400 收藏
点赞数
分类专栏： java技术 文章标签： 网络 tcp/ip 服务器
于 2022-10-11 13:59:56 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ZEUS00456/article/details/127249990
版权

INDEX

Bootstrap & ServerBootstrap

作用

  • 用于引导 Netty 应用
  • 可以对 Netty 进行配置
  • Bootstrap 用于引导客户端，ServerBootstrap 用于引导服务端

常用方法
配置 EventLoop
group()

  • 服务端需要配置两个，通常叫做 boss、workers
  • 客户端只需要配置一个

配置服务端通道实现类
channel()

为 ServerChannel 添加配置
option()

为接受到的通道添加配置
childOption()

为 boss 配置业务处理类
handler()

为 worker 配置业务处理类
childHandler()

服务端绑定端口
bind()

客户端连接服务器
connect()

Channel

作用

  • Netty 网络通讯的组件，用于网络 IO 操作
  • 支持关联的 IO 的操作，以及与之对应的处理逻辑
  • 可以获取相关信息，如状态、配置等
  • 异步调用的，会立即返回 ChannelFuture
  • 实现丰富，以应对不同协议、不同阻塞类型
    • NioSocketChannel：异步，客户端，TCP
    • NioServerSocketChannel：异步，服务端，TCP
    • NioDatagramChannel：异步，UDP
    • NioSctpChannel：异步，客户端，SCTP
    • NioSctpServerChannel：异步，服务端，SCTP

常用方法
获取 Pipeline
Pipeline()

获取配置
config()

获取访问地址
remoteAddress()

写出并刷新
writeAndFlush()

Future & ChannelFuture

作用

  • 用于异步监听操作的执行结果
  • 可以配合 FutureListener 机制使用

常用方法
返回通道
channel()

等待异步操作执行完成
sync()
注意这个方法是同步的
它是同步的等待，但被等待的是个异步操作

添加监听器
addListener()

Selector

作用

  • Netty 网络通讯的组件，用于实现多路复用，做到一个线程监管多个 Channel
  • 集成在 EnentLoop 中，其上级对象叫 chooser
  • 可以对 EnentLoop 中的通道进行轮询，并在其就绪时选中

更多信息参考 基础 | NIO - [Selector]

ChannelHandler

作用

  • Netty 网络通讯的组件
    • 可以处理 IO 事件
    • 也可以拦截 IO 事件，并将 IO 事件转发给 Pipeline 的下一个 handler
  • 多个 ChannelHandler 可以协同处理业务
  • 很类似过滤器
  • 本身是个接口，提供丰富的待实现方法
    • 接口分出两个分支
      • ChannelInboundHandler：负载处理进站 IO 事件
        用于处理 从对方流向自己 的 IO 事件，比如作为客户端接受服务端响应
      • ChannelInboundHandler：负载处理出站 IO 事件
        用于处理 从自己流向对方 的 IO 事件，比如作为客户端向服务端发请求
      • 其实还有个 ChannelDuplexHandler，但使用场景很少 (违反单一职责违反的太明显了)
    • 接口和两个分支接口，各自有一个配置模式实现
    • 对应类图如下
      在这里插入图片描述

常用方法
激活时回调
channelActive()

取消激活时回调
channelInactive()

读取时回调
channelRead()

读取完成时回调
channelReadComplete()

写出时回调
channelWrite()

写出完成时回调
channelWriteComplete()

异常时回调
exceptionCaught()

handler 加入时回调
handlerAdded()
hander 已经加入了对应的 context 并可以真正处理事件时触发

  • 相当于一个 Channel 注册到 Selector 并完成准备工作时触发
  • 相当于一个新连接建立完全后触发

handler 移除时回调
handlerRemoved()

Pipeline & ChannelPipeline

作用

  • 作为 Handler 的集合，负责处理、拦截出入站 IO 事件
  • 很类似过滤器栈，责任链模式
  • 可以完全控制 IO 事件的处理方式，并控制各个 ChannelHandler 如何相互调用

结构

  • 每个 Channel 都有且仅有一个 Pipeline
    二者关系参考 并发编程 | Netty - [Reactor 模型]
  • ChannelPipeline 本质上是一个双向链表
  • 链表的节点类型是 ChannelHandlerContext，ChannelHandlerContext 内部是 ChannelHandler
  • 通常不同 Pipeline 中的 ChannelHandler 不共享
    技术上是可以做到共享的，但是一旦共享就需要处理线程安全问题，影响性能
  • 入站、出站的 ChannelHandler 在同一个链表中，但不会互相影响，Handler 与当前操作不符时会直接放行

在这里插入图片描述

常用方法
头部追加 Handler
addFirst()

尾部追加 Handler
addLast()

ChannelHandlerContext

作用

  • 是 Pipeline 中直接节点的类型，里面封装了 ChannelHandler
    • ChannelHandler 中方法普遍带有 ChannelHandlerContext 类型的参数
    • 可以从中获取关键对象，如 pipeline()、channel()
    • 可以直接调用 ChannelHandler 的方法，如 writeAndFlush()

ChannelOption

作用

  • 用于配置 Netty 中的 Channel

常用配置
SO_BACKLOG
配置 TCP/IP 协议中，初始化服务器可连接队列的大小

SO_KEEPALIVE
配置是否保持连接存活

ChannelGroup

作用

  • Channel 的容器，用于存储、管理所有注册在其中的 Channel

常用方法
注册 channel
addd()

广播写
writeAndFlush()

NioEventLoop

作用

  • 每个 NioEventLoop 包含一个 Selector
    相当于经典 Reactor 模型中一个 Reactor + Handler
  • 保持有一个任务队列，每一轮轮询并处理事件后，可以执行其中的任务
  • 以事件循环的方式处理绑定在其中的 Socket
    • select：通过集成的 Selector 监听绑定的 Socket 的关注事件
    • processSelectedKeys：处理选中的 key，即处理就绪的事件
    • runAllTasks：执行任务队列中的所有任务

在这里插入图片描述

NioEventLoopGroup

作用

  • 可以包含多个 NioEventLoop
    • 每个 NioEventLoop 对应一个 Selector 和一个线程
    • 通常一个 ServerSocketChannel 对应一个 NioEventLoop
  • 可以分为两组协同作业（常见于服务端）
    • BossGroup：负责 accept，通常只有一个 NioEventLoop
    • WorkerGroup：负责读写，通常有多个 NioEventLoop
  • 通过 chooser.next() 接口获取某个 NioEventLoop 进行处理当前的 SocketChannel

常用方法
优雅停机(断开连接，关闭线程)
shutdownGracefull()

Unpooled

作用

  • Netty 提供的缓冲区操作工具类

常用方法
初始化 ByteBuf
copiedBuffer(CharSequence, Charset)

开辟 ByteBuf
buffer(size)

ByteBuf

作用

  • Netty 提供的字节缓冲区
  • 效率比 NIO 的 ByteBuffer 高
  • 不需要反转 flip()

重要属性
capacity
容量，是 ByteBuf 内部用于存放数据的容器的大小，而不是实际数据量
统一由 capacity() 返回，真实获取方式随具体实现变化，如 array.length ，capacity

readIndex
下一个读入的位置

writeIndex
下一个读入的位置

属性关系图
在这里插入图片描述

常用方法
长度
capacity()

数据写入
writeByte
向缓冲区写入字节
writerIndex 会 +1

读取数据
readByte()
从缓冲区读取字节
readerIndex 会 +1

获取读指针
readerIndex()
读指针指向即将被读的位置

获取写指针
writerIndex()
写指针指向即将被写的位置

读取数据
getByte(index)
获取指定 index 的字节
不影响 readIndex

按 index 范围读取字符串
getCharSequence(start,end,charset)

是否有数组
hasArray()
如果返回 true 才能安全的 array() 、arrayOffset()

获取 byte 数组
array()

获取字节数组中第一个字节的偏移量
arrayOffset()

获取可读字节数
readableBytes()
参考 属性关系图

问仙长何方蓬莱
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
netty：使用ChannelDuplexHandler 来接收、下发数据
z199172177的专栏
01-05 1万+
项目背景 因为需求是和硬件对接，需要定时对硬件设备进行检查，因此决定使用netty作为通信中间件。使用netty的ChannelDuplexHandler 来接收、下发硬件数据。 硬件通过TCP长连接向服务端发送指令，服务端使用netty监听固定端口，接收并处理指令。 硬件发送的是16进制字节流，使用netty的ByteArrayDecoder、ByteArrayEncoder 对数据进行编
Day858.高性能网络应用框架Netty -Java 并发编程实战
阿昌爱Java
01-13 623
Netty是一个款优秀的网络编程框架，性能非常好，为了实现高性能的目标，Netty 做了很多优化，例如优化了 ByteBuffer、支持零拷贝等等，和并发编程相关的就是它的线程模型了。Netty 的线程模型设计得很精巧，每个网络连接都关联到了一个线程上，这样做的好处是：对于一个网络连接，读写操作都是单线程执行的，从而避免了并发程序的各种问题。要想深入理解 Netty 的线程模型，还需要对网络相关知识有一定的理解，关于 Java IO 的演进过程，可以参考。
Netty系列之Netty并发编程分析（转载）
xu_1984的博客
12-30 361
文章地址 http://www.infoq.com/cn/articles/netty-concurrent-programming-analysis/ 1. JAVA内存模型与多线程编程 1.1. 硬件的发展和多任务处理 随着硬件特别是多核处理器的发展和价格的下降，多任务处理已经是所有操作系统必备的一项基本功能。在同一个时刻让计算机做多件事情，不仅仅是因为处理器的并行计算能力...
Netty系列之Netty高性能之道
cpongo5
05-29 5326
1. 背景\\1.1. 惊人的性能数据\\最近一个圈内朋友通过私信告诉我，通过使用Netty4 + Thrift压缩二进制编解码技术，他们实现了10W TPS（1K的复杂POJO对象）的跨节点远程服务调用。相比于传统基于Java序列化+BIO（同步阻塞IO）的通信框架，性能提升了8倍多。\\事实上，我对这个数据并不感到惊讶，根据我5年多的NIO编程经验，通过选择合适的NIO框架，加上高性能的压缩二...
UnPooled.copiedBuffer与wrappedBuffer的使用
alterhz的博客
07-05 9227
Unpooled.copiedBuffer函数 public final class Unpooled { /** * Creates a new big-endian buffer whose content is a copy of the * specified {@code array}. The new buffer's {@code readerIndex} and * {@code writerIndex} are {@code 0} ...
Netty （netty-netty-5.0.0.Alpha2.tar.gz）
06-07
Netty （netty-netty-5.0.0.Alpha2.tar.gz）是一个 NIO 客户端服务器框架，可以快速轻松地开发协议服务器和客户端等网络应用程序。它极大地简化和流线了网络编程，例如 TCP 和 UDP 套接字服务器。 “快速和简单”并...
Netty （netty-netty-4.1.77.Final.tar.gz）
06-07
Netty （netty-netty-4.1.77.Final.tar.gz）是一个 NIO 客户端服务器框架，可以快速轻松地开发协议服务器和客户端等网络应用程序。它极大地简化和流线了网络编程，例如 TCP 和 UDP 套接字服务器。 “快速和简单”并...
netty-socketio api接口文档.7z
10-18
通过阅读和理解这个API接口文档，开发者能够有效地利用Netty-SocketIO构建实时、高并发的应用程序，如聊天应用、游戏服务器、实时数据分析系统等。同时，它也是进一步学习Netty和SocketIO底层原理的重要参考资料。
reactor-netty-http-1.0.11-API文档-中文版.zip
06-04
赠送jar包：reactor-netty-http-1.0.11.jar； 赠送原API文档：reactor-netty-http-1.0.11-javadoc.jar； 赠送源代码：reactor-netty-http-1.0.11-sources.jar； 赠送Maven依赖信息文件：reactor-netty-...
reactor-netty-core-1.0.15-API文档-中文版.zip
05-09
赠送jar包：reactor-netty-core-1.0.15.jar； 赠送原API文档：reactor-netty-core-1.0.15-javadoc.jar； 赠送源代码：reactor-netty-core-1.0.15-sources.jar； 赠送Maven依赖信息文件：reactor-netty-core-1.0.15....
netty并发编程模型
TangXW的博客
08-14 337
原文地址http://www.tianshouzhi.com/api/tutorials/netty/334 在讲解reactor线程模型之前，我们需要先对基本并发编程模型：串行工作者模型、并发工作者模型进行讲解，因为netty中的reactor线程模型是在这个基础之上演进的，并且，根据我们代码编写的方式，我们的netty应用也有可能是串行工作者模型或者并行工作者
Protocol Buffer的作用
weixin_43900469的博客
01-19 305
处理结构化数据 Protocol Buffer是TensorFlow系统中组织数据的工具 将一个用户的数据（包含多种属性的结构化数据）进行传输时先要对这组数据进行序列化成为字符串，再将这组字符串再变为原来的结构化数据就是它的作用。 相同的工具还有XML和JSON 为什么是Protocol Buffer： Protocol buffer XML/JSON 定义数据格式后使用 不需要其...
Netty笔记
kyrielx的博客
08-26 1002
Java中比较流行的NIO网络框架Netty，完整版学习笔记，包括：基本概念、原理剖析、基于Netty手动实现RPC等
Netty(2)：核心部件：Buffer 缓冲器
Al_assad的博客
03-05 861
Netty 核心部件：Buffer 缓冲器JDK NIO 提供了 ByteBuffer 作为字节数据容器，但是实际使用过程会比较繁琐，特别是读写切换；Netty 提供了自己的缓冲区实现 BytedBuf ，用于简化字节缓冲区的使用；JDK ByteBuffer 和 Netty ByteBuf 一个很大的区别是：JDK ByteBuffer 有 4 个索引（mark、position、limit、c...
Netty 缓存buffer介绍及使用
热门推荐
cuiyaoqiang的博客
06-13 2万+
每当你需要传输数据时，它必须包含一个缓冲区。Java NIO API 自带的缓冲区类是相当有限的，没有经过优化，使用 JDK 的 ByteBuffer 操作更复杂。缓冲区是一个重要的组建，它是 API 的一部分。Netty提供了一个强大的缓冲区实现用于表示一个字节序列，并帮助你操作原始字节或自定义的 POJO。Netty 的 ByteBuf 相当于 JDK 的ByteBuffer，ByteBuf的作
netty踩坑--Unpooled.copiedBuffer(ByteBuffer buffer)
zlisten1的博客
03-29 5662
那些神奇的BUG--0x 一、BUG评级二、概述三、Code review四、BUG分析五、完整代码六、其他博主的详细介绍 一、BUG评级 BUG发现难度：★☆☆☆☆ BUG无法复现概率：☆☆☆☆☆ BUG偶然引入概率：★★☆☆☆ BUG修复，烧脑程度：★★☆☆☆ （随手优化了下代码就不行了T_T） 二、概述 起一个netty服务端，起一个硬件设备，相互通信。 在优化了一堆代码后，发现收不到报文 （这里模拟客户端无法向服务器发送报文） 三、Code review Channel channel = f
Netty服务端源码阅读笔记（四）ServerBootstrap(3)
xyjy11的博客
03-28 134
接上章节 Netty服务端源码阅读笔记（四）ServerBootstrap(1) Netty服务端源码阅读笔记（四）ServerBootstrap(2) serverBootStrap.bind() -->initAndRegister() -->NioEventLoop.register(channel) NioEventLoop注册NioServerSocketChannel public ChannelFuture register(Channel chann...
【Socket 编程】基于UDP协议建立多人聊天室
稻草人敲代码的博客
07-19 454
对于服务端来说，除了要接收消息之外，还要实现一个路由转发模块，该路由转发模块可以将相应发送给所有连接的客户端。而对于客户端来说，除了要发送消息给聊天室，还要能实时看到其它所有客户端的消息。下面来看看具体实现的代码，代码只给出核心模块，其余代码模块代码可以借鉴我之前的博客。具体来说，服务器类实现的功能只有收消息。
docker build时的网络问题
最新发布
flynetcn的专栏
07-19 399
docker build网络问题
Netty并发编程深度解析：线程模型与实战案例
"Netty案例集锦系列文章深入解析了Netty在并发编程中的应用，内容涵盖Netty线程模型、版本升级问题、性能优化、线程安全等关键点，旨在帮助读者理解并掌握Netty的高效网络通信能力。" Netty是一个高性能、异步事件...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值