netty中的概念理解

最新推荐文章于 2022-01-09 22:26:41 发布

rxin2009

最新推荐文章于 2022-01-09 22:26:41 发布

阅读量189

点赞数 1

分类专栏： netty 文章标签： netty java 网络

本文链接：https://blog.csdn.net/rxin2009/article/details/84360232

版权

netty 专栏收录该内容

3 篇文章 0 订阅

订阅专栏

本文的主要内容是对netty框架中的Channel、ChannelEvent、ChannelFuture、ChannelHandler、ChannelPipeline、ChannelSink、SelectionKey、Selector对象进行一个概念的理解，信息都来自源码中的英文解释，算一个翻译文档。

先来说说channel

channel是一个网络套接字的纽带或者说是一个组件，它可以有这样的i/o操作：读写、连接以及绑定。以下是它的一些特点：

1、netty中全部的i/o操作都是异步的，这就意味着任何i/o操作将会立即返回而不保证操作是否完成，返回的是ChannelFuture实例，在i/o操作成功、失败或者被删除后会获得一个通知。

2、Channels是有层次的，比如SocketChannel是被ServerSocketChannel接收后产生的，就可以说SocketChannel的父节点是ServerSocketChannel，可以通过getParent()方法获得。但是这种分层结构的语义依赖传输方式的具体实现，比如在udp中这种层次语义就没有这么强烈。

3、Channel中有个叫InterestOps的属性，它由四个值：OP_READ、OP_WRITE、OP_READ_WRITE、OP_NONE。下面解释一下：

OP_READ：如果被设置表示可以立即读取远程客户端发来的信息，否则就不接收直到标记再次被设置；

OP_WRITE：如果设置，写请求将不会被发送到远程客户端直到标记被清除而且写请求将在队列中挂起，如果没有设置，写请求将尽早从队列中发送出去；

OP_READ_WRITE：这是OP_READ和OP_WRITE的组合，意思是只有写请求会被挂起；

OP_NONE：意思是只有读操作会被挂起。

值得一提的是，OP_READ标记可以通过setReadable(boolean)直接修改，而OP_WRITE是只读的，其实OP_WRITE标记只是想告诉你不能发布太多的写操作，可能会导致内存溢出，比如在nio的socket中OP_WRITE标记在NioSocketChannelConfig中配置。

ChannelEvent

一个i/o事件关联一个Channel，ChannelEvent在ChannelPipeline中被一系列的ChannelHandler处理。

每个事件要么是upstream event(上游事件)，要么是downstream event(下游事件)，如果一个事件从管道中的第一个处理器游向最后一个处理器，我们叫它上游事件；如果一个事件从管道中的最后一个事件游向第一个事件，我们叫它下游事件，看ChannelPipeline的图就明白多了。具体点说，服务器接收一个信息，这个接收信息的事件叫上游事件；服务器发送一个信息，这个发送信息的事件叫下游事件。这个规则同样适用于客户端，在客户端接收信息的事件叫上游事件，发送信息的事件叫下游事件。以下是事件举例：

上游事件：messageReceived、exceptionCaught、channelOpen、channelClosed、channelBound、channelUnbound、channelConnected、writeComplete、channelDisconnected、channelInterestChanged，还有两个额外的事件只用于父通道(可以有子通道的)：childChannelOpen、childChannelClosed；

下游事件：write、bind、unbind、connect、disconnect、close；

值得一提的是，Channel中没有open事件，这是因为Channel在被创建后总是开着的。

ChannelFuture

ChannelFuture表示异步i/o操作的结果

netty中的全部的i/o操作都是异步的，这就意味着任何i/o调用将会立即返回，而不保证i/o操作是否完成。取而代之的是，获得一个ChannelFuture实例，其中包含着i/o操作的结果或状态。

ChannelFuture要么是完成的要么是没有完成的。当一个i/o操作开始，一个新的future对象将被创建。新的future初始化为没有完成，它既不是成功、失败也不是删除，因为它还没有完成。如果i/o操作是完成的，要么就是成功、失败，要么就是删除，future被标记为completed会有更多信息，比如失败的原因，值得注意的是失败和删除都属于完成。

* <pre>
 *                                      +---------------------------+
 *                                      | Completed successfully    |
 *                                      +---------------------------+
 *                                 +---->      isDone() = <b>true</b>      |
 * +--------------------------+    |    |   isSuccess() = <b>true</b>      |
 * |        Uncompleted       |    |    +===========================+
 * +--------------------------+    |    | Completed with failure    |
 * |      isDone() = <b>false</b>    |    |    +---------------------------+
 * |   isSuccess() = false    |----+---->   isDone() = <b>true</b>         |
 * | isCancelled() = false    |    |    | getCause() = <b>non-null</b>     |
 * |    getCause() = null     |    |    +===========================+
 * +--------------------------+    |    | Completed by cancellation |
 *                                 |    +---------------------------+
 *                                 +---->      isDone() = <b>true</b>      |
 *                                      | isCancelled() = <b>true</b>      |
 *                                      +---------------------------+
 * </pre>

建议使用addListener(ChannelFutureListener)而不是await()来获得通知，addListener(ChannelFutureListener) 是非阻塞的，给ChannelFuture添加监听器是简便的，i/o线程将会通知监听器当i/o操作关联的future完成了，ChannelFutureListener有利于性能的提升和资源的利用因为它不是阻塞的，但是如果不用事件驱动模型，实现顺序逻辑就相当棘手。

对比一下await()，它是阻塞的，一旦调用，线程将阻塞直到操作完成。它实现顺序逻辑是容易的。但是调用线程阻塞直到操作完成是不必要的，并且线程间的唤醒是昂贵的，而且在特定的环境中容易死锁。如下描述

1、不要在ChannelHandler里面调用await()

* <pre>
 * // BAD - NEVER DO THIS
 * {@code @Override}
 * public void messageReceived({@link ChannelHandlerContext} ctx, {@link MessageEvent} e) {
 *     if (e.getMessage() instanceof GoodByeMessage) {
 *         {@link ChannelFuture} future = e.getChannel().close();
 *         future.awaitUninterruptibly();
 *         // Perform post-closure operation
 *         // ...
 *     }
 * }
 *
 * // GOOD
 * {@code @Override}
 * public void messageReceived({@link ChannelHandlerContext} ctx, {@link MessageEvent} e) {
 *     if (e.getMessage() instanceof GoodByeMessage) {
 *         {@link ChannelFuture} future = e.getChannel().close();
 *         future.addListener(new {@link ChannelFutureListener}() {
 *             public void operationComplete({@link ChannelFuture} future) {
 *                 // Perform post-closure operation
 *                 // ...
 *             }
 *         });
 *     }
 * }
 * </pre>

不要弄混了i/o 延时和等待延时，他们之间没有一点关系，如果一个i/o操作延时，future会被标记为'completed with failure'。连接延时应该通过指定的传输操作配置，如下

 * <pre>
 * // BAD - NEVER DO THIS
 * {@link ClientBootstrap} b = ...;
 * {@link ChannelFuture} f = b.connect(...);
 * f.awaitUninterruptibly(10, TimeUnit.SECONDS);
 * if (f.isCancelled()) {
 *     // Connection attempt cancelled by user
 * } else if (!f.isSuccess()) {
 *     // You might get a NullPointerException here because the future
 *     // might not be completed yet.
 *     f.getCause().printStackTrace();
 * } else {
 *     // Connection established successfully
 * }
 *
 * // GOOD
 * {@link ClientBootstrap} b = ...;
 * // Configure the connect timeout option.
 * <b>b.setOption("connectTimeoutMillis", 10000);</b>
 * {@link ChannelFuture} f = b.connect(...);
 * f.awaitUninterruptibly();
 *
 * // Now we are sure the future is completed.
 * assert f.isDone();
 *
 * if (f.isCancelled()) {
 *     // Connection attempt cancelled by user
 * } else if (!f.isSuccess()) {
 *     f.getCause().printStackTrace();
 * } else {
 *     // Connection established successfully
 * }
 * </pre>

ChannelHandler

ChannelHandler有两种类型：ChannelUpstreamHandler和ChannelDownstreamHandler，分别处理、拦截上游事件和下游事件，处理器由ChannelHandlerContext提供，通过这个上下文对象，处理器可以获得上游事件或者下游事件，动态修改管道，存储一些有用的信息。

一个ChannelHandler常常需要存储一些有用的信息，最简单的办法就是用成员变量，由于处理器实例有连接专用的状态变量，不得不为每个新的channel新建一个处理器实例以避免竞态条件(未认证的客户不能获取机密信息)。

当然还是有一些方法可以不用成员变量来存储的，比如ChannelHandlerContext提供的attachment，使得同一个处理器实例用于不同的管道中。

在ChannelHandler中有这么一个注解@Sharable，意味着这个处理器实例可以被添加到一个或多个ChannelPipeline对象中多次，而不用考虑竞态条件，如果不指定这个注解，每次给管道添加处理器时不得不新创建一个实例对象，因为它有不共享的变量。

ChannelPipeline

处理器处理Channel中的事件，ChannelPipeline提供了一个很好的模式去有效控制一个事件怎么被处理以及管道中的处理器怎么相互作用。

对于每个新的channel(渠道)，一个新的pipeline(管道)必须被创建并且连接上这个channel。一旦连接，他们之间的耦合就是永久的，channel不能连接其他的pipeline也不能分离当前的pipeline。

一个事件是怎么流入管道的呢？先看下图

* <pre>
 *                                       I/O Request
 *                                     via {@link Channel} or
 *                                 {@link ChannelHandlerContext}
 *                                           |
 *  +----------------------------------------+---------------+
 *  |                  ChannelPipeline       |               |
 *  |                                       \|/              |
 *  |  +----------------------+  +-----------+------------+  |
 *  |  | Upstream Handler  N  |  | Downstream Handler  1  |  |
 *  |  +----------+-----------+  +-----------+------------+  |
 *  |            /|\                         |               |
 *  |             |                         \|/              |
 *  |  +----------+-----------+  +-----------+------------+  |
 *  |  | Upstream Handler N-1 |  | Downstream Handler  2  |  |
 *  |  +----------+-----------+  +-----------+------------+  |
 *  |            /|\                         .               |
 *  |             .                          .               |
 *  |     [ sendUpstream() ]        [ sendDownstream() ]     |
 *  |     [ + INBOUND data ]        [ + OUTBOUND data  ]     |
 *  |             .                          .               |
 *  |             .                         \|/              |
 *  |  +----------+-----------+  +-----------+------------+  |
 *  |  | Upstream Handler  2  |  | Downstream Handler M-1 |  |
 *  |  +----------+-----------+  +-----------+------------+  |
 *  |            /|\                         |               |
 *  |             |                         \|/              |
 *  |  +----------+-----------+  +-----------+------------+  |
 *  |  | Upstream Handler  1  |  | Downstream Handler  M  |  |
 *  |  +----------+-----------+  +-----------+------------+  |
 *  |            /|\                         |               |
 *  +-------------+--------------------------+---------------+
 *                |                         \|/
 *  +-------------+--------------------------+---------------+
 *  |             |                          |               |
 *  |     [ Socket.read() ]          [ Socket.write() ]      |
 *  |                                                        |
 *  |  Netty Internal I/O Threads (Transport Implementation) |
 *  +--------------------------------------------------------+
 * </pre>

在这里举例来说明这个图的意思

ChannelPipeline p=Channels.pipeline();

p.addLast("1", new UpstreamHandlerA());
p.addLast("2", new UpstreamHandlerB());
p.addLast("3", new DownstreamHandlerA());
p.addLast("4", new DownstreamHandlerB());
p.addLast("5", new UpstreamHandlerX());

处理器的顺序是1、2、3、4、5，

如果一个上游事件流入管道，处理器顺序是1、2、5；如果一个下游事件流入管道，处理器的顺序是4、3；如果5既实现了ChannelUpstreamHandler也实现了ChannelDownstreamHandler，上下游事件的处理器顺序分别是1、2、5和5、4、3。

一般来说管道中会注册多个处理器，比如通常的服务器会这样定义：Protocol Decoder、Protocol Encoder、Business Logic Handler。处理器能够被添加和删除在任何时刻因为ChannelPipeline是线程安全的，比如有机密信息要交换时你可以插入SslHandler，交换后可以删除。但是需要注意的一个陷阱就是，在删除一个处理器的时候应该确保在其后管道中至少有两个处理器或者一个都没有。比如以下代码不起作用

public class FirstHandler extends SimpleChannelUpstreamHandler {

    @Override
    public void messageReceived(ChannelHandlerContext ctx, MessageEvent e) {
        // Remove this handler from the pipeline,
        ctx.getPipeline().remove(this);
        // And let SecondHandler handle the current event.
        ctx.getPipeline().addLast("2nd", new SecondHandler());
        ctx.sendUpstream(e);
    }
}

ChannelSink

ChannelSink接收和处理终端的下游事件，ChannelSink是一个内部组件，应该由传输协议提供者实现，大部分的用户在他们的代码中不会看到这个类。

SelectionKey

SelectionKey是SelectableChannel在selector中注册的一个标志。

key在每次channel注册到selector时被创建，key保持有用的直到它被删除、channel被关闭或者selector被关闭，删除一个key不意味着它被立即从selector中删除，而是被添加到cancelled-key集合中。一个key是否可用可以通过isValid来测试。

Selector

Selector是channel的一个多路复用器，selector有两种创建方式：

1、open方法，用系统默认的java.nio.channels.spi.SelectorProvider实例创建一个新的selector对象；

2、java.nio.channels.spi.SelectorProvider的openSelector方法；

selector的创建都是通过底层操作实现的。selector会保持打开状态知道调用了close方法。

一个selectable channel注册selector意味着会有一个SelectionKey对象，一个selector有三个这样的键集合：

key set代表在selector中注册的channel的key集合；selected-key set代表准备好i/o操作的key集合，它总是key set的一个子集；cancelled-key表示key已经被删除了但对应的channel还没有在selector中被撤销注册的key集合。

在新创建selector的时候，这三个集合都是空的。

一个key被添加到selector的key集合中是channel注册到selector中的一个附加的作用，Cancelled keys是在selection操作过程中被删除的，key集合自己不会被直接修改。

当channel关闭或者调用SelectionKey的删除方法后（表示key被删除），key将会被添加到selector的cancelled-key集合中。删除key将导致他的channel在下次selection操作中被撤销注册，同时这个key将会从selector的key集合中被删除。

key被添加到selected-key 集合中是通过selection操作完成的，一个key可以被直接删除，通过这两种方式：java.util.Set#remove和java.util.Iterator#remove()；除此之外没有其他方法可以删除了，特别是，他们不会像添加一样作为一种附加的作用而被删除，key不会被直接添加到selected-key集合中。

select操作有三个：selectNow()、select(long timeout)和select()。下面是他们的一些特点： selectNow()是非阻塞的，如果没有channel是可选择的，它将立即返回0；select(long timeout)是阻塞的，唤醒方式：至少一个channel被选择了、调用了wakeup方法、当前线程被中断、超时，无论哪种先发生。select()与select(long timeout)相比就是无限定时间等待了。

wakeup()方法的作用在上面三个操作中有提到，在这里再详细的描述一下：如果其他线程正在阻塞中（调用select()或select(long timeout)），wakeup()后他们将立即返回，如果当时没有selection操作在阻塞，那么在下次调用阻塞的selection操作后将立即返回，除非同时调用了selectNow()（它会清除先前调用的wakeup方法的效果），所以说wakeup()调用后不会空手而回的，后面的阻塞操作将像平常一样阻塞。值得一提的是：wakeup()方法在两个成功的selection操作之间调用多次将视作一次。整个机制用跟线程的中断机制有点类似。

rxin2009

关注

1
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
netty中的概念理解

本文的主要内容是对netty框架中的Channel、ChannelEvent、ChannelFuture、ChannelHandler、ChannelPipeline、ChannelSink、SelectionKey、Selector对象进行一个概念的理解，信息都来自源码中的英文解释，算一个翻译文档。先来说说channel channel是一个网络套接字的纽...
复制链接

扫一扫