Netty 核心部件:Buffer 缓冲器
JDK NIO 提供了 ByteBuffer 作为字节数据容器,但是实际使用过程会比较繁琐,特别是读写切换;Netty 提供了自己的缓冲区实现 BytedBuf ,用于简化字节缓冲区的使用;
JDK ByteBuffer 和 Netty ByteBuf 一个很大的区别是:JDK ByteBuffer 有 4 个索引(mark、position、limit、capcity),其中使用 position、limit 这2个索引控制读写操作,而 Netty 使用 readerIndex、writerIndex 这2个索引代替,Netty BytedBuf 中各个索引的关系如下:
- 索引关系:0 <= readerIndex <= writerIndex <= capacity;
- 初始值:0 = readerIndex = writerIndex
①字节,已读字节,可以被遗弃;
②字节,可读字节,即 readable bytes;
③字节,可写入字节,即 writeable bytes;
由于使用 readerIndex、writerIndex 索引控制读写,因此 Netty ByteBuf 在读写切换时并不需要像 JDK ByteBuffer 那样需要频繁地调用 filp() 方法;
ByteBuf 的工作模式
在 Netty 4.X,字节数据容器 ByteBuf 拥有 3 种使用模式:
heap-buffer、direct-buffer、composite-buffer;
Heap-Buffer(堆缓冲区)
这是最常用的 ByteBuf 工作模式,Heap-Buffer 将字节数据储存在 JVM 堆空间(JVM-Heap),堆空间可以快速分配,当不使用时可以快速释放,同时还提供了直接访问缓冲区直接数组的方法(
ByteBuf.array() );
这种工作模式类似于 JDK ByteBuffer 的工作模式;
ByteBuf heapBuf = ...;
if (heapBuf.hasArray()) {
byte[] array = heapBuf.array(); //获取缓冲区字节数组
int offset = heapBuf.arrayOffset() + heapBuf.readerIndex(); //计算可读第一字节的偏移量
int length = heapBuf.readableBytes(); //获取缓冲区可读字节数
handleArray(array, offset, length); //使用缓冲区字节数组、可读第一字节偏移量、可读字节长度作为调用方法的参数
※ 访问非堆缓冲区 ByteBuf 的数组会导致
UnsupportedOperationException,可以使用
ByteBuf.hasArray() 来检查缓冲区是否支持访问数组;
Direct-Buffer(直接缓冲区)
Direct-Buffer 是基于 JDK 1.4 引入 NIO 的 ByteBuffer,允许 JVM 通过本地方法调用分配内存,缓冲区数据不直接储存在 JVM Heap 上,带来的优点如下:
- 免去中间的内存拷贝,提升 IO 处理速度(Direct-Buffer 中的内容可以驻留在垃圾回收扫描的 );
- Direct-Buffer 在 -XX:MaxDirectMemorySize=xxM 大小限制下,使用 Heap 之外的内存,JVM GC 无法直接操作,也就意味着规避了在高负载下频繁的GC过程对应用线程的中断影响;
Direct-Buffer 对于通过 socket 实现传输数据的应用来说,是一种十分理想的数据储存方式。如果数据是储存在 Heap 中分配的缓冲区,那么实际上在通过 socket 发送数据之前,JVM 需要先将数据复制到直接缓冲区,这样需要多一次缓冲区数据内容的拷贝;
但是 Direct-Buffer 也带来了以下的缺点:
- Direct-buffer 在内存空间的分配、释放上比 Heap-Buffer 更加复杂;
- 如果要将 Direct-Buffer 容器数据传递给其他代码处理,因为数据不是在 Heap 上,此时往往需要拷贝一个副本,如下:
ByteBuf directBuf = ...
if (!directBuf.hasArray()) {
int length = directBuf.readableBytes(); //获取直接缓冲区可读字节数
byte[] array = new byte[length]; //拷贝字节缓冲区字节数组内容的副本
directBuf.getBytes(directBuf.readerIndex(), array);
handleArray(array, 0, length); //将缓存区字节数组传递给其他代码
}