1. Java NIO 简介
Java NIO(New IO)是从Java 1.4版本开始引入的一个新的IO API,可以替代标准的Java IO API。
NIO与原来的IO有同样的作用和目的,但是使用的方式完全不同,NIO支持面向缓冲区的、基于
通道的IO操作。NIO将以更加高效的方式进行文件的读写操作。
2. Java NIO 与 IO 的主要区别
3. 缓冲区(Buffer)和通道(Channel)
3.1.通道(Channel)与缓冲区(Buffer)
Java NIO系统的核心在于:通道(Channel)和缓冲区(Buffer)。通道表示打开到 IO 设备(例如:文件、
套接字)的连接。若需要使用 NIO 系统,需要获取用于连接 IO 设备的通道以及用于容纳数据的缓冲
区。然后操作缓冲区,对数据进行处理。
简而言之,Channel 负责传输, Buffer 负责存储
3.1.1.缓冲区(Buffer)
- 缓冲区(Buffer):一个用于特定基本数据类型的容器。由 java.nio 包定义的,所有缓冲区都是 Buffer 抽象类的子类。
- Java NIO 中的 Buffer 主要用于与 NIO 通道进行交互,数据是从通道读入缓冲区,从缓冲区写入通道中的。
- Buffer 就像一个数组,可以保存多个相同类型的数据。根据数据类型不同(boolean 除外) ,有以下 Buffer 常用子类:
- ByteBuffer
- CharBuffer
- ShortBuffer
- IntBuffer
- LongBuffer
- FloatBuffer
- DoubleBuffer
上述 Buffer 类 他们都采用相似的方法进行管理数据,只是各自管理的数据类型不同而已。都是通过如下方法获取一个 Buffer 对象:
static XxxBuffer allocate(int capacity) : 创建一个容量为 capacity 的 XxxBuffer 对象
- 缓冲区的基本属性
- Buffer 中的重要概念:
- 容量 (capacity) :表示 Buffer 最大数据容量,缓冲区容量不能为负,并且创建后不能更改。
- 限制 (limit):第一个不应该读取或写入的数据的索引,即位于 limit 后的数据不可读写。缓冲区的限制不能为负,并且不能大于其容量。
- 位置 (position):下一个要读取或写入的数据的索引。缓冲区的位置不能为负,并且不能大于其限制
- 标记 (mark)与重置 (reset):标记是一个索引,通过 Buffer 中的 mark() 方法指定 Buffer 中一个特定的 position,之后可以通过调用 reset() 方法恢复到这 个 position.
- 标记、位置、限制、容量遵守以下不变式: 0 <= mark <= position <= limit <= capacity
- Buffer 的常用方法
- Buffer 中的重要概念:
- 缓冲区的数据操作
- Buffer 所有子类提供了两个用于数据操作的方法:get() 与 put() 方法
- 获取 Buffer 中的数据
get() :读取单个字节
get(byte[] dst):批量读取多个字节到 dst 中
get(int index):读取指定索引位置的字节(不会移动 position) - 放入数据到 Buffer 中
put(byte b):将给定单个字节写入缓冲区的当前位置
put(byte[] src):将 src 中的字节写入缓冲区的当前位置
put(int index, byte b):将指定字节写入缓冲区的索引位置(不会移动 position)
- 获取 Buffer 中的数据
- Buffer 所有子类提供了两个用于数据操作的方法:get() 与 put() 方法
package com.wyz.nio;
import org.junit.Test;
import java.nio.ByteBuffer;
/**
* 一、缓冲区(Buffer):在java NIO 中负责数据的存取。缓冲区就是数组。用于存储不同数据类型的数据。
* 根据数据类型的不同(boolean除外),提供了相应的数据类型缓冲区。
* ByteBuffer
* CharBuffer
* ShortBuffer
* IntBuffer
* LongBuffer
* FloatBuffer
* DoubleBuffer
* 上述缓冲区的管理方式几乎一致,通过allocate() 获取缓冲区。
* <p>
* 二、缓冲区存取数据的两个核心方法:
* put(): 存入数据到缓冲区中
* get(): 获取缓冲区的数据
* 三、缓冲区中的四个核心属性
* private int position = 0;: 位置,表示缓冲区中正在操作数据的位置。
* private int limit; :界限,表示缓冲区中可以操作的数据大小。(limit 后数据不能进行读写)
* private int capacity; :容量,表示缓冲区中最大存储数据的容量。一旦声明不能改变。
* private int mark = -1; 标记,表示记录当前position的位置。可以通过reset()恢复到mark的位置。
*
* 关系:-1 <= mark <= position <= limit <= capacity
*
* 直接缓冲区 和 非直接缓冲区:
* 1.非直接缓冲区:通过allocate() 方法分配缓冲区,将缓冲区建立在JVM 的内存中
* 2.直接缓冲区:通过allocateDirect() 方法分配直接缓冲区,将缓冲区建立在物理内存中。
* @author WangChong
*/
public class TestBuffer {
@Test
public void test1() {
String str = "abcde";
//1.分配一个指定大小的缓冲区
ByteBuffer byteBuffer = ByteBuffer.allocate(1024);
System.out.println("---------- allocate------");
System.out.println("位置:" + byteBuffer.position());
System.out.println("界限:" + byteBuffer.limit());
System.out.println("容量:" + byteBuffer.capacity());
System.out.println("标记:" + byteBuffer.mark());
//2.利用put()方法 存入数据到缓冲区去
byteBuffer.put(str.getBytes());
System.out.println("---------- put()------");
System.out.println("位置:" + byteBuffer.position());
System.out.println("界限:" + byteBuffer.limit());
System.out.println("容量:" + byteBuffer.capacity());
System.out.println("标记:" + byteBuffer.mark());
//3.切换成读取数据的模式
byteBuffer.flip();
System.out.println("---------- flip()------");
System.out.println("位置:" + byteBuffer.position());
System.out.println("界限:" + byteBuffer.limit());
System.out.println("容量:" + byteBuffer.capacity());
System.out.println("标记:" + byteBuffer.mark());
//4.利用get()读取缓冲区中的数据
byte[] dst = new byte[byteBuffer.limit()];
byteBuffer.get(dst);
System.out.println(new String(dst, 0, dst.length));
System.out.println("---------- get()------");
System.out.println("位置:" + byteBuffer.position());
System.out.println("界限:" + byteBuffer.limit());
System.out.println("容量:" + byteBuffer.capacity());
System.out.println("标记:" + byteBuffer.mark());
//5.rewind() ---切换至 读模式 可重复读数据
byteBuffer.rewind();
System.out.println("---------- rewind()------");
System.out.println("位置:" + byteBuffer.position());
System.out.println("界限:" + byteBuffer.limit());
System.out.println("容量:" + byteBuffer.capacity());
System.out.println("标记:" + byteBuffer.mark());
//6.clear() :清空缓冲区 但是缓冲区中的数据依然存在,但是处于“被遗忘”状态
byteBuffer.clear();
System.out.println("---------- clear()------");
System.out.println("位置:" + byteBuffer.position());
System.out.println("界限:" + byteBuffer.limit());
System.out.println("容量:" + byteBuffer.capacity());
System.out.println("标记:" + byteBuffer.mark());
System.out.println(byteBuffer.get());
}
@Test
public void test2(){
String str ="abcde";
ByteBuffer buf = ByteBuffer.allocate(1024);
buf.put(str.getBytes());
buf.flip();
byte[] bytes = new byte[buf.limit()];
buf.get(bytes,0,2);
System.out.println(new String(bytes,0,2));
System.out.println(buf.position());
//mark()标记
buf.mark();
buf.get(bytes,2,2);
System.out.println(new String(bytes,2,2));
System.out.println(buf.position());
//reset() 恢复到mark的位置 (返回 position 和 limit 之间的元素个数)
buf.reset();
System.out.println(buf.position());
//判断缓冲区中是否还有剩余的数据
if(buf.hasRemaining()){
//获取缓冲区可以操作的数量
System.out.println(buf.remaining());
}
}
@Test
public void test3(){
//分配直接缓冲区
ByteBuffer byteBuffer = ByteBuffer.allocateDirect(1024);
System.out.println(byteBuffer.isDirect());
}
}
3.1.2.直接与非直接缓冲区
- 字节缓冲区要么是直接的,要么是非直接的。如果为直接字节缓冲区,则 Java 虚拟机会尽最大努力直接在此缓冲区上执行本机 I/O 操作。也就是说,在每次调用基础操作系统的一个本机 I/O 操作之前(或之后),虚拟机都会尽量避免将缓冲区的内容复制到中间缓冲区中(或从中间缓冲区中复制内容)。
- 直接字节缓冲区可以通过调用此类的 allocateDirect() 工厂方法来创建。此方法返回的缓冲区进行分配和取消分配所需成本通常高于非直接缓冲区。直接缓冲区的内容可以驻留在常规的垃圾回收堆之外,因此,它们对应用程序的内存需求量造成的影响可能并不明显。所以,建议将直接缓冲区主要分配给那些易受基础系统的本机 I/O 操作影响的大型、持久的缓冲区。一般情况下,最好仅在直接缓冲区能在程序性能方面带来明显好处时分配它们。
- 直接字节缓冲区还可以通过 FileChannel 的 map() 方法 将文件区域直接映射到内存中来创建。该方法返回MappedByteBuffer 。Java 平台的实现有助于通过 JNI 从本机代码创建直接字节缓冲区。如果以上这些缓冲区
中的某个缓冲区实例指的是不可访问的内存区域,则试图访问该区域不会更改该缓冲区的内容,并且将会在访问期间或稍后的某个时间导致抛出不确定的异常。 - 字节缓冲区是直接缓冲区还是非直接缓冲区可通过调用其 isDirect() 方法来确定。提供此方法是为了能够在性能关键型代码中执行显式缓冲区管理。
3.2.1.通道(Channel)
-
通道(Channel):由 java.nio.channels 包定义的。Channel 表示 IO 源与目标打开的连接。
Channel 类似于传统的“流”。只不过 Channel 本身不能直接访问数据,Channel 只能与Buffer 进行交互。
-
Java 为 Channel 接口提供的最主要实现类如下:
- FileChannel:用于读取、写入、映射和操作文件的通道。
- DatagramChannel:通过 UDP 读写网络中的数据通道。
- SocketChannel:通过 TCP 读写网络中的数据。
- ServerSocketChannel:可以监听新进来的 TCP 连接,对每一个新进来的连接都会创建一个 SocketChannel。
-
获取通道的一种方式是对支持通道的对象调用 getChannel() 方法。支持通道的类如下:
- FileInputStream
- FileOutputStream
- RandomAccessFile
- DatagramSocket
- Socket
- ServerSocket
获取通道的其他方式是使用 Files 类的静态方法 newByteChannel() 获取字节通道。或者通过通道的静态方法 open() 打开并返回指定通道。 - 将 Buffer 中数据写入 Channel
例如:
- 从 Channel 读取数据到 Buffer
例如:
- 从 Channel 读取数据到 Buffer
3.2.1.1.分散(Scatter)和聚集(Gather)
- 分散读取(Scattering Reads)是指从 Channel 中读取的数据“分散”到多个 Buffer 中。
注意:按照缓冲区的顺序,从 Channel 中读取的数据依次将 Buffer 填满。 - 聚集写入(Gathering Writes)是指将多个 Buffer 中的数据“聚集”到 Channel。
注意:按照缓冲区的顺序,写入 position 和 limit 之间的数据到 Channel 。
3.2.1.2.transferFrom()
- 将数据从源通道传输到其他 Channel 中:
3.2.1.3.transferTo()
- 将数据从源通道传输到其他 Channel 中:
package com.wyz.nio;
import org.junit.Test;
import java.io.*;
import java.nio.ByteBuffer;
import java.nio.CharBuffer;
import java.nio.MappedByteBuffer;
import java.nio.channels.FileChannel;
import java.nio.charset.CharacterCodingException;
import java.nio.charset.Charset;
import java.nio.charset.CharsetDecoder;
import java.nio.charset.CharsetEncoder;
import java.nio.file.Paths;
import java.nio.file.StandardOpenOption;
import java.time.Duration;
import java.time.Instant;
import java.util.Map;
import java.util.Set;
import java.util.SortedMap;
/**
* 一、通道(channel):用于源节点与目标节点的连接。在java NIO 中负责缓冲区中数据的传输。
* channel 本身不存储数据,因此需要配合缓冲区进行传输。
* <p>
* 二、 通道的主要实现类:
* java.nio.channels.Channel 接口
* |--FileChannel
* |--SocketChannel
* |--ServerSocketChannel
* |--DatagramChannel
* 三、获取通道:
* 1.java针对支持通道的类提供了getChannel()方法
* 本地IO:
* FileInputStream/FileOutputSteam
* RandomAccessFile
* 网络IO:
* Socket
* ServerSocket
* DatagramSocket
* 2.在jdk1.7 中的NIO.2 针对各个通道提供了静态方法open();
* 3.在jdk1.7中的NIO.2 的Files工具类的newByteChannel();
*
* 四、通道之间的数据传输
* transferForm()
* transferTo()
* 五、分散与聚集
* 分散读取(Scattering Reads):将通道中的数据分散到多个缓冲区中
* 聚集写入(Gather Writer):将多个缓冲区中的数据聚集到通道中
*
* 六、字符集:Charset
* 编码:字符串->字节数组
* 解码:字节数组->字符串
* @author WangChong
*/
public class TestChannel {
/**
* 1.利用通道完成文件的复制(非直接缓冲区)
*/
@Test
public void test1() {
Instant start = Instant.now();
FileInputStream fis = null;
FileOutputStream fos = null;
FileChannel inChannel = null;
FileChannel outChannel = null;
try {
fis = new FileInputStream("1.MP4");
fos = new FileOutputStream("2.MP4");
//1.获取通道
inChannel = fis.getChannel();
outChannel = fos.getChannel();
//2.分配指定大小的缓冲区
ByteBuffer buf = ByteBuffer.allocate(1024);
//3.将通道中的数据存入缓冲区中
while (inChannel.read(buf) != -1) {
buf.flip();//切换读取数据的模式
//4.将缓冲区中的数据写入通道
outChannel.write(buf);
buf.clear();//清空缓冲区
}
} catch (IOException e) {
e.printStackTrace();
} finally {
try {
if (null != outChannel) {
outChannel.close();
}
if (null != inChannel) {
inChannel.close();
}
if (null != fos) {
fos.close();
}
if (null != fis) {
fis.close();
}
} catch (IOException e) {
e.printStackTrace();
}
}
Instant end = Instant.now();
System.out.println("耗费时间为:"+ Duration.between(start,end).toMillis());
}
/**
* 使用直接缓冲区完成文件复制(内存映射文件)
* 这种方式(内存映射文件)快 但是会有问题会不稳定 看场景使用
*/
@Test
public void test2() throws IOException {
Instant start = Instant.now();
//jdk1.7方法
FileChannel inChannel = FileChannel.open(Paths.get("1.MP4"), StandardOpenOption.READ);
FileChannel outChannel = FileChannel.open(Paths.get("2.MP4"), StandardOpenOption.WRITE,StandardOpenOption.READ,StandardOpenOption.CREATE);
//内存映射文件
MappedByteBuffer inMappedBuf = inChannel.map(FileChannel.MapMode.READ_ONLY, 0, inChannel.size());
MappedByteBuffer outMappedBuf = outChannel.map(FileChannel.MapMode.READ_WRITE,0,inChannel.size());
//直接对缓冲区进行数据读写
byte[] bytes = new byte[inMappedBuf.limit()];
inMappedBuf.get(bytes);
outMappedBuf.put(bytes);
inChannel.close();
outChannel.close();
Instant end = Instant.now();
System.out.println("耗费时间为:"+ Duration.between(start,end).toMillis());
}
/**
* 通道之间的数据传输(直接缓冲区的方式)
*/
@Test
public void test3() throws IOException{
FileChannel inChannel = FileChannel.open(Paths.get("1.MP4"), StandardOpenOption.READ);
FileChannel outChannel = FileChannel.open(Paths.get("2.MP4"), StandardOpenOption.WRITE,StandardOpenOption.READ,StandardOpenOption.CREATE);
//inChannel.transferTo(0, inChannel.size(), outChannel);
outChannel.transferFrom(inChannel,0,inChannel.size());
inChannel.close();
outChannel.close();
}
/**
* 分散读取 和 聚集写入
* @throws IOException
*/
@Test
public void test4() throws IOException {
RandomAccessFile rw = new RandomAccessFile("1.txt", "rw");
//1.获取通道
FileChannel channel = rw.getChannel();
//2.分配指定大小的缓冲区
ByteBuffer buffer1 = ByteBuffer.allocate(100);
ByteBuffer buffer2 = ByteBuffer.allocate(1024);
//3.分散读取
ByteBuffer[] buffers = {buffer1,buffer2};
channel.read(buffers);
for (ByteBuffer b: buffers ) {
b.flip();
}
System.out.println(new String(buffers[0].array(),0,buffers[0].limit()));
System.out.println("-------------------------");
System.out.println(new String(buffers[1].array(),0,buffers[1].limit()));
//4.聚集写入
RandomAccessFile randomAccessFile = new RandomAccessFile("2.txt","rw");
FileChannel channel1 = randomAccessFile.getChannel();
channel1.write(buffers);
channel.close();
channel.close();
}
/**
* 获取字符集
*/
@Test
public void test5(){
SortedMap<String, Charset> map = Charset.availableCharsets();
Set<Map.Entry<String, Charset>> entries = map.entrySet();
for (Map.Entry<String, Charset> set:entries) {
System.out.println(set.getKey()+"="+set.getValue());
}
}
/**
* 编码和解码
* @throws CharacterCodingException
*/
@Test
public void test6() throws CharacterCodingException {
Charset gbk = Charset.forName("GBK");
//获取编码器
CharsetEncoder ce = gbk.newEncoder();
//获取解码器
CharsetDecoder cd = gbk.newDecoder();
CharBuffer allocate = CharBuffer.allocate(1024);
allocate.put("翀翀翀翀翀翀翀翀");
//flip() : https://blog.csdn.net/u013096088/article/details/78638245
allocate.flip();
//编码
ByteBuffer encode = ce.encode(allocate);
for (int i = 0; i <16 ; i++) {
System.out.println(encode.get());
}
//解码
encode.flip();
CharBuffer decode = cd.decode(encode);
System.out.println(decode.toString());
System.out.println("----------------------");
}
}
4. 文件通道(FileChannel)
5. NIO 的非阻塞式网络通信
5.1.阻塞与非阻塞
- 传统的 IO 流都是阻塞式的。也就是说,当一个线程调用 read() 或 write() 时,该线程被阻塞,直到有一些数据被读取或写入,该线程在此期间不能执行其他任务。因此,在完成网络通信进行 IO 操作时,由于线程会阻塞,所以服务器端必须为每个客户端都提供一个独立的线程进行处理,当服务器端需要处理大量客户端时,性能急剧下降。
- Java NIO 是非阻塞模式的。当线程从某通道进行读写数据时,若没有数据可用时,该线程可以进行其他任务。线程通常将非阻塞 IO 的空闲时间用于在其他通道上执行 IO 操作,所以单独的线程可以管理多个输入和输出通道。因此,NIO 可以让服务器端使用一个或有限几个线程来同时处理连接到服务器端的所有客户端。
5.2.选择器(Selector)
选择器(Selector) 是 SelectableChannle 对象的多路复用器,Selector 可以同时监控多个 SelectableChannel 的 IO 状况,也就是说,利用 Selector 可使一个单独的线程管理多个 Channel。Selector 是非阻塞 IO 的核心。
- SelectableChannle 的结构如下图:
- 选择器(Selector)的应用
- 创建 Selector :通过调用 Selector.open() 方法创建一个 Selector。
- 向选择器注册通道:SelectableChannel.register(Selector sel, int ops)
- 当调用 register(Selector sel, int ops) 将通道注册选择器时,选择器对通道的监听事件,需要通过第二个参数 ops 指定。
- 可以监听的事件类型(可使用 SelectionKey 的四个常量表示):
- 读 : SelectionKey.OP_READ (1)
- 写 : SelectionKey.OP_WRITE (4)
- 连接 : SelectionKey.OP_CONNECT (8)
- 接收 : SelectionKey.OP_ACCEPT (16)
- 若注册时不止监听一个事件,则可以使用“位或”操作符连接。
5.3. SelectionKey
- 当调用 register(Selector sel, int ops) 将通道注册选择器时,选择器对通道的监听事件,需要通过第二个参数 ops 指定。
- 可以监听的事件类型(可使用 SelectionKey 的四个常量表示):
- 读 : SelectionKey.OP_READ (1)
- 写 : SelectionKey.OP_WRITE (4)
- 连接 : SelectionKey.OP_CONNECT (8)
- 接收 : SelectionKey.OP_ACCEPT (16)
- 若注册时不止监听一个事件,则可以使用“位或”操作符连接。
- SelectionKey:表示 SelectableChannel 和 Selector 之间的注册关系。每次向选择器注册通道时就会选择一个事件(选择键)。选择键包含两个表示为整数值的操作集。操作集的每一位都表示该键的通道所支持的一类可选择操作
- Selector 的常用方法
5.4.SocketChannel
- Java NIO中的SocketChannel是一个连接到TCP网络套接字的通道。 操作步骤:
- 打开 SocketChannel
- 读写数据
- 关闭 SocketChannel
- Java NIO中的 ServerSocketChannel 是一个可以监听新进来的TCP连接的通道,就像标准IO中 的ServerSocket一样
5.5.DatagramChannel
- Java NIO中的DatagramChannel是一个能收发UDP包的通道。 操作步骤:
- 打开 DatagramChannel
- 接收/发送数据
package com.wyz.nio;
import org.junit.Test;
import java.io.IOException;
import java.net.InetSocketAddress;
import java.nio.ByteBuffer;
import java.nio.channels.Channel;
import java.nio.channels.FileChannel;
import java.nio.channels.ServerSocketChannel;
import java.nio.channels.SocketChannel;
import java.nio.file.Paths;
import java.nio.file.StandardOpenOption;
/**
* NIO 阻塞方式
* 一、使用NIO 完成网络通信的三个核心:
* 1.通道(Channel):负责连接
* java.nio.channels.Channel接口:
* |--SelectableChannel
* |--SocketChannel
* |--ServerSocketChannel
* |--DatagramChannel
* <p>
* |--Pipe.SinkChannel
* |--Pipe.SourceChannel
* 2.缓冲区(Buffer):负责数据的存取
* 3.选择器(Selector):是SelectableChannel 的多路复用器。用于监控SelectableChannel 的IO状态
*/
public class TestBlockingNIO {
//客户端
@Test
public void client() throws IOException {
//1.获取通道
SocketChannel socketChannel = SocketChannel.open(new InetSocketAddress("127.0.0.1", 9898));
FileChannel inChannel = FileChannel.open(Paths.get("1.png"), StandardOpenOption.READ);
//2.分配指定大小的缓冲区
ByteBuffer buffer = ByteBuffer.allocate(1024);
//3.读取本地文件,并发送到服务器端
while (inChannel.read(buffer) != -1) {
buffer.flip();
socketChannel.write(buffer);
buffer.clear();
}
//4.关闭通道
inChannel.close();
socketChannel.close();
}
//服务端
@Test
public void server() throws IOException {
//1.获取通道
ServerSocketChannel serverSocketChannel = ServerSocketChannel.open();
FileChannel channel = FileChannel.open(Paths.get("3.png"), StandardOpenOption.WRITE, StandardOpenOption.CREATE_NEW);
//2.绑定连接
serverSocketChannel.bind(new InetSocketAddress(9898));
//3.获取客户端连接的通道
SocketChannel accept = serverSocketChannel.accept();
//4.分配指定大小的缓冲区
ByteBuffer byteBuffer = ByteBuffer.allocate(1024);
//5.接收客户端的数据,并保存到本地
while (accept.read(byteBuffer) != -1) {
byteBuffer.flip();
channel.write(byteBuffer);
byteBuffer.clear();
}
//6.关闭通道
accept.close();
channel.close();
serverSocketChannel.close();
}
}
package com.wyz.nio;
import org.junit.Test;
import java.io.IOException;
import java.net.InetSocketAddress;
import java.nio.ByteBuffer;
import java.nio.channels.FileChannel;
import java.nio.channels.ServerSocketChannel;
import java.nio.channels.SocketChannel;
import java.nio.file.Paths;
import java.nio.file.StandardOpenOption;
/**
* NIO 阻塞方式
* 一、使用NIO 完成网络通信的三个核心:
* 1.通道(Channel):负责连接
* java.nio.channels.Channel接口:
* |--SelectableChannel
* |--SocketChannel
* |--ServerSocketChannel
* |--DatagramChannel
* <p>
* |--Pipe.SinkChannel
* |--Pipe.SourceChannel
* 2.缓冲区(Buffer):负责数据的存取
* 3.选择器(Selector):是SelectableChannel 的多路复用器。用于监控SelectableChannel 的IO状态
*/
public class TestBlockingNIO2 {
//客户端
@Test
public void client() throws IOException {
//1.获取通道
SocketChannel socketChannel = SocketChannel.open(new InetSocketAddress("127.0.0.1", 9898));
FileChannel inChannel = FileChannel.open(Paths.get("1.png"), StandardOpenOption.READ);
//2.分配指定大小的缓冲区
ByteBuffer buffer = ByteBuffer.allocate(1024);
//3.读取本地文件,并发送到服务器端
while (inChannel.read(buffer) != -1) {
buffer.flip();
socketChannel.write(buffer);
buffer.clear();
}
//结束socket
socketChannel.shutdownOutput();
//4.接收服务端的反馈
int len = 0;
while ((len = socketChannel.read(buffer)) != -1){
buffer.flip();
System.out.println(new String(buffer.array(),0,len));
buffer.clear();
}
//5.关闭通道
inChannel.close();
socketChannel.close();
}
//服务端
@Test
public void server() throws IOException {
//1.获取通道
ServerSocketChannel serverSocketChannel = ServerSocketChannel.open();
FileChannel channel = FileChannel.open(Paths.get("3.png"), StandardOpenOption.WRITE, StandardOpenOption.CREATE_NEW);
//2.绑定连接
serverSocketChannel.bind(new InetSocketAddress(9898));
//3.获取客户端连接的通道
SocketChannel accept = serverSocketChannel.accept();
//4.分配指定大小的缓冲区
ByteBuffer byteBuffer = ByteBuffer.allocate(1024);
//5.接收客户端的数据,并保存到本地
while (accept.read(byteBuffer) != -1) {
byteBuffer.flip();
channel.write(byteBuffer);
byteBuffer.clear();
}
//6.发送反馈给客户端
byteBuffer.put("服务端接收数据成功".getBytes());
//6.关闭通道
accept.close();
channel.close();
serverSocketChannel.close();
}
}
package com.wyz.nio;
import org.junit.Test;
import java.io.IOException;
import java.net.InetSocketAddress;
import java.nio.ByteBuffer;
import java.nio.channels.*;
import java.time.LocalDateTime;
import java.util.Date;
import java.util.Iterator;
import java.util.Scanner;
/**
* NIO 非阻塞方式
* 一、使用NIO 完成网络通信的三个核心:
* 1.通道(Channel):负责连接
* java.nio.channels.Channel接口:
* |--SelectableChannel (TCP)
* |--SocketChannel (TCP)
* |--ServerSocketChannel (TCP)
* |--DatagramChannel (UDP)
* <p>
* |--Pipe.SinkChannel
* |--Pipe.SourceChannel
* 2.缓冲区(Buffer):负责数据的存取
* 3.选择器(Selector):是SelectableChannel 的多路复用器。用于监控SelectableChannel 的IO状态
*/
public class TestNonBlockingNIO {
//客户端
@Test
public void client() throws IOException {
//1.获取通道
SocketChannel socketChannel = SocketChannel.open(new InetSocketAddress("127.0.0.1", 9898));
//2.切换成非阻塞模式
socketChannel.configureBlocking(false);
//3.分配指定大小的缓冲区
ByteBuffer buffer = ByteBuffer.allocate(1024);
//4.发送数据给服务端
Scanner scanner = new Scanner(System.in);
while (scanner.hasNext()) {
String str = scanner.next();
buffer.put((LocalDateTime.now().toString() + "\n" + str).getBytes());
buffer.flip();
socketChannel.write(buffer);
}
// buffer.put((LocalDateTime.now().toString() + "\n").getBytes());
// buffer.flip();
// socketChannel.write(buffer);
//5.关闭通道
socketChannel.close();
}
//服务端
@Test
public void server() throws IOException {
//1.获取通道
ServerSocketChannel serverSocketChannel = ServerSocketChannel.open();
//2.切换非阻塞模式
serverSocketChannel.configureBlocking(false);
//3.绑定连接
serverSocketChannel.bind(new InetSocketAddress(9898));
//4.获取选择器
Selector selector = Selector.open();
//5.将通道注册到选择器上,并且指定“监听接收事件”
serverSocketChannel.register(selector, SelectionKey.OP_ACCEPT);
//6.轮询式获取选择器上已经“准备就绪”的事件
while (selector.select() > 0) {
//7.获取当前选择器上所有注册的”选择键“(已就绪的监听的事件)
Iterator<SelectionKey> it = selector.selectedKeys().iterator();
while (it.hasNext()) {
//8.获取准备“就绪”的事件
SelectionKey sk = it.next();
//9.判断具体是什么事件准备就绪
if (sk.isAcceptable()) {
//10.若“接收就绪”,获取客户端连接
SocketChannel socketChannel = serverSocketChannel.accept();
//11.切换非阻塞模式
socketChannel.configureBlocking(false);
//12.将该通道注册到选择器上
socketChannel.register(selector, SelectionKey.OP_READ);
} else if (sk.isReadable()) {
//13.获取当前选择器上“读就绪”状态的通道
SocketChannel socketChannel = (SocketChannel) sk.channel();
//14.读取数据
ByteBuffer buffer = ByteBuffer.allocate(1024);
int len = 0;
while ((len = socketChannel.read(buffer)) > 0) {
buffer.flip();
System.out.println(new String(buffer.array(), 0, len));
buffer.clear();
}
}
}
//15.取消选择键SelectionKey
it.remove();
}
}
}
package com.wyz.nio;
import org.junit.Test;
import java.io.IOException;
import java.net.InetSocketAddress;
import java.nio.ByteBuffer;
import java.nio.channels.*;
import java.time.LocalDateTime;
import java.util.Iterator;
import java.util.Scanner;
/**
* NIO 非阻塞方式 --- DatagramChannel(UDP)
* 一、使用NIO 完成网络通信的三个核心:
* 1.通道(Channel):负责连接
* java.nio.channels.Channel接口:
* |--SelectableChannel (TCP)
* |--SocketChannel (TCP)
* |--ServerSocketChannel (TCP)
* |--DatagramChannel (UDP)
* <p>
* |--Pipe.SinkChannel
* |--Pipe.SourceChannel
* 2.缓冲区(Buffer):负责数据的存取
* 3.选择器(Selector):是SelectableChannel 的多路复用器。用于监控SelectableChannel 的IO状态
*/
public class TestNonBlockingNIO2 {
@Test
public void send() throws IOException {
DatagramChannel dc = DatagramChannel.open();
dc.configureBlocking(false);
ByteBuffer buf = ByteBuffer.allocate(1024);
Scanner scanner = new Scanner(System.in);
while (scanner.hasNext()) {
String str = scanner.next();
buf.put((LocalDateTime.now() + "\n" + str).getBytes());
buf.flip();
buf.clear();
dc.send(buf, new InetSocketAddress("127.0.0.1", 9898));
}
dc.close();
}
@Test
public void receive() throws IOException {
DatagramChannel dc = DatagramChannel.open();
dc.configureBlocking(false);
dc.bind(new InetSocketAddress(9898));
Selector selector = Selector.open();
dc.register(selector,SelectionKey.OP_READ);
while (selector.select()>0){
Iterator<SelectionKey> it = selector.selectedKeys().iterator();
while (it.hasNext()){
SelectionKey sk = it.next();
if(sk.isReadable()){
ByteBuffer buf = ByteBuffer.allocate(1024);
dc.receive(buf);
buf.flip();
System.out.println(new String(buf.array(),0,buf.limit()));
buf.clear();
}
}
it.remove();
}
}
}
6. 管道(Pipe)
Java NIO 管道是2个线程之间的单向数据连接。Pipe有一个source通道和一个sink通道。数据会
被写到sink通道,从source通道读取。
- 向管道写数据
- 从管道读取数据
-
从读取管道的数据,需要访问source通道。
-
调用source通道的read()方法来读取数据
-
7. Java NIO2 (Path、Paths 与 Files )
随着 JDK 7 的发布,Java对NIO进行了极大的扩展,增强了对文件处理和文件系统特性的支持,以至于我们称他们为 NIO.2。因为 NIO 提供的一些功能,NIO已经成为文件处理中越来越重要的部分。
7.1.Path 与 Paths
- java.nio.file.Path 接口代表一个平台无关的平台路径,描述了目录结构中文件的位置。
- Paths 提供的 get() 方法用来获取 Path 对象:
- Path get(String first, String … more) : 用于将多个字符串串连成路径。
- Path 常用方法:
- boolean endsWith(String path) : 判断是否以 path 路径结束
- boolean startsWith(String path) : 判断是否以 path 路径开始
- boolean isAbsolute() : 判断是否是绝对路径
- Path getFileName() : 返回与调用 Path 对象关联的文件名
- Path getName(int idx) : 返回的指定索引位置 idx 的路径名称
- int getNameCount() : 返回Path 根目录后面元素的数量
- Path getParent() :返回Path对象包含整个路径,不包含 Path 对象指定的文件路径
- Path getRoot() :返回调用 Path 对象的根路径
- Path resolve(Path p) :将相对路径解析为绝对路径
- Path toAbsolutePath() : 作为绝对路径返回调用 Path 对象
- String toString() : 返回调用 Path 对象的字符串表示形式
7.2.Files 类
-
java.nio.file.Files 用于操作文件或目录的工具类。
-
Files常用方法:
- Path copy(Path src, Path dest, CopyOption … how) : 文件的复制
- Path createDirectory(Path path, FileAttribute<?> … attr) : 创建一个目录
- Path createFile(Path path, FileAttribute<?> … arr) : 创建一个文件
- void delete(Path path) : 删除一个文件
- Path move(Path src, Path dest, CopyOption…how) : 将 src 移动到 dest 位置
- long size(Path path) : 返回 path 指定文件的大小
-
Files常用方法:用于判断
- boolean exists(Path path, LinkOption … opts) : 判断文件是否存在
- boolean isDirectory(Path path, LinkOption … opts) : 判断是否是目录
- boolean isExecutable(Path path) : 判断是否是可执行文件
- boolean isHidden(Path path) : 判断是否是隐藏文件
- boolean isReadable(Path path) : 判断文件是否可读
- boolean isWritable(Path path) : 判断文件是否可写
- boolean notExists(Path path, LinkOption … opts) : 判断文件是否不存在
- public static A readAttributes(Path path,Class type,LinkOption…
options) : 获取与 path 指定的文件相关联的属性。
-
Files常用方法:用于操作内容
- SeekableByteChannel newByteChannel(Path path, OpenOption…how) : 获取与指定文件的连接,
how 指定打开方式。 - DirectoryStream newDirectoryStream(Path path) : 打开 path 指定的目录
- InputStream newInputStream(Path path, OpenOption…how):获取 InputStream 对象
- OutputStream newOutputStream(Path path, OpenOption…how) : 获取 OutputStream 对象
- SeekableByteChannel newByteChannel(Path path, OpenOption…how) : 获取与指定文件的连接,
7.3.自动资源管理
- Java 7 增加了一个新特性,该特性提供了另外一种管理资源的方式,这种方式能自动关闭文件。这个特性有时被称为自动资源管理(Automatic Resource Management, ARM), 该特性以 try 语句的扩展版为基础。自动资源管理主要用于,当不再需要文件(或其他资源)时,可以防止无意中忘记释放它们。
自动资源管理基于 try 语句的扩展形式:
try(需要关闭的资源声明){
//可能发生异常的语句
}catch(异常类型 变量名){
//异常的处理语句
}
……
finally{
//一定执行的语句
}
当 try 代码块结束时,自动释放资源。因此不需要显示的调用 close() 方法。该形式也称为“带资源的 try 语句”。
- 注意:
①try 语句中声明的资源被隐式声明为 final ,资源的作用局限于带资源的 try 语句
②可以在一条 try 语句中管理多个资源,每个资源以“;” 隔开即可。
③需要关闭的资源,必须实现了 AutoCloseable 接口或其自接口 Closeable