Java Nio 理解与使用
Java Nio 的介绍与基本使用
# NIO
与 IO
区别
IO | NIO |
---|---|
面向流(Stream Oriented) | 面向缓冲区(Buffer Oriented) |
阻塞 IO(Blocking IO) | 非阻塞 IO(Non Blocking IO) |
无 | 选择器(Selectors) |
# 通道和缓冲区
- 通道(Channel)和缓冲区(Buffer)。通道标识打开到 IO 设备(例如:文件、套接字)的连接。
- 若要使用 NIO 系统,需要获取用于连接 IO 设备的通道以及用于容纳数据的缓冲区。然后操作缓冲区,对数据进行处理。
- 简单的说就是:Channel 负责传输数据,Buffer 负责存储数据
# 缓冲区(Buffer)
缓冲区:一个用于特定基本数据类型的容器,由 java.nio 包定义的,所有缓冲区都是 Buffer 抽象类的子类。
Java NIO 中的 Buffer 主要用于与 NIO 通道进行交互,数据是从通道读入缓冲区,从缓冲区写入通道的。
缓冲区就像一个数组,可以保存多个相同类型的数据,根据数据类型的不同(boolean除外),有以下Buffer常用子类:
- ByteBuffer
- CharBuffer
- ShortBuffer
- IntBuffer
- LongBuffer
- FloatBuffer
- DoubleBuffer
以上数据类型除了数据类型不同,操作方式类似,都是通过以下方法获取 Buffer 对象
// 创建一个容量为 capacity 的 XXXBuffer 对象 static XxxBuffer allocate(int capacity)
1
2
# 缓冲区的基本属性
容量(capacity):表示 Buffer 最大数据容量,缓冲区容量不能为负,并且创建以后不能修改
限制(limit):第一个不应该读取或写入的数据的索引,即位于 limit 后的数据不可读写。缓冲区的限制不能为负,并且不能大于其限制。表示缓冲区可以操作数据的大小
位置(position):下一个要读取或写入的数据的索引。缓冲区的位置不能为负,并且不能大于其限制。表示缓冲区中正在操作数据的位置
标记(mark)与重置(reset):标记是一个索引,通过 Buffer 中的 mark() 方法指定 Buffer 中的一个特定的 position ,之后可以通过调用 reset() 方法恢复到这个 position。记录的是当前 position 的位置。
标记、位置、限制、容量遵守以下不变式:
0 <= mark <= position <= limit <= capacicy
# Buffer 常用方法
方法 | 描述 |
---|---|
Buffer clear() | 清空缓冲区并返回对缓冲区的引用 |
Buffer flip() | 将缓冲区的界限限制为当前位置,并将当前位置重置为0 |
int capacity() | 返回 Buffer 的 capacity 大小 |
boolean hasRemaining() | 判断缓冲区是否还有元素 |
int limit() | 返回 Buffer 的界限(limit) 的位置 |
Buffer limit(int n) | 将设置缓冲区界限为 n,并返回一个具有新 limit 的缓冲区对象 |
Buffer mark() | 对缓冲区设置标记 |
int position() | 返回缓冲区的当前位置 position |
Buffer position(int n) | 将设置缓冲区的当前位置为n,并返回修改后的 Buffer 对象 |
int remaining() | 返回 position 和 limit 之间的元素个数 |
Buffer reset() | 将位置 position 转到以前设置的 mark 所在的位置 |
Buffer rewind() | 将位置设为 0,取消设置的 mark |
# 缓冲区的数据操作
Buffer 所有的子类提供了两个用于数据操作的方法: get() 与 put() 方法
获取 Buffer 中的数据
// 读取单个字节 get() // 批量读取多个字节到dst中 get(byte[] dst) // 读取指定索引位置的字节(不会移动 position) get(int index)
1
2
3
4
5
6
7
8放入数据到 Buffer 中
// 将给定的单个字节写入到缓冲区的当前位置 put(byte b) // 将 src 的字节写入缓冲区的当前位置 put(byte[] src) // 将指定字节写入到缓冲区的索引位置(不会移动 position) put(int index,byte b)
1
2
3
4
5
6
7
8
# 直接与非直接缓冲区
字节缓冲区要么是直接的,要么是非直接的。如果为直接字节缓冲区,则 java 虚拟机会尽最大努力直接在此缓冲区执行本机 I/O 操作,也就是说,在每次调用基础操作系统的一个本机 I/O 操作之前(或之后),虚拟机都会尽量避免将缓冲区的内容复制到中间缓冲区(或冲中间缓冲区中复制内容)
直接字节缓冲区可以通过调用此类的 allocateDirect() 工厂方法创建,此方法返回的缓冲区进行分配和取消分配所需成本通常高于非直接缓冲区。直接缓冲区的内容可以驻留在常规的垃圾回收堆之外,因此,他们对应用程序的内存需求量造成的影响可能不明显。所以,建议将直接缓冲区主要分配给那些易受基础系统的本机 I/O 操作影响的大型、持久的缓冲区。一般情况下。最好仅在直接缓冲区能在程序性能方面带来明显好处时分配他们。
直接字节缓冲区还可以通过 FileChannel 的 map() 方法将文件区域直接映射到内存中来创建。该方法返回 MappedByteBuffer。java 平台的实现有助于通过 JNI 从本机代码创建直接字节缓冲区。如果以上这些缓冲区中的某个缓冲区实例指向的是不可访问的内存区域,则试图访问该区域不会更改缓冲区的内容,并且将会在访问期间或稍后的某个时间导致抛出不确定的异常。
字节缓冲区是直接缓冲区还是非直接缓冲区还可以以通过调用其 isDirect() 方法来确定。提供此方法是为了能够在性能关键型代码中执行显式缓冲区管理。
非直接缓冲区:通过 allocate() 方法分配缓冲区,将缓冲区建立在 JVM 内存中
直接缓冲区:
- 通过 allocateDirect() 方法分配直接缓冲区,将缓冲区建立在物理内存中
- 此方法返回的缓冲区进行分配和取消分配所需成本通常高于非直接缓冲区
- 直接缓冲区的内容可以驻留在常规的垃圾回收堆之外
# 通道(Channel)
通道:由 java.nio.channels 包定义,表示 IO 源于目标打开的连接。Channel 类似于传统的 “流”。只不过 Channel 本身不能直接访问数据,Channel 只能与 Buffer 进行交互。
java 为 Channel 接口提供的最主要实现类如下:
- FileChannel :用于读取、写入、映射和操作文件的通道
- DatagramChannel:通过 UDP 读写网络中的数据通信
- SocketChannel:通过 TCP 读写网络中的数据
- ServerSocketChannel:可以监听新进来的 TCP 连接,对每一个新进来的连接都会创建一个 SocketChannel。
获取通道的一种方式是对支持通道的对象调用 getChannel() 方法。支持通道的类如下:
FileInputStream
FileOutputStream
RandomAccessFile
DatagramSocket
Socket
ServerSocket
获取通道的其他方式是使用 Files 类的静态方法 newByteChannel()
# 通道常用方法
方法 | 描述 |
---|---|
int read(ByteBuffer dst) | 从 Channel 中读取数据到 ByteBuffer |
long read(ByteBuffer[] dsts) | 将 Channel 中的数据 “分散”读取到 ByteBuffer[] |
int write(ByteBuffer src) | 将 ByteBuffer 中的数据写入到 Channel |
long write(ByteBuffer[] srcs) | 将 ByteBuffer[] 中的数据“聚集”写入到 Channel |
long position() | 返回此通道的文件位置 |
FileChannel position(long p) | 设置此通道的文件位置 |
long size() | 返回此通道的文件的当前大小 |
FileChannel truncate(long s) | 将此通道的文件截取为指定大小 |
void force(boolean metaData) | 强制将所有对此通道的文件更新写入到存储设备中 |
分散(Scatter)与聚集(Gather)
- 分散读取(Scattering Reads):将通道中的数据分散到多个缓冲区中
- 聚集写入(Gathering Writes):将多个缓冲区中的数据聚集到通道中
# 选择器(Selector)
选择器(Selector) 是 SelectableChannle 对象的多路复用器,Selector 可以同时监控多个 SelectableChannel 的 IO 状况,也就是说,利用 Selector可使一个单独的线程管理多个 Channel。Selector 是非阻塞 IO 的核心。
/* IO 完成网络通信的三个核心:
*
* 1、通道(Channel):负责连接
* java.nio.channels.Channel 接口:
* |--SelectableChannel
* |--SocketChannel
* |--ServerSocketChannel
* |--DatagramChannel
*
* |--Pipe.SinkChannel
* |--Pipe.SourceChannel
*
* 2.缓冲区(Buffer):负责数据的存取
*
* 3.选择器(Selector):是 SelectableChannel 的多路复用器。用于监控SelectableChannel的IO状况
*/
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
# 常用方法
方法 | 描述 |
---|---|
Set keys() | 所有的 SelectionKey 集合。代表注册在该 Selector 上的 Channel |
Set selectedKeys() | 被选择的 SelectionKey 集合。返回此 Selector 的已选择键集 |
int select() | 监控所有注册的 Channel 当他们中有需要处理的 IO 操作时,该方法但会,并将对应的 SelectionKey 加入被选择的 SelectionKey 集合中,该方法返回这些 Channel 的数量 |
int select(long timeout) | 可以设置超时时长的 select() 操作 |
int selectNow() | 执行一个立即返回的 select() 操作,该方法不会阻塞线程 |
Selector wakeup() | 使一个还未返回的 select() 方法立即返回 |
void close() | 关闭选择器 |
# SelectionKey
当调用 register(Selector sel,int ops) 将通道注册选择器时,选择器对通道的监听事件,需要通过第二个参数 ops
指定。
可以监听的时间类型(由 SelectionKey 的四个常量表示)
读:
SelectionKey.OP_READ (1)
写:
SelectionKey.OP_WRITE (4)
连接:
SelectionKey.OP_CONNECT (8)
接收:
SelectionKey.OP_ACCEPT (16)
若注册时不止监听一个事件,可以使用“位或”操作符连接
SelectionKey:表示 SelectableChannel 和 Selector 之间的注册关系。每次向选择器注册通道时就会选择一个事件(选择键)。选择键包含两个表示为整数值的操作集。操作集的每一位都表示该键的通道所支持的一类可选择操作。
# 常用方法
方法 | 描述 |
---|---|
int interestOps() | 获取感兴趣事件集合 |
int readyOps() | 获取通道已经准备就绪的操作的集合 |
SelectableChannel channel() | 获取注册通道 |
Selector selector() | 返回选择器 |
boolean isReadable() | 检测 Channel 中读事件是否就绪 |
boolean isWritable() | 检测 Channel 中写事件是否就绪 |
boolean isConnectable() | 检测 Channel 中连接是否就绪 |
boolean isAcceptable() | 检测 Channel 中接收是否就绪 |
# Path
、Paths
、Files
java.nio.file.Path 接口代表一个平台无关的平台路径,描述了目录结构中文件的位置。
Paths 提供的 get() 方法用来获取 Path 对象:Path get(String first, String … more) : 用于将多个字符串串连成路径。
Path 常用方法:
boolean endsWith(String path) : 判断是否以 path 路径结束
boolean startsWith(String path) : 判断是否以 path 路径开始
boolean isAbsolute() : 判断是否是绝对路径
Path getFileName() : 返回与调用 Path 对象关联的文件名
Path getName(int idx) : 返回的指定索引位置 idx 的路径名称
int getNameCount() : 返回Path 根目录后面元素的数量
Path getParent() :返回Path对象包含整个路径,不包含Path 对象指定的文件路径
Path getRoot() :返回调用 Path 对象的根路径
Path resolve(Path p) :将相对路径解析为绝对路径
Path toAbsolutePath() : 作为绝对路径返回调用 Path 对象
String toString() : 返回调用 Path 对象的字符串表示形式
Files 类
java.nio.file.Files 用于操作文件或目录的工具类。
Files常用方法:
Path copy(Path src, Path dest, CopyOption … how) : 文件的复制
Path createDirectory(Path path, FileAttribute< ? > … attr) : 创建一个目录
Path createFile(Path path, FileAttribute< ? > … arr) : 创建一个文件
void delete(Path path) : 删除一个文件
Path move(Path src, Path dest, CopyOption…how) : 将 src 移动到 dest 位置
long size(Path path) : 返回 path 指定文件的大小
Files常用方法:用于判断
boolean exists(Path path, LinkOption … opts) : 判断文件是否存在
boolean isDirectory(Path path, LinkOption … opts) : 判断是否是目录
boolean isExecutable(Path path) : 判断是否是可执行文件
boolean isHidden(Path path) : 判断是否是隐藏文件
boolean isReadable(Path path) : 判断文件是否可读
boolean isWritable(Path path) : 判断文件是否可写
boolean notExists(Path path, LinkOption … opts) : 判断文件是否不存在
public static < A extends BasicFileAttributes> A readAttributes(Path path,Class< A > type,LinkOption…options) : 获取与 path 指定的文件相关联的属性。
Files常用方法:用于操作内容
SeekableByteChannel newByteChannel(Path path, OpenOption…how) : 获取与指定文件的连接,how 指定打开方式。
DirectoryStream newDirectoryStream(Path path) : 打开 path 指定的目录
InputStream newInputStream(Path path, OpenOption…how):获取 InputStream 对象
OutputStream newOutputStream(Path path, OpenOption…how) : 获取 OutputStream 对象
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43