【Java核心-基础】DirectBuffer 和 MappedByteBuffer

最新推荐文章于 2023-03-24 11:15:21 发布
最新推荐文章于 2023-03-24 11:15:21 发布
阅读量1.5k 收藏 5
点赞数 1
分类专栏： Java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hchaoh/article/details/103902910
版权

 

.

简述

Java NIO 中提供了 DirectBuffer、MappedByteBuffer 以提高IO效率。

 

 

DirectBuffer

DirectBuffer 占用的是 堆外内存。JVM 会在 DirectBuffer 上直接使用 “本地IO操作”（Native I/O Operations）。

Buffer 的地址对“本地IO操作”非常关键。所以在操作 堆内Buffer 时，JVM需要将其数据先复制到一个堆外Buffer，让“本地IO操作”读写此堆外Buffer。

这样可以防止GC活动改变堆内Buffer地址的影响（寻址更简单）。

所以使用DirectBuffer可以避免额外的数据复制，提高IO效率。同时也可以降低GC的工作量。

 

当需要 容量较大 且 长期使用 的缓存时可考虑使用 DirectBuffer。当然也需要测试确定是否能获得性能提升。

Java代码

 

  1. Byt

最低0.47元/天 解锁文章
一个被IT搞的
关注
  • 1
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
深入理解DirectBuffer
云袭的专栏
04-22 8820
介绍    最近在工作中使用到了DirectBuffer来进行临时数据的存放，由于使用的是堆外内存，省去了数据到内核的拷贝，因此效率比用ByteBuffer要高不少。之前看过许多介绍DirectBuffer的文章，在这里从源码的角度上来看一下DirectBuffer的原理。用户态和内核态    Intel的 X86架构下，为了实现外部应用程序与操作系统运行时的隔离，分为了Ring0-Ring3四种...
再谈MappedByteBuffer与DirectBuffer
04-11 1756
去年年底的时候，为我们的分布式消息队列中间件写源码分析系列文章的时候，看到我们的存储部分是参考了RocketMQ的实现。这部分有一个很有意思的内容 public AppendMessageResult appendMessage(final Object msg, final AppendMessageCallback cb) throws IOException { ...
【Java8源码分析】NIO包-Buffer类：内存映射文件DirectByteBuffer与MappedByteBuffer（二）
linxd
06-08 7083
转载请注明出处：http://blog.csdn.net/linxdcn/article/details/72896616
Java-DirectByteBuffer、MappedByteBuffer
ALONG的博客
03-24 449
假设你的计算机是32位，那么它的地址总线是32位的，也就是它可以寻址00xFFFFFFFF（4G）的地址空间，但如果你的计算机只有256M的物理内存0x0x0FFFFFFF（256M），同时你的进程产生了一个不在这256M地址空间中的地址，那么计算机该如何处理呢？回答这个问题前，先说明计算机的内存分页机制。
DirectByteBuffer与MappedByteBuffer
P19777的博客
03-24 2358
在此之前，我一直以为这两个类之间是完全不同的东西，因为他们的理念并不相同，一个是在堆外分配内存，一个是使用内存映射（虽然其也是占用了堆外内存），先引用大佬的文章 占小狼:深入浅出MappedByteBuffer 前言 java io操作中通常采用BufferedReader，BufferedInputStream等带缓冲的IO类处理大文件，不过java nio中引入了一种基于MappedByte...
java directbuffer_java基础-DirectByteBuffer
weixin_39901077的博客
02-13 226
我们可以通过ByteBuffer创建一块直接内存ByteBuffer direct = ByteBuffer.allocateDirect(8);//创建8字节空间的直接内存来看这块内存是如何被分配的1 public static ByteBuffer allocateDirect(intcapacity) {2 return newDirectByteBuffer(cap...
java 中Buffer源码的分析
08-30
Buffer 是 Java 中一个非常重要的知识点，Direct Buffer 和 Heap Buffer 是两种不同的 Buffer，Direct Buffer 可以提高效率和减少GC 的频率，而 Heap Buffer 需要进行数据复制，因此效率较低。在实际开发中，应该...
java-instantcode-developing.rar_java nio
09-23
Java NIO的核心组件包括通道（Channel）、缓冲区（Buffer）和选择器（Selector）。在本压缩包"java-instantcode-developing.rar_java nio"中，主要探讨的是如何使用Java NIO来开发应用程序。 1. **通道(Channel)**...
java-io-examples
07-03
7. 文件通道和内存映射文件：NIO（New IO）引入了通道（Channel）和缓冲区（Buffer）的概念，使得数据可以直接在通道间传输，而内存映射文件（MappedByteBuffer）允许直接操作文件，提高大文件处理效率。 8. 打包和...
mmfinvoker:简单的进程间 java 请求-响应库
07-17
NIO的核心组件包括通道（Channel）、缓冲区（Buffer）和选择器（Selector）。在mmfinvoker中，MappedByteBuffer是NIO缓冲区的一个特殊类型，它允许将文件直接映射到Java虚拟机的内存，使得对文件的操作就像操作内存...
java代码-门店批量分片
07-15
在Java编程领域，"门店批量分片"通常指的是在处理大量数据时，为了提高效率和降低内存消耗，将数据集分成多个小块（分片）分别处理的技术。这里提到的"java代码-门店批量分片"可能是一个Java程序，用于处理例如门店...
java directbuffer_Java中的Heap Buffer与Direct Buffer
weixin_35076990的博客
02-13 718
在使用Java NIO时，会经常和ByteBuffer打交道(吐槽下，每次手动flip切换读写模式太不友好)。在空Buffer创建时，有两种方式：ByteBuffer.allocateDirect(capacity)ByteBuffer.allocate(capacity)那么这两种Buffer的分配又有什么不一样呢？Heap Buffer字面意思，在java heap上分配的内存。此块内存区域受...
java heap buffer direct buffer_4. 《Java源码解析》NIO中的heap Buffer和direct Buffer区别
weixin_42572134的博客
02-26 109
heap buffer 和 direct buffer区别在Java的NIO中，我们一般采用ByteBuffer缓冲区来传输数据，一般情况下我们创建Buffer对象是通过ByteBuffer的两个静态方法：ByteBuffer.allocate(int capacity);ByteBuffer.wrap(byte[] array);查看JDK的NIO的源代码关于这两个部分：/**allocate(...
2013-01-14 14:50 Direct Buffer vs. Heap Buffer
kman2010的博客
02-01 88
1、 劣势：创建和释放Direct Buffer的代价比Heap Buffer得要高； 2、 区别：Direct Buffer不是分配在堆上的，它不被GC直接管理（但Direct Buffer的JAVA对象是归GC管理的，只要GC回收了它的JAVA对象，操作系统才会释放Direct Buffer所申请的空间），它似乎给人感觉是“内核缓冲区（buffer in kernel）”。Heap Bu...
JAVA NIO之Direct Buffer 与 Heap Buffer的区别？
eyesmore's tech life
07-26 261
个人总结 Direct Buffer vs. Heap Buffer 1、 劣势：创建和释放Direct Buffer的代价比Heap Buffer得要高； 2、 区别：Direct Buffer不是分配在堆上的，它不被GC直接管理（但Direct Buffer的JAVA对象是归GC管理的，只要GC回收了它的JAVA对象，操作系统才会释放Direct Buffer所申请的空间），...
Java ByteBuffer 之 DirectBuffer
lgreckey的专栏
11-28 255
ByteBuffer 提供了两种方式创建缓冲区，一个是在heap内分配即DirectBuffer，一个是在heap外分配。一个比较普遍的说法是，heap外分配的内存不太好把控，JVM不会回收其内存。然而事实上真的如此吗？我做了一个实验，我写了一个NIO服务端程序不断读取客户端发送过来的内容，然后回写到客户端。回写的时候用了DirectBuffer, 并且开辟的内存故意设的比较大128M。请看如...
java directbuffer_JAVA NIO之Direct Buffer 与 Heap Buffer的区别？
weixin_29611239的博客
02-16 205
个人总结Direct Buffer vs. Heap Buffer1、 劣势：创建和释放Direct Buffer的代价比Heap Buffer得要高；2、 区别：Direct Buffer不是分配在堆上的，它不被GC直接管理(但Direct Buffer的JAVA对象是归GC管理的，只要GC回收了它的JAVA对象，操作系统才会释放Direct Buffer所申请的空间)，它似乎给人感觉是“内...
Java NIO教程 MappedByteBuffer
z69183787的专栏
12-16 6615
之前跟大家说过，要讲MappedByteBuffer,现在我来履行承诺了。 首先从大体上讲一下MappedByteBuffer究竟是什么。从继承结构上来讲，MappedByteBuffer继承自ByteBuffer，所以ByteBuffer有的能力它全有；像变动position和limit指针啦、包装一个其他种类Buffer的视图啦，都可以。“MappedByteBuffer”为何而来？吾辈
java directbuffer_Java NIO direct buffer的优势在哪儿？
weixin_39786850的博客
02-13 161
谢邀。邀请比较早了，直到最近才写到DirectBuffer的问题，附上专栏文章一篇：Direct Buffer - 知乎专栏然后再简要回答一下这个问题：1. Direct buffer是相当于固定的内核buffer还是JVM进程内的堆外内存？答：JVM进程的Java堆外申请的内存，是用户空间的，这是毫无疑问的，因为前边有答主已经贴过代码了，DirectByteBuffer的创建就是使用了 mall...
java socket传输文件 用RandomAccessFile和MappedByteBuffer读写
最新发布
07-11
你可以使用RandomAccessFile和MappedByteBuffer来实现Java Socket文件传输。以下是一个简单的示例代码： ```java import java.io.*; import java.net.*; import java.nio.*; import java.nio.channels.*; public class FileTransferServer { public static void main(String[] args) { try { ServerSocketChannel serverSocketChannel = ServerSocketChannel.open(); serverSocketChannel.bind(new InetSocketAddress(8080)); System.out.println("等待客户端连接..."); SocketChannel socketChannel = serverSocketChannel.accept(); System.out.println("客户端已连接。"); File file = new File("example.txt"); RandomAccessFile randomAccessFile = new RandomAccessFile(file, "rw"); FileChannel fileChannel = randomAccessFile.getChannel(); long fileSize = file.length(); MappedByteBuffer mappedByteBuffer = fileChannel.map(FileChannel.MapMode.READ_WRITE, 0, fileSize); socketChannel.write(ByteBuffer.wrap(Long.toString(fileSize).getBytes())); System.out.println("开始传输文件..."); socketChannel.write(mappedByteBuffer); System.out.println("文件传输完成。"); socketChannel.close(); serverSocketChannel.close(); } catch (IOException e) { e.printStackTrace(); } } } ``` ```java import java.io.*; import java.net.*; import java.nio.*; import java.nio.channels.*; public class FileTransferClient { public static void main(String[] args) { try { SocketChannel socketChannel = SocketChannel.open(); socketChannel.connect(new InetSocketAddress("localhost", 8080)); ByteBuffer fileSizeBuffer = ByteBuffer.allocate(8); socketChannel.read(fileSizeBuffer); fileSizeBuffer.flip(); long fileSize = Long.parseLong(new String(fileSizeBuffer.array()).trim()); System.out.println("开始接收文件..."); RandomAccessFile randomAccessFile = new RandomAccessFile("received.txt", "rw"); FileChannel fileChannel = randomAccessFile.getChannel(); MappedByteBuffer mappedByteBuffer = fileChannel.map(FileChannel.MapMode.READ_WRITE, 0, fileSize); socketChannel.read(mappedByteBuffer); System.out.println("文件接收完成。"); socketChannel.close(); } catch (IOException e) { e.printStackTrace(); } } } ``` 其中，Server端将文件example.txt传输给Client端，并保存为received.txt。你可以根据需要修改文件名和路径。请确保Server端先运行，然后再运行Client端。这只是一个简单的示例，你可以根据自己的需求进行修改和扩展。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值