java文件流下载大文件内存溢出

一、可能得到原因
1、在配置jvm参数的时候内存配置过小,一般不会出现;

2、在下载的过程中读取文件的时候,一次性把数据读入内存,导致内存崩溃;

3、第三种情况也是最搞人心态的一种情况:下载的时候没问题,后台也不会报错,也能下载成功,但是在下载过程中浏览器会崩掉,如下图:
在这里插入图片描述
二、每种情况对应的解决方案
1、配置一下jvm参数即可,参考:内存溢出,配置jvm参数

2、代码里不要把数据一次性读入内存,可以进行分片读取,代码示例如下:

bufferedInputStream = new BufferedInputStream(new FileInputStream(zipFile),1024 * 5);
int buf_size = 1024 * 5;
byte[] data = new byte[buf_size];
int length;

response.reset();
response.addHeader("Access-Control-Allow-Origin", "*");
response.addHeader("Access-Control-Expose-Headers", "Content-Disposition");
response.setHeader("Content-Disposition", "attachment; filename=\"declare.zip\"");
response.setContentType("application/json; charset=UTF-8");

while ((length = bufferedInputStream.read(data)) != -1) {
          //将文件读入压缩文件内
         response.getOutputStream().write(data,0,length);
         response.flushBuffer();
}
bufferedInputStream.close();

代码只是样例,核心的部分就是定义一个固定大小的字节数组,将内容循环读入,最后别忘了关闭流。

3、如果碰到第三种情况,后台代码不报错,也能下载成功,但是浏览器会在下载的过程中崩掉,不要怀疑,前端的问题。
在下载的过程中,可能不单单是后台才会操作内存,如果前台有读取文件的操作,那就有可能导致内存溢出。
比如下面这个东西,在碰到大文件的时候就会崩掉,它会把后台文件内容一次性读入内存,文件过大,瞬间炸裂!!

FileReader.readAsText(data)

如果碰到这种情况可以替换为下面的这种写法来规避

FileReader.readAsArrayBuffer(data)

就是被这第三种情况整整坑了两天!!

  • 1
    点赞
  • 20
    收藏
    觉得还不错? 一键收藏
  • 5
    评论
您好!如果在使用Java的FileChannel下载文件时出现内存溢出的问题,可能是因为您一次性尝试读取或写入过大的文件块导致的。以下是一些解决方法: 1. 使用ByteBuffer进行分块读取:通过创建一个较小的ByteBuffer对象,例如4KB或8KB,并使用循环读取文件的一部分,然后处理该部分数据。这样可以避免一次性将整个文件加载到内存中。 ```java FileChannel channel = new FileInputStream(sourceFile).getChannel(); ByteBuffer buffer = ByteBuffer.allocate(8 * 1024); // 8KB buffer while (channel.read(buffer) != -1) { buffer.flip(); // 处理buffer中的数据 buffer.clear(); } ``` 2. 使用内存映射文件(Memory-Mapped File):内存映射文件允许您将文件直接映射到内存中,从而可以像访问内存一样访问文件内容。这样可以避免将整个文件加载到内存中。 ```java FileChannel channel = new RandomAccessFile(sourceFile, "r").getChannel(); MappedByteBuffer buffer = channel.map(FileChannel.MapMode.READ_ONLY, 0, channel.size()); // 处理buffer中的数据 ``` 3. 降低缓冲区大小:在使用FileChannel时,可以通过减小ByteBuffer的大小来降低内存消耗。较小的缓冲区大小可能会导致性能损失,但可以避免内存溢出。 ```java FileChannel channel = new FileInputStream(sourceFile).getChannel(); ByteBuffer buffer = ByteBuffer.allocate(1 * 1024); // 1KB buffer while (channel.read(buffer) != -1) { buffer.flip(); // 处理buffer中的数据 buffer.clear(); } ``` 请根据您的具体需求选择合适的解决方法。希望对您有所帮助!如果您有任何其他问题,请随时提问。
评论 5
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值