基于FileChannel实现高效大数据量文件写入

19 篇文章 0 订阅

测试结果:

    500W数据 5000一写,15秒写入完成

 


import java.io.*;
import java.nio.ByteBuffer;
import java.nio.channels.FileChannel;

public abstract class FileUtils {

	/**
	 * append写入
	 * @param file 文件路径
	 * @param content 待写入的文件内容
	 * @param bufferSize 单次写入缓冲区大小 默认4M 1024 * 1024 * 4
	 */
	public static void write(String file, String content, Integer bufferSize) {

		bufferSize = null == bufferSize ? 4194304 : bufferSize;
		ByteBuffer buf = ByteBuffer.allocate(bufferSize);
		FileChannel channel = null;
		try {
			File fileTemp = new File(file);
			File parent = fileTemp.getParentFile();
			if (!parent.exists()) parent.mkdirs();
			if (!fileTemp.exists()) fileTemp.createNewFile();

			// new FileOutputStream(file, append)  第二个参数为true表示追加写入
			channel = new FileOutputStream(file, true).getChannel();

			buf.put(content.getBytes());
			buf.flip();   // 切换为读模式

			while(buf.hasRemaining()) {
				channel.write(buf);
			}
		} catch (Exception e) {
			e.printStackTrace();
		} finally {
			try {
				channel.close();
			} catch (IOException e) {
				e.printStackTrace();
			}
		}
	}
}

 

评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值