如果需要使用Java逐行读取大约5-6 GB的大文本文件。
我该如何快速做到这一点?
使用Java逐行读取大型txt文本文件
一个常见的模式是使用
try (BufferedReader br = new BufferedReader(new FileReader(file))) {
String line;
while ((line = br.readLine()) != null) {
// process the line.
System.out.println(line);
}
}
如果您认为没有字符编码,您可以更快地读取数据。例如ASCII-7,但不会有太大的区别。很可能您对数据所做的处理时间会更长。
一种不常见的模式,以避免line泄漏的范围。
try(BufferedReader br = new BufferedReader(new FileReader(file))) {
for(String line; (line = br.readLine()) != null; ) {
// process the line.
}
// line is not visible here.
}
更新:在Java 8中
try (Stream stream = Files.lines(Paths.get(fileName))) {
stream.forEach(System.out::println);
}
注意:您必须将Stream放置在try-with-resource中以确保对其调用#close方法,否则基本文件句柄将永远不会关闭,直到GC稍后执行为止。