Hadoop的FileInputFormat.getSplits()方法的解析
public List<InputSplit> getSplits(JobContext job) throws IOException {
//记录分片过程的开始时间
StopWatch sw = (new StopWatch()).start();
//指定split最小容量,如果没有指定,默认是1L
long minSize = Math....
原创
2019-12-07 14:00:58 ·
394 阅读 ·
0 评论