hdfs中InputFormat的职责
职责1:对数据进行切片,然后jobClient就会向HDFS提交切片信息
职责2:map端通过其获得对应的RecordReader去读取切片
它是一个接口,只定义了两个方法。
InputSplit[] getSplits(JobConf job, int numSplits) throws IOException;
RecordReader<K, V> getRecordReader...
原创
2020-05-01 16:41:22 ·
143 阅读 ·
0 评论