hadoop中mapreducer的数据输入(InputFormat)原理详解
mapReducer的作业的输入通过InputFormat接口提供
InputFormat提供的功能如下,将输入的文件,分成逻辑上的小段InputSplit,每一个InputSplit会分配给一个Mapper处理
RecordReader负责从inputSplit中读取键值对(一个键值对属于一条记录,然后交给一个Mapper处理)
inputSplit表示需要被一个Mappe
原创
2014-10-30 23:42:52 ·
1257 阅读 ·
0 评论