split是mapreduce中的概念,而block是hdfs中切块的大小。
split的大小时默认和hdfs的block块大小一致,但是可以通过配置文件自己设置
HDFS以固定大小的block为基本单位存储数据(分布式文件系统,实际存储角度,物理存储单位);
MapReduce以split作为处理单位(编程模型角度,逻辑单位);
split是mapreduce中的概念,而block是hdfs中切块的大小。
split的大小时默认和hdfs的block块大小一致,但是可以通过配置文件自己设置
HDFS以固定大小的block为基本单位存储数据(分布式文件系统,实际存储角度,物理存储单位);
MapReduce以split作为处理单位(编程模型角度,逻辑单位);