数据切片:数据切片仅仅是在逻辑上对输入内容进行切片,并不是真正在磁盘上将输入内容切分进行存储。数据切片是MapReduce程序计算输入数据的单位,每一个切片会对应启动一个MapTask。默认切片大小与默认块大小一致,为128M。
数据块:块Block是HDFS物理上将数据切分成一块一块进行存储。数据块是HDFS存储数据的单位。默认块大小为128M。
切片的大小和块的大小都可由用户自己配置决定。
数据切片:数据切片仅仅是在逻辑上对输入内容进行切片,并不是真正在磁盘上将输入内容切分进行存储。数据切片是MapReduce程序计算输入数据的单位,每一个切片会对应启动一个MapTask。默认切片大小与默认块大小一致,为128M。
数据块:块Block是HDFS物理上将数据切分成一块一块进行存储。数据块是HDFS存储数据的单位。默认块大小为128M。
切片的大小和块的大小都可由用户自己配置决定。