有种情况下一个大文件只会用一个mapper处理,不会按block split。
比如文件是gzip 或者snappy压缩的格式。
http://stackoverflow.com/questions/7388436/hadoop-gzip-input-file-using-only-one-mapper
有种情况下一个大文件只会用一个mapper处理,不会按block split。
比如文件是gzip 或者snappy压缩的格式。
http://stackoverflow.com/questions/7388436/hadoop-gzip-input-file-using-only-one-mapper