默认情况下,MapReduce是只有一个reducetask来进行数据的处理。这就使得不管输入的数据量有多大,最终的结果都是输入到一个文件中。
当改变reducetask的个数时就会涉及到分区的问题.
MapReduce -partition数据分区机制/MapReduce输出结果文件的个数探究
最新推荐文章于 2024-02-14 16:22:35 发布
![](https://img-home.csdnimg.cn/images/20240711042549.png)
默认情况下,MapReduce是只有一个reducetask来进行数据的处理。这就使得不管输入的数据量有多大,最终的结果都是输入到一个文件中。
当改变reducetask的个数时就会涉及到分区的问题.