1.combiner函数可以帮助减少mapper和reducer之间的数据传输量。
2.map到reduce需要不同map上的数据跨节点传输数据,数据传输受集群上可用带宽的影响。
Hadoop001-combiner作用。
最新推荐文章于 2024-08-15 10:08:48 发布
1.combiner函数可以帮助减少mapper和reducer之间的数据传输量。
2.map到reduce需要不同map上的数据跨节点传输数据,数据传输受集群上可用带宽的影响。