Hive 如何增加或减少Map/Reduce 的数量
HIVE 使用中调整MAP 和 REDUCE 数量本次经过参考很多文档,和在集群中的实践,我把最后的成功结果整理了下。最后能够明显改变计划的MAP 和 REDUCE数量的方法调整如下两个参数**set hive.exec.reducers.bytes.per.reducer = 52428800; – 每个reduce 可以处理的字节长度set mapred.max.split.siz...
原创
2019-07-17 17:01:05 ·
3579 阅读 ·
0 评论