- 博客(1)
- 收藏
- 关注
RSS订阅原创 Hive调优
Hive调优 参数调优 #合并输入文件 #执行Map前进行小文件合并，一个data_node节点上多个小文件合并，合并数由mapred.max.split.size限制的大小决定 set hive.input.format = org.apache.hadoop.hive.ql.io.CombineHiveInputFormat; #每个Map最大的输入大小 set mapred.max.split.size = 512000000; #一个节点上split的至少的大小，决定了多个data_nod
2022-01-04 16:44:47
800
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人