- 博客(2)
- 资源 (4)
- 收藏
- 关注
原创 Hive知识梳理(好文)
也就是说,根据输入的数据量大小来决定Reduce的个数,默认Hive.exec.Reducers.bytes.per.Reducer为1G,而且Reduce个数不能超过一个上限参数值,这个参数的默认取值为999。对应的hive API为:org.apache.hadoop.hive.ql.io.parquet.MapredParquetInputFormat和org.apache.hadoop.hive.ql.io.parquet.MapredParquetOutputFormat。
2023-10-18 09:54:35
762
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人