tez和spark常用参数调优

1、tez参数

-- 小文件相关
set hive.merge.mapfiles=true;
set hive.merge.tezfiles=true;
set hive.merge.mapredfiles=true;

-- 控制小文件合并后文件大小
set hive.merge.size.per.task=268435456;
set hive.merge.smallfiles.avgsize=134217728;

-- hive控制map数量（tez应该不生效了）
set mapred.max.split.size=536870912;
set mapred.min.split.size.per.node=