hive 配置参数说明

hive.exec.mode.local.auto    

决定 Hive 是否应该自动地根据输入文件大小，在本地运行（在GateWay运行）    

默认值：true       

hive.exec.mode.local.auto.inputbytes.max    

如果 hive.exec.mode.local.auto 为 true，当输入文件大小小于此阈值时可以自动在本地模式运行，默认是 128兆。    

默认值：134217728L       

hive.exec.mode.local.auto.tasks.max    

如果 hive.exec.mode.local.auto 为 true，当 Hive Tasks（Hadoop Jobs）小于此阈值时，可以自动在本地模式运行。    

默认值：4       

hive.auto.convert.join    

是否根据输入小表的大小，自动将 Reduce 端的 Common Join 转化为 Map Join，从而加快大表关联小表的 Join 速度。    

默认值：false       

hive.mapred.local.mem    

Mapper/Reducer 在本地模式的最大内存量，以字节为单位，0为不限制。    

默认值：0       

mapred.reduce.tasks    

所提交 Job 的 reduer 的个数，使用 Hadoop Client 的配置。       

默认值：1 

hive.exec.scratchdir    

HDFS路径，用于存储不同 map/reduce 阶段的执行计划和这些阶段的中间输出结果。    

默认值：/tmp/<user.name>/hive       

hive.metastore.warehouse.dir    

Hive 默认的数据文件存储路径，通常为 HDFS 可写的路径。    

默认值："       

hive.groupby.skewindata    

决定 group by 操作是否支持倾斜的数据。    

默认值：false       

hive.merge.mapfiles    

是否开启合并 Map 端小文件，对于 Hadoop 0.20 以前的版本，起一首新的 Map/Reduce Job，对于 0.20 以后的版本，则是起使用 CombineInputFormat 的 MapOnly Job。    

默认值：true       

hive.merge.mapredfiles    

是否开启合并 Map/Reduce 小文件，对于 Hadoop 0.20 以前的版本，起一首新的 Map/Reduce Job，对于 0.20 以后的版本，则是起使用 CombineInputFormat 的 MapOnly Job。    

默认值：false       

hive.default.fileformat    

Hive 默认的输出文件格式，与创建表时所指定的相同，

可选项为 'TextFile' 、 'SequenceFile' 或者 'RCFile'。     'TextFile'       

hive.mapred.mode    

Map/Redure 模式，如果设置为 strict，将不允许笛卡尔积。    

默认值： 'nonstrict'       

hive.exec.parallel    

是否开启 map/reduce job的并发提交。   

默认值：  false       

hive.security.authorization.enabled    

Hive 是否开启权限认证。    

默认值：false       

hive.exec.plan    

Hive 执行计划的路径，会在程序中自动进行设置    

默认值：null       

hive.exec.submitviachild    

决定 map/reduce Job 是否应该使用各自独立的 JVM 进行提交（Child进程），默认情况下，使用与 HQL compiler 相同的 JVM 进行提交。    

默认值：false       

hive.exec.script.maxerrsize    

通过 TRANSFROM/MAP/REDUCE 所执行的用户脚本所允许的最大的序列化错误数。    

默认值：100000       

hive.exec.script.allow.partial.consumption    

是否允许脚本只处理部分数据，如果设置为 true ，因 broken pipe 等造成的数据未处理完成将视为正常。    

默认值：false       

hive.exec.compress.output    

决定查询中最后一个 map/reduce job 的输出是否为压缩格式。    

默认值：false       

hive.exec.compress.intermediate    

决定查询的中间 map/reduce job （中间 stage）的输出是否为压缩格式。    

默认值：false       

hive.intermediate.compression.codec    

中间 map/reduce job 的压缩编解码器的类名（一个压缩编解码器可能包含多种压缩类型），该值可能在程序中被自动设置。            

hive.intermediate.compression.type    

中间 map/reduce job 的压缩类型，如 "BLOCK" "RECORD"。        

hive.exec.reducers.bytes.per.reducer    

每一个 reducer 的平均负载字节数。    

默认值：1000000000       

hive.exec.reducers.max    

reducer 个数的上限。    

默认值：999       

hive.exec.pre.hooks    

语句层面，整条 HQL 语句在执行前的 hook 类名。    

默认值："       

hive.exec.post.hooks    

语句层面，整条 HQL 语句在执行完成后的 hook 类名。            

hive.exec.parallel.thread.number    

并发提交时的并发线程的个数。    

默认值：8       <