- 博客(3)
- 资源 (2)
- 收藏
- 关注
转载 Hive配置文件中配置项的含义详解(收藏版)
这里面列出了hive几乎所有的配置项,下面问题只是说出了几种配置项目的作用。更多内容,可以查看内容 问题导读: 1.hive输出格式的配置项是哪个? 2.hive被各种语言调用如何配置? 3.hive提交作业是在hive中还是hadoop中? 4.一个查询的最后一个map/reduce任务输出是否被压缩的标志,通过哪个配置项? 5.当用户自定义了UDF或者SerDe,这些插件的jar都要放到这个目录
2017-02-07 16:33:16 871
翻译 hive配置官网翻译2017版(更新中...)
hive.execution.engine 默认值:mr 添加时间:Hive 0.13.0 with HIVE-6103 and HIVE-6098 — 选择执行引擎。选项: mr (Map reduce, 默认值)、tez ( Hadoop 2 only)、or spark (Hive 1.1.0 版本及之后)。 mapred.reduce.tasks 默认值:-1
2017-02-06 17:05:41 1455 1
转载 hive之mapjoin
在Hive中,common join是很慢的,如果我们是一张大表关联多张小表,可以使用mapjoin加快速度。 mapjoin主要有以下参数:hive.auto.convert.join : 是否自动转换为mapjoin hive.mapjoin.smalltable.filesize : 小表的最大文件大小,默认为25000000,即25M hive.auto.convert.join.noco
2017-02-06 15:29:19 1170
2022年最新手机号段/手机号码归属地数据-494273条
2022-09-16
hadoop-lzo-0.4.13.jar
2017-12-20
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人