Ubuntu下hive的配置1(derby模式)

hadoop的单机模式配置好之后,就可以在此基础上配置Hive。

Hive是基于Hadoop构建的,简单地说就是一套Hadoop的访问接口。它提供了一系列的工具,可以用来进行数据提取转化加载(ETL),这是一种可以存储、查询和分析存储在 Hadoop 中的大规模数据的机制。Hive 定义了简单的类 SQL 查询语言,称为 HQL,它允许熟悉 SQL 的用户查询数据。同时,这个语言也允许熟悉 MapReduce 开发者的开发自定义的 mapper 和 reducer 来处理内建的 mapper 和 reducer 无法完成的复杂的分析工作。

Hive安装及配置过程

首先安装在derby模式下的hive:

在官网下载apache-hive-0.13.1-bin.tar.gz,解压到usr/local/hive

然后进入hive的conf目录,其中有3个文件:hive-env.sh.template , hive-default.xml.template hive-log4j.properties.template

这3个文件是hive配置的文件模板,我们复制然后重命名他们:cp hive-env.sh.template hive-env.sh        cp hive-default.xml.template hive-site.xml cp hive-log4j.properties.template  hive-log4j.proprties

配置hive-env.sh:

1.添加hadoop_home路径:将export HADOOP_HOME前面的‘#’号去掉,并让它指向您所安装hadoop的目录

2.将export HIVE_CONF_DIR=/usr/hive/conf,并且把‘#’号去掉
3.将export HIVE_AUX_JARS_PATH=/usr/hive/lib

4.source /hive-env.sh

vim hive-env.sh:出现以下说明成功
HADOOP_HOME=/usr/local/hadoop/
export HIVE_CONF_DIR=/usr/local/hive/conf                                                                                    
export HIVE_AUX_JARS_PATH=/usr/local/hive/lib

配置hive-default.xml文件:

1.首先提前创建几个配置文件中会用到的路径文件夹

mkdir -p /usr/hive/warehouse
mkdir -p /usr/hive/tmp
mkdir -p /usr/hive/log

2.因为这个文件很大,可以用搜索关键字来查找替换配置:
其中有三处需要修改:
<property>
<name>hive.metastore.warehouse.dir</name>
<value>/usr/hive/warehouse</value>
</property>
这个是设定数据目录
-------------------------------------
<property>
<name>hive.exec.scratdir</name>
<value>/usr/hive/tmp</value>
</property>
这个是设定临时文件目录
--------------------------------------
//这个在笔者的文件中没有可以自己添加
<property>
<name>hive.querylog.location</name>
<value>/usr/hive/log</value>
</property>
这个是用于存放hive相关日志的目录

配置hive-log4j.properties

修改一处,否则会报错。

log4j.appender.EventCounter=org.apache.hadoop.log.metrics.EventCounter


然后终端进入hive文件夾 bin/hive 就可以开启hive





  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值