安装hive数据仓库

本文详细介绍了如何安装Hive数据仓库,并将其元数据存储在MySQL中,以解决Derby数据库并发性问题。内容包括安装MySQL,配置Hive环境变量,修改配置文件,拷贝MySQL驱动以及替换hadoop的jline.jar。
摘要由CSDN通过智能技术生成

一.安装mysql

hive的源数据默认是存在Derby数据里,由于Derby数据库不支持并发,也就是只支持单线程操作,当有一个用户在对Hive进行操作时,其他用户则无法操作,导致整体效率性能较低。所以把元数据存在mysql数据库里。

1.1查看和卸载自带mysql
查看mysql的依赖:       rpm -qa | grep mysql
卸载:                 rpm -e --nodeps `rpm -qa | grep mysql`
1.2安装mysql
yum install mysql -y
yum install mysql-server -y
1.3启动mysql
service mysqld start
chkconfig mysqld on
1.4设置密码

进入mysql命令行,第一次不需要密码:

mysql

切换数据库:

use mysql;

设置密码:

grant all privileges on *.* to 'root'@'%' identified by '123456' with grant option;

删除多余的用户:

delete from user where Host != '%';

查看结果

select Host,User,Password from user;
Host User Password
% root 6BB4837EB74329105EE4568DDA7DC67ED2CA2AD9

表示密码及用户设置成功

1.5刷新权限:
flush privileges

二.安装hive

2.1 上传解压,配置环境变量
export HIVE_HOME=/usr/local/soft/hive-1.2.1
export PATH=.:$PATH:$HIVE_HOME/bin
2.2 修改配置文件
cp hive-env.sh.template hive-env.sh
cp hive-default.xml.template hive-site.xml
  • 修改 hive-env.sh,增加下列配置:

     export JAVA_HOME=/usr/local/soft/jdk1.8.0_171
     export HADOOP_HOME=/usr/local/soft/hado
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值