hadoop中mysql安装配置_[Hadoop]Hive-1.2.x安装配置+Mysql安装

HIve的元数据存储在mysql中,需要配置与MySQL建立连接,除了安装MySQL外还要安装连接的jar包:mysql-connector-java-5.1.47.tar.gz

安装环境:Centos7.5+Hadoop2.6.1集群

Hive源码包下载

http://mirror.bit.edu.cn/apache/hive/

1. 下载软件包(如果下载失败 可以本地传输)

#Master

解压包

tar zxvf apache-hive-1.2.2-bin.tar.gz

2. 修改Hive配置文件

#Master

cd apache-hive-1.2.2-bin/conf

创建hive-site.xml

vim hive-site.xml

javax.jdo.option.ConnectionURL

jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true

javax.jdo.option.ConnectionDriverName

com.mysql.jdbc.Driver

javax.jdo.option.ConnectionUserName

root

javax.jdo.option.ConnectionPassword

111111

3. 增加环境变量

#Master、Slave1、Slave2

vim ~/.bashrc

export HIVE_HOME=/usr/local/src/apache-hive-1.2.2-bin

export PATH=$HIVE_HOME/bin:$PATH

#刷新环境变量

source ~/.bashrc

4. 安装MySQL

#Master

下载mysql的repo源

安装mysql-community-release-el7-5.noarch.rpm包

sudo rpm -ivh mysql-community-release-el7-5.noarch.rpm

安装mysql

yum -y install mysql-server

启动服务

service mysqld start

配置MySQL Root用户密码

mysqladmin -uroot password 111111

登录mysql

mysql -u root -p 提示输入密码

5. 安装MySQL连接工具

#Master

1)解压缩包mysql-connector-java-5.1.47.tar.gz

tar -zxvf mysql-connector-java-5.1.47.tar.gz

2)复制连接库文件

cp mysql-connector-java-5.1.47/mysql-connector-java-5.1.47-bin.jar /usr/local/src/apache-hive-1.2.2-bin/lib

6. 拷贝安装包

#Master

scp -r /usr/local/src/apache-hive-1.2.2-bin root@slave1:/usr/local/src/apache-hive-1.2.2-bin

scp -r /usr/local/src/apache-hive-1.2.2-bin root@slave2:/usr/local/src/apache-hive-1.2.2-bin

7. 启动Hive服务

#Master

hive

此时很可能会报错误

[ERROR] Terminal initialization failed; falling back to unsupported

java.lang.IncompatibleClassChangeError: Found class jline.Terminal, but interface was expected

原因:出现此种错误应该是jar版本包冲突了,启动hive的时候,由于hive依赖hadoop,启动hive,会将hadoop的配置以及jar包等等导入到hive中,导致jar包版本冲突

解决办法:

hive里面的 这个jar包是jline-2.12.jar,而hadooop的这个jar包是jline-0.9.94.jar。用Hive中的jar包替换Hadoop中的jar包

删除hadoop中jline-0.9.94.jar

rm /usr/local/src/hadoop-2.6.1/share/hadoop/yarn/lib/jline-0.9.94.jar

将hive中jline-2.12.jar拷贝到hadoop中

[root@master lib] cp jline-2.12.jar /usr/local/src/hadoop-2.6.1/share/hadoop/yarn/lib

重新启动hive

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值