hive mysql集群,配置hive环境步骤（zookeeper高可用集群已搭建）

安装mysql；

1. 检查当前环境是否安装mysql服务(命令:rpm -qa | grep -i mysql)

2. 卸载自带的mysql

3. 卸载软件：rpm -e --nodeps mysql-libs-5.1.71-1.el6.x86_64

4. 安装mysql客户端与服务器.

4.1下载依赖

sudo yum install libaio

sudo yum install perl

导入服务器，客户端

rpm -ivh ./MySQL-client-5.1.73-1.glibc23.x86_64.rpm

rpm -ivh MySQL-server-5.1.73-1.glibc23.x86_64.rpm

3.2 MySQL服务启动

检查MySQL状态 service mysql status

启动MySQL服务 service mysql start

停止MySQL服务 service mysql stop

重启MySQL服务 service mysql restart

3.3 Hive元数据库创建与授权(非root用户)

进人root用户 mysql -uroot  [-proot]默认没有设置密码

在root用户下: 创建hive库并设置编码为latin1(默认编码)

create database hivedb default character set latin1;

alter database hivedb character set latin1;

在root用户下添加添加用户:hadoop

insert into mysql.user(Host,User,Password)values('192.168.192.1',

'hadoop',password('hadoop'));

在root用户下给普通用户hadoop授权于hivedb数据库于Hadoop001主机:

grant all privileges on hivedb.* to 'hadoop'@'192.168.192.1'

identified by 'hadoop';

刷新后生效 flush privileges;

切换进入hadoop用户 su hadoop

进人MySQL数据库 mysql –h hdp-qm-01 -uhadoop -phadoop

查看数据 show databases

使用数据库 use hivedb;

安装hive:

上传压缩包解压，重命名

tar -zxvf apache-hive-1.2.1-bin.tar.gz 、mv apache-hive-1.2.1-bin hive-1.2.1

配置环境变量，刷新

export HIVE_HOME=/home/hadoop/hive-1.2.1

:$HIVE_HOME/bin

source /etc/profile

新建：vi hive-site.xml，在conf目录下配置hive-site.xml

javax.jdo.option.ConnectionURL

jdbc:mysql://hdp-qm-01:3306/hivedb?characterEncoding=UTF-8

javax.jdo.option.ConnectionDriverName

com.mysql.jdbc.Driver

javax.jdo.option.ConnectionUserName

hadoop/

javax.jdo.option.ConnectionPassword

hadoop

给hive添加mysql数据库的驱动包，将驱动包添加到lib目录下

启动常见错误问题

 Jline包错误 版本与Hadoop不匹配，使用Hive的lib目录下jline.xxx替换

hadoop/share/hadoop/yarn/lib的jline.xxx

先启动zookeeper,再启动集群，再启动hive