Hive-3.1.2安装部署

Hive-3.1.2安装部署

一 Hive-3.1.2 网盘下载：

链接：https://pan.baidu.com/s/1c8L3ygVae2kSN-ue8RZNtQ
提取码：chjs

1.下载完成后，上传到Linux的/opt/module下

2.解压并重命名为hive

cd /opt/module
tar -zxvf apache-hive-3.1.2-bin.tar.gz 
mv apache-hive-3.1.2-bin hive

3.添加环境变量

vi /etc/profile

export HIVE_HOME=/opt/module/hive
export PATH=$PATH:$HIVE_HOME/bin
source /etc/profile

4.解决jar包冲突

mv $HIVE_HOME/lib/log4j-slf4j-impl-2.10.0.jar $HIVE_HOME/lib/log4j-slf4j-impl-2.10.0.bak

二 安装mysql

mysql下载
链接：https://pan.baidu.com/s/1oXDxXrTiN0a1CB8Kw5_mOg
提取码：jklm

1.检查是否安装过mysql

rpm -qa|grep mariadb

如果没显示内容，则不用进行操作，如果出现内容：

输入

rpm -e --nodeps mariadb-libs

再次查询

2.上传mysql到/opt/software下并解压mysql

通过网盘下载的mysql表明了解压顺序，按顺序解压
rpm -ivh 01_mysql-community-common-5.7.16-1.el7.x86_64
以此类推，一定要按顺序解压，因为不同包之间存在依赖。最后的驱动包结尾带jar的不用解压。

3.删除datadir内容

vi /etc/my.conf

找到datadir所指向的目录复制

进到datadir所在的目录

cd /var/lib/mysql

在这个目录下执行

rm  -rf ./*

4.初始化数据库

mysqld --initialize --user=mysql

5.查看临时生成的密码

cat /var/log/mysqld.log 

复制临时生成的密码

6.登录到mysql

systemctl start mysqld

mysql -uroot -p

输入复制的密码

7.修改密码

 set password = password("新密码");

8.设置允许任意用户连接

update mysql.user set host='%' where user='root';

刷新

 flush privileges;

退出

 quit;

三 Hive元数据配置到mysql

1.将mysql的驱动包复制到hive的lib目录下

 cp /opt/software/mysql-connector-java-5.1.27-bin.jar /opt/module/hive/lib/

2.新建hive-site.xml并编辑

在hive的conf目录下新建hive-site.xml文件

 cd /opt/module/hive/conf
 touch hive-site.xml
 vi hive-site.xml

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
 <!-- jdbc 连接的 URL -->
 <property>
 <name>javax.jdo.option.ConnectionURL</name>
 <value>jdbc:mysql://hadoop102:3306/metastore?useSSL=false</value>
</property>
 <!-- jdbc 连接的 Driver-->
 <property>
 <name>javax.jdo.option.ConnectionDriverName</name>
 <value>com.mysql.jdbc.Driver</value>
</property>
<!-- jdbc 连接的 username-->
 <property>
 <name>javax.jdo.option.ConnectionUserName</name>
 <value>root</value>
 </property>
 <!-- jdbc 连接的 password -->
 <property>
 <name>javax.jdo.option.ConnectionPassword</name>
 <value>000000</value>
</property>
 <!-- Hive 元数据存储版本的验证 -->
 <property>
 <name>hive.metastore.schema.verification</name>
 <value>false</value>
</property>
 <!--元数据存储授权-->
 <property>
 <name>hive.metastore.event.db.notification.api.auth</name>
 <value>false</value>
 </property>
 <!-- Hive 默认在 HDFS 的工作目录 -->
 <property>
 <name>hive.metastore.warehouse.dir</name>
 <value>/user/hive/warehouse</value>
 </property>
</configuration>

主机名和密码需修改为自己的设置，其他无需修改


保存退出。

3.登录mysql创建hive元数据库

 mysql -uroot -p你的密码

 create database metastore;

show databases;如图则正确

4.初始化元数据

schematool -initSchema -dbType mysql -verbose

5.再次启动hive

cd /opt/module/hive
bin/hive

之后进行正常的sql语句操作看是否正常执行