Hive 3.1.2在Hadoop3.3.0上的安装(部署)

写在前面:
Hive的元数据库用的是MySql8。本文四处缝合而来, 仅作学习记录。
安装Hive肯定要Hadoop啊?怎么有人悄悄问我哪里安装hdfs???
参考:https://blog.csdn.net/l1682686/article/details/107814620

1:安装mysql

rpm mysql80-community-release-el8-1.noarch.rpm

设置mysql为开机启动:

systemctl enable mysqld.service

查看mysql是否开机启动

systemctl list-unit-files|grep mysqld

在这里插入图片描述
查看mysql服务

 ps -ef|grep mysql

在这里插入图片描述
启动mysql服务

systemctl start mysqld.service

在这里插入图片描述
安装成功

2:下载hive

http://mirrors.hust.edu.cn/apache/hive/hive-3.1.2/apache-hive-3.1.2-bin.tar.gz

3:给解压好的hive文件夹创建软链接

ln -s apache-hive-3.1.2-bin hive

4:修改配置文件

进入hive/conf目录下,
新增 hive-site.xml

<configuration>
        <property>
                <name>javax.jdo.option.ConnectionURL</name>
                <value>jdbc:mysql://localhost:3306/hivedb?createDatabaseIfNotExist=true</value>
                <description>JDBC connect string for a JDBC metastore</description>
                
        </property>
        <property>
                <name>javax.jdo.option.ConnectionDriverName</name>
                <value>com.mysql.jdbc.Driver</value>
                <description>Driver class name for a JDBC metastore</description>
        </property>
        <property>
                <name>javax.jdo.option.ConnectionUserName</name>
                <value>root</value>
                <description>username to use against metastore database</description>
        </property>
        <property>
                <name>javax.jdo.option.ConnectionPassword</name>
                <value>amp</value>
        <description>password to use against metastore database</description>
        </property>
	        <property>
                <name>hive.metastore.warehouse.dir</name>
                <value>/hive/warehouse</value>
                <description>hive default warehouse, if nessecory, change it</description>
        </property> 

</configuration>

5:加入mysql连接包到hive根目录下的lib目录

下载地址:
https://dev.mysql.com/get/Downloads/Connector-J/mysql-connector-java-8.0.21.zip

将其中的

mysql-connector-java-8.0.2.1-bin.jar 放到lib目录下。

6:配置环境变量

vim ~/.bashrc

在这里插入图片描述
添加以上内容

source ~/.bashrc 使修改生效

验证hive是否安装成功:

在这里插入图片描述

7:初始化元数据库

schematool -dbType mysql -initSchema

8:启动hive客户端

(启动前先启动Hadoop dfs)

hive

在这里插入图片描述

show databases;

在这里插入图片描述

搭建成功~

踩坑记录:

1:

Exception in thread "main" java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument

原因:hive/lib下的guava包和hadoop的不一致

解决方法:把hadoop/share/hadoop/common/lib下的guava包替换掉hive/lib下的包

2:

Exception in thread "main" java.lang.ClassCastException:java.base/jdk.internal.loader.ClassLoaders$AppClassLoa

问题:原来高版本的jdk14.0.2跑不起来

解决方法:换成jdk8

下载地址:https://repo.huaweicloud.com/java/jdk/8u202-b08/jdk-8u202-windows-x64.exe

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值