Hive搭建

本文详细介绍了如何搭建Hive环境,包括Mysql安装配置、Hive的安装部署、元数据配置到MySql、安装Tez引擎以及解决各种日志和Jar包冲突问题。最后,还讲解了通过HiveJDBC进行访问以及调整元数据库字符集以支持中文注释的方法。
摘要由CSDN通过智能技术生成

0、安装准备

hive

链接:https://pan.baidu.com/s/1L_A-LB7R8g9s3wet7HObzw?pwd=2vuz 
提取码:2vuz

tez

链接:https://pan.baidu.com/s/1zDwGXC1ZiMLy3m7xZBFq3A?pwd=mlwg 
提取码:mlwg

一、Mysql安装配置

Mysql安装_asd623444055的博客-CSDN博客

二、Hive安装部署

1.把apache-hive-3.1.2-bin.tar.gz上传到linux的/opt/software目录下

2.解压apache-hive-3.1.2-bin.tar.gz到/opt/module/目录下面

tar -zxvf /opt/software/apache-hive-3.1.2-bin.tar.gz -C /opt/module/

3.修改apache-hive-3.1.2-bin.tar.gz的名称为hive

mv /opt/module/apache-hive-3.1.2-bin/ /opt/module/hive

4.修改/etc/profile.d/my_env.sh添加环境变量

sudo vim /etc/profile.d/my_env.sh

5.添加内容

#HIVE_HOME

export HIVE_HOME=/opt/module/hive

export PATH=$PATH:$HIVE_HOME/bin

重启Xshell对话框使环境变量生效

6.替换hive中的guava.jar

#将hadoop中的guava-27.0-jre.jar  复制到hive中
cp /opt/module/hadoop-3.1.3/share/hadoop/common/lib/guava-27.0-jre.jar  /opt/module/hive/lib/
#删除原有的guava
rm guava-19.0.jar

7.解决日志Jar包冲突

mv $HIVE_HOME/lib/log4j-slf4j-impl-2.10.0.jar $HIVE_HOME/lib/log4j-slf4j-impl-2.10.0.bak

三、Hive元数据配置到MySql

1.将MySQL的JDBC驱动拷贝到Hive的lib目录下

cp /opt/software/mysql-connector-java-5.1.48.jar $HIVE_HOME/lib

2.配置Metastore到MySql

在$HIVE_HOME/conf目录下新建hive-site.xml文件

vim $HIVE_HOME/conf/hive-site.xml

hive-site.xml配置

<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="conf
  • 0
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值