hive远程模式搭建

环境要求:
三台centos7主机:
master 192.168.200.128(hive客户端)
slave1 192.168.200.129 (hive服务端)
slave2 192.168.200.130 (MySQL数据库存储metastore元数据)
都要求已经安装 jdk,hadoop参考连接

部署mysql服务(slave2)

参考centos7部署 mysql

部署hive服务端(slave1)

  • 解压hive文件
    # tar -zxvf apache-hive-2.3.7-bin
  • 配置 hive-site.xml 文件(在hive的安装目录的conf目录下)
    如果没有请新建文件,并添加内容:
<configuration>
<property>  
  <name>hive.metastore.warehouse.dir</name>  
  <value>/user/hive/warehouse</value>  
</property>  
<property>  
  <name>javax.jdo.option.ConnectionURL</name>  
  <value>jdbc:mysql://192.168.200.130:3306/hive?createDatabaseIfNotExist=true</value>  
</property>  
<property>  
  <name>javax.jdo.option.ConnectionDriverName</name>  
  <value>com.mysql.jdbc.Driver</value>  
</property>  
<property>  
  <name>javax.jdo.option.ConnectionUserName</name>  
  <value>root</value>  
</property>  
<property>  
  <name>javax.jdo.option.ConnectionPassword</name>  
  <value>123456</value>  
</property> 
</configuration>

  • 配置 hive-env.sh 文件(在hive的安装目录的conf目录下)
cp hive-env.sh.template  hive-env.sh
vi hive-env.sh

在这里插入图片描述

  • 将mysql-connector-java-5.1.31-bin.jar上传到$HIVE_HOME/lib目录下
    驱动包下载地址
  • 替换 jline.jar 包
    cp /home/hive-1.2.1/lib/jline-2.12.jar /home/hadoop-2.5.2/share/hadoop/yarn/lib/(参考路径)
  • 初始化元数据库
    # schematool -dbType mysql -initSchema
  • 配置环境变量
    # vi /etc/profile
    在这里插入图片描述
source /etc/profile #使环境变量生效

部署hive客户端(master)

  • 解压hive文件(参考上文)
  • 配置 hive-site.xml 文件(在hive的安装目录的conf目录下)
    如果没有请新建文件,并添加内容:
<configuration>
<property>  
  <name>hive.metastore.warehouse.dir</name>  
  <value>/user/hive/warehouse</value>  
</property>  
<property>  
  <name>hive.metastore.local</name>  
  <value>false</value>  
</property>  
<property>  
  <name>hive.metastore.uris</name>  
  <value>thrift://slave1:9083</value>  
</property>
</configuration>

  • 配置 hive-env.sh 文件(参考上文)
  • 替换 jline.jar 包(参考上文)
  • 配置环境变量(参考上文)

测试

  • 启动hadoop集群
    # start-all.sh
  • 启动slave2的mysql服务
    # systemctl start mysqld
  • 启动slave1的hive服务
    # hive --service metastore &
  • 启动master客户端hive
    # hive
    成功!!!
  • 3
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值