1.安装mysql
注:安装到node03节点
https://blog.csdn.net/zh2475855601/article/details/109726781
作用:hive的元数据通常是存储在关系型数据库入mysql/derby中,hive中的元数据包括表的名字,表的列和分区及其属性(例如是分桶还是分区),表的属性(是否为外部表等),表的数据所在目录等
2.上传hive软件包到/export/soft并解压至/export/servers
这里以hive-1.1.0-cdh5.14.0.tar.gz压缩包为例
解压:
cd /export/soft
tar -zxvf hive-1.1.0-cdh5.14.0.tar.gz -C ../servers
3.修改hive的配置文件
- 修改hive-env.sh文件
cd /export/servers/hive-1.1.0-cdh5.14.0/conf
cp hive-env.sh.template hive-env.sh
vim hive-env.sh
将以下代码粘贴到文件末尾:
HADOOP_HOME=${HADOOP_HOME}
# Hive Configuration Directory can be controlled by:
export HIVE_CONF_DIR=/export/servers/hive-1.1.0-cdh5.14.0/conf
-修改hive-site.xml
cd /export/servers/hive-1.1.0-cdh5.14.0/conf
vim hive-site.xml
将以下代码粘贴到文件中:
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://node03.hadoop.com:3306/hive?createDatabaseIfNotExist=true</value>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>123456</value>
</property>
<property>
<name>hive.cli.print.current.db</name>
<value>true</value>
</property>
<property>
<name>hive.cli.print.header</name>
<value>true</value>
</property>
<property>
<name>hive.server2.thrift.bind.host</name>
<value>node03.hadoop.com</value>
</property>
<!--
<property>
<name>hive.metastore.uris</name>
<value>thrift://node03.hadoop.com:9083</value>
</property>
-->
</configuration>
- 上传mysql的lib驱动包
将mysql的lib驱动包上传到hive的lib目录下:
cd /export/servers/hive-1.1.0-cdh5.14.0/lib
将mysql-connector-java-5.1.38.jar 上传到这个目录下
4.将hive软件包分发到其他节点上
cd /export/servers
scp -r hive-1.1.0-cdh5.14.0 root@node01:$PWD
scp -r hive-1.1.0-cdh5.14.0 root@node02:$PWD
5.测试
开启集群:
/export/servers/hadoop-2.6.0-cdh5.14.0/sbin/start-all.sh
进入hive的Shell窗口:
cd /export/servers/hive-1.1.0-cdh5.14.0/
bin/hive
查询所有数据库:
show databases;