Hive的体系架构、安装

一、Hive体系架构

二、安装

1.嵌入模式

特点

1. 不需要Mysql支持，数据存储在自带的derby中
2. 只支持一个链接，即一时间只能有一个用户操作

部署

根据如下文件自行编写hive-site.xml

hive-site.xml

<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>org.apache.derby.jdbc.EmbeddedDriver</value>
  </property>

<property>
    <name>javax.jdo.option.ConnectionURL</name>
   <value>jdbc:derby:;databaseName=metastore_db;create=true</value>
  </property>

<property>
    <name>hive.metastore.local</name>
    <value>true</value>
  </property>

<property>
    <name>hive.metastore.warehouse.dir</name>
    <value>file:///root/training/apache-hive-2.3.0-bin/warehouse</value>
  </property>

</configuration>

初始化derby

schematool -dbType derby -initSchema

执行

hive

2.本地模式和远程模式

说明
这两个模式需要搭建mysql数据库进行支持。
本地模式的mysql将搭建于本地，远程模式则是搭建于远程mysql

部署

1. 安装mysql数据库
2. 创建mysql的一个hive数据库，以及一个用户，并赋予这个用户操作这个数据库的权限
3. 将mysql的driver放到hive的lib目录下
4. 参数配置
   需要删除原有hive文件中的内容

<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
  </property>

<property>
    <name>javax.jdo.option.ConnectionURL</name>
   <value>jdbc:mysql://localhost:3306/hive?useSSL=false</value>
  </property>

<property>
    <name>javax.jdo.option.ConnectionUserName</name>
   <value>hive_user</value>
  </property>
<property>
    <name>javax.jdo.option.ConnectionPassword</name>
   <value>hive_password</value>
  </property>

</configuration>

5. 初始化MetaStore

schematool -dbType mysql -initSchema

6. 检查对hive数据库的更新