基于Hadoop不同版本搭建hive集群（附配置文件）

本教程采用了两种方案

一种是hive-1.21版本,hadoop版本为hadoop2.6.5

还有一种是主要讲基于hadoop3.x hive的搭建

 

先来第一种

一、本地方式（内嵌derby）

步骤

这种存储方式需要在本地运行一个mysql服务器，并作如下配置

 

解压

修改安装包内conf文件夹下的hive-default.xml.template，并重命名为hite-site.xml

<configuration>      <property>         <name>javax.jdo.option.ConnectionURL</name>         <value>jdbc:derby:;databaseName=metastore_db;create=true</value>     </property>     <property>         <name>javax.jdo.option.ConnectionDriverName</name>         <value>org.apache.derby.jdbc.EmbeddedDriver</value>     </property>     <property>         <name>hive.metastore.local</name>         <value>true</value>     </property>     <property>         <name>hive.metastore.warehouse.dir</name>         <value>/user/hive/warehouse</value>     </property>  </configuration>

 

 

 将hive/lib目录下的jline jar包拷贝到hadoop的yarn lib下，并将原jar包删除或改名令其失效。否则会报版本不匹配的错误 问题

使用derby存储方式时，运行hive会在当前目录生成一个derby文件和一个metastore_db目录。这种存储方式的弊端是在同一个目录下同时只能有一个hive客户端能使用数据库，多个用户登录时会报错。（这是由于derby数据库的局限性造成的）

二、Local模式（mysql）

这种存储方式需要在本地运行一个mysql服务器，并作如下配置

 

步骤

安装一个mysql数据库

yum  install mysql-server -y

拷贝mysql驱动包到$HIVE_HOME\lib目录下

修改hive-site,xml

<configuration>  <propert