在虚拟机上搭建hive前,必须安装配置好hadoop以及mysql;
安装Zookeeper
下载zookeeper压缩包,完成后上传到Linux系统上的opt文件夹下
tar -zxf /opt/zookeeper-3.4.5-cdh5.14.2.tar.gz
将解压后的文件夹放入soft文件夹下
mv zookeeper-3.4.5-cdh5.14.2 soft/zk345
修改zookeeper配置文件,进入到zk345(zookeeper解压文件)文件夹下的conf文件夹,复制zoo_sample.cfg为zoo.cfg
cd /opt/soft/zk345/conf/
cp zoo_sample.cfg zoo.cfg
配置zookeeper
vi zoo.cfg
配置dataDir,这主要是存放zookeeper数据的位置,可以放在zookeeper文件夹下,如改为:/opt/soft/zk345/tmp
再在文件末尾添加
server.1=192.168.56.100:2287:3387
后面两个端口:(最好选择空闲的端口号,以免端口被占用)
第一个端口主要是用于leader和跟班进行数据交换的端口。
第二个端口主要是当leader断线之后用于新的leader和跟班进行数据交换的端口。
配置环境变量
vi /etc/profile
在末尾添加:
export ZOOKEEPER_HOME=/opt/soft/zk345
export PATH=$PATH:$ZOOKEEPER_HOME/bin
激活配置文件就好了
source /etc/profile
启动Zookeeper
zkServer.sh start
jps命令查看后台进程,会出现QuorumPeerMain
安装HIVE
将下载好的hive安装包上传到Linux系统上解压安装包
tar -zxf hive-1.1.0-cdh5.14.2.tar.gz
将解压后的文件夹放入soft文件夹下
mv hive-1.1.0-cdh5.14.2 soft/hive110
添加hive配置,创建配置文件 hive-site.xml
cd /opt/soft/hive110/conf
vi hive-site.xml
hive-site.xml内容
<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
<property>
<name>hive.metastore.warehouse.dir</name>
<value>/usr/hive/warehouse</value>
</property>
<property>
<name>hive.metastore.local</name>
<value>false</value>
</property>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://192.168.56.21:3306/hive?createDatabaseIfNotExist=true</value>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>ok</value>
</property>
<property>
<name>hive.server2.authentication</name>
<value>NONE</value>
</property>
<property>
<name>hive.server2.thrift.client.user</name>
<value>root</value>
</property>
<property>
<name>hive.server2.thrift.client.password</name>
<value>root</value>
</property>
</configuration
添加环境变量 vi /etc/profile
export HIVE_HOME=/opt/soft/hive110
export PATH=$PATH:$HIVE_HOME/bin
激活 source /etc/profile
启动HIVE
注意:第一次启动HIVE需要输入以下命令,这样才能在mysql中建立HIVE的数据库以存放元数据```java
schematool -dbType mysql -initSchema
只有第一次安装才需要,以后启动HIVE就不需要写了
启动HIVE的顺序,但是启动HIVE之前一定要启动Hadoop和ZooKeeper
hive启动方法
```java
1.hive --service metastore //启动HIVE服务
2.hive //启动HIVE
beeline启动方法
1.hiveserver2
2.beeline -u jdbc:hive2://192.168.56.100:10000 -n root