前置安装了hadoop2.7.3
下为hadoop在虚拟机上配置:
hadoop下载和安装教学
hive下载
提取码:fmtd
version:
zookeeper-3.4.5-cdh5.14.2.tar.gz
hive-1.1.0-cdh5.14.2.tar.gz
1.将两个压缩包放到虚拟机的文件夹中,通常放到/opt/下
2.tar -zxf zookeeper-3.4.5-cdh5.14.2.tar.gz
3.tar -zxf hive-1.1.0-cdh5.14.2.tar.gz
4.mv zookeeper-3.4.5-cdh5.14.2 soft/zk345
5.mv hive-1.1.0-cdh5.14.2 soft/hive110
6.cd soft/zk345/conf/
7.vi zoo.cfg
dataDir=/opt/soft/zk345/tmp //tmp前为你文件所在路径
末尾追加:server.1=192.168.56.99:2287:3387 //虚拟机的ip地址:自定:自定
8.vi /etc/profile
同样在末尾追加:
export ZOOKEEPER_HOME=/opt/soft/zk345
export PATH=$PATH:$ZOOKEEPER_HOME/bin
9.source /etc/profile
10.vi hive110/conf/hive-site.xml
<?xml version="1.0" encoding="UTF-8" standalone="no"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
<property>
<name>hive.metastore.warehouse.dir</name>
<value>/usr/hive/warehouse</value> //HDFS上元数据存放的地址,自定
</property>
<property>
<name>hive.metastore.local</name>
<value>true(false)</value> //不装在本机上就改成false,代表远程
</property>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://127.0.0.1:3306/hive?createDatabaseIfNotExist=true</value>
(jdbc:mysql://192.168.56.99:3306/hive?createDatabaseIfNotExist=true)这里对应上面的false
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value> //自己虚拟机的用户名
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>xxxx</value> //对应的密码
</property>
<property>
<name>hive.server2.authentication</name>
<value>NONE</value>
</property>
<property>
<name>hive.server2.thrift.client.user</name>
<value>root</value> //虚拟机的用户名
</property>
<property>
<name>hive.server2.thrift.client.password</name>
<value>xxxx</value> //对应的密码
</property>
</configuration>
11.vi /etc/profile/
export HIVE_HOME=/opt/soft/hive110
export PATH=$PATH:$HIVE_HOME/bin
12.source /etc/profile
13.start-all.sh 启动hadoop
14.zkServer.sh start 启动zookeeper
15.schmatool -dbType mysql -initSchema
16.hive --service metastore
注:
Metastore作用:
客户端连接metastore服务,metastore再去连接MySQL数据库来存取元数据。
有了metastore服务,就可以有多个客户端同时连接,而且这些客户端不需要知道MySQL数据库的用户名和密码,只需要连接metastore 服务即可。
17.最后,输出hive测试是否配置成功