HBase安装配置和Hive安装配置

Hbase的安装配置

1. 安装:

    前置条件最少安装了Hadoop（如果只是安装单机版hbase，zookeeper使用hbase内置的即可）如果需要安装伪分布式或完整分布式则需要先安装zookeeper
    下载hbase（建议下载hbase-1.2.0）并解压至/opt/目录下，修改解压后的名字为hbase
   

tar -zxvf hbase-1.2.0-cdh5.14.2.tar.gz -C /opt/
mv hbase-1.2.0-cdh5.14.2/ hbase

2. 修改/opt/hbase/conf/目录下文件

• vi conf/hbase-env.sh

export JAVA_HOME=/opt/jdk1.8.0_221
#使用外部zookeeper
export HBASE_MANAGES_ZK=true 

#注释以下两行内容

• 配置: vi conf/hbase-site.xml

   <property>
      <name>hbase.rootdir</name>
      <value>hdfs://hadoop001:9000/hbase</value>
   </property>
   <property>
      <name>hbase.cluster.distributed</name>
      <value>false</value>
   </property>

• 配置 环境变量:vi /etc/profile

export HBASE_HOME=/opt/hbase
export PATH=….:$HBASE_HOME/bin

#运行etc/profile文件
source /etc/profile

• 启动HBase并测试是否安装成功

#启动hbase master
bin/hbase-daemon.sh start master
#查看进程，是否存在HMaster
jps
#进入shell
bin/hbase shell
#创建
create 'aaa',{NAME=>'kb09'},{NAME=>'kgc'},{NAME=>'kb07'}
desc 'aaa'
#退出
quit

Hive安装配置

1. 前置安装hadoop以及zookeeper
2. 安装mysql数据库
3. 安装hive,解压压缩包至/opt/目录下,并重命名为hive

cd /software
tar -zxvf hive-1.1.0-cdh5.14.2.tar.gz -C /opt/
cd /opt/
mv hive-1.1.0-cdh5.14.2.tar.gz hive

4. 在/opt/hive目录下创建warehouse

cd /opt/hive
mkdir warehouse

5. 配置etc/profile并运行

export HIVE_HOME=/opt/hive
export PATH=….:$HIVE_HOME/bin

#运行/etc/profile配置文件
source /etc/profile

6. 重命名/opt/hive/conf/目录下hive-env.sh.template文件为hive-env.sh，并修改其内容

cd /opt/hive/conf/
#重命名
mv hive-env.sh.template hive-env.sh
#修改配置
vi hive-env.sh

export HIVE_CONF_DIR=/opt/hive/conf
export HIVE_AUX_JARS_PATH=/opt/hive/lib

7. 配置hive-site.xml文件

vi hive-site.xml

<configuration>
   <property>
     <name>hive.metastore.warehouse.dir</name>
     <value>/opt/hive/warehouse</value>
   </property>
   <property>
     <name>hive.metastore.local</name>
     <value>true</value>
   </property>
   <property>
     <name>javax.jdo.option.ConnectionURL</name>
     <value>jdbc:mysql://127.0.0.1:3306/hive?createDatabaseIfNotExist=true</value>
   </property>
   <property>
     <name>javax.jdo.option.ConnectionDriverName</name>
     <value>com.mysql.jdbc.Driver</value>
   </property>
   <property>
     <name>javax.jdo.option.ConnectionUserName</name>
     <value>root</value>
   </property>
   <property>
     <name>javax.jdo.option.ConnectionPassword</name>
     <value>ok</value>
   </property>
</configuration>

8. 在/opt/hive/lib目录下导入mysql-connector-java-5.1.38.jar包

cd /opt/hive/lib

9. 启动mysql

#启动MySQL
service mysql start
#进入MySQL库
mysql -uroot -pok

10. 创建hive数据库

#创建hive库
create database hive;
#退出
quit

11. 执行schematool -dbType mysql -initSchema命令，如果出现报错情况，则重新启动mysql，进入mysql库，删除hive库，再重新创建hive库，退出后再次执行schematool -dbType mysql -initSchema命令。

schematool -dbType mysql -initSchema

#出现报错情况，执行如下处理步骤：
service mysql restart
mysql -uroot -pok
drop database hive;
create database hive;
quit;
schematool -dbType mysql -initSchema

12. 行成功后，执行hive命令

#schematool -dbType mysql -initSchema命令执行成功后，执行hive命令
hive