Linux CentOS7 搭建Hadoop3.0.3+HBASE2.1.0+zookeeper-3.4.10分布式集群

HBASE中文文档： https://www.w3cschool.cn/hbase_doc/hbase_doc-vxnl2k1n.html
参考文档： https://blog.csdn.net/SL_World/article/details/84942794

一、准备三台服务器

需要安装JDK：
https://blog.csdn.net/qq_39680564/article/details/82768938
需要配置免秘钥与修改主机名：
https://blog.csdn.net/qq_39680564/article/details/89498678
需要安装zookeeper集群：
https://blog.csdn.net/qq_39680564/article/details/89500281
需要安装hadoop集群：
https://blog.csdn.net/qq_39680564/article/details/89513162

IP	主机名	HDFS	MapReduce/Yarn	角色
192.168.1.159	server1	NameNode	ResourceManager	Master
192.168.1.198	server2	DataNode	NodeManager	RegionServer、Backup Master
192.168.1.199	server3	DataNode	NodeManager	RegionServer

二、下载解压Hbase包（三台服务同步操作）

cd /opt
wget https://archive.apache.org/dist/hbase/2.1.0/hbase-2.1.0-bin.tar.gz
tar -zxvf hbase-2.1.0-bin.tar.gz

三、配置环境变量（三台服务同步操作）

vim ~/.bashrc

添加如下内容

#Hbase
export HBASE_HOME=/opt/hbase-2.1.0
export HBASE_CONF_DIR=/opt/hbase-2.1.0/conf
export PATH=$PATH:$HBASE_HOME/bin

如图：

查看环境变量

[root@server1 hbase-2.1.0]# source ~/.bashrc 
[root@server1 hbase-2.1.0]# echo $HBASE_HOME
/opt/hbase-2.1.0

四、修改配置文件（三台服务同步操作）

4.1 配置hbase-env.sh文件

vim /opt/hbase-2.1.0/conf/hbase-env.sh

修改如下内容

export JAVA_HOME=/opt/jdk-1.8
export HBASE_MANAGES_ZK=false

4.2 配置hbase-site.xml文件

vim /opt/hbase-2.1.0/conf/hbase-site.xml

添加如下内容

<property>
  <name>hbase.rootdir</name>
  <value>hdfs://server1:9000/hbase</value>
</property>
<property>
  <name>hbase.cluster.distributed</name>
  <value>true</value>
</property>
<property>
  <name>hbase.zookeeper.quorum</name>
  <value>server1,server2,server3</value>
</property>
<!--hbase有内置zookeeper，如果使用外置的zookeeper，则这个dataDir则无需配置
<property>
  <name>hbase.zookeeper.property.dataDir</name>
  <value>/usr/local/zookeeper/zkData</value>
</property>
-->
<property>
  <name>hbase.unsafe.stream.capability.enforce</name>
  <value>false</value>
</property>

如图：

4.3 配置regionservers和backup-masters文件

vim /opt/hbase-2.1.0/conf/regionservers

改为如下内容

server2
server3

如图：

vim /opt/hbase-2.1.0/conf/backup-masters

添加如下内容（该文件是不存在的，需要自己创建，里面的主机当作master的备份机）

server2

如图：

4.4 删除slf4j-log4j12-1.7.25.jar

rm -rf /opt/hbase-2.1.0/lib/client-facing-thirdparty/slf4j-log4j12-1.7.25.jar

4.5 复制htrace-core-3.1.0-incubating.jar

cp /opt/hbase-2.1.0/lib/client-facing-thirdparty/htrace-core-3.1.0-incubating.jar /opt/hbase-2.1.0/lib/

五、启动HBASE集群

5.1 启动server1的hbase即可

[root@server1 opt]# /opt/hbase-2.1.0/bin/start-hbase.sh 
server1: running zookeeper, logging to /opt/hbase-2.1.0/logs/hbase-root-zookeeper-server1.out
server2: running zookeeper, logging to /opt/hbase-2.1.0/logs/hbase-root-zookeeper-server2.out
server3: running zookeeper, logging to /opt/hbase-2.1.0/logs/hbase-root-zookeeper-server3.out
running master, logging to /opt/hbase-2.1.0/logs/hbase-root-master-server1.out
server2: running regionserver, logging to /opt/hbase-2.1.0/logs/hbase-root-regionserver-server2.out
server3: running regionserver, logging to /opt/hbase-2.1.0/logs/hbase-root-regionserver-server3.out
server2: running master, logging to /opt/hbase-2.1.0/logs/hbase-root-master-server2.out

5.2 jps查看进程

server1

server2（作为master的备份机，也有一个HMaster进程）

server3

5.3 访问

Master：http://192.168.1.159:16010/master-status

Backup Master：http://192.168.1.198:16010/master-status

RegionServer：http://192.168.1.198:16030/rs-status

RegionServer：http://192.168.1.199:16030/rs-status