HBase集群搭建

首先确保hadoop集群和zookeeper正常启动:

sbin/start-dfs.sh		(开启hdfs)
sbin/start-yarn.sh		(开启yarn)
./zkServer.sh start	(开启ZK)

解压HBase到指定目录下:

tar -xvf /home/hadoop/tools/hbase-1.3.1-bin.tar.gz -C /home/hadoop/install

修改HBase的配置文件
conf文件目录下:
hbase-env.sh 修改内容:

export JAVA_HOME=/home/admin/modules/jdk1.8.0_121	(jdk的路径)

export HBASE_MANAGES_ZK=false

hbase-site.xml 修改内容:

<configuration>
<property>
<name>hbase.rootdir</name>
<value>hdfs://linux01:8020/hbase</value>(端口号要和hadoop的core-site.xml照应)
</property>

<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>

<!-- 0.98 后的新变动,之前版本没有.port,默认端口为 60000 -->
<property>
<name>hbase.master.port</name>
<value>16000</value>
</property>

<property>
<name>hbase.zookeeper.quorum</name>
<value>linux01:2181,linux02:2181,linux03:2181</value>
</property>

<property>
<name>hbase.zookeeper.property.dataDir</name>
<value>/home/hadoop/install/zookeeper-3.4.5/zkData</value>
</property>
</configuration>

regionservers:(也可以写ip地址)

linux01
linux02
linux03

注意:如果是cdh版本,则不需要以下操作,直接xsync/scp到别的虚拟机即可。
注意:如果不是则需要以下配置!!!

由于 HBase 需要依赖Hadoop,所以替换 HBase 的 lib 目录下的 jar 包,以解决兼容问题。在lib路径下:
1)删除原有的 jar:

 rm -rf /home/hadoop/install/hbase-1.3.1/lib/hadoop-*
  rm -rf /home/hadoop/install/hbase-1.3.1/lib/zookeeper-3.4.6.jar

2)拷贝新 jar,涉及的 jar 有:

hadoop-annotations-2.7.2.jar 
hadoop-auth-2.7.2.jar 
hadoop-client-2.7.2.jar 
hadoop-common-2.7.2.jar 
hadoop-hdfs-2.7.2.jar
hadoop-mapreduce-client-app-2.7.2.jar 
hadoop-mapreduce-client-common-2.7.2.jar 
hadoop-mapreduce-client-core-2.7.2.jar 
hadoop-mapreduce-client-hs-2.7.2.jar
hadoop-mapreduce-client-hs-plugins-2.7.2.jar 
hadoop-mapreduce-client-jobclient-2.7.2.jar 
hadoop-mapreduce-client-jobclient-2.7.2-tests.jar 
hadoop-mapreduce-client-shuffle-2.7.2.jar 
hadoop-yarn-api-2.7.2.jar
hadoop-yarn-applications-distributedshell-2.7.2.jar
hadoop-yarn-applications-unmanaged-am-launcher-2.7.2.jar 
hadoop-yarn-client-2.7.2.jar
hadoop-yarn-common-2.7.2.jar
hadoop-yarn-server-applicationhistoryservice-2.7.2.jar 
hadoop-yarn-server-common-2.7.2.jar
hadoop-yarn-server-nodemanager-2.7.2.jar 
hadoop-yarn-server-resourcemanager-2.7.2.jar
hadoop-yarn-server-tests-2.7.2.jar
hadoop-yarn-server-web-proxy-2.7.2.jar
zookeeper-3.4.5.jar

特别提示:这些 jar 包的对应版本应替换成你目前使用的 hadoop 版本,具体情况具体分析。查找 jar 包举例:

find /home/hadoop/install/hadoop-2.7.2/ -name hadoop-annotations*

然后将找到的 jar 包复制到 HBase 的 lib 目录下即可。

HBase 软连接 Hadoop 配置:

 ln -s /home/hadoop/install/hadoop-2.7.2/etc/hadoop/core-site.xml
 /home/hadoop/install/hbase-1.3.1/conf/core-site.xml
ln -s /home/hadoop/install/hadoop-2.7.2/etc/hadoop/hdfs-site.xml
 /home/hadoop/install/hbase-1.3.1/conf/hdfs-site.xml

HBase 远程 scp 到其他集群:(cdh版本中间步骤不用执行)

scp -r /home/hadoop/install/hbase-1.3.1/ linux02:/home/hadoop/install/
scp -r /home/hadoop/install/hbase-1.3.1/ linux03:/home/hadoop/install/

HBase 服务的启动:(2种启动步骤)
第一种:

bin/hbase-daemon.sh start master
bin/hbase-daemon.sh start regionserver

第二种:

bin/start-hbase.sh		(开启)
bin/stop-hbase.sh		(关闭)

查看 Hbse 页面:

http://linux01:16010	或	http://linux01:60010	
(根据版本不同选择不同的端口)

特别提示: 如果集群之间的节点时间不同步, 会导致 regionserver 无法启动,抛出ClockOutOfSyncException 异常。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值