Hbase1.3.1 完全分布式搭建。

hbase的搭建是比较简单的,无论是单机模式还是分布式都相对容易。本人选择的是1.3.1的版本,按照官方的文档很快就搭建起来了,但是启动的时候出现了错误。无论是baidu还是google都没有找到答案,起初还以为是版本差异,然后使用了1.2.6版本,结果还是原来的错误,看了错误日志之后也是云里雾里的,后来无意间发现了问题的根源,然后 继续使用1.3.1了,在这里记录一下。


在搭建Hbase之前,我已经搭建好了Hadoop和Zookeeper,搭建的资料网上也比较多。所以没有搭建好这两个环境的需要先搭建一下。

搭建的时候可以直接参考官方文档就好,文档上面介绍的已经非常清楚了。下面我就按照官方的思路走一遍搭建过程。

首先介绍一下我手中的机器,我一共有三个机器,搭建规划就是下面的表格中的样子。

Node Name Master ZooKeeper RegionServer
centos1 yes yes yes
centos2 no yes yes
centos3 backup yes yes

可以说是与官方的大同小异。其中以centos1作为主节点,centos3作为备用主节点。

1.首先将下载好的hbase解压到文件夹中,我这里是解压到了/opt中(以下操作均在centos1节点上进行)。

tar -zxvf hbase-1.3.1-bin.tar.gz -C /opt/

2.配置一下环境变量,这个也不是必须的,也就是以后启动的时候方便一点,修改/etc/profile,添加:

export HBASE_HOME=/opt/hbase-1.3.1
export PATH=${HBASE_HOME}/bin:$PATH

3.编辑hbase中的conf/regionservers,把原来的localhost删除点,写上想要作为regionservers的节点。我这里直接写的就是centos1、centos2、centos3.

4.按照官方的步骤接下来是在conf目录中创建一个backup-masters的文件,其中写上想要作为备用主节点节点名,所以我这里写的就是centos3了。

5.编辑conf/hbase-env.sh文件,修改里面的JAVA_HOME和HBASE_MANAGES_ZK的值。将JAVA_HOME添加成环境中的java环境即可,HBASE_MANAGES_ZK修改为false。

export JAVA_HOME=/usr/local/jdk
export HBASE_MANAGES_ZK=false

JAVA_HOME就不用解释了,这是HBASE_MANAGES_ZK的描述:

Tell HBase whether it should manage it’s own instance of Zookeeper or not.

其实hbase里面自带了一个zookeeper,而这个属性的值就是是否使用这个自带的zookeeper,很显然我这里要使用自己的zookeeper,所以修改为false。

6.接下来修改hbase-site.xml中的配置信息。

<configuration>
<property>
    <name>hbase.rootdir</name>
    <valu
  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
HBase是一个基于Hadoop分布式NoSQL数据库系统,它采用了Hadoop分布式文件系统HDFS作为底层的存储支持,具有高可靠性、高可扩展性、高性能等特点,适用于大规模数据的存储和访问。 下面是HBase完全分布式搭建的步骤: 1. 安装Hadoop 在所有节点上安装Hadoop,并确保Hadoop已经正确配置并且能够正常运行。 2. 安装Java 在所有节点上安装Java,建议使用Oracle JDK 1.8或更高版本。 3. 下载并解压HBase 从官网下载HBase的tar包并解压,将解压后的文件夹放到所有节点的相同位置,建议使用 /opt 目录。 4. 配置HBase 在所有节点上修改HBase配置文件 hbase-site.xml,其中需要配置以下内容: - Hadoop配置路径:hbase.rootdir - ZooKeeper地址:hbase.zookeeper.quorum - RegionServer内存大小:hbase.regionserver.heapsize - Master内存大小:hbase.master.heapsize 5. 启动HBase 在所有节点上启动HBase,可以使用以下命令: ``` $HBASE_HOME/bin/start-hbase.sh ``` 6. 验证HBase是否正常运行 使用HBase Shell进行验证。在任意节点上执行以下命令: ``` $HBASE_HOME/bin/hbase shell ``` 在HBase Shell中输入以下命令: ``` list ``` 如果输出了系统表名,则说明HBase已经成功搭建。 7. 添加RegionServer 如果需要添加新的RegionServer,可以在新节点上安装HBase配置Hadoop和Java,然后将新节点添加到HBase集群中。具体操作步骤如下: - 修改新节点的hbase-site.xml文件。 - 在新节点上启动HBase。 ``` $HBASE_HOME/bin/hbase-daemon.sh start regionserver ``` - 在HBase Master节点上使用以下命令添加新节点: ``` $HBASE_HOME/bin/hbase shell add_regionserver 'new_node:port' ``` 其中new_node是新节点的主机名或IP地址,port是新节点的RegionServer端口号。 至此,HBase完全分布式搭建完成。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值