hbase1.4.10集群搭建

1、准备安装包,hbase集群需要依赖hadoop集群、zookeeper集群和jdk环境,所以安装之前要先确保依赖环境可用

https://www.apache.org/dyn/closer.lua/hbase/1.4.10/hbase-1.4.10-src.tar.gz

2、设置环境变量,执行vi ~/.bashrc,添加

#hbase解压目录
export HBASE_HOME=/home/hadoop/hbase/hbase-1.4.10
export PATH=$PATH:$HBASE_HOME/bin

执行 source ~/.bashrc 使环境变量生效

3、进入/hbase-1.4.10/conf目录,修改hbase-env.sh文件

export HBASE_LOG_DIR=${HBASE_HOME}/logs
export JAVA_HOME=$JAVA_HOME
#不使用自带的zookeeper
export HBASE_MANAGES_ZK=false

4、修改hbase-site.xml

<configuration>
   <property>
        <name>hbase.tmp.dir</name>
        <value>/home/hadoop/hadoop/hbase-1.4.10/tmp</value>
   </property>

    <!-- 设置HRegionServers共享目录。定义hbase.rootdir参数时HDFS文件系统的主机名和端口号必须与Hadoop的配置文>
件core-site.xml中fs.default.name参数的配置一致-->
    <property>
        <name>hbase.rootdir</name>
        <value>hdfs://master:9000/hbase</value>
        <description>Hbase data director</description>
    </property>

    <!-- 开启分布式模式 -->
    <property>
        <name>hbase.cluster.distributed</name>
        <value>true</value>
    </property>

    <!-- 设置HMaster的rpc端口, 由于采用的是HA模式,这里只写端口就可以了,不需要再写主机名-->
    <property>
        <name>hbase.master.port</name>
        <value>60000</value>
    </property>
    <!-- 对比参考
    <property>
        <name>hbase.master</name>
        <value>hdfs://master:60000</value>
    </property>
    -->

    <!-- 设置HMaster的http web console端口 -->
    <property>
        <name>hbase.master.info.port</name>
        <value>16010</value>
    </property>

    <!--zookeeper设置,依赖zookeeper集群设置-->
    <!--zookeeper集群信息设置-->
    <property>
        <name>hbase.zookeeper.quorum</name>
        <value>master,slave1,slave2</value>
    </property>

    <!--zookeeper端口-->
    <property>
        <name>hbase.zookeeper.property.clientPort</name>
        <value>2181</value>
    </property>

    <!--请参考zookeeper配置文件zoo.cfg中dataDir的值 -->
    <property>
        <name>hbase.zookeeper.property.dataDir</name>
        <value>/home/hadoop/zookeeper/data</value>
    </property>

</configuration>

5、修改regionservers文件,添加hbase集群服务器域名

master
slave1
slave2

6、把hbase-1.4.10文件夹同步到其他服务器

scp -r hbase-1.4.10/ hadoop@slave1:./

scp -r hbase-1.4.10/ hadoop@slave2:./

7、在master服务器的hbase根目录下执行./bin/start-hbase.sh 启动集群

启动完后输入./bin/hbase shell进入使用界面

8、遇到问题

  • 执行集群启动命令后,命令卡住需要手动ctrl+v退出,并出现hadoop@master's password: master: Permission denied, please try again

    解决方法:在设置ssh免密登陆时,需要对自身服务器的用户也设置,例如ssh-copy-id  -i ~/.ssh/id_rsa.pub  hadoop@master
  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
HBase全分布式集群搭建步骤如下: 1. 安装Java环境和Hadoop分布式环境,并确保Hadoop集群正常运行。 2. 下载HBase安装包,并解压到指定目录。 3. 修改HBase配置文件conf/hbase-site.xml,设置HBase的Zookeeper地址和Hadoop的HDFS地址,例如: ```xml <configuration> <property> <name>hbase.rootdir</name> <value>hdfs://hadoop001:9000/hbase</value> </property> <property> <name>hbase.zookeeper.quorum</name> <value>zk1,zk2,zk3</value> </property> <property> <name>hbase.zookeeper.property.dataDir</name> <value>/data/zookeeper</value> </property> </configuration> ``` 其中,hbase.rootdir指定HBase在HDFS上的根目录,hbase.zookeeper.quorum指定Zookeeper的地址,hbase.zookeeper.property.dataDir指定Zookeeper数据存储的目录。 4. 修改HBase配置文件conf/hbase-env.sh,设置HBase的Java环境变量和Hadoop的HDFS地址,例如: ```shell export JAVA_HOME=/usr/local/java export HBASE_MANAGES_ZK=false export HBASE_CLASSPATH=$HADOOP_HOME/etc/hadoop ``` 其中,HBASE_MANAGES_ZK设置为false表示不使用HBase自带的Zookeeper集群,而是使用独立运行的Zookeeper集群;HBASE_CLASSPATH指定Hadoop的配置文件目录。 5. 在所有节点上设置HBase环境变量,例如: ```shell export HBASE_HOME=/opt/hbase export PATH=$PATH:$HBASE_HOME/bin ``` 6. 在所有节点上启动HBase集群,例如: ```shell $ start-hbase.sh ``` 7. 验证HBase集群是否正常运行,例如: ```shell $ hbase shell hbase(main):001:0> status ``` 如果输出类似于“1 active master, 0 backup masters, 3 servers, 0 dead, 0.6667 average load”的信息,则表示HBase集群已经正常运行。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值