Hbase分布式安装部署

介绍

Hbase是一个开源的分布式的NoSql数据库,采用列式存储,可支持数十亿行、百万列的数据存储和检索。由于其高效的读写性能,被广泛应用于大数据领域非结构化数据的存储和快速检索场景。
Hbase采用Master/Slave模式,集群由一到多个Master组成,Master做为管理节点,一般不存储数据。多个Slave节点做为数据存储节点,受master管理。一般Master节点叫做HMaster,同时只有一个处于active状态,其他Master处于Backup状态,类似于Hadoop的NameNode的HA。Slave节点被成为RegionServer,Hbase数据存储在多个Region中,RegionServer负责管理这些Region。

安装前环境准备

本篇文章是基于Hbase1.x版本安装,2.x版本请参考官网配置
Hbase安装包hbase-x.x.x-bin.tar.gz下载:
下载地址
Hbase是基于Hadoop存储的,所以需要准备Hadoop环境,依赖软件:
JDK8
Hadoop
Zookeeper
三台Linux服务器或虚拟机,集群模式需要最少节点三台。我的是rhel7.4系统

安装

上传安装包hbase-x.x.x-bin.tar.gz到服务器,解压安装包:

tar -zxvf hbase-x.x.x-bin.tar.gz

修改配置文件
修改hbase-env.sh

vim conf/hbase-env.sh
修改以下参数
export HBASE_HEAPSIZE=4G
//堆外内存,不使用二级缓存可以不配置此项
export HBASE_OFFHEAPSIZE=30G
//日志存储目录,需手动创建目录
export HBASE_LOG_DIR=/home/hadmin/data/logs/hbase
//禁用内置zookeeper
export HBASE_MANAGES_ZK=false

修改hbase-site.xml,如果不需要二级缓存,可将二级缓存的配置删除

<configuration>
  <property>
    <name>hbase.rootdir</name>
    <value>hdfs://ns/hbase</value>
  </property>
  <property>
    <name>hbase.tmp.dir</name>
    <value>/home/data/hbase/tmp</value>
  </property>
  <property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
  </property>
  <property>
    <name>hbase.zookeeper.quorum</name>
    <value>host1,host2,host3</value>
  </property>
  <property>
      <name>hbase.zookeeper.property.clientPort</name>
      <value>2181</value>
      <description>Property from ZooKeeper's config zoo.cfg.
      The port at which the clients will connect.
      </description>
  </property>
  <property>
    <
  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值