HBase安装配置(新手笔记)

HBase安装

1.环境变量配置

将安装包上传至CentOS中,解压安装包到hadoop目录下

tar -zxvf hbase-1.6.0-bin.tar.gz -C /usr/hadoop

配置环境变量

vi /etc/profile

在末尾添加以下代码,保存退出

export HBASE_HOME=/usr/hadoop/hbase-1.6.0
export PATH=$HBASE_HOME/bin:$PATH

生效配置

source /etc/profile

验证

hbase version

2.配置HBase

进入hbase的conf 文件夹中,编辑hbase-env.sh文件,修改Java路径,并去掉注释

export JAVA_HOME=/usr/java/jdk1.8.0_241

使用hbase自带的zookeeper

export HBASE_MANAGES_ZK=false

编辑hbase-site.xml文件

<configuration>

    <!-- 将HBase数据保存在HDFS目录中 -->
    <property>
        <name>hbase.rootdir</name>
        <value>hdfs://master:8020/hbase</value>
    </property>

    <!-- HBase是否是分布式环境 -->
    <property>
        <name>hbase.cluster.distributed</name>
        <value>true</value>
    </property>

    <!-- 配置zookeeper地址,节点全部启用zookeeper,个数必须是奇数 -->
    <property>
        <name>hbase.zookeeper.quorum</name>
        <value>master,slave1,slave2</value>
    </property>

    <!-- zookeeper数据目录  -->
    <property>
        <name>hbase.zookeeper.property.dataDir</name>
        <value>/usr/hadoop/zookeeper-3.5.7/data</value>
    </property>

    <property>
        <name>hbase.zookeeper.property.clientPort</name>
        <value>2181</value>
    </property>
    
</configuration>

修改文件regionservers,添加从节点的主机名

slave1
slave2
slave3

3.同步HBase配置文件

同步master结点的HBase配置文件,至slave1、slave2、slave3

scp -r /usr/hadoop/hbase-1.6.0 slave1:/usr/hadoop 
scp -r /usr/hadoop/hbase-1.6.0 slave2:/usr/hadoop 
scp -r /usr/hadoop/hbase-1.6.0 slave3:/usr/hadoop 

分别配置slave1、slave2、slave3的环境变量

scp /etc/profile slave1:/etc/
scp /etc/profile slave2:/etc/
scp /etc/profile slave3:/etc/

分别在slave1、slave2、slave3上生效配置

source /etc/profile

4.启动HBase

启动zookeeper、启动hdfs、启动yarn

zkServer.sh start
start-dfs.sh
start-yarn.sh

运行HBase启动命令

start-hbase.sh 

查看进程

[root@master bin]# jps

9760 ResourceManager
9447 NameNode
13208 HMaster
13337 HRegionServer
12202 HQuorumPeer
9612 SecondaryNameNode
14414 Jps

进入HBase web管理页面

http://master:16010/

http://192.168.32.10:16010/           //推荐使用

TIPS:

1.如出现以下情况,导致web管理页面无法打开

pids/hbase-root-master.pid: 没有那个文件或目录

确定hdfs与hbase配置文件是否相同

hbase-site.xml下的hbase.rootdir下面的value值,必须要和hadoop配置文件core-site.xml下的fs.defaultFS下的value值,ip和端口相同!

修改hbase的pid文件保存路径

打开conf目录下的hbase-env.sh,找到以下代码

# export HBASE_PID_DIR=/var/hadoop/pids

修改为自己的路径

export HBASE_PID_DIR=/usr/hadoop/hbase-1.6.0/pids

2.HMaster无法启动时,hbase-site.xml中添加以下内容:

<property>
	<name>hbase.unsafe.stream.capability.enforce</name>
	<value>false</value>
    <description>
        Controls whether HBase will check for stream capabilities (hflush/hsync).
        Disable this if you intend to run on LocalFileSystem.
        WARNING: Doing so may expose you to additional risk of data loss!
    </description>
</property>

出处:

https://stackoverflow.com/questions/48709569/hbase-error-illegalstateexception-when-starting-master-hsync

官方解释:

https://github.com/apache/hbase/blob/master/hbase-procedure/src/test/resources/hbase-site.xml

3.显示端口已被占用时,先查看已占用,kill掉端口,重新启动

netstat -nultp
kill -9 端口号

配置完成如下图:

master
在这里插入图片描述
slave1
在这里插入图片描述
slave2
在这里插入图片描述
Web界面
在这里插入图片描述

5.进入HBase Shell

hbase shell
Hbase安装配置 1、前提:要有装好的hdfs分布式文件系统和zookeeper集群 2、各台linux机器上传hbase安装包:hbase-0.98.12.1-hadoop2-bin.tar.gz 3、解压jar包:tar -zxvf hbase-0.98.12.1-hadoop2-bin.tar.gz 4、把hadoop的hdfs-site.xml和core-site.xml 放到hbase/conf下: cd root/hadoop/etc/hadoop scp -r hdfs-site.xml /root/hbase-0.98.12.1-hadoop2/conf/ scp -r core-site.xml /root/hbase-0.98.12.1-hadoop2/conf/ 4、配置hbase集群,要修改3个文件(首先zk集群已经安装好了) 5、修改hbase-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_xxx (1)、告诉hbase使用外部的zk export HBASE_MANAGES_ZK=false 6、修改vim hbase-site.xml <property> <name>hbase.rootdir</name> <value>hdfs://namenade/hbase</value>//this is your real nodename. </property> <property> <name>hbase.zookeeper.property.dataDir</name> <value>/opt/zookeeper</value> </property> <property> <name>hbase.cluster.distributed</name> <value>true</value> </property> <property> <name>hbase.zookeeper.quorum</name> <value>node11,node12,node13</value> </property> 7、修改vim regionservers (指定regionserver) Node11 node12 node13 8、指定 standby 的hbase的副节点,注意:该文件不存在,需要创建 vim backup-masters Node12 9、拷贝hbase到其他节点或机器 Cd /root/hbase-0.98.12.1-hadoop2 scp -r conf node12:/root/hbase-0.98.12.1-hadoop2/ scp -r conf node13:/root/hbase-0.98.12.1-hadoop2/ 10、设置私钥并同步时间。 11、启动所有的hbase (1)、分别启动zk /home/zookeeper-xxx/bin/./zkServer.sh start (2)、启动hdfs集群 /root/hadoop/sbin/./start-dfs.sh (3)、启动hbase,在主节点上运行: /root/hbase-0.98.12.1-hadoop2/bin/./start-hbase.sh 12、通过浏览器访问hbase管理页面 Node11:60010 Node12:60010 Node11:50070 Node12:50070 13、为保证集群的可靠性,要启动多个HMaster hbase-daemon.sh start master
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值