虚拟机：集群下Hadoop之Hbase-2.3.5 的详细安装

最新推荐文章于 2024-07-19 22:28:09 发布
最新推荐文章于 2024-07-19 22:28:09 发布
阅读量839 收藏 2
点赞数 1
文章标签： hbase hadoop zookeeper
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Remix_xy/article/details/124786026
版权
该篇博客详细记录了在多台虚拟机上部署HBase 2.3.5的过程，包括解压安装包、配置环境变量、编辑配置文件如hbase-site.xml和hbase-env.sh，设置HDFS路径、Zookeeper集群、region servers以及备用master。最后通过start-hbase.sh启动HBase，并通过jps验证服务状态，确保集群正常运行。
摘要由CSDN通过智能技术生成 
# 解压
[root@master01 download]# tar -zxf hbase-2.3.5-bin.tar.gz -C /opt/software/

# 查看Hbase路径
[root@master01 ~]# cd /opt/software/hbase-2.3.5/
[root@master01 hbase-2.3.5]# pwd
/opt/software/hbase-2.3.5

# 配置hbase的环境变量
vim /etc/profile.d/kb17.sh
------------------------------------------
# hbase
export HBASE_HOME=/opt/software/hbase-2.3.5
export PATH=$PATH:$HBASE_HOME/bin
----------------------------------------------

sourc /etc/profile/

# 寻找java路径
[root@master01 ~]# echo $JAVA_HOME
/opt/software/jdk1.8.0_171


# 编辑配置文件
cd /opt/software/hbase-2.3.5/conf
[root@master01 conf]# vim hbase-env.sh
-----------------------------------------------------------
export JAVA_HOME=/opt/software/jdk1.8.0_171
export HBASE_MANAGES_ZK=false   #ture 修改为false
------------------------------------------------------------

 

# 这个路径下修改配置文件 cd /opt/software/hbase-2.3.5/conf
[root@master01 conf]# vim hbase-site.xml
-------------------------------------------------------
  <property>
    <name>hbase.cluster.distributed</name>        #cluster是你hadoop集群的名称
    <value>true</value>
  </property>
 <property>
    <name>hbase.rootdir</name>
    <value>hdfs://kgccluster/hbase</value>
  </property>
  <property>
    <name>hbase.tmp.dir</name>
    <value>./tmp</value>
  </property>
 <property>
    <name>hbase.unsafe.stream.capability.enforce</name>
    <value>false</value>
  </property>
  <property>
    <name>hbase.zookeeper.quorum</name>
    <value>master01:2181,master02:2181,worker01:2181,worker02:2181</value>
  </property>
</configuration>
--------------------------------------------------------

# 以下是你集群的名称   

[root@master01 conf]# vim regionservers
--------------------------------------
master02
worker01
worker02
-------------------------------------

# 新建一个文件，配置备用master02
vim backup-masters
-------------------------------------
master02
-------------------------------------

# 拷贝hadoop配置文件 到当前路径下
[root@master01 conf]# cp /opt/software/hadoop-3.1.3/etc/hadoop/core-site.xml ./
[root@master01 conf]# cp /opt/software/hadoop-3.1.3/etc/hadoop/hdfs-site.xml ./

# 将安装的hbase拷贝到其他三台虚拟机：master02,worker01,worker02
[root@master01 conf]# bash /root/scopy.sh /opt/software/hbase-2.3.5/

# 并为其他三台虚拟机配置hbase的环境，激活
# 配置hbase的环境变量
vim /etc/profile.d/kb17.sh
------------------------------------------
# hbase
export HBASE_HOME=/opt/software/hbase-2.3.5
export PATH=$PATH:$HBASE_HOME/bin
----------------------------------------------

 

# 启动 hbase
[root@master01 ~]# start-hbase.sh
# 网页查看
http://master01:16010/master-status

 

# 查看服务信息
[root@master01 ~]# ./scall.sh jps

-----------------------
|master02 execute jps...
-----------------------
6627 Jps
3094 DataNode
5367 QuorumPeerMain
3288 DFSZKFailoverController
3194 JournalNode
6058 HRegionServer
3419 ResourceManager
3548 NodeManager
6253 HMaster
3007 NameNode
jps in master02 [ OK ]
-----------------------
|worker01 execute jps...
-----------------------
4353 HRegionServer
2483 NodeManager
2276 DataNode
2373 JournalNode
4632 Jps
3949 QuorumPeerMain
jps in worker01 [ OK ]
-----------------------
|worker02 execute jps...
-----------------------
2288 DataNode
2385 JournalNode
4209 QuorumPeerMain
2498 NodeManager
4882 Jps
4606 HRegionServer
jps in worker02 [ OK ]


[root@master01 ~]# clear
[root@master01 ~]# ./scall.sh jps
-----------------------
|master02 execute jps...
-----------------------
3094 DataNode
5367 QuorumPeerMain
3288 DFSZKFailoverController
3194 JournalNode
6058 HRegionServer
3419 ResourceManager
3548 NodeManager
6253 HMaster
6653 Jps
3007 NameNode
jps in master02 [ OK ]
-----------------------
|worker01 execute jps...
-----------------------
4353 HRegionServer
2483 NodeManager
2276 DataNode
2373 JournalNode
3949 QuorumPeerMain
4654 Jps
jps in worker01 [ OK ]
-----------------------
|worker02 execute jps...
-----------------------
2288 DataNode
2385 JournalNode
4209 QuorumPeerMain
2498 NodeManager
4904 Jps
4606 HRegionServer
jps in worker02 [ OK ]

##############################################################
[root@master01 ~]# ./scall.sh "jps -ml" yes
-----------------------
|master01 execute jps -ml...
-----------------------
21761 org.apache.hadoop.yarn.server.resourcemanager.ResourceManager
20850 org.apache.hadoop.hdfs.server.datanode.DataNode
21170 org.apache.hadoop.hdfs.qjournal.server.JournalNode
23539 org.apache.hadoop.hbase.master.HMaster start
21381 org.apache.hadoop.hdfs.tools.DFSZKFailoverController
24102 sun.tools.jps.Jps -ml
21928 org.apache.hadoop.yarn.server.nodemanager.NodeManager
22125 org.apache.hadoop.util.RunJar /opt/software/hive-3.1.2/lib/hive-metastore-3.1.2.jar org.apache.hadoop.hive.metastore.HiveMetaStore
20686 org.apache.hadoop.hdfs.server.namenode.NameNode
22126 org.apache.hadoop.util.RunJar /opt/software/hive-3.1.2/lib/hive-service-3.1.2.jar org.apache.hive.service.server.HiveServer2
20447 org.apache.zookeeper.server.quorum.QuorumPeerMain /opt/software/zookeeper-3.6.3/bin/../conf/zoo.cfg
jps -ml in master01 [ OK ]
-----------------------
|master02 execute jps -ml...
-----------------------
3094 org.apache.hadoop.hdfs.server.datanode.DataNode
5367 org.apache.zookeeper.server.quorum.QuorumPeerMain /opt/software/zookeeper-3.6.3/bin/../conf/zoo.cfg
3288 org.apache.hadoop.hdfs.tools.DFSZKFailoverController
3194 org.apache.hadoop.hdfs.qjournal.server.JournalNode
6058 org.apache.hadoop.hbase.regionserver.HRegionServer start
3419 org.apache.hadoop.yarn.server.resourcemanager.ResourceManager
3548 org.apache.hadoop.yarn.server.nodemanager.NodeManager
6253 org.apache.hadoop.hbase.master.HMaster --backup start
3007 org.apache.hadoop.hdfs.server.namenode.NameNode
6687 sun.tools.jps.Jps -ml
jps -ml in master02 [ OK ]
-----------------------
|worker01 execute jps -ml...
-----------------------
4353 org.apache.hadoop.hbase.regionserver.HRegionServer start
2483 org.apache.hadoop.yarn.server.nodemanager.NodeManager
2276 org.apache.hadoop.hdfs.server.datanode.DataNode
2373 org.apache.hadoop.hdfs.qjournal.server.JournalNode
4682 sun.tools.jps.Jps -ml
3949 org.apache.zookeeper.server.quorum.QuorumPeerMain /opt/software/zookeeper-3.6.3/bin/../conf/zoo.cfg
jps -ml in worker01 [ OK ]
-----------------------
|worker02 execute jps -ml...
-----------------------
2288 org.apache.hadoop.hdfs.server.datanode.DataNode
2385 org.apache.hadoop.hdfs.qjournal.server.JournalNode
4209 org.apache.zookeeper.server.quorum.QuorumPeerMain /opt/software/zookeeper-3.6.3/bin/../conf/zoo.cfg
2498 org.apache.hadoop.yarn.server.nodemanager.NodeManager
4930 sun.tools.jps.Jps -ml
4606 org.apache.hadoop.hbase.regionserver.HRegionServer start
jps -ml in worker02 [ OK ]

--------------------------------------------------------
# 脚本启动 hbase
[root@master01 ~]# hbase shell
-------------------------------------------------------------
SLF4J: Class path contains multiple SLF4J bindings.
SLF4J: Found binding in [jar:file:/opt/software/hadoop-3.1.3/share/hadoop/common/lib/slf4j-log4j12-1.7.25.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: Found binding in [jar:file:/opt/software/hbase-2.3.5/lib/client-facing-thirdparty/slf4j-log4j12-1.7.30.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: See http://www.slf4j.org/codes.html#multiple_bindings for an explanation.
SLF4J: Actual binding is of type [org.slf4j.impl.Log4jLoggerFactory]
HBase Shell
Use "help" to get list of supported commands.
Use "exit" to quit this interactive shell.
For Reference, please visit: http://hbase.apache.org/2.0/book.html#shell
Version 2.3.5, rfd3fdc08d1cd43eb3432a1a70d31c3aece6ecabe, Thu Mar 25 20:50:15 UTC 2021
Took 0.0008 seconds
hbase(main):001:0>

Remix_xy
关注
虚拟机环境下Hadoop2.7.1+HBase1.3.5安装配置手册 .docx
10-17
描述了centOS6.5（虚拟机）环境下，hadoop2.7.1+hbase1.3.5版本的安装配置过程，以及个人在安装过程中遇到的问题与总结
基于虚拟机集hbase1.2.1配置文件
10-24
基于虚拟机搭建的环境（一个master和三个slaves），亲身测试可用，该配置文件仅供参考
hadoop学习(4)------虚拟机安装hbase
qq_41253208的博客
03-05 2929
前置条件： 需要在已经配置了hadoop伪分布式的基础上进行本实验。 二、安装并配置HBase 解压安装包hbase-1.1.5-bin.tar.gz至路径 /usr/local，命令如下： tar -zxvf hbase-1.1.5-bin.tar.gz -C /usr/local 将解压的文件名hbase-1.1.2改为hbase，以方便使用，命令如下： mv /usr/local/hbase...
大数据技术--实验03-HBase的安装与使用【实测可行】
最新发布
u013571432的博客
07-19 1596
在HBase的官网http://mirrors.cnnic.cn/apache/hbase/ 下载HBase，其文件为：hbase-1.0.1.1 -bin.tar.gz。在master机器进行配置即可，然后可以通过把配置文件拷贝的方式，下载到slave1和slave2，这样可以减少工作量。虚拟机配置好后，配置Hbase参考下表的服务分配来配置HBase。修改hbase-env.sh文件，添加JDK的配置。用户，保持用户权限的一致性，避免出现不必要的错误）。情况］―――――――――――――――。
linux虚拟机下，安装和配置Hbase
hef0810的博客
11-24 5182
安装hbase 另外，hbase安装包也放到了/opt/install目录下，hbase版本是：hbase-1.2.0-cdh5.14.2.tar.gz 安装及配置步骤如下： 第一步，解压到/opt/soft目录下，重命名为hbase120 tar -zxf /opt/install/hbase-1.2.0-cdh5.14.2.tar.gz -C /opt/soft mv /opt/soft/hbase-1...
hbase 在虚拟机中的安装（单节点） （转）
转些好文章，促进分享。
12-02 242
[url]http://www.tuicool.com/articles/FJFBry[/url] [url]http://www.cnblogs.com/mophee/archive/2013/04/21/3033859.html[/url] [url]http://blog.csdn.net/huhui_cs/article/details/10473789[/url] ...
虚拟机下安装hbase
dontlikerabbit的博客
04-08 1278
1.前置安装hadoop 以及 zookeeper,(这里安装了hadoop2.6.0及zookeeper3.4.6) 2.需要压缩包hbase-1.2.0-cdh5.14.2.tar.gz 解压，重命名，授权 tar -zxf hbase-1.2.0-cdh5.14.2.tar.gz -C /opt/soft/ mv hbase-1.2.0-cdh5.14.2/ hbase120 chown -R root:root hbase120/ 设置配置信息： cd /opt/soft/hbase120/con
hbase-hadoop-compat-1.1.3-API文档-中英对照版.zip
04-23
赠送jar包：hbase-hadoop-compat-1.1.3.jar； 赠送原API文档：hbase-hadoop-compat-1.1.3-javadoc.jar； 赠送源代码：hbase-hadoop-compat-1.1.3-sources.jar； 赠送Maven依赖信息文件：hbase-hadoop-compat-1.1.3....
hbase-hadoop-compat-1.1.3-API文档-中文版.zip
05-02
赠送jar包：hbase-hadoop-compat-1.1.3.jar； 赠送原API文档：hbase-hadoop-compat-1.1.3-javadoc.jar； 赠送源代码：hbase-hadoop-compat-1.1.3-sources.jar； 赠送Maven依赖信息文件：hbase-hadoop-compat-1.1.3....
hbase-hadoop2-compat-1.2.12-API文档-中文版.zip
07-14
赠送jar包：hbase-hadoop2-compat-1.2.12.jar； 赠送原API文档：hbase-hadoop2-compat-1.2.12-javadoc.jar； 赠送源代码：hbase-hadoop2-compat-1.2.12-sources.jar； 赠送Maven依赖信息文件：hbase-hadoop2-compat-...
hbase-hadoop-compat-1.2.12-API文档-中英对照版.zip
07-14
赠送jar包：hbase-hadoop-compat-1.2.12.jar； 赠送原API文档：hbase-hadoop-compat-1.2.12-javadoc.jar； 赠送源代码：hbase-hadoop-compat-1.2.12-sources.jar； 赠送Maven依赖信息文件：hbase-hadoop-compat-...
hbase-hadoop2-compat-1.1.3-API文档-中文版.zip
05-02
赠送jar包：hbase-hadoop2-compat-1.1.3.jar； 赠送原API文档：hbase-hadoop2-compat-1.1.3-javadoc.jar； 赠送源代码：hbase-hadoop2-compat-1.1.3-sources.jar； 赠送Maven依赖信息文件：hbase-hadoop2-compat-...
hbase-2.3.5单机一键部署工具
10-23
注意：zookeeper3.4.13和hbase2.3.5都是采用docker-compose方式部署 原文链接：https://blog.csdn.net/m0_37814112/article/details/120915194 说明：使用外部zookeeper3.4.13之hbase2.3.5一键部署工具，支持部署、启动、停止、清除、连接，支持自定义服务端口，数据存储目录等功能，已在生产环境使用。 Options: deploy.sh build single 构建并启动一个hbase单实例 deploy.sh start single 启动hbase实例 deploy.sh stop single 停止hbase实例 deploy.sh check single 检测hbase实例状态 deploy.sh connect single 连接hbase实例 deploy.sh clear single *危险操作* 清除hbase-single容器及所有数据
hbase2.3.5+spark-3.0.3源码编译包
09-03
hbase2.3.5+spark-3.0.3源码编译包
hbase安装_HBase基础环境搭建（虚拟机安装）
weixin_39992957的博客
12-01 602
新建虚拟机，参考之前的文档《VM安装CentOS6.5》，完成网络配置。远程工具连接关闭Selinux关闭防火墙chkconfig iptables off修改主机名第一个network，修改后，将主机命名为masterhbaseNETWORKING=yes#HOSTNAME=localhost.localdomainHOSTNAME=masterhbase修改hosts10.0.200.168 ...
Vmware + Ubantu18.04 安装 Hbase 2.3.5
jmu201821122110
04-07 4078
文章目录前言安装 Hbase2.3.5配置环境变量测试版本配置伪单机模式测试命令运行总结 前言 上篇安装了 Hadoop ，这篇来安装 Hbase ，当然，如果只是简单做实验的话，其实还是比较简单的。前后大概只需要 十多分钟左右 就可以解决这个实验。???? 安装 Hbase2.3.5 Hbase 2.3.5安装地址: Hbase 2.3.5清华镜像源地址 下载完后将文件上传到 Vmware 中,然后将该文件移动到 /usr/local 下 sudo mv hbase-2.3.5-bin.tar
VMware创建Linux虚拟机之（四）ZooKeeper&HBase完全分布式安装
好好读书
12-06 6162
大数据开发 ZooKeeper&HBase完全分布式安装
hbase虚拟机搭建及使用
lycheewsh的博客
11-27 1713
项目里要记录k-v键值对，且数据量非常庞大达到T级别，传统的关系型数据库扛不住查询压力。hbase对于大数据量的查询支持比较优秀。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值