大数据与人工智能入门到放弃(09 回顾篇 HBase完成分布式安装)

记:

最近在公司写单元测试,因为要涉及到周任务达标问题,所以天天加班,今天周末,安排一波Hbase完全分布式的搭建安装

HBase完成分布式安装

这里我用的0.98的版本,附上下载地址https://archive.apache.org/dist/hbase,下载完成后上传到master机器,这里我集群的分布为:资源有限,我总共有3台虚拟机,机器名字分别为master,node1,node2;则这里在master机器上启动了regionservers和master;在node1上启动了regionservers和备用master,node2只启动regionservers。

1.上传到master机器并且解压,我解压在了/root/app下,并且改名为hbase;

2.修改环境变量

1)进入/etc/profile进行文本编辑,修改path;修改完成后source /etc/profile

3.进入hbase目录下的conf目录,修改hbase的配置文件

1)修改hbase-env.sh文件,找到JAVA_HOME那一行,把前面的注释去掉,就是去掉#号,把这个变量的值修改成我们自己安装的jdk的家目录;找到HBASE_MANAGES_ZK这一行,同样的去掉注释,把默认的true改成false;这里我贴出这两行文本;修改完成后保存退出。

export JAVA_HOME=/usr/java/jdk1.8.0_191
export HBASE_MANAGES_ZK=false

2)修改hbase-site.xml,内容如下:mycluster

<configuration>
    <!-- 指定存放的目录,其中mycluster是我hadoop集群的名字,可以到hadoop的配置文件hdfs-site.xml中查看命名 -->
        <property>
                <name>hbase.rootdir</name>
                <value>hdfs://mycluster/hbase</value>
        </property>
    <!-- 开启集群模式 -->
        <property>
                <name>hbase.cluster.distributed</name>
                <value>true</value>
        </property>
    <!-- 各个zookeeper的机器 -->
        <property>
                <name>hbase.zookeeper.quorum</name>
                <value>master,node1,node2</value>
        </property>
</configuration>

3)修改regionservers文件,指定哪几台机器做为regionservers,这里我3台机器都是regionservers,内容如下

master
node1
node2

4)设置备机,备机这里设置一台,Hbase是在哪个机器启动,那么那台机器就是主的,那么可以在主的那台机器中的配置文件指定备机是哪台,我现在在机器为master启动,需要在conf目录下创建文件为backup-masters,即为vi backup-masters,然后里面的内容为node1,那么node1为备机;

node1

5)需要从hadoop的配置文件hdfs-site.xml拷贝到hbase的conf目录中

4.将hbase拷贝给node1和node2

scp -r hbase node1:`pwd`
scp -r hbase node2:`pwd`

5.在node1和node2修改环境变量;

6.启动。启动条件有:hdfs和zookeeper必须先启动起来;然后输入start-hbase.sh就OK了

7.启动成功后,可以打开浏览器master:60010查看分布情况

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值