Hbase安装流程及踩坑心得

关于安装zookeeper和hbase

前言

网上已经有相当多的zookeeper和hbase的安装教程了。那为什么总是在安装的时候，还是可以遇到那么多问题。

有话说

  搭建一个自己的大数据平台，手把手安装大数据相关组件，从组件的版本匹配，组件源下载，再到着手解压配置。一个环境搭建下来，我发现我可能需要浏览数几十个页面，才能真的完成我的搭建流程。鉴于之前在学习的过程中，曾经给一位朋友写了一份非常详细的hadoop集群搭建的说明书。记录一下这一次在从最基础的hadoop集群搭建，到各个组件的安装配置。由于精力有限，不时将会将原先搭建hadoop的说明说上传上来。需者自取。
这里便不会再赘述hadoop集群搭建的内容。本次的记录主要以安装hbase为主。

了解版本匹配

zookeeper的版本能新就新，其他组件的版本，我是这么配置的，此处只做一个参考，网上有详细的版本匹配表。当然你也可以去官网直接看。（我就是这么干的）
版本搭配：hadoop-2.7.6+hbase-2.4.4 +jdk1.8+zookeeper-3.7.0
官网就可以找到下载的文件。直接百度搜就行。

hbase踩坑实锤

  不再赘述本次的配置问题。这里直接上我的详细的配置过程。

1. 首先我是搭建了一拖三的集群。
2. 四台机器名称为：master、slaver1、slaver2、slaver3

第一步：解压（大家都会）

阐述一下我的文件构成形式。
我所有的内容都在/opt的文件夹下。又分做了module和software文件。module作为文件安装目录。software主要用来装要安装的文件的压缩包的。

这是software：

这是module：（目前只安装了这些内容。）

命令：tar -zxvf hbase-2.4.4-bin.tar.gz -C /opt/module

找到我们解压好的文件：

  关于环境变量：可配可不配。我这里配置了。方便了后期启动的操作。这里说一句，不然以后后面的直接敲指令启动还以为是正常的。
– 根据自己的文件位置，做相应的改动。

hbase-site.xml配置

<property>
    <name>hbase.tmp.dir</name>
    <value>./tmp</value>
  </property>
  <property>
    <name>hbase.unsafe.stream.capability.enforce</name>
    <value>false</value>
  </property>

  <!-- HBase在HDFS上的存放位置，是刚才新建的文件夹 -->
  <property>
    <name>hbase.rootdir</name>
    <value>hdfs://master:9000/hbase</value>
  </property>

  <property>
    <name>hbase.master.info.port</name>
    <value>60010</value>
  </property>
  <!-- 开启分布式 -->
  <property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
  </property>
  <!-- 使用HDFS -->
  <property>
    <name>hbase.unsafe.stream.capability.enforce</name>
    <value>true</value>
  </property>
  <!-- HMaster服务地址-->
  <property>
    <name>hbase.master</name>
    <value>hdfs://master:60000</value>
  </property>
  
  <!-- zookeeper信息，值与Zookeeper配置文件中相同 -->
  <property>
    <name>hbase.zookeeper.quorum</name>
    <value>master,slaver1,slaver2,slaver3</value>
  </property>
  <property>
    <name>hbase.zookeeper.property.clientPort</name>
    <value>2186</value>
  </property>
  <property>
    <name>hbase.zookeeper.property.dataDir</name>
    <value>/opt/module/hbase-2.4.4/zkdata</value>
  </property>

上述的几个配置中。要根据自己的机器进行修改。
包括：

这里要在hadoop上自己创建一个文件夹hbase。

这里要自己创建一个文件夹。

regionservers配置

这里配置的内容是regionservers的。master就别再写进去了。

• 根据自己机器上的名称写明。
  • 需要注意的是：这里的内容是在hosts中地址已经映射好的。

hdfs-site.xml and core-site.xml的cp

将hadoop中的这两个文件进行cp，到hbase的conf文件夹中。

最后一步

将master配置好的内容。scp到其他的机器中。
命令：scp -r file-name username@hostname:filepath
准备启动我们的hbase，在master机器上去启动键入start-hbase.sh

It’s done,bro！我所有的组件都是在admin用户下操作的。如果出现一些权限问题，需要查看一下自己的所有组件的用户与用户组。

最后一句话

  所有做到这里启动不了的。首先要去查看日志。在hbase下有个logs文件夹，记录的不同用户启动hbase的记录。通过记录可以很清楚看到究竟是什么问题。在配置hbase之前，要配置好zookeeper的内容。