04、Hbase介绍及搭建

1. Hbase介绍

HBase是一个分布式的、面向列、非关系型的开源数据库，该技术来源于Fay Chang所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。

• Hbase解决HDFS不能解决的问题。
• HDFS作为文件系统，数据存放上去之后，只能查询。
• Hbase可以进行增删改。

Hadoop是一个高容错、高延时的分布式文件系统和高并发的批处理系统，不适用于提供实时计算； HBase是可以提供实时计算的分布式数据库，数据被保存在HDFS分布式文件系统上

HBase HRegion servers集群中的所有的region的数据在服务器启动时都是被打开的，相应的这就在一定程度上加快系统响 应；而Hadoop中的block中的数据文件默认是关闭的，只有在需要的时候才打开，处理完数据后就关闭，这在一定程度上就增加了响应时间。

2. 解压Hbase 

同样先建立工作路径/usr/hbase,将/opt/soft下的hbase加压到工作路径中。

解压缩：tar -zxvf hbase-1.2.4-bin.tar.gz

进入hbase配置目录conf，修改配置文件hbase-env.sh，添加配置变量：

export HBASE_MANAGES_ZK=falseexport JAVA_HOME=/usr/java/jdk1.8.0_171

export HBASE_CLASSPATH=/usr/hadoop/hadoop-2.7.3/etc/Hadoop 

  解释：一个分布式运行的Hbase依赖一个zookeeper集群。所有的节点和客户端都必须能够访问zookeeper。默认的情况下Hbase会管理一个zookeep集群，即Hbase默认自带一个zookeep集群。这个集群会随着Hbase的启动而启动。而在实际的商业项目中通常自己管理一个zookeeper集群更便于优化配置提高集群工作效率，但需要配置Hbase。需要修改conf/hbase-env.sh里面的HBASE_MANAGES_ZK 来切换。这个值默认是true的，作用是让Hbase启动的时候同时也启动zookeeper.在本实验中，我们采用独立运行zookeeper集群的方式，故将其属性值改为false。

 解释：要想运行完全分布式模式，加一个属性 hbase.cluster.distributed 设置为 true 然后把 hbase.rootdir 设置为HDFS的NameNode的位置。

hbase.rootdir：这个目录是region server的共享目录，用来持久化Hbase。URL需要是’完全正确’的，还要包含文件系统的scheme。

hbase.cluster.distributed ：Hbase的运行模式。false是单机模式，true是分布式模式。若为false,Hbase和Zookeeper会运行在同一个JVM里面。在hbase-site.xml配置zookeeper：当Hbase管理zookeeper的时候，你可以通过修改zoo.cfg来配置zookeeper，对于zookeepr的配置，你至少要在 hbase-site.xml中列出zookeepr的ensemble servers，具体的字段是 hbase.zookeeper.quorum.在这里列出Zookeeper集群的地址列表，用逗号分割。

hbase.zookeeper.property.clientPort：ZooKeeper的zoo.conf中的配置,客户端连接的端口。 hbase.zookeeper.property.dataDir：ZooKeeper的zoo.conf中的配置。对于独立的Zookeeper，要指明Zookeeper的host和端口。需要在 hbase-site.xml中设置。 配置conf/regionservers

 在这里列出了希望运行的全部 HRegionServer，一行写一个host (就Hadoop里面的 slaver 一样)。列在这里的server会随着集群的启动而启动，集群的停止而停止。

hadoop配置文件拷入hbase的目录下(当前目录为/usr/hbase/hbase-1.2.4/conf)

cp /usr/hadoop/hadoop-2.7.3/etc/hadoop/hdfs-site.xml .

cp /usr/hadoop/hadoop-2.7.3/etc/hadoop/core-site.xml .

 分发hbase

scp -r /usr/hbase root@slave1:/usr/

scp -r /usr/hbase root@slave2:/usr/

 配置环境变量（三台机器）

vim /etc/profile

 配置环境变量 Hbase

# set hbase environment

export HBASE_HOME=/usr/hbase/hbase-1.2.4

export PATH=$PATH:$HBASE_HOME/bin

生效环境变量：

source /etc/profile 

3.Hbase 运行与测试 

在master上执行(保证hadoop和zookeeper已开启)：

  start-hbase.sh

 子节点上查看进程：

 4. Hbase shell交互模式 

进hbase交互界面，查看状态与版本

hbase shell

 5. 访问Hbase Web界面 

访问master的hbase webUI界面。如下可以看到slave从节点的状态。    

http://master IP:16010

hbase shell

create 'test1' , 'cf'

list 'test1' 

 访问master的hbase webUI界面。如下可以看到slave从节点的状态。    

http://master IP:16010