四、完全分布式hbase环境搭建
1、hbase简介
- 简介
HBase是一个分布式的、面向列的开源数据库,该技术来源于 Fay Chang 所撰写的Google论文“Bigtable:一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统(File System)所提供的分布式数据存储一样,HBase在Hadoop之上提供了类似于Bigtable的能力。HBase是Apache的Hadoop项目的子项目。HBase不同于一般的关系数据库,它是一个适合于非结构化数据存储的数据库。另一个不同的是HBase基于列的而不是基于行的模式
2、环境备准
- hbase下载地址
地址: https://archive.apache.org/dist/hbase/1.2.2/
- 解压至目录
- 配置hbase环境变量
- hbase部署前提
java环境,hadoop环境,zookeeper环境(注意这里使用的zookeeper应该是同一套)
3、配置hbase
说明:集群节点其他节点都是相同节点,相同这里是主节点配置,其他节点对应配置
cd ./conf
- hbase-env.sh
配置java路径
配置使用外部zookeeper
- hbase-site.xml
<configuration>
<property>
<name>hbase.rootdir</name>
<value>"hadoop主节点":9000/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>c36,c43,c55</value>
</property>
<property>
<name>zookeeper.session.timeout</name>
<value>60000</value>
</property>
<property>
<name>hbase.zookeeper.property.clientPort</name>
<value>12181</value>
</property>
<property>
<name>hbase.client.scanner.caching</name>
<value>5000</value>
</property>
<property>
<name>hbase.client.scanner.caching</name>
<value>5000</value>
</property>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
<property>
<name>ipc.server.listen.queue.size</name>
<value>500</value>
</property>
<property>
<name>hbase.regionserver.handler.count</name>
<value>128</value>
</property>
</configuration>
- regionservers
集群节点都配置
4、启动
执行:start-hbase.sh
检查启动
5、简单查验hbase
- 运行hbase shell
- hbase 命令操作
- 页面查询
6、总结
至此分布式hbase搭建完成,后面有不足之处后续补充,希望指正