Hbase
HBase是一个高可靠性、高性能、面向列族、可伸缩的分布式存储系统,利用HBASE技术可在廉价PC Server上搭建起大规模结构化存储集群。
1.HBase安装部署
1.1hadoop集群的正常部署
Hadoop集群的正常部署并启动:
sbin/start-dfs.sh
sbin/start-yarn.sh
2.HBase的解压
2.1解压
tar -zxvf hbase-1.3.1-bin.tar.gz -C /opt/module
2.2改名
mv hbase-1.3.1/ hbase
3.HBase的配置文件
3.1修改HBase对应的配置文件
a.hbase-env.sh修改内容:
vim hbase-env.sh
添加jdk
取消使用HBase自带的zk
注释两行
export JAVA_HOME=/opt/module/jdk
export HBASE_MANAGES_ZK=false
#export HBASE_MASTER_OPTS="$HBASE_MASTER_OPTS -XX:PermSize=128m -XX:MaxPermSize=128m"
#export HBASE_REGIONSERVER_OPTS="$HBASE_REGIONSERVER_OPTS -XX:PermSize=128m -XX:MaxPermSize=128m"
b.hbase-site.xml修改内容
<configuration>
<property>
<name>hbase.rootdir</name>
<value>hdfs://hdp-101:9000/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<!-- 0.98后的新变动,之前版本没有.port,默认端口为60000 -->
<property>
<name>hbase.master.port</name>
<value>16000</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>hdp-101:2181,hdp-102:2181,hdp-103:2181</value>
</property>
<property>
<name>hbase.zookeeper.property.dataDir</name>
<value>/opt/module/zookeeper/zkData</value>
</property>
</configuration>
c.配置regionservers:
hdp-101
hdp-102
hdp-103
hdp-104
d.软连接hadoop配置文件到hbase:
d.1软连接
ln -s /opt/module/hadoop/etc/hadoop/core-site.xml /opt/module/hbase/conf/core-site.xml
ln -s /opt/module/hadoop/etc/hadoop/hdfs-sit.xml /opt/module/hbase/conf/hdfs-site.xml
d.2依次发送到其他节点
scp -r conf/ root@hdp-102:$PWD
scp -r conf/ root@hdp-103:$PWD
scp -r conf/ root@hdp-104:$PWD
HBase启动
bin/hbase-daemon.sh start master
bin/hbase-daemon.sh start regionserver
提示:如果集群之间的节点时间不同步,会导致regionserver无法启动,抛出ClockOutOfSyncException异常。
2.启动方式2
bin/start-hbase.sh
对应的停止服务:
bin/stop-hbase.sh
启动成功后,可以通过“host:port”的方式来访问HBase管理页面,例如:
http://hdp-101:16010