HBase安装配置

本文介绍了HBase的概念,包括其作为Hadoop领域的列式数据库的特性,如面向列存储、逻辑模型和物理模型的详细解释。此外,还提供了HBase的安装配置步骤,包括前置条件、下载解压、配置文件修改以及启动和测试。
摘要由CSDN通过智能技术生成

HBase安装配置

HBase概念

HBase

  • 1、Hbase是hadoop领域的的数据库
  • 2、Hbase是面向列存储的列式数据库
    1)行式数据库优缺点
    a、数据在表中的位置空间是确定的,指针在访问只要知道首地址就可以高效获取其他数据
    b、但在常用的可能只是所有列中的部分列的数据,可是行式数据库会自动查询所有的列,只是在客户端进行数据的过滤,会浪费大量的带宽和空间
    2)列式数据库的优缺点
    a、一张不规则的表(人物画像)每行属性有大量的null
    b、类似于交错数组,只使用在特定的领域
  • 3、逻辑模型
    a)表 近似于行式数据库的表
    b)行 近似于行式数据库的行
    c)列 是不能脱离列簇独立存在的,在行式数据库中没有
    d)行健 近似于行式数据库的主键
    e)时间戳 类似于timestamp 的天然存在,不需要用户自己创建
  • 4、物理模型
    Hbase数据在进行存储时,是按照行健存储。会自己比较行健大小后进行存储
    a)列簇 是单独存储一系列列的文件
  • 5、存储模型
    a)Region
    i.Table在行的方向上分割为多个Region,一个region由[startkey,endkey]表示,每个Region分散在不同的RegionServer中
  • 6、体系结构
    a)主从式结构,主节点称作master,从节点称为region server。
    b)工作方式
    在这里插入图片描述

HBase安装配置

  • 1、前置条件最少安装了Hadoop(如果只是安装单机版hbase,zookeeper使用hbase内置的即可)如果需要安装伪分布式或完整分布式则需要先安装zookeeper
  • 2、下载hbase(建议下载hbase-1.2.0)并解压至/opt/目录下,修改解压后的名字为hbase
tar -zxvf hbase-1.2.0-cdh5.14.2.tar.
Hbase安装配置 1、前提:要有装好的hdfs分布式文件系统和zookeeper集群 2、各台linux机器上传hbase安装包:hbase-0.98.12.1-hadoop2-bin.tar.gz 3、解压jar包:tar -zxvf hbase-0.98.12.1-hadoop2-bin.tar.gz 4、把hadoop的hdfs-site.xml和core-site.xml 放到hbase/conf下: cd root/hadoop/etc/hadoop scp -r hdfs-site.xml /root/hbase-0.98.12.1-hadoop2/conf/ scp -r core-site.xml /root/hbase-0.98.12.1-hadoop2/conf/ 4、配置hbase集群,要修改3个文件(首先zk集群已经安装好了) 5、修改hbase-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_xxx (1)、告诉hbase使用外部的zk export HBASE_MANAGES_ZK=false 6、修改vim hbase-site.xml <property> <name>hbase.rootdir</name> <value>hdfs://namenade/hbase</value>//this is your real nodename. </property> <property> <name>hbase.zookeeper.property.dataDir</name> <value>/opt/zookeeper</value> </property> <property> <name>hbase.cluster.distributed</name> <value>true</value> </property> <property> <name>hbase.zookeeper.quorum</name> <value>node11,node12,node13</value> </property> 7、修改vim regionservers (指定regionserver) Node11 node12 node13 8、指定 standby 的hbase的副节点,注意:该文件不存在,需要创建 vim backup-masters Node12 9、拷贝hbase到其他节点或机器 Cd /root/hbase-0.98.12.1-hadoop2 scp -r conf node12:/root/hbase-0.98.12.1-hadoop2/ scp -r conf node13:/root/hbase-0.98.12.1-hadoop2/ 10、设置私钥并同步时间。 11、启动所有的hbase (1)、分别启动zk /home/zookeeper-xxx/bin/./zkServer.sh start (2)、启动hdfs集群 /root/hadoop/sbin/./start-dfs.sh (3)、启动hbase,在主节点上运行: /root/hbase-0.98.12.1-hadoop2/bin/./start-hbase.sh 12、通过浏览器访问hbase管理页面 Node11:60010 Node12:60010 Node11:50070 Node12:50070 13、为保证集群的可靠性,要启动多个HMaster hbase-daemon.sh start master
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值