【转】 大数据【九十四】Hbase【四】-- Hbase的体系结构

1. Hbase的体系结构(模型)

1.1 逻辑结构(模型)

    表（table）

•         划分数据集合的概念，和传统的db中的表的概念是一样的

    行键（rowKey）

•         对应关系数据库中的主键，作用就是唯一标示一行记录
•         获取hbase中的一个记录(数据),要通过行键来获取
•         行键是字节数组, 任何字符串都可以作为行键
•         表中的行根据行键(row key)进行排序 ,数据按照Row key的字节序(byte order)排序存储

    列簇(列族)columnFamily

•         简单的认为是一系列“列”的集合

    列限定符（column Qualifier）

•         或者叫列
•         每个列簇都可以有多个列

    时间戳（version）

•         在单元格中可以存放多个版本的数据

    单元格（cell）

•         主要用来存储数据
•         单元格的定位要通过三级定位才能定位到具体的单元格

    三级定位
        行键+(列族:列)+时间戳

6.2 物理结构(模型)

    Zookeeper

•         分布式协调

    Master

•         HMaster没有单点问题，HBase中可以启动多个HMaster
•         负责Table和Region的管理工作
•         管理用户对Table的增、删、改、查操作
•         RegionServer的负载均衡
•         调整Region分布 ,在Region Split后，负责新Region的分配
•         在HRegionServer停机后，负责失效HRegionServer上的Regions迁移

    RegionServer

•         RegionServer主要负责响应用户I/O请求
•         向HDFS文件系统中读写数据，是HBase中最核心的模块
•         HLog部分和多个Region部分

    Hlog

•         HLog保存着用户操作hbase的日志
•         实现了Write Ahead Log (WAL)预写日志
•         Hlog会删除已存储到StoreFile中的数据

    Region

•         区域
•         保存了row-key的固定区域范围的数据
•         一个Hregion对应一个Region
•         一个Hregion对应多个Hstore

    Hstore

•         对应一个列簇(列族)
•         一个Hstore包含一个MemStore(内存储) 和多个StoreFile

    MemStore
        内存储

•         内存中的一块区域,一个Hstore对应一个MemStore
•         当MemStore中的内容存放不下了就会刷出到硬盘以一个个的StoreFile存储

    StoreFile

•         其实就是数据的存储位置
•         对HFile的封装

    Hfile

•         Hadoop File
•         Hdfs的一个文件对象

2. Hbase读写数据的流程

•     zookeeper(寻找元数据信息)： get /hbase/meta-region-server           
•     找到提供元数据信息访问的regionserver
•     找"hbase:meta"表,再去查找要请求哪个regionser来读写数据