Hbase的核心概念、架构、写逻辑详细讲解！

Java_Yhua

于 2021-01-20 17:48:51 发布

阅读量805

点赞数 5

文章标签： java hbase 数据库分布式大数据

本文链接：https://blog.csdn.net/java_yhua/article/details/112899373

版权

Hbase是一个分布式列式存储数据库，依赖于HDFS和Zookeeper。本文详细介绍了Hbase的列族、Rowkey、Region分区和多版本概念，以及核心架构，包括Client、Zookeeper、Master、RegionServer的角色和功能。此外，还阐述了Hbase的写入流程和MemStore刷盘机制，并对比了Hbase与Cassandra的区别。

摘要由CSDN通过智能技术生成

Hbase

1. 概念

base 是分布式、面向列的开源数据库（其实准确的说是面向列族）。HDFS 为 Hbase 提供可靠的底层数据存储服务，MapReduce 为 Hbase 提供高性能的计算能力，Zookeeper 为 Hbase 提供稳定服务和 Failover 机制，因此我们说 Hbase 是一个通过大量廉价的机器解决海量数据的高速存储和读取的分布式数据库解决方案。

2. 列式存储

列方式所带来的重要好处之一就是，由于查询中的选择规则是通过列来定义的，因此整个数据库是自动索引化的。

这里的列式存储其实说的是列族存储，Hbase 是根据列族来存储数据的。列族下面可以有非常多的列，列族在创建表的时候就必须指定。为了加深对 Hbase 列族的理解，下面是一个简单的关系型数据库的表和 Hbase 数据库的表：

3. Hbase 核心概念

3.1. Column Family 列族

Column Family 又叫列族，Hbase 通过列族划分数据的存储，列族下面可以包含任意多的列，实现灵活的数据存取。Hbase 表的创建的时候就必须指定列族。就像关系型数据库创建的时候必须指定具体的列是一样的。Hbase 的列族不是越多越好，官方推荐的是列族最好小于或者等于 3。我们使用的场景一般是 1 个列族。