Spring Boot 2.x 集成 HBase

最新推荐文章于 2024-08-07 19:25:35 发布

「已注销」

最新推荐文章于 2024-08-07 19:25:35 发布

阅读量8.1k

点赞数 1

分类专栏： java 架构 hadoop

“假装、她是个有灵魂的程序员”

本文链接：https://blog.csdn.net/u011663149/article/details/88830411

版权

本文介绍了HBase的历史、特性以及与传统关系型数据库的区别，并详细讲解了如何在Spring Boot 2.x项目中配置和使用HBase进行数据存储和操作。

摘要由CSDN通过智能技术生成

前言：

1、HBase

HBase 是在 Hadoop 分布式文件系统（简称：HDFS）之上的分布式面向列的数据库。而且是 2007 最初原型，历史悠久。那追根究底，Hadoop 是什么？Hadoop是一个分布式环境存储并处理大数据。Hadoop 使用 MapReduce 算法统计分析大数据。

场景：

监控数据的日志详情
交易订单的详情数据（淘宝、有赞）
facebook 的消息详情

HBase 在 Hadoop 之上提供了类似 BigTable 的能力，它不同于一般的关系数据库，是一个适合非结构化数据存储的数据库。它也不同于行式数据库，是基于列的模式。

HBase 一个面向列的数据库，排序由行决定。

表是行的集合。
行是列族的集合。列族，就是键值对。每个列族以 key 为列命名，可以有无数的列。
列族就是列的集合。列连续存储，并且每个单元会有对应的时间戳
列的存储也是键值对。

与行式数据库最大的区别就是，可以面向列设计巨大表，适用于在线分析处理 OLAP。
与关系型数据库 RDBMS 也有些区别如下：

HBase 宽表，横向扩展。RDBMS 小表，难成规模
HBase 没有事务
HBase 无规范化数据，都是键值对 key value

2、使用配置

2.1 org.apache.hadoop.conf.Configuration

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.hbase.HBaseConfiguration;
import org.apache.hadoop.hbase.HColumnDescriptor;
import org.apache.hadoop.hbase.HTableDescriptor;
import org.apache.hadoop.hbase.KeyValue;
import org.apache.hadoop.hbase.MasterNotRunningException;
import org.