mysql hbase交互_HBase 与Hive数据交互整合过程详解

HBase 与Hive数据交互整合过程详解

发布时间：2020-05-31 22:30:01

来源：51CTO

阅读：3257

作者：ChinaUnicom110

Hive和Hbase整合理论

1、为什么hive要和hbase整合

2、整合的优缺点

优点：

(1).Hive方便地提供了Hive QL的接口来简化MapReduce的使用，

而HBase提供了低延迟的数据库访问。如果两者结合，可以利

用MapReduce的优势针对HBase存储的大量内容进行离线的计算和分析。

(2).操作方便，hive提供了大量系统功能

缺点：

性能的损失，hive有这样的功能, 他支持通过类似sql语句的语法来操作hbase

中的数据, 但是速度慢。

3、整合需要做什么样的准备工作

4、整合后的目标

(1). 在hive中创建的表能直接创建保存到hbase中。

(2). 往hive中的表插入数据，数据会同步更新到hbase对应的表中。

(3). hbase对应的列簇值变更，也会在Hive中对应的表中变更。

(4). 实现了多列，多列簇的转化：(示例：hive中3列对应hbase中2列簇)

5、hive和Hbase整合后如果通信？

查看hive和Hbase通信图：

主要是通过hive 的lib目录下的hive-hbase-handler-1.2.1.jar来实现hive

和Hbase通信。

整合过程(案例操作)