HBase实战：HBase与Hive集成

最新推荐文章于 2024-01-25 01:55:23 发布

大数据基础入门教程

最新推荐文章于 2024-01-25 01:55:23 发布

阅读量326

点赞数 1

文章标签： HBase Hive

本文链接：https://blog.csdn.net/mnbvxiaoxin/article/details/103656900

版权

本文介绍了如何将HBase与Hive进行集成，包括环境准备、配置修改以及两个实际案例，展示如何在Hive中创建表并关联HBase，以及如何分析已存在于HBase中的数据。

摘要由CSDN通过智能技术生成

1.1 HBase与Hive的对比

	Hive	HBase
特点	类SQL 数据仓库	NoSQL （Key-value）
适用场景	离线数据分析和清洗	适合在线业务
延迟	延迟高	延迟低
存储位置	存储在HDFS	存储在HDFS

1.2 HBase与Hive集成使用

1.环境准备

因为后续可能会在操作Hive的同时对HBase也会产生影响，所以Hive需要持有操作HBase的Jar，那么接下来拷贝Hive所依赖的Jar包（或者使用软连接的形式）。记得还有把zookeeper的jar包考入到hive的lib目录下。

2.环境变量

vi /etc/profile

修改内容：

$ export HBASE_HOME=/opt/module/hbase-1.3.1
$ export HIVE_HOME=/opt/module/apache-hive-1.2.1

3.Shell执行

$ ln -s $HBASE_HOME/lib/hbase-common-1.3.1.jar  $HIVE_HOME/lib/hbase-common-1.3.1.jar
$ ln -s $HBASE_HOME/lib/hbase-server-1.3.1.jar $HIVE_HOME/lib/hbase-server-1.3.1.jar
$ ln -s