hive 访问hbase 表

最新推荐文章于 2023-04-23 21:41:26 发布

jjshouji

最新推荐文章于 2023-04-23 21:41:26 发布

阅读量800

点赞数

本文链接：https://blog.csdn.net/jjshouji/article/details/78434064

版权

本文介绍了如何在不熟悉Hbase或者对SQL更熟练的情况下，通过Hive来操作Hbase表。通过建立Hive与Hbase的关联，将Hbase的product表映射到Hive，以便使用SQL进行统计等操作。内容包括已有的Hbase product表结构，以及如何在Hive中创建对应的表。

摘要由CSDN通过智能技术生成

1.背景

大部分同学可能不会用hbase ，或者用hbase 不习惯，但是对sql 却很熟悉，比如要统计表的记录数，用sql 可能知道怎么写，用hbase 可能不知道，或者知道但是很慢，性能有问题等，这时我们可以通过hive 建立与hbase 表的关联关系没映射hbase 表到hive。

2.建hive表

2.1 hbase 表

hbase 已存在product 表三个列簇EXT(id ,desc )，computer(name,price)，food (name ,price)没个列簇有多个列

hbase(main):007:0> desc 'product'
Table product is ENABLED
product
COLUMN FAMILIES DESCRIPTION
{NAME => 'EXT', BLOOMFILTER => 'ROW', VERSIONS => '1', IN_MEMORY => 'false', KEEP_DELETED_CELLS => 'FALSE', DATA_BLOCK_ENCODING => 'NONE', TTL => 'FOREVER', COMPRESSION => 'NONE', MIN_VERSIONS => '0', BLOCKCACHE => 'true', BLOCKSIZE => '65536', REPLICATION_SCOPE => '0'}
{NAME => 'computer', BLOOMFILTER => 'ROW', VERSIONS => '5', IN_MEMORY => 'false', KEEP_DELETED_CELLS => 'FALSE', DATA_BLOCK_ENCODING => 'NONE', TTL => 'FOREVER', COMPRESSION => 'NONE', MIN_VERSIONS => '0', BLOCKCACHE => 'true', BLOCKSIZE => '65536', REPLICATION_SCOPE => '0'}
{NAME => 'food', BLOOMFILTER => 'ROW', VERSIONS => '7', IN_MEMORY => 'false', KEEP_DELETED_CELLS => 'FALSE', DATA_BLOCK_ENCODING => 'NONE',