Hive Metastore 代码简析

本文主要介绍了Hive Metastore的内部结构,包括包结构和类结构,重点分析了HiveMetaStoreClient、HMSHandler、ObjectStore等关键组件。同时,文章探讨了Hive与Metastore的交互过程,通过DDL和ANALYZE语句的执行来展示交互细节。最后,对Metastore中数据库容量和扩展性进行了预估。
摘要由CSDN通过智能技术生成

1.  hive metastore 内部结构

1.1 包结构


从package结构来看,主要的5个package,让我们来看看这几个package的内容

(1) metastorepackage是metastore 模块的入口,也是整个metastore模块的核心所在,里面包含了HiveMetaStore类作为整个模块的核心,接收来自hive的请求,返回需要的信息。

(2) metastore.apipackage包含了调用和访问metastore模块的接口以及接口参数和返回值类型,metastore模块的用户可以通过api对metastore模块进行访问

(3)metastore.events 用于metastore模块内部的观察者模式。因为metastore模块是支持notification通知机制和一些其他的后续处理的。通过观察者模式,当metastore对元信息进行一些操作以后,会同时产生一些event,这些event会被它们的listener捕获,并作出一些相应的处理,如发出一些通知等。

(4)metastore.model 与数据持久化相关,metastore模块通过datanucleus库将model持久化到数据库,这里的model与数据库中的表是对应的。

(5)metastore.tools 是供后台的元信息数据管理员对元信息进行查看和修改的工具。

 

1.2. 类结构

在上述的5个package,比较核心比较重要的是metastore package,让我们来详细看看其中的类结构。

评论 5
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值