hive元数据信息对应的MySQL数据库表

目录

概述

一、存储hive版本的原数据表(VERSION)

二、元数据表(DBS、DATABASE_PARAMS)

三、视图相关的元数据表(TBLS、TABLE_PARAMS、TBL_PRIVS,这三张表通过TBL_ID关联)

四、hive文件存储信息相关的元数据表(SDS、SD_PARAMS、SERDES、SERDE_PARAMS)

五、表字段相关的元数据表(COLUMNS_V2)

六、表分区相关的元数据表(PARTITIONS、PARTITION_KEYS、PARTITION_KEY_VALS、PARTITION_PARAMS)


概述

        在上篇博客“hive基础”中写过,hive的元数据基本常用存储在MySQL中,本文主要介绍一下MySQL中主要的表。查看MySQL数据库中hive存放的库,可能查到总共存在57张表

                                                            

一、存储hive版本的原数据表(VERSION)

  • 字段介绍
    VER_ID SCHEMA_VERSION VERSION_COMMENT
    ID主键 Hive版本 版本说明
    1 2.1.2000  Hive release version 2.1.2000

这个表结构相对简单,但是作用却很重要。如果这个表出问题,hive客户端将无法使用。会报错“Table ‘hive.version’ doesn’t exist”

二、元数据表(DBS、DATABASE_PARAMS)

1、DBS(存储hive中所有的数据库的基本信息)

  • 字段介绍
    元数据表字段 说明 示例数据
    DB_ID 数据库ID 2
    DESC 数据库描述 测试库
    DB_LOCATION_URI 数据库HDFS路径 hdfs://hua4:8020/apps/hive/warehouse
    NAME 数据库名 zq121
    OWNER_NAME 数据库所有者用户名 zq121
    OWNER_TYPE 所有者角色 ROLE

2、DATABASE_PARAMS(存储数据库的相关参数,在create database时候用with dbproperties(property_name=property_value,...)指定的参数)

  • 字段介绍
    元数据表字段 说明 示例数据
    DB_ID 数据库ID 2
    PARAM_KEY 参数名 createdby
    PARAM_VALUE 参数值 zq121
  • 注:DBS和DATABASE_PARAMS这两张表通过DB_ID字段关联

三、视图相关的元数据表(TBLS、TABLE_PARAMS、TBL_PRIVS,这三张表通过TBL_ID关联)

1、TBLS(存储hive表、视图、索引表的基本信息)

  • 字段介绍
    元数据表字段
  • 2
    点赞
  • 21
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值