目录
三、视图相关的元数据表(TBLS、TABLE_PARAMS、TBL_PRIVS,这三张表通过TBL_ID关联)
四、hive文件存储信息相关的元数据表(SDS、SD_PARAMS、SERDES、SERDE_PARAMS)
六、表分区相关的元数据表(PARTITIONS、PARTITION_KEYS、PARTITION_KEY_VALS、PARTITION_PARAMS)
概述
在上篇博客“hive基础”中写过,hive的元数据基本常用存储在MySQL中,本文主要介绍一下MySQL中主要的表。查看MySQL数据库中hive存放的库,可能查到总共存在57张表
一、存储hive版本的原数据表(VERSION)
- 字段介绍
VER_ID SCHEMA_VERSION VERSION_COMMENT ID主键 Hive版本 版本说明 1 2.1.2000 Hive release version 2.1.2000
这个表结构相对简单,但是作用却很重要。如果这个表出问题,hive客户端将无法使用。会报错“Table ‘hive.version’ doesn’t exist”
二、元数据表(DBS、DATABASE_PARAMS)
1、DBS(存储hive中所有的数据库的基本信息)
- 字段介绍
元数据表字段 说明 示例数据 DB_ID 数据库ID 2 DESC 数据库描述 测试库 DB_LOCATION_URI 数据库HDFS路径 hdfs://hua4:8020/apps/hive/warehouse NAME 数据库名 zq121 OWNER_NAME 数据库所有者用户名 zq121 OWNER_TYPE 所有者角色 ROLE
2、DATABASE_PARAMS(存储数据库的相关参数,在create database时候用with dbproperties(property_name=property_value,...)指定的参数)
- 字段介绍
元数据表字段 说明 示例数据 DB_ID 数据库ID 2 PARAM_KEY 参数名 createdby PARAM_VALUE 参数值 zq121 - 注:DBS和DATABASE_PARAMS这两张表通过DB_ID字段关联
三、视图相关的元数据表(TBLS、TABLE_PARAMS、TBL_PRIVS,这三张表通过TBL_ID关联)
1、TBLS(存储hive表、视图、索引表的基本信息)
- 字段介绍
元数据表字段