Hive查询数据字典

最新推荐文章于 2023-09-14 20:59:52 发布

weixin_34375233

最新推荐文章于 2023-09-14 20:59:52 发布

阅读量3.3k

点赞数

文章标签：大数据数据库 python

原文链接：https://my.oschina.net/huhaicool/blog/3010316

版权

本文介绍如何利用Python连接Hive数据库，查询并获取数据字典的相关信息，适用于大数据处理场景。

摘要由CSDN通过智能技术生成

2019独角兽企业重金招聘Python工程师标准>>>

从知识库中查询hive的数据字典

SELECT
	D.NAME AS SCHEMA_NAME, -- 数据库名称
	T.TBL_NAME AS TABLE_NAME_EN, -- 表名
	P.PARAM_VALUE AS TABLE_NAME_CN,
	C.INTEGER_IDX AS COLUMN_ID, -- 字段序号
	C.COLUMN_NAME AS COLUMN_NAME_EN, -- 字段名
	C.COMMENT AS COLUMN_NAME_CN, -- 字段备注
	C.TYPE_NAME AS COLUMN_DATA_TYPE, -- 字段类型
	PART_KEYS AS PART_COLUMN -- 分区字段
FROM
	DBS D -- 数据库
	JOIN TBLS T  -- 表
	ON D.DB_ID = T.DB_ID AND  D.NAME='${schema_name}'
	LEFT JOIN TABLE_PARAMS P -- 表属性
	ON T.TBL_ID=P.TBL_ID AND P.PARAM_KEY='comment'
	LEFT JOIN SDS S  -- 字段与表的关联关系
	ON T.SD_ID = S.SD_ID 
	LEFT JOIN COLUMNS_V2 C  -- 字段
	ON S.CD_ID = C.CD_ID
	LE