数据治理
皮哥四月红
这个作者很懒,什么都没留下…
展开
-
数据质量评估标准与数据质量规则梳理
待整理实现!原创 2020-06-15 10:39:55 · 12543 阅读 · 1 评论 -
数据治理中的元数据采集(从Hive元数据库中获取ods层表的元数据信息)
最近在做的数据治理项目中有个业务需求是:从hive的元数据库中获取到贴源层(也就是ods层)下所有表的元数据信息,这里大致描述一下实现的过程。一、前期准备知识: Hive元数据信息对应的MySQL数据库表Hive 的元数据信息通常存储在关系型数据库中,常用MySQL数据库作为元数据库管理。Hive的元数据信息在MySQL数据中有57张表:mysql> show tables;±--------------------------+| Tables_in_metastore_spark |±原创 2020-05-17 11:10:19 · 3597 阅读 · 0 评论
分享