元数据—数据资产基石

大数据学习实践

文章目录

• 系列文章目录
• 前言
• 一、元数据是什么？
• 二、元数据中心解决什么问题？
  • 1.系统、全面地查询元数据信息
  • 2.协助数据问题定位及解决

一、元数据是什么？

        简而言之，元数据就是描述表的结构及使用方式的信息。元数据中心是数据中台最基础的系统，其他系统都需要搭建在它之上。无论是数据资产中心的资产管理与资产治理，数仓模型中心的调度配置、依赖配置，还是指标设计中心的指标生产逻辑，都需要通过元数据中心整合与控制。

二、元数据中心解决什么问题？

1.系统、全面地查询元数据信息

        通过元数据中心，我们可以系统、全面地查询到各个表、指标的元数据信息和血缘信息。例如，通过元数据中心，数据部门能比较轻易地获取表的描述信息、表如何使用的信息，以及表字段及下游引用血缘等信息。

2.2.变更评估及精准变更周知

        当表字段或者指标变更时，通过元数据中心的血缘链路，数据部门可以比较方便地评估该次变更对下游的影响，以及大致的变更工作量，确保变更工作能有序、有计划地开展。

3.协助数据问题定位及解决

        在日常业务过程中，数据部门常常需要修复一些问题（数据的一致性、时效性等）。但数据从被采集到最终被应用涉及采集、存储、加工、查询、可视化等链路，如果不能较准确地定位问题，那么从0开始全链路盘查的工作量之大可想而知。此时，借助血缘链路，数据部门可以快速定位问题所在，从而缩短解决问题所需的时间。

---