《数据管理》
数据管理即元数据管理,又称为全局数据定位,旨在对开发的规范化指标和表的一系列全局信息进行查询,使得开发人员能快速定位数据,形成我们的数据地图。数据管理模块分为四个子模块:指标管理、数据表管理、数据血缘分析和巡检工具,每个模块的作用请参考《数据仓库管理平台-整体方案》章节中的说明,这里不再赘述。
由于指标管理和数据表管理子模块和数据开发模块中的指标管理和数据表管理子模块类似(前者为所有项目的表和指标的查询,后者为单个项目维度的指标和表的增,删,改,查的管理功能),在实现方式上涉及的表一致,这里也不再重复阐述。
下面重点说明数据血缘分析和巡检工具两个子模块的实现:
一.数据血缘分析
1.说明
缺乏血缘分析会出现《数据仓库管理平台-整体方案》章节中提到的缺乏问题自动化排查能力,缺乏对数据表生命周期管理等问题。通过建立血缘分析机制可以提高问题解决效率;帮助判定系统和表的健康情况,具体收益如下:
A.问题排查,故障快速定位,减少运维人员和开发人力排查成本。