数据仓库(五)元数据管理

  • 概述

元数据通常定义为”关于数据的数据”,在数据仓库中是定义和描述DW/BI系统的结构,操作和内容的所有信息。元数据贯穿了数据仓库的整个生命周期,使用元数据驱动数据仓库的开发,使数据仓库自动化,可视化。 

  • 元数据类型

                                                       

1.业务元数据 

业务元数据指从业务角度描述业务领域相关的概念、关系和规则的数据,包括业务术语和业务规则等信息。

2.技术元数据

技术元数据指描述系统中技术细节相关的概念、关系和规则的数据,包括对数据结构、数据处理方面的描述,以及数据仓库、ETL、前端展现等技术细节方面的信息。

技术元数据又细分为:

       1.数据源元数据

        2.ETL元数据

       3.数据仓库元数据

       4.BI元数据

3.管理元数据

管理元数据指描述管理领域相关的概念、关系和规则的数据,主要包括管理流程、人员组织、角色职责等信息。

  • 元数据架构

                     

  • 元数据获取途径

                                   

  • 元数据存储模型 

                

  • 元数据功能 

血缘分析:向上追溯元数据对象的数据来源。

影响分析:向下追溯元数据对象对下游的影响。

同步检查:检查源表到目标表的数据结构是否发生变更。

指标一致性分析:定期分析指标定义是否和实际情况一致。

实体关联查询:事实表与维度表的代理键自动关联

  • 元数据应用

ETL自动化管理:使用元数据信息自动生成物理模型,ETL程序脚本,任务依赖关系和调度程序。

数据质量管理:使用数据质量规则元数据进行数据质量测量。

数据安全管理:使用元数据信息进行报表权限控制。

数据标准管理:使用元数据信息生成标准的维度模型。

数据接口管理:使用元数据信息进行接口统一管理。

 

已标记关键词 清除标记
©️2020 CSDN 皮肤主题: 书香水墨 设计师:CSDN官方博客 返回首页