DAMA数据管理知识体系-参考数据和主数据

DAMA数据管理知识体系

前言

该章节主要是针对DAMA数据管理知识体系的学习笔记中参考数据和主数据，思维导图如下(考题4分)

---

参考数据和主数据

1. 定义

• 管理共享数据以满足组织目标，减少与数据冗余相关的风险，确保更高的质量，并降低数据整合的成本
• 主数据：共享的数据的标准

2. 业务驱动因素

• 主数据

  • 满足组织数据需求
  • 管理数据质量
  • 管理数据集成的成本
  • 降低风险

• 参考数据

  • 通过使用一致的参考数据，满足多个项目的数据需求，降低数据整合的风险和成本
  • 提升参考数据的质量

3. 目标和原则

3.1 目标

• 确保组织在各个流程中都拥有完整、一致、最新且权威的参考数据和主数据
• 促使企业在各业务单元和各应用系统之间共享参考数据和主数据
• 通过采用标准的、通用的数据模型和整合模式，降低数据使用和数据整合的成本及复杂性

3.2 原则

• 共享数据
• 所有权
• 质量
• 管理职责
• 控制变更
• 权限

4. 主数据和参考数据的区别

• 主数据是“以与业务活动相关的通用和抽象概念形式提供业务活动语境的数据，包括业务交易中涉及的内部和外部对象的详细息（定义和标识符），如客户、产品、雇员、供应商和受控域（代码值）”

4.1相同点

• 参考数据和主数据有着相似的用途。两者都为交易数据的创建和使用提供重要的上下文信息，两者都是应该在企业层面上被管理的共享资源

4.2 区别

• 参考数据不易变化，它的数据集通常会比交易数据集或主数据集小、复杂程度低，拥有的列和行也更少。参考数据管理不包括实体解析的挑战

• 管理重点不同

  • 参考数据管理（Reference Data Management，RDM）。需要对定义的域值及其定义进行控制。参考数据管理的目标是确保组织能够访问每个概念的一整套准确且最新的值。
  • 主数据管理（Master Data Management，MDM）。需要对主数据的值和标识符进行控制，以便能够跨系统地、一致地使用核心业务实体中最准确、最及时的数据。主数据管理的目标包括确保当前值的准确性和可用性，同时降低由那些不明确的标识符所引发的相关风险（那些被识别为具有多个实例的实体和那些涉及多个实体的实例）。

注：主数据是与业务直接相关的，参考数据相对来说独立于业务活动

5. 参考数据

• 最基本的参考数据由代码和描述组成
• 参考数据结构
  • 列表。最简单的参考数据是由代码值和代码描述组成的列表
  • 交叉参考数据列表。不同的应用程序可以使用不同的代码集表 示相同的概念。这些代码集可能有不同的粒度，或者具有相同的粒度、 不同的值。交叉引用数据集可以在代码值之间转换
  • 分类法。分类参考数据体系根据不同级别的差异性获取信息。
  • 本体。一些组织将用于管理网站内容的本体作为参考数据的一 部分，这是因为本体模型也被用来描述其他数据或将组织数据与组织边 界之外的信息联系起来。

6. 主数据

6.1 定义：

主数据是有关业务实体（如雇员、客户、产品、金融结构、资产和位置等）的数据，这些实体为业务交易和分析提供了语境信息

6.2 一般组织的主数据包括下列事物的数据

• 参与方主数据
• 产品和服务主数据
• 财务体系
• 位置信息主数据

6.3 可信来源，黄金记录

• 一数一源一标准

  如：性别的数据存在于：卫健委、民政、公安户籍

6.4 主数据管理

6.4.1 评估主数据的管理情况

• 哪些角色、组织、地点和事物被反复引用
• 哪些数据被用来描述人、组织、地点和事物
• 数据是如何被定义和设计的，以及数据粒度细化程度如何
• 数据在哪里被创建或来源于哪里，在哪里被储存、提供和访问
• 数据通过组织内的系统时是如何变化的
• 谁使用这些数据，为了什么目的
• 用什么标准来衡量数据及其来源的质量和可靠性

6.4.2规划主数据管理步骤

• 识别能提供主数据实体全面视图的候选数据源
• 为精确匹配和合并实体、实例制定规则
• 建立识别和恢复未恰当匹配或合并的数据的方法
• 建立将可信数据分发到整个企业的系统中的方法

6.4.3主数据管理关键处理步骤

• 包括数据模型管理、数据采集、数据验证、标准化和数据丰富、实体解析、管理和共享

7. 数据共享架构

• 注册表（Registry）

  注册表是指向多种记录系统（System of Record）中主数据记录的索引。记录系统管理应用程序本地的主数据， 可以根据主索引访问主数据。注册表相对容易实现，因为它很少需要对 记录系统进行更改。但是，要对多个系统中的主数据进行组合时通常需 要复杂的查询。此外，还需要实施多个业务规则，以解决跨系统时产生 的语义差异
  

• 交易中心（Transaction Hub）

  在该种方法中，各应用程序与中心系统交互，实现对主数据的访问和更新。主数据存在于交易中心内，而不存在于任何其他的应用程序中。交易中心是主数据的记录系统。交易中心使更好的治理成为可能，并对外提供一致的主数据源。但是，从现有的记录系统中删除更新主数据功能的成本很高。业务规则仅被实施在单一系统中，即中心系统
  

• 混合模式（Consolidated）

  混合模式是注册表和交易中心的混合体。记录系统管理应用程序本地的主数据。主数据在一个公共存储库中被合并，并经由数据共享中心实现共享，如此消除了从记录系统直接进行访问的需要。混合法在提供企业视图的同时，能尽量减少对记录系统的影响，但是它需要在系统间进行数据复制，而且数据中心和记录系统之间会有延迟
  

8. 实施指南

• 遵循主数据架构
• 监测数据流动
• 管理参考数据变更
• 数据共享协议
• 组织和文化变革

9.主数据管理工具

• 数据整合工具
• 数据修复工具
• 操作型数据存储（ODS）
• 数据共享中心（DSH）或专门的主数据管理应用来实现

10. 度量指标

• 数据质量和遵从性
• 数据变更活动
• 数据获取和消费
• 服务水平协议（SLA）
• 数据管理专员覆盖率
• 拥有总成本
• 数据共享量和使用情况

11.例题

• 以下哪一项目不是参考数据和主数据管理的目标?(B)
  A. 确保组织能够在各个流程中,都拥有完整、一致、最新、且权威的主数据和参考数据。
  B. 通过采用标准的、通用的数据模型,以提高数据使用和数据整合的成本及安全性。
  C. 通过使用目标、通用数据模型和集成模式降低成本和复杂性。
  D. 提供权威的经协调和质量评估的主数据和参考数据来源