1、基本概念
数据质量:一个评估规则维度提供一种测量与管理信息和数据的方式。
区分规则维度有助于:
-
将维度与业务需求相匹配,并且划分评估的先后顺序;
-
了解从每一维度的评估中能够/不能够得到什么;
-
在时间和资源有限的情况下,更好地定义和管理项目计划中的行动顺序。
数据质量检核主要分为以下规则维度:
-
完整性(Completeness):用来描述信息的完整程度。
-
唯一性(Uniqueness):用来描述数据是否存在重复记录,没有实体多余出现一次。
-
有效性(Validity):用来描述模型或数据是否满足用户定义的条件。通常从命名、数据类型、长度、值域、取值范围、内容规范等方面进行约束。
-
一致性(Consistency):用来描述同一信息主体在不同的数据集中信息属性是否相同,各实体、属性是否符合一致性约束关系。
-
准确性(Accuracy):用来描述数据是否与其对应的客观实体的特征相一致(需要一个确定的和可访问的权威参考源)。
-
及时性(Timeless):用来描述从业务发生到对