架构设计文档
一、引言
1.1 项目背景
数据质量监测是大数据处理中最重要的一个环节,是数据服务、数据分析、数据挖掘等活动的必备支持条件。
1.2 项目概述
提出了一个基于大数据平台的数据质量管理服务Qualitis,提供统一的流程来定义和检测数据集的质量并及时报告问题。
1.3 术语表
术语含义项目(project)一系列规则的集合,决定告警人和告警级别,是任务调度的单位之一。规则(rule)数据源的数据质量模型的定义,决定是否告警,是任务调度的基础单位。任务(application)数据质量检测任务,通过运行数据质量任务,可以查看数据质量校验结果。