数据质量监控工具-Apache Griffin

一、概述 随着业务发展和数据量的增加,大数据应用开发已成为部门应用开发常用的开发方式,由于部门业务特点的关系,spark和hive应用开发在部门内部较为常见。当处理的数据量达到一定量级和系统的复杂度上升时,数据的唯一性、完整性、一致性等等校验就开始受到关注,而通常做法是根据业务特点,额外开发job...

2019-02-02 07:45:13

阅读数 405

评论数 0

提示
确定要删除当前文章?
取消 删除
关闭
关闭