大数据实践之路-数据仓库-数据开发自测模板

在实际的数据开发过程中，数据测试是我们的痛点，如果没有良好的标准与测试方法，那么消耗掉的不只是我们的数据开发的成本，甚至更严重的是数据质量问题，经过本人多年的实践经验，严格按着一下模板去测试，可以解决我们再开发上95%的问题。特别是要注意下，关于指标可累加与不可累加问题。

 

1、概览

目的：可以清楚的知道哪些表验证已经OK，哪些还存在问题。

字段信息：

序号	表名	描述	是否通过	重要程度	备注

2、数据表验证

目的：确保目标表的数据和源表的数据是一致的。

方法：计算出目标表的汇总值（一条记录），和ods/dwd层数据进行验证：使用可累计指标进行验证（主要看是否符合预期）

序号

表名

底层表

SQL验证逻辑