目标:监测发现数据错误
采集组,稽核组,分析组
采集组看文件个数和日期,文件条目的个数,然后入库,稽核组稽核
1.转换过程中的错误;2.数据源也可能出错
本来数据应该是1,结果经过n次数据处理后,不知道那个环节出了问题,变成了2
对日期,字符串,数字分别进行分析
日期:日期格式,空日期,默认日期,
字符串:字符串格式,空字符串,默认字符串,
数字:数字格式,空数字,默认数字,
数据转换?数据清洗,抽取,加工,汇总
数据抽取是从数据源中抽取数据的过程
入库-----------源头错误---------转换错误---------
数据稽核、业务稽核
每次都插入同一个表,根据账期判断。
重传,重跑:重新上传入库,重新查询,
采集组,稽核组,分析组
采集组看文件个数和日期,文件条目的个数,然后入库,稽核组稽核
1.转换过程中的错误;2.数据源也可能出错
本来数据应该是1,结果经过n次数据处理后,不知道那个环节出了问题,变成了2
对日期,字符串,数字分别进行分析
日期:日期格式,空日期,默认日期,
字符串:字符串格式,空字符串,默认字符串,
数字:数字格式,空数字,默认数字,
数据转换?数据清洗,抽取,加工,汇总
数据抽取是从数据源中抽取数据的过程
入库-----------源头错误---------转换错误---------
数据稽核、业务稽核
每次都插入同一个表,根据账期判断。
重传,重跑:重新上传入库,重新查询,