构建ecif系统核心逻辑

子系统或子公司客户数据探查,数据质量较差,需明确客户数据质量不达标,不参与后续的归并逻辑,不生成客户信息,需要写入数据质量监控表,带批量完成以后,下发回子系统。注意是该客户所有的信息都不处理。在贴源层需要做好数据质量监控,否则ecif系统最终将不可用。

目录

1.源系统数据保留策略

2.数据质量监控

3.核心归并逻辑

4.归并后的客户基本信息整合

5.疑似客户

6.拆分客户


1.源系统数据保留策略

按增量存储,初始化当天是一份历史全量。每日加载数据与存量数据对比,对比出增量。

按主键分组,日期排序取最新,为当前全量结果集。

2.数据质量监控

除了客户要素外,其他字段信息项都要确保需要使用字典的都已经转为ECIF系统的字典项,这一部分也需要提前校验,不符合字典表的规范,都要转为NULL值处理。数据表没有创建时间、更新时间的,都由子系统生成数据的系统时间代替,创建时间或更新时间其中一个为NULL的,由其对应的更新时间或

  • 2
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值