数据库实现拉链表算法(带数据状态)

1、前言
在数仓开发或者ETL开发中想必大家都面临过拉链表的开发需求,一般拉链表最基本的特征就是记录完整的数据生命周期,可是有些时候只有数据生命周期是不满足我们的业务需求的,比如一些情况下我们需要知道拉链表中的数据目前在业务表中的状态,比如业务表中的某条数据相较于拉链表已经被删除,而我们的拉链表只是标示了数据生命周期并没有状态说明该条数据是已经在业务表中删除的数据,下文分享带有数据生命周期以及数据状态的拉链表实现方式。
2、拉链表概念

拉链表:维护历史状态,以及最新状态数据的一种表,拉链表根据拉链粒度的不同,实际上相当于快照,只不过做了优化,去除了一部分不变的记录,通过拉链表可以很方便的还原出拉链时点的客户记录。
3、拉链表作用
1.数据量比较大。
2.表中的部分字段会被更新,比如用户的地址,银行利率,订单的状态等。
3.需要查看某一个时间点或者时间段的历史快照信息,比如,查看利率在历史某一个时间点的状态。
4.变化的比例和频率不是很大,比如,总共有1000万的会员,每天新增和发生变化的有10万左右。
5.如果对这边表每天都保留一份全量,那么每次全量中会保存很多不变的信息,对存储是极大的浪费;
拉链历史表,既能满足反应数据的历史状态,又可以最大程度的节省存储。
4、带有数据状态的拉链表实现方式
(1)假设我们的业务系统中有一张表:员工部门信息表
描述:此表记录了员工属于哪个部门

  • 3
    点赞
  • 20
    收藏
    觉得还不错? 一键收藏
  • 5
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 5
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值