JAVA关于大数据量的同步处理的一些问题

1.大数据量重一个系统同步到另一个系统,在数据量过大的情况下,需要全量覆盖或增量更新,代码按照之前那种逻辑写的话就会出现脏数据的问题。

1.1:无需验证重复【全量覆盖】

第一次代码:
在代码的逻辑里面,我直接再serviceimpl里面写了,先删除后插入的操作

for循环{
delete(数据库老数据);
insert(新数据);
}
---出现的问题:前端超时,后端代码运行也会超时

第二次代码重构:
这次把插入的方法加了异步注解

for循环{
delete(数据库老数据);
this.insert(新数据);
}
@Async
insert(新数据){
}
--出现的问题:删除方法运行的时候,插入方法被多次调用,
--导致数据库数据没删除完,insert方法还在一直执行,导致数据库出现大量脏数据。
--这里如果把delete和insert放在通过一个异步方法的话,会出现数据库事务死锁

第三次代码重构:
从ctroller开始就调用2个service,执行2个事务,先删除,后插入

ctroller{
service.delete(条件);
service.insert(条件);
}
--解决了脏数据的问题
--解决了单个事务出现死锁的问题
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

军大君

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值