并发insert导致重复数据问题

并发insert情况下会发生重复的数据插入问题

1.背景

用多线程接收推送的订单数据,把接收的订单数据存到一个表中,实现的需求是:如果接收的订单消息在数据库中已经存在,那么执行update操作;如果没有存在,那么执行insert操作

代码逻辑:

 if(该订单在数据库表中存在){
     update();
}else{
      insert();
}

线程启动后,发现:数据库表中有两条oderid相同的记录

通过查看日志发现:

两个线程相差时间极短,各自收到了同一个订单的推送消息,在执行数据库insert或update时,都判断出该订单在数据库表中不存在,所以都执行insert操作,造成数据库表中有两条orderid相同的记录

2.解决方案

synchronized同步代码块即加同步锁,synchronized同步代码块的功能:
1)、当A线程访问对象的synchronized代码块的时候,B线程依然可以访问对象方法中其余非synchronized块的部分
2)、当A线程进入对象的synchronized代码块的时候,B线程如果要访问这段synchronized块,那么访问将会被阻塞

加了锁,并行处理会改为串行处理。事务会一条一条的排队执行。这样就不会发生同时insert。

if(该订单在数据库表中存在){
     update();
}else{
   synchronized(this){
      if(该订单在数据库表中存在){
          update();
          }else{
             insert();
            }
       
    }
}     

上面用synchronized同步代码块解决了在单点服务器中涉及到的并发问题,但是synchronized同步代码块在部署到多台服务器会失效,因为假设A机器在在执行数据库insert,判断出数据库中没有某个订单的数据,同时此刻B机器也判断出没有该订单数据,两台机器都进行insert操作,造成数据库中有重复的订单数据

3.多台服务器相互之间的并发导致有重复的订单数据问题解决

解决方案:

在数据库层面,用unique唯一性约束来保证数据的数据库表orderid的唯一性.

添加了唯一性约束后,假设A机器insert成功了,那么B机器再insert的时候会违反唯一性约束,报InvocationTargetException这个异常,捕获该异常后,进行update操作

        if (该订单在数据库表中存在) {
            update();
        } else {
            synchronized (this) {
                if (该订单在数据库表中存在) {
                    update();
                } else {
                    try {
                        insert();
                        } catch (InvocationTargetException e) {
                        update();
                    }
 
                }
 
            }
        }

原文:https://blog.csdn.net/lululove19870526/article/details/60592981

  • 0
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
当你使用 SQL 语句 `INSERT INTO ... ON DUPLICATE KEY UPDATE KEY = KEY` 时,它的作用是在尝试插入一条新的记录时,如果发现该表中的唯一键(通常是 PRIMARY KEY 或者 UNIQUE 约束)已经存在,那么这条语句并不会插入新的数据,而是会更新已存在的行,条件是你要更新的字段值与现有值相同(这里是 `KEY = KEY`,这意味着如果 `KEY` 的值已经被其他行设置为当前值,就不会有任何改变)。 如果你仍然遇到数据重复写入的情况,可能有以下几个原因: 1. 更新条件不正确:你提到的 `KEY = KEY` 在大多数情况下不会改变任何值,因为一个字段的值总是等于它自己。请确保你在 `ON DUPLICATE KEY UPDATE` 部分提供的字段和新值是正确的,比如可能是希望基于某个条件进行更新。 2. 数据库锁或并发问题:如果多个请求同时运行,可能会因为并发控制导致看起来像是重复写入。检查是否有事务、锁机制或并发控制策略影响了数据的更新。 3. 键冲突:可能存在其他非唯一键或者复合键,即使主键未变,其他部分不同也可能导致插入失败并更新其他字段。 4. 数据库配置:检查数据库的配置,如隔离级别是否允许这样的更新操作。 如果你能提供更多的上下文信息和错误日志,我可以帮你分析问题所在。相关问题: 1. 描述一下你更新的关键字段以及你期望的行为是什么? 2. 是否有执行事务或在程序中手动管理并发? 3. 数据库使用的隔离级别和并发控制策略是什么?

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值