MySQL ON DUPLICATE KEY UPDATE (插入更新) 产生的ID增长过快问题

已于 2022-02-21 18:39:28 修改
阅读量2.2k 收藏 2
点赞数 1
分类专栏： 机会终于来了 错误和坑集锦 文章标签： 数据仓库
于 2022-02-14 14:48:49 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/liuge36/article/details/122921513
版权
当使用MySQL的ON DUPLICATE KEY UPDATE时，主键ID可能会非连续增长，造成ID浪费。文章通过示例展示了问题出现的过程，并提出了解决方案，即在更新操作后执行特定SQL语句来避免ID跳跃。
摘要由CSDN通过智能技术生成 
CREATE TABLE `test_duplicate_key` (
  `id` int(11) NOT NULL AUTO_INCREMENT COMMENT '主键id',
  `name` varchar(255
最低0.47元/天 解锁文章
留歌留歌
关注
专栏目录
关于Mysql 的on duplicate key update操作，导致主键不连续自增的问题
飞越蓝天的专栏
06-19 472
2、使用ON DUPLICATE KEY UPDATE时，如果将行作为新行插入，则每行的受影响行值为 1，如果更新现有行，则为 2，如果将现有行设置为其当前值，则为 0。（换句话说就是默认级别为1，在进行insert操作时此时会锁表所以只能影响一行，但是ON DUPLICATE KEY UPDATE本质是先删除后插入，遇到重复是会进行回滚所以它占了两个索引，一切是以主键索引自增为基础的）如果更新操作，受到影响行的值为2；简单说，就是数据库中存在某个记录时，执行这个语句会更新，而不存在这条记录时，就会插入。
on duplicate key update性能问题_MySQL RC级别下并发insert锁超时问题 - 案例验证
weixin_31766871的博客
01-20 3075
作者：网易数据库团队DDB（网易杭研自研的MySQL数据库中间件产品）团队小伙伴发现了一个问题，觉得比较奇怪。于是找到我们，希望解释下。过程中除解释了问题的现象，也通过代码了解了更多的InnoDB DML执行逻辑，还发现了MySQL/InnoDB官方在二级唯一索引冲突检查时加锁行为的反复。本系列打算用三四篇文章来聊聊这个事情。这是第三篇，用实际案例来证明假设。第二篇链接：MySQL RC级别下并发...
mysql ON DUPLICATE KEY UPDATE 引起自增ID变化
mr_zhongjie的博客
08-13 1502
有业务需求是 如果存在就更新，如果不存在就新增 之前用的 django orm中自带的 update_or_create 发现操作1900条数据的时候将近两分钟，太耗时了，然后翻了翻mysql的书籍，发现了ON DUPLICATE KEY UPDATE 方法 1、该语句是基于唯一索引或主键使用，需要建立unique index 索引 2、更新操作必须是在已有的数据基础上才会被执行，如果要更新的字段是主键或者唯一索引，不能和表中已有的数据重复，否则插入更新都失败。 3、不管是更新还是增加等操作，都不
mybatis-plus 插入数据 id 自增过大问题 解决
2301_76216060的博客
08-15 436
【代码】mybatis-plus 插入数据 id 自增过大问题 解决。
ON DUPLICATE KEY UPDATE 导致自增ID跳跃式增长
pursuitK的博客
10-19 1025
ON DUPLICATE KEY UPDATE 导致自增ID跳跃式增长
MySQL使用on duplicate key update引起主键不连续自增
热门推荐
和光同尘的博客
10-10 2万+
项目中需要记录用户对资源的访问次数，实时写入数据库中。性能测试时数据量比较大，每次有10W次的访问次数，有update，也有insert。 为了效率用到了on duplicate key update进行自动判断是更新还是新增，一段时间后发现该表的主键id(已设置为连续自增)，不是连续的自增,总是跳跃的增加，这样就造成id自增过快，已经快超过最大值了，通过查找资料发现on duplicate ke...
ON DUPLICATE KEY UPDATE 导致自增ID跳跃增长，每执行一次SQL，主键自增步长向前+1
YHY的日常
04-09 2031
使用唯一索引，不存在则插入，存在则更新 INSERT INTO tb_addrbook(num,name,mobile) VALUE('1001','小李','13112345678') ON DUPLICATE KEY UPDATE name= '小李',mobile='13112345678' 但是，大家可能会发现，这个表如果是有设置自增ID的话，这个自增ID并不会按正常的记录增加而加1增长，而是会跳跃增长，增长跨度和SQL的执行次数成正比。当然，自增ID在许多业务中只是作为一个记录唯一性标识而已，跳
insert时调用本身字段_MySQL RC级别下并发insert锁超时问题 - 源码分析
weixin_39853523的博客
11-28 234
作者：网易数据库团队DDB（网易杭研自研的MySQL数据库中间件产品）团队小伙伴发现了一个问题，觉得比较奇怪。于是找到我们，希望解释下。过程中除解释了问题的现象，也通过代码了解了更多的InnoDB DML执行逻辑，还发现了MySQL/InnoDB官方在二级唯一索引冲突检查时加锁行为的反复。本系列打算用三四篇文章来聊聊这个事情。这是第二篇，从源码层面来论证所做的假设。第一篇链接：MySQL RC级别...
Mysql中Insert into xxx on duplicate key update问题
12-15
当尝试插入的记录 `(1, 2, 3)` 中的 `a` 值已存在于表中时，`ON DUPLICATE KEY UPDATE` 子句将被触发，将匹配行的 `c` 字段值增加1，而不是简单地插入新行。 如果你想要插入多行记录，并且希望在遇到重复键时更新...
mysql ON DUPLICATE KEY UPDATE语句示例
09-10
在MySQL数据库中，`ON DUPLICATE KEY UPDATE` 是一个非常实用的特性，它允许你在插入新数据时，如果遇到重复的唯一键值，自动执行更新操作，而不是抛出错误。这个功能大大简化了数据处理的流程，特别是当你需要在一...
深入mysql ON DUPLICATE KEY UPDATE 语法的分析
01-21
mysql “ON DUPLICATE KEY UPDATE” 语法如果在INSERT语句末尾指定了ON DUPLICATE KEY UPDATE，并且插入行后会导致在一个UNIQUE索引或PRIMARY KEY中出现重复值，则在出现重复值的行执行UPDATE；如果不会导致唯一值列...
【数据库】大数据量下优化on duplicate key update造成的性能问题
qq_34335450的博客
03-05 1万+
insert into xxx on duplicate key update xxx=xxx语句可以优秀地解决插入数据时产生的重复主键问题，前提是设置了正确的unique key。 但在大数据量情况下（超过1w条），在duplicate key较少的情况下仍表现良好，遇到duplicate key较多的场景下，执行效率出现断崖式降低。 为了解决此问题， 优化点1：可采用先update再进行in...
MySQL INSERT ... ON DUPLICATE KEY UPDATE ...对自增主键的影响
weixin_44635509的博客
11-04 2110
MySQL INSERT … ON DUPLICATE KEY UPDATE …对自增主键的影响 背景 生产告警，数据库自增主键(int无符号)增长很快，溢出程序中Integer类型的最大值。 org.springframework.dao.DataIntegrityViolationException: Error attempting to get column 'match_id' from result set. Cause: com.mysql.jdbc.exceptions.jdbc4.MyS
mysql中on duplicate key update导致主键id不自增解决方法
thatqier
11-04 3228
在配置中添加： innodb_autoinc_lock_mode = 0（默认是1） 重启mysql服务器即可 SHOW VARIABLES LIKE 'innodb_autoinc_lock_mod%';
Mysql：使用on duplicate key update时导致自增id不连续怎么办？
panjiapengfly的博客
03-05 2075
使用on duplicate key update时导致自增id不连续怎么办？
Mysql replace into 与 insert into on duplicate key update 死锁和性能测试
ryqiufeng0013的专栏
08-14 1万+
REPLACEINTO 测试           1   编写目的 1.  测试 replace into 引发死锁 2.  测试 replace 和INSET INTO  ***  ON DUPLICATE KEY UPDATE *** 性能差 2   数据库环境说明 1、 数据库系统： 名称：Mysql 5.5.31 引擎：innodb        字符集：UT
insert ... on duplicate update 返回主键ID
大摩羯先生
01-15 1963
insert ... on duplicate update
ON DUPLICATE key update导致主键ID跳跃增长
辰兮
08-03 3062
作为程序员的二狗子今天已经把手下的任务做完了，正在假装认真工作的样子尽情摸鱼，二狗子闲得无聊，坐立不安，坐着不是，站着也不是，浑身难受。 老板：“那个.....二狗子，你过来一趟” 二狗子心想，老司机摸鱼被发现啦？怀着忐忑不安的心情去了老板那里。 老板：“这张表主键ID设置的自动增长为什么会跳跃增长，而且增长的速度非常快，再这样下去迟早有一天会突破Int的最高数值，你赶紧想办法解决一下！”.........
MySQL主键自增长报duplicate,on duplicate key update导致主键不连续自增解决方法
weixin_28703489的博客
03-23 1335
最近项目上需要实现这么一个功能:统计每个人每个软件的使用时长,客户端发过来消息,如果该用户该软件已经存在增更新使用时间,如果没有则新添加一条记录,代码如下:insert into app_table(userName,app,duration)values(#{userName},#{item.app},#{item.duration})on duplicate key update durati...
mysql ON DUPLICATE KEY UPDATE 语法
最新发布
08-20
MySQL的`ON DUPLICATE KEY UPDATE`语句是在使用INSERT语句向表中插入数据时，如果遇到主键或唯一索引的冲突（即重复键值），则执行指定的UPDATE操作。这样可以避免插入重复记录时产生错误。 具体语法如下： ```sql INSERT INTO table_name (column1, column2, ...) VALUES (value1, value2, ...) ON DUPLICATE KEY UPDATE column1 = value1, column2 = value2, ...; ``` 这条语句的意思是，如果插入的记录导致主键或唯一索引重复，则会更新现有的行而不是抛出错误。在`ON DUPLICATE KEY UPDATE`部分，可以指定一个或多个字段的更新操作。这些字段的值可以是新的值，也可以是函数调用，甚至是`VALUES(column_name)`这样的函数调用，它代表插入语句中提供的对应列的值。 例如，如果你想要在用户表中插入用户信息，并且如果用户已存在（假设以`user_id`作为唯一索引），则更新用户的邮箱地址，你可以写如下SQL语句： ```sql INSERT INTO users (user_id, email) VALUES (123, 'new_email@example.com') ON DUPLICATE KEY UPDATE email = VALUES(email); ``` 这条语句会尝试插入一条新的用户记录，如果`user_id`为123的用户已经存在，那么就将这个用户的`email`字段更新为`new_email@example.com`。
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值