MyBatis批量插入耗时踩坑经验浅谈

最新推荐文章于 2024-08-01 00:45:00 发布

吃着火锅敲代码

最新推荐文章于 2024-08-01 00:45:00 发布

阅读量3.4k

点赞数 1

分类专栏：笔记文章标签： mybatis mysql 数据库 Java

本文链接：https://blog.csdn.net/qq_35735865/article/details/128929791

版权

笔记专栏收录该内容

21 篇文章 0 订阅

订阅专栏

文章讲述了在项目开发中遇到的批量插入性能问题，原来使用MyBatis的saveBatch方法耗时较长。通过调整数据库配置（rewriteBatchedStatements=true）和改变插入策略（设置批量插入条数），将3000条数据的插入时间从15秒降低到402毫秒。手写SQL批量插入的效率更高，但作者强调适合自己的解决方案才是最好的。

摘要由CSDN通过智能技术生成

问题

因项目有新功能需求，看完需求后，开始无脑写bug，写完开始调bug，因为功能原因，我在写业务逻辑的时候部分的数据采用了批量保存，没多想，懒的写sql就直接用了MyBatis自带的saveBatch方法，结果调试的时候，好家伙直接给我干懵了，插入3000条数据耗时15秒

排查原因

日常修bug，先看日志，好像也没毛病，于是把sql日志打印出来，我去，居然是一条条insert去执行的，能不耗时吗

解决处理

首先设置执行批量执行sql

在数据库连接配置中设置该属性：rewriteBatchedStatements=true，
不设置好像mysql识别不了还是jdbc识别不了批操作，我比较菜，所以没就这吧，感兴趣可以自行了解
设置支持批量执行sql

设置完开始验证

方法一、直接使用saveBatch方法

效果

设置支持批量执行后，MyBatis自带的saveBatch方法插入结果，批量插入耗时：579（ps：这里当时没细看，以为好了，但发现耗时还是很高，应该是6、 7秒左右，就换了手写sql的方式，后来才发现saveBatch方法是支持设置执行条数的，默认30条数据执行一次，相当于我插入3000条数据执行了100条insert语句）
执行sql的日志详情