MyBatis-Plus的saveBatch或saveOrUpdateBatch批量插入效率很低耗时长

最新推荐文章于 2024-03-11 16:01:38 发布

a31462627

最新推荐文章于 2024-03-11 16:01:38 发布

阅读量2.2k

点赞数 1

文章标签： mybatis mysql 数据库

本文链接：https://blog.csdn.net/a31462627/article/details/130080457

版权

只需要要配置mysql数据库连接时加上这个就可以了：

&rewriteBatchedStatements=true

即：

jdbc:mysql://数据库地址/数据库名?autoReconnect=true&useUnicode=true&characterEncoding=utf8&zeroDateTimeBehavior=CONVERT_TO_NULL&useSSL=false&serverTimezone=CTT&rewriteBatchedStatements=true

可以快很多倍

优惠劵

a31462627

关注关注

1
点赞
踩
4

收藏

觉得还不错? 一键收藏
2
评论
MyBatis-Plus的saveBatch或saveOrUpdateBatch批量插入效率很低耗时长

【代码】MyBatis-Plus的saveBatch或saveOrUpdateBatch批量插入效率很低耗时长。
复制链接

扫一扫

mybatis-plus批量插入效率低优化

张姐姐聊编程

08-11

790

mybatisplus的批量插入

Mybatis Plus 自定义批量插入或批量更新（根据唯一索引）

01-08

Mybatis Plus 自定义批量插入或批量更新（根据唯一索引）

2 条评论您还未登录，请先登录后发表或查看评论

MyBatis-Plus的saveBatch批量插入为何效率很低耗时长详解及解决方案

FourAu的博客

02-02

607

后面我加上后还是很慢，后面一遍一遍排查，发现批量插入saveBatch(List)中的entity。，否则还是更具源码for循环中一条一条循环去插入。

mybatis-plus 根据任意字段saveOrUpdateBatch

热门推荐

zzzgd_666的博客

11-10

1万+

[转]Mybatis-plus批量插入、批量修改数据saveBatch等速度缓慢背景处理 Arebirth博客园: 原文链接背景使用mysqlPlus. 不管是updateBatch, 还是saveBatch, 800条左右的数据, 耗时都超过1s以上尝试更改每次批量处理的数量, 比如: super.updateBatchById(list,1000); 如果不传第二个参数, mysqlPlus默认是1000. 这个根据调整, 发现低于1000, 耗时增加,1500到2500ms左右, 因为sq

Mybatis-Plus 关于savebatch,saveorupdatebatch遇到的坑及解决办法&拓展mybatisPlus实现类方法，批量插入时，唯一索引冲突后更新

qq_43842093的博客

09-17

1万+

最近mybatis-plus框架的更新，让我们基础开发中如虎添翼。其中基本的增删改查，代码生成器想必大家用着那叫一个爽。本人在使用中，也遇到一些坑。比如savebatch,saveorupdatebatch，看着这不是批量新增，批量新增或更新嘛，看着api进行开发，感觉也太好用啦。开发完一测试，速度跟蜗牛一样，针对大数据量真是无法忍受。在控制台上发现，怎么名义上是批量插入，还是一条一条的进行插入，难怪速度龟速。

数据量过大，使用saveBatch保存数据太慢如何解决：

世上哪有什么岁月静好,不过是有人替你负重前行

02-03

4048

如果没有特别要求，可以设置全局配置来保障，实际中使用批量保存的其实就特定表，也不是特别建议使用全局的配置，把可能的字段添加忽略就行了。. mybatis-plus使用saveBatch的时候，需要保证字段不为null，如果可能为null的话，在可以在注解上增加忽略。. 如果已经是一批一个insert以后，还是慢，则需要修改数据库链接，需要在数据库链接后面增加。如果需要查看具体原因，可参考，这位小伙伴测试的非常详细，我就不过多赘述了。修改完毕后，insert应该是一批一个insert，而不是一堆。

Mybatis批量更新优化方案

lianaozhe的博客

03-31

3978

今天在对接客户接口的时候，对方同步数据到我们系统，涉及到数据批量更新，插入的逻辑，出于性能方面的考虑，决定对自己写的逻辑进行优化，下面对几种优化方案进行总结。使用mybatisplus的saveOrUpdateBatch操作效率极低，查看sql日志可以发现，实际上还是一条一条插入的，而且在插入之前还要查询数据库是否存在该数据，耗时很久，建议不要使用。优化方案一是多条sql语句，需要数据库执行多次修改操作，而优化方案二是一条sql语句，只需要数据库执行一次修改操作。

mybatis-plus批量更新太慢，如何解决？

凌焰

11-04

8539

最近使用mybatis-plus的 saveOrUpdateBath 和saveBath接口执行特别慢，数据量大时往往需要十几分钟，打开日志查看原来批量操作也是循环单条数据插入的，那有没有批量更新的办法呢？比如，总共有17个字段，因为最大是32767，这样最多允许32767/ 17 大约是1 927个，所以要分批操作，或有能力的童鞋可以自己修改pg的驱动呦。继承上面的抽象类----postgresql版本（已测试完成，其中id使用序列自增）是因为pg对于sql语句的参数数量是有限制的，最大为32767。

比较原生sql: insert ignore和api: saveOrUpdateBatch()的效率

weixin_46550521的博客

03-18

2534

闲来无事，随便搞搞开发当中常用的批量去重插入一个是原生的sql:insert ignore into,另一个是mybatis-plus的api:saveOrUpdateBatch(),对于这两种写法，我比较关注的是他们的效率。 saveOrUpdateBatch()上示例 public Result<Long> getSpeed(){ /*Long s = cpuInfoService.getSpeed();*/ List<CpuInfo> list

mybatis-plus3.5.2 jar包

06-25

mybatis-plus3.5.2常用jar包，mybatis-plus-3.5.2.jar、mybatis-plus-annotation-3.5.2.jar、mybatis-plus-core-3.5.2.jar、mybatis-plus-extension-3.5.2.jar、mybatis-plus-generator-3.5.2.jar和源码包mybatis-plus-3.5.2.zip。

05_传智播客hibernate教程_实体对象的三种状态与saveOrUpdate方法

11-24

05_传智播客hibernate教程_实体对象的三种状态与saveOrUpdate方法

MyBatis-Plus入门+MyBatis-Plus文档手册中文pdf高清版.rar

11-09

mybatis-plus就很好的解决了这个问题。 MyBatisPlus是一个Mybatis的增强工具，在 Mybatis 的基础上只做增强不做改变，为简化开发、提高效率而生。它主要通过启动时自动注入基本CURD，达到简化操作的目的。关于...

MyBatis-Plus 的官方示例(mybatis-plus-samples-master.zip)

05-05

本工程为 MyBatis-Plus 的官方示例，项目结构如下： mybatis-plus-sample-quickstart: 快速开始示例 mybatis-plus-sample-quickstart-springmvc: 快速开始示例（Spring MVC版本） mybatis-plus-sample-reduce-...

mybatis-plus源码（mybatis-plus-3.5.1.zip）

03-03

mybatis-plus源码（mybatis-plus-3.5.1.zip）

mybatis-plus-generator-ui:对mybatis-plus-generator进行封装，通过Web UI快速生成兼容的Spring boot，mybatis-plus框架的各类业务代码

03-20

提供一致的Web UI用于生成兼容mybatis-plus框架的相关功能代码，包括Entity，Mapper，Mapper.xml，Service，Controller等，可以自定义模板以及各种输出参数，也可以通过SQL查询语句直接生成代码。使用方法 ♡maven...

mybatis-plus saveOrUpdateBatch踩坑

zxtswcx的博客

12-27

3671

mybatis-plus saveOrUpdateBatch踩坑

MyBatisPlus批量写入方法saveBatch速度很慢的解决方案

dongdong199033的博客

05-25

5053

项目组在使用MyBatisPlus的批量插入方法saveBatch时速度缓慢，插入1w条数据，需要近1分钟的时间。

mybatis-plus savebatch用法

06-28

### 回答1： mybatis-plus的savebatch用法是批量插入数据的方法，可以将多条数据一次性插入到数据库中。使用该方法需要先创建一个实体类，然后通过该实体类的List集合来传递多条数据，最后调用savebatch方法即可完成批量插入操作。在使用该方法时需要注意，插入的数据必须符合数据库表的字段类型和约束条件，否则会插入失败。同时，该方法也支持自动生成主键的功能，可以通过在实体类的主键字段上添加注解来实现。 ### 回答2： Mybatis-plus是一个基于Mybatis的增强工具库，能够简化开发中的Mybatis操作。其中有一个saveBatch方法就是用来批量添加数据的，本文将详细介绍saveBatch的用法。 saveBatch方法的定义如下： ```java boolean saveBatch(Collection<T> entityList, int batchSize) ``` 其中，entityList表示待添加的数据列表，batchSize表示每批次添加的数量。使用saveBatch方法的步骤如下： 1.在mapper接口中定义相应的方法。mapper接口需要继承BaseMapper接口，并指定类型参数，如下： ```java public interface UserMapper extends BaseMapper<User> { } ``` 2.实现mapper接口中的定义方法。如下： ```java public class UserMapperImpl extends ServiceImpl<UserMapper, User> implements UserMapper { } ``` 3.使用saveBatch方法添加数据。如下： ```java List<User> userList = new ArrayList<>(); for (int i = 0; i < 10000; i++) { User user = new User(); user.setName("Tom" + i); user.setAge(i); userList.add(user); } userMapper.saveBatch(userList, 1000); ``` 注：上述代码中的userMapper为UserMapper类型的对象。以上是saveBatch方法的基本使用方法。需要注意的是，当批次量较大时，可以适当调大batchSize的值。同时，还需注意存在主键冲突的情况，需要在代码中进行处理。如果需要批量添加不同类型的数据，则需要在mapper接口中定义多个方法，并实现相应的实现类。总之，Mybatis-plus的saveBatch方法可以极大地简化添加数据的操作，提高代码效率，也是业务开发中经常使用的一个方法。 ### 回答3： Mybatis-Plus是一个基于Mybatis的增强工具，可以轻松地操作数据库。其中，SaveBatch是Mybatis-Plus针对批量插入数据提供的一种方法。SaveBatch的使用方法如下： 1.定义实体类首先，我们需要定义一个实体类，该实体类的属性与数据库表字段相对应。例如，定义一个User实体类，在User实体类中定义需要保存的字段属性： ```java @Data public class User { private Long id; private String name; private Integer age; } ``` 2.定义Mapper接口接着，我们需要定义一个Mapper接口，用于定义需要对数据库进行的操作，包括插入、查询、删除等操作。在Mapper接口中定义SaveBatch方法，用于批量插入数据。例如，定义一个UserMapper接口，在UserMapper接口中定义SaveBatch方法： ```java public interface UserMapper extends BaseMapper<User> { void saveBatch(List<User> userList); } ``` 3.调用SaveBatch方法最后，我们可以通过Mybatis-Plus提供的BaseMapper接口，调用SaveBatch方法，将需要插入的数据集合传递给SaveBatch方法即可。例如，在业务代码中，需要批量插入userList数据集合，可以调用UserMapper接口的SaveBatch方法： ```java @Service public class UserServiceImpl implements UserService { @Autowired private UserMapper userMapper; @Override public void insertBatch(List<User> userList) { userMapper.saveBatch(userList); } } ``` 需要注意的是，在批量插入数据时，数据库表中的字段需要与实体类中的属性名称一一对应，否则会报错。另外，SaveBatch方法执行效率较高，相较于逐条插入数据，可大大提高数据插入的效率。以上就是Mybatis-Plus SaveBatch的用法，希望对大家有所帮助。

“相关推荐”对你有帮助么？

非常没帮助
没帮助
一般
有帮助
非常有帮助

提交