mybatis plus的批量插入性能太低,换成insert value()()()

最新推荐文章于 2024-08-01 00:45:00 发布
最新推荐文章于 2024-08-01 00:45:00 发布
阅读量295 收藏 1
点赞数
分类专栏： mybatis plus 文章标签： mybatis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/q476988320/article/details/116061612
版权
该博客展示了如何使用Java将大型列表分割成小块并批量保存到数据库中，以提高性能。通过调用Mapper接口的batchSave方法，利用 sublist 和 foreach 循环实现高效的数据插入操作。
摘要由CSDN通过智能技术生成

不多BB直接上代码

JAVA

//要插入的list
                    List<Item> list = new ArrayList<>();
            int len = 1000;
            int size = list.size();
            int count = (size + len - 1) / len;
            for (int i = 0; i < count; i++) {
                List<Item> subListOK =
                    list.subList(i * len, ((i + 1) * len > size ? size : len * (i + 1)));
                this.baseMapper.batchSave(subListOK);
            }

Mapper

	<insert id="batchSave" parameterType="java.util.List">
        INSERT INTO 表名 (
			ID, 			
			CR_DT ) VALUES 
        <foreach collection="list" item="entity" separator=",">
           (
            #{entity.id},            
            #{entity.crDt}
           )
        </foreach>
    </insert>

 

q476988320
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
mybatis plus 5种批量操作性能测试
03-31
测试在单元测试中
mybatis中批量插入的两种方式(高效插入)
09-01
在处理大量数据时，批量插入是一种提高性能的有效策略。本文将深入探讨MyBatis中实现批量插入的两种高效方式。 ### 1. MyBatis `foreach` 标签 `foreach` 是MyBatis中用于在SQL语句中迭代集合的标签，特别适合构建...
解决Mybatis-plus 批量插入太慢的问题，提升插入性能
热门推荐
Crystalqy的博客
04-10 3万+
MyBatis-Plus（简称MP）是一个MyBatis的增强工具,旨在MyBatis的基础上只做增强不做改变,为简化开发、提高效率而生。 特点 无侵入：只做增强不做改变，引入它不会对现有工程产生影响，如丝般顺滑 损耗小：启动即会自动注入基本 CURD，性能基本无损耗，直接面向对象操作 强大的 CRUD 操作：内置通用 Mapper、通用 Service，仅仅通过少量配置即可实现单表大部分 CRUD 操作，更有强大的条件构造器，满足各类使用需求 支持 Lambda 形式
【MyBatis】mybatis-plus 批量插入 性能优化
最新发布
九师兄
08-01 1311
稍微总结下我粗略的对比（虽然粗略，但实验结果符合原理层面的理解），如果你想更准确地实验，可以使用JMH，并且测试更多组数（如 5000，10000等）的情况。批量保存方式数据量（条）耗时（ms）单条循环插入1000121011100059927mybatis-plus saveBatch(添加rewtire参数)10002589手动拼接sql10002275100055663jdbc executeBatch(添加rewtire参数)1000324。
记一次接口性能优化实践总结：优化接口性能的八个建议
Java笔记虾
06-07 2078
前言最近对外接口偶现504超时问题，原因是代码执行时间过长，超过nginx配置的15秒，然后真枪实弹搞了一次接口性能优化。在这里结合优化过程，总结了接口优化的八个要点，希望对大家有帮助呀...
02-MybatisPlus批量插入性能够吗？
JavaEdge全是干货的技术号
06-14 599
不要用 mybatis-plus 的批量插入，它其实也是遍历插入，性能很差的”。真的吗？遍历插入，反复创建。这是一个重量级操作，所以性能差。这里不用看源码也知道，因为这个和mybatis-plus没关系，而且我们现在使用SpringBoot，一般也用它的JDBC启动依赖。连接和连接池不是本文重点，总之这观点纯属无稽之谈，和不懂技术的领导说话一个德行一条 insert 就一次网络IO，数量多了，这是个很可观且没必要的开销，所以性能差。
Mybatis Plus 批量插入性能优化，非常实用！
码猿技术专栏
03-12 1722
大家好，我是不才陈某~物联网平台背景，传感器采集频率干到了1000Hz，分了100多张表出来，还是把mysql干炸了。当前单表数据量在1000来w，从kafka上拉数据异步批量插入，每次插入数据量1500条，测试的时候还没问题，结果上线没多久，kafka服务器直接挂了，赶忙看日志，kafka服务器堆积了几十G的数据，再去看生产环境日志，发现到最后单次批量插入用时固定在10多秒，甚至20多秒，kaf...
Mybatis 插入一条或批量插入 返回带有自增长主键记录的实例
08-28
在 Mybatis 中，要实现插入一条或批量插入，需要使用 `<insert>` element，并在其中使用 `useGeneratedKeys` 和 `keyProperty` 属性来获取自增长主键。 MySQL 在 MySQL 中，需要使用 `useGeneratedKeys="true"` 和...
详解mybatis plus使用insert没有返回主键的处理
12-14
在使用MyBatis Plus (MP) 进行数据操作时，有时可能会遇到插入数据后无法获取自增主键的情况。本文将深入分析这个问题，并提供解决方案。 首先，MyBatis Plus 是 MyBatis 的一个扩展库，它提供了很多方便的数据操作...
使用mybatis-plus的insert方法遇到的问题及解决方法（添加时id值不存在异常）
09-07
在使用 MyBatis-Plus 的 `insert` 方法时，可能会遇到一些问题，特别是当尝试插入新记录时，可能会遇到“id 值不存在异常”。这个问题通常是由于 MyBatis-Plus 自动为实体类中的 `id` 字段生成默认值，而这个默认值...
Mybatis Plus 批量插入性能优化，非常实用
在计算机领域混战了5年的java开发工程师，正在向全栈奋斗的路上。目前在学习和分享：Java，springboot，spring，vue，系统开发，服务器运维（可做毕业设计）等相关知识。
03-29 863
***/@Override//更新时自动填充的字段，不用插入值/***/@Bean/***//*** 真正的批量插入* @return*//**/@Mapper最后直接调用UserMapper的方法即可实现真正的批量插入。@Testi < 5;i++) {查看日志输出信息，观察执行的sql语句，发现这才是真正意义上的sql层面的批量插入。但是，到这里并没有结束，mybatisPlus官方提供的。
MyBatis批量插入(insert)数据操作
09-02
本文给大家分享MyBatis批量插入(insert)数据操作知识，非常不错，具有参考借鉴价值，感兴趣的朋友一起学习吧
调优 mybatis saveBatch 25倍性能
yes
04-04 1645
稍微总结下我粗略的对比（虽然粗略，但实验结果符合原理层面的理解），如果你想更准确地实验，可以使用JMH，并且测试更多组数（如 5000，10000等）的情况。批量保存方式数据量（条）耗时（ms）单条循环插入1000121011100059927mybatis-plus saveBatch(添加rewtire参数)10002589手动拼接sql10002275100055663jdbc executeBatch(添加rewtire参数)1000324。
Mybatis-Plus批量插入
qq_44642803的博客
11-08 395
MySQL Jdbc驱动在默认情况下会无视executeBatch()语句，把我们期望批量执行的一组sql语句拆散，一条一条地发给MySQL数据库，直接造成较低的性能。 只有把rewriteBatchedStatements参数置为true, 驱动才会帮你批量执行SQL。打开rewriteBatchedStatements后，根据wireshark嗅探出的mysql报文可以看出： batchDelete(10条记录) => 发送一次请求，内容为”delete from t where id =
spring boot集成mybatis-plus——Mybatis Plus 批量 Insert_新增数据（图文讲解）
小白龙白龙马的博客
02-04 7080
Mybatis Plus 批量 Insert_新增数据(图文讲解) 更新时间 2023-01-10 16:02:58 前言 大家好，我是小哈。 本小节中，我们将学习如何通过 Mybatis Plus 实现 MySQL 批量插入数据。 什么是批量插入？优势在哪里？ 先抛出一个问题：假设老板给你下了个任务，向数据库中添加 100 万条数据，并且不能耗时太久！ 通常来说，我们向 MySQL 中新增...
mybatisPlus批量插入性能优化
少年Dream
08-15 7901
**//更新时自动填充的字段，不用插入值 methodList . add(new InsertBatchSomeColumn(i -> i . getFieldFill()!} }/**} }/**/*** 真正的批量插入* @return}}最后直接调用UserMapper的insertBatchSomeColumn()方法即可实现真正的批量插入。i < 5;i ++) {}查看日志输出信息，观察执行的sql语句，...
【Mybatis扩展】MybatisPlus批量插入性能比较
秋装什么的博客
06-07 230
【Mybatis扩展】MybatisPlus批量插入性能比较
mybatisPlus批量插入优化，性能快的飞起
qq_34905631的博客
10-16 1万+
/ 总记录数 int pageCount = 0;// 页数 int pageSize = 50;// 每页50条 if(totalSize < 50) {} else {i ++) {// TODO 处理数据 } } }/*** 切割数据*} else {} else {} else {} /*** 切割数据* 使用 JDK 8 中提供 Stream 实现分片i < 1000;i ++) {
Mybatis plus批量插入的优化
qq_71654538的博客
03-01 784
数据库的常见操作无非增删查改，当有大量数据需要插入的时候，无疑需要耗费大量的时间，此时性能的优化就极为重要，接下来我将逐步讲解如何优化效率。
mybatis-plus批量插入更新
06-28
### 回答1： Mybatis-Plus提供了批量插入和更新的功能，可以大大提高数据操作的效率。 批量插入可以使用Mybatis-Plus提供的insertBatch方法，将多条记录一次性插入到数据库中。示例代码如下： List<User> userList = new ArrayList<>(); // 添加多条记录到userList中 userMapper.insertBatch(userList); 批量更新可以使用Mybatis-Plus提供的updateBatchById方法，将多条记录一次性更新到数据库中。示例代码如下： List<User> userList = new ArrayList<>(); // 修改多条记录的信息 userMapper.updateBatchById(userList); 需要注意的是，批量插入和更新的记录数不能太大，否则可能会导致数据库性能下降。建议在实际应用中根据具体情况进行调整。 ### 回答2： Mybatis-plus是一款基于Mybatis的增强工具，它提供了许多实用的功能来简化开发，其中就包括批量插入更新操作。 在实现批量插入更新操作时，我们通常会遵循以下步骤： 1. 创建一个实体类，该实体类需要继承Mybatis-plus提供的Model类，并定义需要插入或更新的字段属性。 2. 创建一个Mapper接口，该接口需要继承Mybatis-plus提供的BaseMapper接口，并定义批量插入或更新的方法。 3. 在该Mapper接口中实现批量插入或更新操作的SQL语句。 4. 在Service中调用Mapper接口中的批量插入或更新方法，传入需要插入或更新的数据集合即可。 下面是一个示例代码： 1. 定义一个实体类： ``` @Data @TableName("user") public class User extends Model<User> { @TableId(value = "id", type = IdType.AUTO) private Long id; private String name; private Integer age; } ``` 2. 创建一个Mapper接口： ``` public interface UserMapper extends BaseMapper<User> { void batchInsert(List<User> userList); void batchUpdate(List<User> userList); } ``` 3. 实现批量插入或更新操作的SQL语句： ``` public void batchInsert(List<User> userList) { SqlSession sqlSession = sqlSessionTemplate.getSqlSessionFactory().openSession(ExecutorType.BATCH); UserMapper mapper = sqlSession.getMapper(UserMapper.class); for (User user : userList) { mapper.insert(user); } sqlSession.flushStatements(); sqlSession.commit(); sqlSession.clearCache(); } ``` ``` public void batchUpdate(List<User> userList) { SqlSession sqlSession = sqlSessionTemplate.getSqlSessionFactory().openSession(ExecutorType.BATCH); UserMapper mapper = sqlSession.getMapper(UserMapper.class); for (User user : userList) { mapper.updateById(user); } sqlSession.flushStatements(); sqlSession.commit(); sqlSession.clearCache(); } ``` 4. 在Service中调用Mapper接口中的批量插入或更新方法，传入需要插入或更新的数据集合即可： ``` @Autowired private UserMapper userMapper; @Transactional public void batchInsert(List<User> userList) { userMapper.batchInsert(userList); } @Transactional public void batchUpdate(List<User> userList) { userMapper.batchUpdate(userList); } ``` 总之，Mybatis-plus提供的批量插入更新操作非常简洁和高效，使用起来也比较方便，可以有效地提高开发效率。 ### 回答3： Mybatis-plus是一个基于Mybatis框架的增强工具，在Mybatis的基础上扩展并简化了一些操作，使得使用者可以更加便捷地进行数据库操作。Mybatis-plus提供了批量插入更新的功能，可以大大提高数据操作的效率和性能。 批量插入数据 使用Mybatis-plus进行批量插入数据的方法是使用mapper对象的batchInsert方法，示例如下： ```java List<User> userList = new ArrayList<>(); // 添加User对象到userList中 userService.batchInsert(userList); ``` 在上述示例代码中，我们将多个User对象添加到了userList中，然后调用userService的batchInsert方法进行批量插入。 批量更新数据 使用Mybatis-plus进行批量更新数据的方法是使用mapper对象的batchUpdate方法，示例如下： ```java List<User> userList = new ArrayList<>(); // 添加要更新的User对象到userList中 userService.batchUpdate(userList); ``` 在上述示例代码中，我们将多个要更新的User对象添加到了userList中，然后调用userService的batchUpdate方法进行批量更新。 需要注意的是，批量更新操作中要更新的字段必须相同，否则会更新失败。 总结 使用Mybatis-plus进行批量插入更新操作可以大大提高数据操作的效率和性能，但是需要注意，在批量更新操作中要更新的字段必须相同，否则会导致更新失败。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值