【业务功能篇52】Springboot+mybatis mysql开启批量执行sql参数 allowMultiQueries=true

allowMultiQueries=true参数的作用:

  1. 可以在sql语句后携带分号,实现多语句执行。
  2. 可以执行批处理,同时发出多个SQL语句。

在application-xxx.xml配置文件中,配置数据库的信息

spring:
  datasource:
    dynamic:
      primary: mysqldb # 默认数据源
      datasource: 
        mysqldb:
          driverClassName: org.mariadb.jdbc.Driver
          url: jdbc:mysql://localhost:3306/data_dev?useUnicode=yes&characterEncoding=UTF-8&useAffectedRows=true&allowMultiQueries=true&autoReconnect=true&failOverReadOnly=false

 实例 dao层xml:

  • 逐条更新,但一次提交给MySQL服务器而已。
  • 利用foreach 遍历循环,传入的list集合数据,批量的进行update
<update id="updateStudentBatch" parameterType="java.util.List">
    <foreach collection="list" item="item" index="index">
        UPDATE mutest.student
        <set>
            <if test="item.name != null">
                name=#{item.name},
            </if>
            <if test="item.age != null">
                age=#{item.age}
            </if>
        </set>
        WHERE
        id=#{item.id};
    </foreach>
</update>

 

批处理 rewriteBatchedStatements=true
关于rewriteBatchedStatements这个参数:当前项目中未使用过

  • MySQL的JDBC连接的url中要加rewriteBatchedStatements参数,并保证5.1.13以上版本的驱动,才能实现高性能的批量插入。
  • MySQL JDBC驱动在默认情况下会无视executeBatch()语句,把我们期望批量执行的一组sql语句拆散,一条一条地发给MySQL数据库,批量插入实际上是单条插入,直接造成较低的性能。
  • 只有把rewriteBatchedStatements参数置为true, 驱动才会帮你批量执行SQL
  • 另外这个选项对INSERT/UPDATE/DELETE都有效
  • 添加rewriteBatchedStatements=true这个参数后的执行速度比较:
  • 同个表插入一万条数据时间近似值:
  • JDBC BATCH 1.1秒左右 > Mybatis BATCH 2.2秒左右 > 拼接SQL 4.5秒左右
  • demo:
  • master.jdbc.url=jdbc:mysql://112.126.84.3:3306/outreach_platform?useUnicode=true&characterEncoding=utf8&allowMultiQueries=true&rewriteBatchedStatements=true

ps:mysql的话只要在url后面加上&rewriteBatchedStatements=true即可,但是sqlServer则需要以分号分隔;rewriteBatchedStatements=true 

  • 5
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Spring Boot + Mybatis + MySQL项目中,实现数据数据同步到另外一个数据功能,可以按照以下步骤进行: 1. 在项目中配置源数据库和目标数据库的数据源。在application.properties文件中配置两个数据源的连接信息,如下所示: ``` # 源数据库连接信息 spring.datasource.source.url=jdbc:mysql://localhost:3306/source_db?useUnicode=true&characterEncoding=utf-8&useSSL=false spring.datasource.source.username=root spring.datasource.source.password=root # 目标数据库连接信息 spring.datasource.target.url=jdbc:mysql://localhost:3306/target_db?useUnicode=true&characterEncoding=utf-8&useSSL=false spring.datasource.target.username=root spring.datasource.target.password=root ``` 2. 在项目中创建Mybatis Mapper映射文件。在Mybatis Mapper映射文件中定义查询源数据数据和插入目标数据数据SQL语句。 3. 在项目中创建一个Service组件,用于实现数据同步的功能。在该组件中,引入源数据库和目标数据库的数据源,并使用Mybatis进行数据查询和插入。 4. 在Service组件中实现一个定时任务,定期执行数据同步的操作。 示例代码如下: ``` @Service public class SyncService { @Autowired @Qualifier("sourceDataSource") private DataSource sourceDataSource; @Autowired @Qualifier("targetDataSource") private DataSource targetDataSource; @Autowired private SyncMapper syncMapper; @Scheduled(fixedDelay = 1000 * 60 * 60) // 每小时同步一次 public void syncData() { // 查询源数据数据 List<SourceData> sourceDataList = syncMapper.listSourceData(); // 插入目标数据数据 for (SourceData sourceData : sourceDataList) { TargetData targetData = new TargetData(); targetData.setId(sourceData.getId()); targetData.setName(sourceData.getName()); targetData.setValue(sourceData.getValue()); syncMapper.insertTargetData(targetData); } } } ``` 在上述示例代码中,我们创建了一个SyncService组件,使用@Autowired注解引入了源数据库和目标数据库的数据源,以及SyncMapper映射文件。然后,在SyncService组件中实现了一个名为syncData的定时任务,使用SyncMapper映射文件中的listSourceData和insertTargetData方法,进行数据查询和插入操作。 需要注意的是,在定时任务中,我们可以使用Spring的@Scheduled注解来定期执行数据同步的操作。在本例中,我们设置了每小时同步一次。另外,你需要在SyncMapper映射文件中定义listSourceData和insertTargetData方法,以便进行数据的查询和插入操作
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值