Mybatis Plus批量插入获取序列值回写主键优化(Oracle)

由于MybatisPlus对Oracle批量插入支持很差(不能自动获取序列值返回,SQL语句拼写出错),同样是不支持主键自增,Pgsql支持就比较好,可能时oracle sql语法特殊,然后作者又没有专门对其优化。因此项目中使用oracle批量插入还是遇到了问题。
上篇文章介绍了通过sql注入器的方式可以拼写成正确的插入语句,但是主键通过序列自增回显的问题还存在。上篇文章之所以能插入成功,是因为框架内获取主键是通过ASSIN_ID的方式,也就是雪花算法获取主键值,长度19位。所以本篇文章介绍下如何解决通过序列自增的方式插入并回写主键。

一.实现方式

1. 不要求回写主键的情况

这种情况下可以插入语句时获取序列值的方式:

<insert id="addByUser" parameterType="java.util.List" useGeneratedKeys="false">
        insert into ts_app_dxdz(ID, USERID,TYPEID, PZID, ZUID,DQID)
        select seq_ts_app_dxdz_id.nextval,cd.* from(
        <foreach collection="list" item="item" index="index" separator="union all">
            select
            #{item.USERID} USERID,
            #{item.TYPEID} TYPEID,
            #{item.PZ} PZ,
            #{item.ZU} ZU,
            #{item.DQ} DQ
            from dual
        </foreach>
        ) cd
    </insert>

2.回写主键的情况

这种情况我的做法是先批量获取主键值,再手动赋值,进行插入

2.1 批量获取序列值
    <select id="getSeqList" parameterType="int" resultType="java.lang.Long">
        SELECT SEQ_ZL_ZLFLB_ID.nextval FROM (select level from dual connect by level &lt;= #{size})
    </select>

2.2 插入
INSERT ALL
INTO emp (id, empno, ename) VALUES (1, 1001, '张三')
INTO emp (id, empno, ename) VALUES (2, 1002, '李四')
INTO emp (id, empno, ename) VALUES (3, 1003, '王五')
SELECT * FROM dual;

把下面的插入语句编写成xml格式即可

二.具体实现

我这里是采用第二种方式,因为很多情况都需要获取插入后的主键值。我采用注入器方式,全局注入了两个方法:1.批量获取序列,2.插入操作

1.批量获取序列

public class MySelectSeqBatch  extends AbstractMethod {

    @Override
    public String getMethod(SqlMethod sqlMethod) {
        // 自定义 mapper 方法名
        return "selectSeqBatch";
    }

    @Override
    public MappedStatement injectMappedStatement(Class<?> mapperClass, Class<?> modelClass, TableInfo tableInfo) {
        if (tableInfo.getEntityType().equals(Map.class)||null==tableInfo.getKeySequence()) {
            return null;
        }
        final String sql = "<script>SELECT %s.nextval FROM (select level from dual connect by level &lt;= #{size})</script>";
        String sequence = tableInfo.getKeySequence().value();
        final String sqlResult = String.format(sql, sequence);
        SqlSource sqlSource = languageDriver.createSqlSource(configuration, sqlResult, modelClass);

        return this.addSelectMappedStatementForOther(mapperClass, "selectSeqBatch", sqlSource, Long.class);
    }
}

2.插入操作

这里我对批量插入进行了一个优化成和单条插入一样可以过滤掉null值(适合数据库字段有默认值的情况)

public class MyInsertBatchSomeColumn extends InsertBatchSomeColumn {

    @Setter
    @Accessors(chain = true)
    private Predicate<TableFieldInfo> predicate;

    private final String INSERT_BATCH_SQL="<script>\nINSERT ALL \n  %s\n</script>";

    @SuppressWarnings("Duplicates")
    @Override
    public MappedStatement injectMappedStatement(Class<?> mapperClass, Class<?> modelClass, TableInfo tableInfo) {
        //pojo类型为Map时禁用
        if (tableInfo.getEntityType().equals(Map.class)) {
            return null;
        }
        //return super.injectMappedStatement(mapperClass,modelClass,tableInfo);
        KeyGenerator keyGenerator = new NoKeyGenerator();
        SqlMethod sqlMethod = SqlMethod.INSERT_ONE;
        List<TableFieldInfo> fieldList = tableInfo.getFieldList();

        String insertSqlColumn = tableInfo.getKeyColumn() +
                dynamicField(fieldList, predicate, TableFieldInfo::getInsertSqlColumn);
        String columnScript = LEFT_BRACKET + insertSqlColumn + RIGHT_BRACKET;

        String keyInsertSqlProperty = tableInfo.getKeyInsertSqlProperty(ENTITY_DOT, false);
        if(keyInsertSqlProperty.length()>0){
            keyInsertSqlProperty=keyInsertSqlProperty.substring(0,keyInsertSqlProperty.length()-1);
        }
        String insertSqlProperty = keyInsertSqlProperty+
                dynamicField(fieldList, predicate, i -> i.getInsertSqlProperty(ENTITY_DOT));

        insertSqlProperty=LEFT_BRACKET + insertSqlProperty + RIGHT_BRACKET;
        String valuesScript = convertForeach(insertSqlProperty, "list", tableInfo.getTableName(),columnScript, ENTITY, NEWLINE);
        String keyProperty = null;
        String keyColumn = null;
        // 表包含主键处理逻辑,如果不包含主键当普通字段处理
        if (tableInfo.havePK()) {
            if (tableInfo.getIdType() == IdType.AUTO) {
                /* 自增主键 */
                keyGenerator = new Jdbc3KeyGenerator();
                keyProperty = tableInfo.getKeyProperty();
                keyColumn = tableInfo.getKeyColumn();
            } else {
                if (null != tableInfo.getKeySequence()) {
//                    keyGenerator = TableInfoHelper.genKeyGenerator(getMethod(sqlMethod), tableInfo, builderAssistant);
                    keyProperty = tableInfo.getKeyProperty();
                    keyColumn = tableInfo.getKeyColumn();
                }
            }
        }
        String sql = String.format(INSERT_BATCH_SQL, valuesScript);
        SqlSource sqlSource = languageDriver.createSqlSource(configuration, sql, modelClass);
        return this.addInsertMappedStatement(mapperClass, modelClass, getMethod(sqlMethod), sqlSource, keyGenerator, keyProperty, keyColumn);
    }
    public static String convertForeach(final String sqlScript, final String collection, final String tableName,final String columns, final String item, final String separator) {
        StringBuilder sb = new StringBuilder("<foreach");

        if (StringUtils.isNotBlank(collection)) {
            sb.append(" collection=\"").append(collection).append("\"");
        }

        if (StringUtils.isNotBlank(item)) {
            sb.append(" item=\"").append(item).append("\"");
        }

        if (StringUtils.isNotBlank(separator)) {
            sb.append(" separator=\"").append(separator).append("\"");
        }

        sb.append(">").append("\n");

        if (StringUtils.isNotBlank(tableName)) {
            sb.append(" INTO ").append(tableName).append(" ");
        }

        if (StringUtils.isNotBlank(columns)) {
            sb.append(columns).append(" VALUES ");
        }

        return sb.append(sqlScript).append("\n").append("</foreach>\n").append(" SELECT 1 FROM dual").toString();
    }

    private String dynamicField(List<TableFieldInfo> fieldList, Predicate<TableFieldInfo> predicate,
                                Function<TableFieldInfo, String> function){


        StringBuilder sb=new StringBuilder();
        for (TableFieldInfo fieldInfo : fieldList) {
            if(predicate.test(fieldInfo)&&fieldInfo.getInsertStrategy()== FieldStrategy.NOT_NULL){
                String columnProperty = fieldInfo.getProperty();
                String apply = function.apply(fieldInfo);
                sb.append(" <if test=\"").append("et.").append(columnProperty).append(" != null\">");
                sb.append(",").append(apply,0,apply.length()-1).append("</if>");
            }

        }
        return sb.toString();
    }
}

3.插入工具类编写

这里我把获取序列值和插入操作聚合成一个操作,方便使用,使用时只需传入数据集合和对应mapper

public class DBUtils {

    /**
     * 批量插入
     * @param list
     * @param consumer
     * @param <T>
     */
    public static <T> void insertBatchGroup(List<T> list, int batchSize, Consumer<List<T>> consumer){
        int listSize = list.size();
        for (int i = 0; i < listSize; i += batchSize) {
            int endIndex = Math.min(i + batchSize, listSize);
            List<T> subList = list.subList(i, endIndex);
            // 执行操作
            consumer.accept(subList);
        }
    }

    public static <T> void insertBatch(List<T> list, MyBaseMapper<T> baseMapper)  {
        Assert.notEmpty(list,"A collection of bulk inserted data cannot be empty");
        TableInfo tableInfo = TableInfoHelper.getTableInfo(list.get(0).getClass());

        //获取并设置主键
        if(null!=tableInfo.getKeySequence()){
            List<Long> seqList = baseMapper.selectSeqBatch(list.size());
            for (T t : list) {
                Class<?> cclass = list.get(0).getClass();
                try {
                    Field keyField= cclass.getDeclaredField(tableInfo.getKeyColumn());
                    keyField.setAccessible(true);
                    keyField.set(t,seqList.get(list.indexOf(t)));
                }catch (Exception e){
                    throw new RuntimeException("key sequence set error");
                }
            }
        }
        insertBatchGroup(list,100, baseMapper::insertBatchSomeColumn);;
    }
}

总结

写工具类或者全局的方法就需要考虑的更多,对开发技术和思想要求更高,同时逼迫自己阅读更多的阅读源码。

  • 2
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: mybatis-plus提供了多种主键生成策略,常用的有以下几种: 1. 默认的主键生成策略:使用数据库自增长方式生成主键。对于MySQL数据库,使用AUTO_INCREMENT关键字,对于Oracle数据库,使用SEQUENCE序列。 2. UUID主键生成策略:使用Java中的UUID类生成主键,生成的主键是32位的16进制字符串,不重复且无序。 3. 雪花算法主键生成策略:雪花算法是Twitter开源的一个分布式ID生成算法,可以保证在分布式环境下生成的ID全局唯一且有序。 在使用mybatis-plus时,可以通过注解@TableId和@TableField来指定主键和字段的属性,包括主键生成策略。例如: ``` @TableId(value = "id", type = IdType.AUTO) private Long id; @TableId(value = "uuid", type = IdType.UUID) private String uuid; @TableId(value = "id", type = IdType.ID_WORKER) private Long idWorker; @TableId(value = "id", type = IdType.SNOWFLAKE) private Long snowflakeId; ``` 其中,@TableId注解的value属性指定了数据库表中对应的字段名,type属性指定了主键生成策略。MyBatis-Plus是一个基于MyBatis的增强工具,提供了许多方便开发的特性和功能,可以大大减少我们在开发中的代码量和复杂度。 以下是使用MyBatis-Plus的主要策略: 1. 使用代码生成器:MyBatis-Plus提供了一个代码生成器,可以自动生成Mapper、Entity和Service层的代码,大大减少了手代码的工作量。我们只需要配置好生成器的相关信息,就可以快速生成我们需要的代码。 2. 使用MyBatis-Plus的BaseMapper:MyBatis-Plus的BaseMapper提供了很多基础的CRUD操作,如selectById、selectBatchIds、insert、update、delete等,可以大大减少我们手Mapper的工作量。同时,我们也可以扩展BaseMapper,添加自定义的方法。 3. 使用MyBatis-Plus的Wrapper:MyBatis-Plus的Wrapper提供了一种更加灵活的查询方式,可以通过构建Wrapper对象来构造复杂的查询条件。Wrapper可以用于查询、更新和删除操作。 4. 使用MyBatis-Plus的分页插件:MyBatis-Plus提供了一个分页插件,可以方便地进行分页查询操作。我们只需要在Mapper接口中定义对应的方法,然后在Service层中调用即可。 5. 使用MyBatis-Plus的自动填充功能:MyBatis-Plus的自动填充功能可以自动为我们的实体类填充一些公共字段,如创建时间、更新时间等。我们只需要在实体类中定义对应的字段和注解,就可以自动填充这些字段。 总的来说,MyBatis-Plus是一个非常方便实用的工具,可以大大提高我们的开发效率和代码质量。 ### 回答2: Mybatis-plus是一个基于Mybatis框架的扩展插件,为Mybatis提供了更多的功能和便利。在Mybatis-plus中,主键生成策略是一个非常重要的功能。主键生成策略是指在数据库表中添加一条记录时,如何为这条记录生成一个唯一的主键值,通常情况下我们会采用自增长主键、UUID等方式来生成主键值。而Mybatis-plus则提供了多种主键生成策略,下面我们就一一进行讲解。 1. 自增主键 Mybatis-plus中支持使用数据库自增主键作为主键生成策略,例如MySQL中的AUTO_INCREMENT。在使用自增主键时,只需要在实体类中的主键字段上加上@TableId注解,并设置类型为IdType.AUTO即可。 2. UUID主键 Mybatis-plus中还提供了UUID作为主键生成策略,这种方式的好处就在于适用于分布式系统环境下,可以保证每个分布式节点都能生成唯一的主键。在使用UUID主键时,只需要在实体类中的主键字段上加上@TableId注解,并设置类型为IdType.ASSIGN_UUID即可。 3. 雪花算法主键 Mybatis-plus中还提供了snowflake算法作为主键生成策略,这种方式的好处就在于生成的主键值有序递增、性能高、不存在重复主键的问题。在使用雪花算法主键时,只需要在实体类中的主键字段上加上@TableId注解,并设置类型为IdType.ASSIGN_ID即可。 4. 自定义主键生成器 如果以上提到的主键生成策略都不能满足需求,那么我们可以在Mybatis-plus中自定义主键生成器。自定义主键生成器需要实现IdentifierGenerator接口,并在实体类中的主键字段上加上@TableId注解,并通过type属性指定自定义主键生成器类的全路径名。 在使用Mybatis-plus进行开发时,选取合适的主键生成策略有助于提升项目的性能和可靠性。上述几种主键生成策略都经过了充分测试和实践,在实际开发中可放心使用。 ### 回答3: MyBatis-Plus 是 MyBatis 的一个开源插件,提供了很多强大的功能,其中包括主键生成策略,下面就来详细介绍一下 MyBatis-Plus 主键生成策略。 1. 自增主键 自增主键就是数据库中自带的主键,只需要在实体类中将主键属性添加 @TableId 注解,并设置主键生成策略为 IDENTITY 即可,例如: ``` @TableId(type = IdType.AUTO) private Long id; ``` 2. UUID 主键 UUID 是一种通用唯一识别码,可以用于分布式系统中的唯一标识。在 MyBatis-Plus 中,只需要在实体类中将主键属性添加 @TableId 注解,并设置主键生成策略为 UUID 即可,例如: ``` @TableId(type = IdType.UUID) private String id; ``` 3. 雪花算法主键 雪花算法是一种能够生成唯一 ID 的算法,使用 64 位的整数作为 ID,其中高位是时间信息,中间位是工作机器 ID,低位是序列号。在 MyBatis-Plus 中,只需要在实体类中将主键属性添加 @TableId 注解,并设置主键生成策略为 SNOWFLAKE 即可,例如: ``` @TableId(type = IdType.SNOWFLAKE) private Long id; ``` 4. 自定义主键生成器 如果以上主键生成策略都无法满足需求,还可以自定义主键生成器。只需要实现 IKeyGenerator 接口,然后在实体类中将主键属性添加 @TableId 注解,并设置主键生成策略为自定义的生成器即可,例如: ``` @TableId(type = IdType.ASSIGN_ID, idGenerator = CustomIdGenerator.class) private Long id; ``` 以上就是 MyBatis-Plus 主键生成策略的详细介绍,根据具体的业务需求选择合适的主键生成策略可以提高系统的性能和可维护性。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值