项目场景:
最近在做一个文件存储服务的项目,项目中需要对超过指定大小的数据进行分包存储到mongoDB中并将文件详情存入数据库中,最初,我只是循环遍历将数据存入数据库中,并没有想着批量插入,但是直到看到了日志中的一对sql日志,我感到十分头疼,话不多少直接上代码
问题描述
数据的批量插入,并实现可复用(该项目引用其他大佬的文章,但是我找不到了,所以再此处就不加以引用了,十分感谢大佬的办法)
解决方案:
首先创建批量插入的方法
public class InsertBatchMethod extends AbstractMethod {
/**
* 注入映射语句
*
* @param mapperClass mapper 接口
* @param modelClass mapper 泛型
* @param tableInfo 数据库表反射信息
* @return 映射语句
*/
@Override
public MappedStatement injectMappedStatement(Class<?> mapperClass, Class<?> modelClass, TableInfo tableInfo) {
final String sql = "<script>insert into %s %s values %s</script>";
final String fieldSql = prepareFieldSql(tableInfo);//字段sql
final String valueSql = prepareValuesSql(tableInfo);//值sql
final String sqlResult = String.format(sql, tableInfo.getTableName(), fieldSql, valueSql);//最后的sql
SqlSource sqlSource = languageDriver.createSqlSource(configuration, sqlResult, modelClass);//创建保存sql语句的sqlSource
return this.addInsertMappedStatement(mapperClass, modelClass, "insertBatch", sqlSource, new NoKeyGenerator(), null, null);
}
/**
* 准备字段sql
*
* @param tableInfo 数据库表映射信息
* @return 字段sql
*/
private String prepareFieldSql(TableInfo tableInfo) {
StringBuilder fieldSql = new StringBuilder();
fieldSql.append(tableInfo.getKeyColumn()).append(",");
tableInfo.getFieldList().forEach(x -> fieldSql.append(x.getColumn()).append(","));
fieldSql.delete(fieldSql.length() - 1, fieldSql.length());
fieldSql.insert(0, "(");
fieldSql.append(")");
return fieldSql.toString();
}
/**
* 准备值sql
*
* @param tableInfo 数据库表映射信息
* @return 值sql
*/
private String prepareValuesSql(TableInfo tableInfo) {
final StringBuilder valueSql = new StringBuilder();
valueSql.append("<foreach collection=\"list\" item=\"item\" index=\"index\" open=\"(\" separator=\"),(\" close=\")\">");
valueSql.append("#{item.").append(tableInfo.getKeyProperty()).append("},");
tableInfo.getFieldList().forEach(x -> valueSql.append("#{item.").append(x.getProperty()).append("},"));
valueSql.delete(valueSql.length() - 1, valueSql.length());
valueSql.append("</foreach>");
return valueSql.toString();
}
}
然后创建自定义方法sql注入器
public class CustomizedSqlInjector extends DefaultSqlInjector {
/**
* 如果只需增加方法,保留mybatis plus自带方法,
* 可以先获取super.getMethodList(),再添加add
*
* @param mapperClass 当前mapper
* @return 方法集合
*/
@Override
public List<AbstractMethod> getMethodList(Class<?> mapperClass) {
List<AbstractMethod> methodList = super.getMethodList(mapperClass);
methodList.add(new InsertBatchMethod());
//methodList.add(new UpdateBatchMethod());
return methodList;
}
}
如果有mybatis-plus的配置类可以直接将下面的代码肤质进去,如果没有直接创建如下代码
/**
* 自定义sql注入器
*
* @return sql注入器
*/
@Bean
public CustomizedSqlInjector customizedSqlInjector() {
return new CustomizedSqlInjector();
}
创建mapper对应的基类RootMapper
public interface RootMapper<T> extends BaseMapper<T> {
/**
* 自定义批量插入
* 如果要自动填充,@Param(xx) xx参数名必须是 list/collection/array 3个的其中之一
*/
int insertBatch(@Param("list") List<T> list);
/**
* 自定义批量更新,条件为主键
* 如果要自动填充,@Param(xx) xx参数名必须是 list/collection/array 3个的其中之一
*/
//int updateBatch(@Param("list") List<T> list);
}
接下来我们就可以直接使用了
这是我的一个mapper接口
直接调用这个方法即可