完美解决:mysql海量数据储存问题

一、前言

spring给我们提供了jdbc的统一封装,和其它的orm不同,它是对jdbc api的封装,
相当于我们自己写的java bean,而没有对对象模型进行封装(比如将po封装为pojo)。
它保持了jdbc数据对象的原始性,具有极大程度的灵活性,其性能也极高。

  • 我们知道在进行增量操作的时候最好是使用PreparedStatement,这样会节省数据库服务器编译sql语句的成本。而Spring也提供了对增量操作的支持,而BatchPreparedStatementSetter接口则是其核心。

  • 先看看BatchPreparedStatementSetter接口里都定义了些操作。

public interface BatchPreparedStatementSetter{
	public int getBatchSize();
	public void setValues(PreparedStatement ps,int i)}

该接口是被JdbcTemplate类使用的CallBack接口。批操作中的每个操作都使用相同的sql语句,而该接口则sql语句中的占位符设> 置具体的值。用来为PreparedStatement设值。

public int getBatchSize();用来返回批次的大小
public void setValues(PreparedStatement ps,int i);

# 参数说明:
  ps:我们将要设值的PreparedStatement
  i:在这个批次中,正在执行操作的索引,从0算起。
  • 以批量更新为例,我们要做的是先实现BatchPreparedStatementSetter接口,然后再调用JdbcTemplate的batchUpdate(sql,setter)操作,参数sql是预编译语句 ,setter是BatchPreparedStatementSetter的一个实例。
  • 下面是我写的一段代码:
	/**
     * 批量添加数据
     * @param list 要添加的集合
     */
    private void batchSave(List<实体> list) {

        String sql = "INSERT INTO ty_onion_code (name,sex,address,create_time) values(?,?,?,?)";

        SimpleDateFormat sm = new SimpleDateFormat(DateConfig.DEFAULT_DATE_TIME_FORMAT);

        jdbcTemplate.batchUpdate(sql, new BatchPreparedStatementSetter() {
            @Override
            public void setValues(PreparedStatement preparedStatement, int i) throws SQLException {
                TyOnionCodes codes = list.get(i);
                preparedStatement.setString(1, codes.getName());
                preparedStatement.setString(2, String.valueOf(codes.getSex()));
                preparedStatement.setString(3, codes.getAddress());
                preparedStatement.setString(4, sm.format(codes.getCreateTime()));
            }

            @Override
            public int getBatchSize() {
                return list.size();
            }
        });
    }

注意

需要注意的是BatchPreparedStatementSetter是一次性地批量提交数据,而不会分批提交,getBatchSize()是整批的大小。所以,如果希望将一个List中的数据通过BatchPreparedStatementSetter批量更新到数据库中,getBatchSize()就应该设置为List的大小。如果List非常大,希望分多次批量提交,则可分段读取这个大List并暂存到一个小的List中,再将这个小的List通过BatchPreparedStatemetSetter批量保存到数据库中。

😁 作者:Teddy (公众号:鸡仓故事汇)
ok!到这里就大功告成,小编(Teddy)在这里先感谢大家的到来。
虽然不是太详细,小编已经很努力,给小编来个一键三连(点赞,关注,收藏),小编会越来越努力。。。

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值