大量数据集合保存数据库分页保存

该代码示例展示了如何通过Java Stream流处理大量数据并进行分页保存,避免一次性加载导致数据库不支持的问题。利用skip和limit方法实现动态分页,每次处理1000条记录,直至所有数据保存完成。
摘要由CSDN通过智能技术生成
 
 ​​​​​​​int totalRecord = saveList.size();  //总数
 int currentPage = 1;  //起始页
 int pageSize = 1000; //每页的内容大小数量

 int totalPageNum = (totalRecord  +  pageSize  - 1) / pageSize; //计算出总页数(页码)

while (currentPage <=totalPageNum){

     List<Map<String, Object>> insertCollect = saveList.stream().skip((currentPage - 1) * pageSize).limit(pageSize).
             collect(Collectors.toList());

     mSentimentMapper.wordAnalyisSave(insertCollect); //调用持久层对当前页数据的保存

    currentPage ++;  //跳转到下一页
 }
 
代码如上,saveList为数据集合,利用stream流进行分页保存。

解决了数据量大数据库不支持的问题等等

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值