数据库查询大量数据避免内存溢出的方法

最新推荐文章于 2024-08-23 17:37:15 发布

huan1213858

最新推荐文章于 2024-08-23 17:37:15 发布

阅读量105

点赞数

文章标签：数据库 java 开发语言

本文链接：https://blog.csdn.net/huan1213858/article/details/141468829

版权

原理就是分批查询。每次查询一定数量数据之后记录id，进行数据处理之后再继续查询继续处理，

allFrameObject = mapper.findAllFrameObjectByMaxId(minTime, beginRow, 1000);
while (CollectionUtils.isNotEmpty(allFrameObject)) {
      beginRow = allFrameObject.get(allFrameObject.size() - 1).getId() + 1;
      addTicketAndStateReport(allFrameObject, reports);
      allFrameObject = mapper.findAllFrameObjectByMaxId(minTime, beginRow, 1000);
  }

<select id="findAllFrameObjectByMaxId" resultMap="frameObjectData">
	select * FROM gsms_frame_object_data
	where id &gt;= #{beginRow} <if test="beforeDay!=null">and CREATE_TIME &gt; #{beforeDay} </if>
	order by
	id
	limit #{batchSize}
</select>