mysql jdbc resultset_MySQL JDBC ResultSet读取大量数据报OutOfMemoryError的解决方案

MySQL Connector/J的ResultSet默认会从服务器取回整个结果集并存放到JVM内存中,如果数据量很大,显然会出现OOM错误。

根据官方文档JDBC API Implementation Notes中关于ResultSet的说明,有两种解决方案。

第一种,使用以下代码让jdbc驱动一次只返回一条记录。

stmt = conn.createStatement(java.sql.ResultSet.TYPE_FORWARD_ONLY,

java.sql.ResultSet.CONCUR_READ_ONLY);

stmt.setFetchSize(Integer.MIN_VALUE);

如果使用PreparedStatement,可以使用下面的代码:

stmt = conn.prepareStatement(sql,java.sql.ResultSet.TYPE_FORWARD_ONLY,

java.sql.ResultSet.CONCUR_READ_ONLY);

stmt.setFetchSize(Integer.MIN_VALUE);

这种方式有弊端,在读取结果集的过程中,你没办法执行其他sql语句,否则会报错“java.sql.SQLException: Streaming result set com.mysql.jdbc.RowDataDynamic@123a439b is still active. No statements may be issued when any streaming result sets are open and in use on a given connection. Ensure that you have called .close() on any active streaming result sets before attempting more queries.

”,只有在这个结果集关闭之后,你才能执行其他语句。

第二种,在jdbc连接串中添加useCursorFetch=true参数,然后调用stmt.setFetchSize()设置批量大小,这样jdbc驱动将每次只下载指定数量的数据,并在需要时读取下一批次的数据。这个方案没有第一种方案的问题,推荐使用。

  • 1
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值