正确使用mybatis游标

本文通过对比分析错误与正确的MyBatis游标使用方式,展示了如何有效地处理百万级数据,防止JVM内存溢出。错误的游标使用导致内存迅速耗尽,而正确设置fetchSize和resultSetType为FORWARD_ONLY和Integer.MIN_VALUE,可以实现流式读取,显著降低内存占用并提高CPU效率。通过源码调试,揭示了不同设置下ResultSet的不同属性,强调了正确配置的重要性。
摘要由CSDN通过智能技术生成

使用mybatis游标的目的是,避免百万级以上的数据到jvm,造成内存溢出

但是初次使用游标不一定能够正确使用

下面就给出两种不同的方式,对比一下

1.错误使用方式

  • 设置堆内存最大值,方便观察jvm内存使用情况
    在这里插入图片描述

  • 代码如下:
    mapper.java

    	@Select("SELECT * FROM user_detail")
      	Cursor<UserDetail> getFakeCursor();
    

    Test.java

    	@Test
    	  public void getFakeCursorTest() {
    	    Cursor<UserDetail> cursor = userMapper.getFakeCursor();
    	    for (UserDetail userDetail : cursor) {
    	      log.info(userDetail.toString());
    	    }
    	  }
    
  • 通过VisualVM观察jvm内存使用情况

    可以看出只用了14s的时间jvm内存就被耗尽了,CUP的使用率也很高

在这里插入图片描述

  • 最后造成内存溢出错误

在这里插入图片描述

  • 通过源码调试发现resutSet包含的属性是ResultRowsStatic

在这里插入图片描述

2.正确使用方式

  • 代码如下:

mapper.java

 /**
   *
   * 实现了mysql数据的流式读取
   *
   * fetchSize = Integer.MIN_VALUE 必须这样设置才可以获取到真正的游标
   *
   * @return
   */
  @Select("select * from user_detail")
  @Options(resultSetType = ResultSetType.FORWARD_ONLY, fetchSize = Integer.MIN_VALUE)
  @ResultType(UserDetail.class)
  Cursor<UserDetail> getRealCursor();

Test.java

@Test
  public void getRealCursorTest() {
    try (SqlSession sqlSession = sqlSessionFactory.openSession()) {
      UserMapper mapper = sqlSession.getMapper(UserMapper.class);
      Cursor<UserDetail> cursor = mapper.getRealCursor();
      assertFalse(cursor.isOpen());
	  for (UserDetail userDetail : cursor) {
        log.info(userDetail.toString());
      }

    }
  }
  • 通过VisualVM观察jvm内存使用情况

内存和CPU使用情况恢复正常

在这里插入图片描述

  • 通过源码调试发现resutSet包含的属性是ResultRowsStreaming

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值