使用jdbc向数据库插入100000条记录

分别使用statement,PreparedStatement,及PreparedStatement+批处理3种方式进行测试:


//1.使用statement插入100000条记录 

Java代码   收藏代码
  1. public void exec(Connection conn){   
  2.   try {   
  3.    //开始时间  
  4.    Long beginTime = System.currentTimeMillis();   
  5.    //设置手动提交   
  6.    conn.setAutoCommit(false);  
  7.       
  8.    Statement st = conn.createStatement();   
  9.   
  10.    for(int i=0;i<100000;i++){   
  11.       String sql="insert into t1(id) values ("+i+")";   
  12.       st.executeUpdate(sql);    
  13.    }   
  14.      
  15.    //结束时间  
  16.    Long endTime = System.currentTimeMillis();   
  17.   
  18.    System.out.println("st:"+(endTime-beginTime)/1000+"秒");//计算时间   
  19.   
  20.    st.close();   
  21.    conn.close();   
  22.   } catch (SQLException e) {   
  23.    e.printStackTrace();   
  24.   }    
  25. }   
 

//2.使用PreparedStatement对象 

Java代码   收藏代码
  1. public void exec2(Connection conn){   
  2.   try {   
  3.    Long beginTime = System.currentTimeMillis();   
  4.    conn.setAutoCommit(false);//手动提交   
  5.    PreparedStatement pst = conn.prepareStatement("insert into t1(id) values (?)");   
  6.    for(int i=0;i<100000;i++){   
  7.     pst.setInt(1, i);   
  8.     pst.execute();      
  9.    }   
  10.    conn.commit();   
  11.    Long endTime = System.currentTimeMillis();   
  12.    System.out.println("pst:"+(endTime-beginTime)/1000+"秒");//计算时间   
  13.    pst.close();   
  14.    conn.close();   
  15.   } catch (SQLException e) {   
  16.    e.printStackTrace();   
  17.   }   
  18.   
  19. }   
 

//3.使用PreparedStatement + 批处理 

Java代码   收藏代码
  1. public void exec3(Connection conn){   
  2.   try {   
  3.    conn.setAutoCommit(false);   
  4.    Long beginTime = System.currentTimeMillis();   
  5.    //构造预处理statement  
  6.    PreparedStatement pst = conn.prepareStatement("insert into t1(id) values (?)");   
  7.    //1万次循环  
  8.    for(int i=1;i<=100000;i++){      
  9.     pst.setInt(1, i);   
  10.     pst.addBatch();   
  11.     //每1000次提交一次  
  12.     if(i%1000==0){//可以设置不同的大小;如50,100,500,1000等等   
  13.      pst.executeBatch();   
  14.      conn.commit();   
  15.      pst.clearBatch();   
  16.     }   
  17.    }  
  18.    Long endTime = System.currentTimeMillis();   
  19.    System.out.println("pst+batch:"+(endTime-beginTime)/1000+"秒");   
  20.    pst.close();   
  21.    conn.close();   
  22.   } catch (SQLException e) {   
  23.    e.printStackTrace();   
  24.   }   
  25. }   
 
在Oracle 10g中测试,结果: 
1.使用statement  耗时142秒; 
2.使用PreparedStatement 耗时56秒; 
3.使用PreparedStatement + 批处理耗时: 
   a.50条插入一次,耗时5秒; 
     b.100条插入一次,耗时2秒; 
     c.1000条以上插入一次,耗时1秒; 
通过以上可以得出结论,在使用jdbc大批量插入数据时,明显使用第三种方式(PreparedStatement + 批处理)性能更优。 

 

 

-------------------------------------------------------------------------------------------------------------------------------

Java代码   收藏代码
  1. /*  
Java代码   收藏代码
  1. 普通方式处理大量数据的insert时,处理速度相当慢。  
  2. */  
  3. PreparedStatement ps = null;  
  4. //循环10000次  
  5. for(int i = 0; i < 100000; i++) {  
  6.     ps = con.prepareStatement(sql);  
  7.     ps.executeUpdate();  
  8. }  

 /*

 

Java代码   收藏代码
  1. 方法二:通过addBatch()的方式,将数据缓存在对象里面,通过最后执行executeBatch();方法提交,因此速度会快很多!  
  2. */  
  3. PreparedStatement ps = con.prepareStatement(sql);  
  4. for(int i = 0; i < 100000; i++) {  
  5.     ps.setString(1"1");  
  6.     ps.setString(2"2");  
  7.     ps.addBatch();  
  8. }  
  9. ps.executeBatch(); 

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
您可以使用MyBatis提供的批量插入功能来同时向数据库插入数据。可以使用以下步骤实现: 1. 在Mapper XML文件中编写插入语句,使用foreach标签遍历多个参数。 2. 在MyBatis配置文件中设置批量插入的参数。 3. 使用SqlSession的batch方法执行插入操作。 以下是一个示例代码: Mapper XML文件中的代码: ```xml <insert id="insertBatch" parameterType="java.util.List"> insert into user (name, age) values <foreach collection="list" item="item" separator=","> (#{item.name}, #{item.age}) </foreach> </insert> ``` MyBatis配置文件中的参数设置: ```xml <settings> <setting name="jdbc.batch_size" value="100"/> </settings> ``` Java代码中的调用方法: ```java List<User> userList = new ArrayList<>(); // 添加多个User对象到userList中 SqlSession sqlSession = sqlSessionFactory.openSqlSession(); try { int batchSize = 100; // 批量大小 for (int i = 0; i < userList.size(); i += batchSize) { List<User> batchList = userList.subList(i, Math.min(i + batchSize, userList.size())); sqlSession.insert("insertBatch", batchList); } sqlSession.commit(); } catch (Exception e) { sqlSession.rollback(); } finally { sqlSession.close(); } ``` 在这个示例中,我们将User对象批量插入数据库中。注意,为了避免一次插入过多数据导致内存溢出,我们使用分批的方式进行插入。另外,我们在MyBatis配置文件中设置了jdbc.batch_size参数,表示每次向数据库提交的记录数。这样可以提高插入效率。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值