sql语句批量插入

最新推荐文章于 2024-08-01 09:46:22 发布

lzz未来会更好

最新推荐文章于 2024-08-01 09:46:22 发布

阅读量5.3k

点赞数

分类专栏： JDBC 文章标签： mysql sql 数据库

本文链接：https://blog.csdn.net/ticklzz/article/details/123220552

版权

JDBC 专栏收录该内容

6 篇文章 0 订阅

订阅专栏

本文探讨了JDBC的批量插入优化技术，通过addBatch(), executeBatch(), clearBatch()方法，比较了两种执行方式，一种是利用批处理减少网络往返，另一种是通过设置自动提交来提高性能。实测结果显示批处理显著减少了插入100万条数据的时间。

摘要由CSDN通过智能技术生成

批量处理语句

JDBC的批量处理语句包括下面三个方法：

addBatch(String)：添加需要批量处理的SQL语句或是参数；
executeBatch()：执行批量处理语句；

clearBatch():清空缓存的数据

实现方式

方式1

* 修改1：使用 addBatch() / executeBatch() / clearBatch()

* 修改2：mysql服务器默认是关闭批处理的，我们需要通过一个参数，让mysql开启批处理的支持。

* &rewriteBatchedStatements=true 写在配置文件的url后面

@Test

public void testInsert1() throws Exception{

long start = System.currentTimeMillis();



Connection conn = JDBCUtils.getConnection();



String sql = "insert into goods(name)values(?)";

PreparedStatement ps = conn.prepareStatement(sql);



for(int i = 1;i <= 1000000;i++){

ps.setString(1, "name_" + i);



//1.“攒”sql

ps.addBatch();

if(i % 500 == 0){

//2.执行

ps.executeBatch();

//3.清空

ps.clearBatch();

}

}



long end = System.currentTimeMillis();

System.out.println("花费的时间为：" + (end - start));//20000条：625 //1000000条:14733



JDBCUtils.closeResource(conn, ps);

}

方式2

* 层次四：在层次三的基础上操作

* 使用Connection 的 setAutoCommit(false) / commit()

@Test

public void testInsert2() throws Exception{

long start = System.currentTimeMillis();



Connection conn = JDBCUtils.getConnection();



//1.设置为不自动提交数据

conn.setAutoCommit(false);



String sql = "insert into goods(name)values(?)";

PreparedStatement ps = conn.prepareStatement(sql);



for(int i = 1;i <= 1000000;i++){

ps.setString(1, "name_" + i);



//1.“攒”sql

ps.addBatch();



if(i % 500 == 0){

//2.执行

ps.executeBatch();

//3.清空

ps.clearBatch();

}

}



//2.提交数据

conn.commit();



long end = System.currentTimeMillis();

System.out.println("花费的时间为：" + (end - start));//1000000条:4978



JDBCUtils.closeResource(conn, ps);

}