mysql jdbc驱动批量更新_jdbc批量插入，删除，更新

最新推荐文章于 2023-03-05 01:37:50 发布

行走的VCD

最新推荐文章于 2023-03-05 01:37:50 发布

阅读量737

点赞数

文章标签： mysql jdbc驱动批量更新

本文链接：https://blog.csdn.net/weixin_36158990/article/details/113908229

版权

本文探讨了JDBC的批量处理功能在数据库操作中的应用，包括批量插入、更新和删除。通过测试对比，展示了不同方法的性能差异，并强调了关闭自动提交以提高效率的重要性。此外，还介绍了如何检查数据库是否支持批量更新以及如何处理批量操作中的错误。

摘要由CSDN通过智能技术生成

批量处理：一次向数据库发送多个SQL语句时，可以减少通信开销，从而提高性能。

不确定JDBC驱动程序是否支持此功能。应该使用DatabaseMetaData.supportsBatchUpdates()方法来确定目标数据库是否支持批量更新处理。如果JDBC驱动程序支持此功能，该方法将返回true。

Statement，PreparedStatement和CallableStatement的addBatch()方法用于将单个语句添加到批处理。 executeBatch()用于执行组成批量的所有语句。

executeBatch()返回一个整数数组，数组的每个元素表示相应更新语句的更新计数。

就像将批处理语句添加到处理中一样，可以使用clearBatch()方法删除它们。此方法将删除所有使用addBatch()方法添加的语句。但是，无法指定选择某个要删除的语句。

先设置setAutoCommit(false)

批量更新，防止内存溢出 for循环，最后不够for循环，再for循环外批量执行一次

JDBC的批量插入

JDBC批量插入主要用于数据导入和日志记录因为日志一般都是先写在文件下的等。

我用Mysql5.1.5的JDBC driver 分别对三种比较常用的方法做了测试

方法一，使用PreparedStatement加批量的方法

Java代码

try{

Class.forName("com.MySQL.jdbc.Driver");

conn = DriverManager.getConnection(o_url, userName,password);

conn.setAutoCommit(false);

String sql = "INSERT adlogs(ip,website,yyyymmdd,hour,object_id)VALUES(?,?,?,?,?)";

PreparedStatement prest =conn.prepareStatement(sql,ResultSet.TYPE_SCROLL_SENSITIVE,ResultSet.CONCUR_READ_ONLY);

for(int x = 0; x < size;x++){

prest.setString(1,"192.168.1.1");

prest.setString(2,"localhost");

prest.setString(3,"20081009");

prest.setInt(4,8);

prest.setString(5,"11111111");

prest.addBatch();

}

prest.executeBatch();

conn.commit();

conn.close();

} catch (SQLException ex){

Logger.getLogger(MyLogger.class.getName()).log(Level.SEVERE, null,ex);

} catch (ClassNotFoundException ex){

Logger.getLogger(MyLogger.class.getName()).log(Level.SEVERE, null,ex);

}

说明下在建Statement的时候，后面两个参数的意义：

第一个参数指定 ResultSet 的类型。其选项有：

TYPE_FORWARD_ONLY：缺省类型。只允许向前访问一次，并且不会受到其他用户对该数据库所作更改的影响。

TYPE_SCROLL_INSENSITIVE：允许在列表中向前或向后移动，甚至可以进行特定定位，例如移至列表中的第四个记录或者从当前位置向后移动两个记录。不会受到其他用户对该数据库所作更改的影响。

TYPE_SCROLL_SENSITIVE：象 TYPE_SCROLL_INSENSITIVE一样，允许在记录中定位。这种类型受到其他用户所作更改的影响。如果用户在执行完查询之后删除一个记录，那个记录将从 ResultSet中消失。类似的，对数据值的更改

也将反映在 ResultSet 中。

第二个参数设置 ResultSet 的并发性，该参数确定是否可以更新 ResultSet。其选项有：

CONCUR_READ_ONLY：这是缺省值，指定不可以更新

ResultSet CONCUR_UPDATABLE：指定可以更新 ResultSet

方法二使用Statement加批量的方法

Java代码

conn.setAutoCommit(false);

Statement stmt =conn.createStatement(ResultSet.TYPE_SCROLL_SENSITIVE,ResultSet.CONCUR_READ_ONLY);

for(int x = 0; x < size;x++){

stmt.addBatch("INSERT INTOadlogs(ip,website,yyyymmdd,hour,object_id) VALUES('192.168.1.3','localhost','20081009',8,'23123')");

}

stmt.executeBatch();

conn.commit();

方法三：直接使用Statement

Java代码

conn.setAutoCommit(false);

Statement stmt =conn.createStatement(ResultSet.TYPE_SCROLL_SENSITIVE,

ResultSet.CONCUR_READ_ONLY);

for(int x = 0; x < size;x++){

stmt.execute("INSERT INTOadlogs(ip,website,yyyymmdd,hour,object_id) VALUES('192.168.1.3','localhost','20081009',8,'23123')");

}

conn.commit();

使用上述方法分别插入10万条数据的平均测试时间为：

方法一：17.844s

方法二：18.421s

方法三：16.359s

可以看出JDBC的batch语句插入不但没有性能提升，反而比没有用batch的时候要慢，当然这可能跟JDBC具体驱动的实现方法有关。附件中是我测试代码，可以用来在自己电脑上跑一下。

在执行批量插入的时候最主要的是将自动提交取消，这样不管是否用JDBC的batch语法应该都没有关系。

Java代码

conn.setAutoCommit(false)

二、JDBC的批量更新

由于阿堂在原来的老项目中，用jdbc操作时，用到了jdbc的批量操作，加上前段时间看《疯狂java讲义》时，也看到李刚作者的相关介绍。考虑还是会有人要用到jdbc的操作的，所以，阿堂还是把它整一下，就成了下面的文字了。用JDBC的DML语句时(insert,delete,update)，我们可能可能需要同时某几个表都要进行DML操作，比如，当我们对A表插入的时候，同时也要对B表插入相关的记录，还要同时更新C表的关联记录，这样就会涉及到三条DML的sql语句，如果不用批量更新功能的话，我们就得单独去处理，效率相对就要低些了。。使用批量更新时，多条sql语句将会被作为一批操作被同时收集，并同时提交。值得注意的是，批量更新必须得到底层数据库的支持，可能通过DatabaseMetaData的supportBatchUpdates方法来查看底层数据库是否支持批量更新

//conn是Connection的类型

DatabaseMetaDatadbmd=conn.getMetaData();

//若a为true则意味着该数据是支持批量更新的

boolean a=dbmd.supportsBatchUpdates();

为了保证批量更新的操作可以正确处理错务，必须把批量更新的操作视为单个事务，如果批理更新在执行过程中失败，则让事务回滚到操作开始之前的状态。为了达到这种效果，程序应该在开始批量操作之前先关闭自动提交，然后开始收集更新语句，当批量操作执行结束后，提交事务，并恢复之前的自动提交模式

具体如下代码片断所示

try

{

//保存当前自动提交模式

booleanautoCommit=conn.getAutoCommit();

//关闭自动提交

conn.setAutoCommit(false);