java插入mysql批处理_java连接mysql及批量插入

1、连接mysql

private String driver = "com.mysql.jdbc.Driver";

private Connection conn = null;

private Statement state = null;

public MysqlConnection(String url, String user, String psw){

try {

Class.forName(driver);

conn = DriverManager.getConnection(url, user, psw);

state = conn.createStatement();

} catch (ClassNotFoundException e) {

e.printStackTrace();

return ;

} catch (SQLException e) {

e.printStackTrace();

return ;

}

System.out.println("connect successful");

}

2、简单批处理,要批处理插入,大多数想到的是逐条执行insert语句,代码如下

public boolean insertIntoTempUser(TempUser tu){

String sqlStr = "insert into TEMP_USER (cardno, count, amount) value (";

sqlStr +="\'" + tu.getCardno() +"\',\'" + tu.getCount()+"\',\'"+tu.getAmount()+"\')";

try {

state.clearBatch();

state.addBatch(sqlStr);

state.executeBatch();

//System.out.println("insert into temp_user successful");

} catch (SQLException e) {

e.printStackTrace();

return false;

}

return true;

}

但如果要插入成千上万的数据,这样的速度非常慢,因为执行一条insert都要提交一次数据库,速度自然会变慢。

这时候就会想到不一条条执行,同时也注意到addBatch()可以添加多条sql语句,可以将要插入的语句先都添加,然后最后全部提交。

public boolean insertByBatch(List users){

for(int i = 0 ; i 

TempUser tu = users.get(i);

String sqlStr = "insert into TEMP_USER (cardno, count, amount) value ("+

"\'" + tu.getCardno() +"\',\'" + tu.getCount()+"\',\'"+tu.getAmount()+"\')";

try {

state.clearBatch();

state.addBatch(sqlStr);

} catch (SQLException e) {

e.printStackTrace();

return false;

}

}

try {

state.executeBatch();

} catch (SQLException e) {

e.printStackTrace();

return false;

}

return true;

}

但是,有个问题是不能忽略的,上述代码中的sql语句是动态创建的,这样就很容易受到sql注入攻击,所以上述还不是很好的插入方案。可以用PreparedStatement来解决

public boolean batchInsert(List users){

String sqlStr = "insert into TEMP_USER (cardno, count, amount) value (?,?,?)";

try {

PreparedStatement ps = conn.prepareStatement(sqlStr);

conn.setAutoCommit(false);//自动提交记得关了....

for(TempUser tu: users){

ps.setString(1, tu.getCardno());

ps.setLong(2, tu.getCount());

ps.setString(3, String.valueOf(tu.getAmount()));

ps.addBatch();

}

ps.executeBatch();

conn.commit();

ps.close();

} catch (SQLException e) {

e.printStackTrace();

return false;

}

return true;

}

但问题又来了,如果你需要插入上十万条数据,可能jvm这时可能就会生气了,指不定就给你抛出

java.lang.OutOfMemoryError: Java heap space异常了,这时候,就需要设置批量处理大小了。

public boolean batchInsert(List users){

String sqlStr = "insert into TEMP_USER (cardno, count, amount) value (?,?,?)";

try {

PreparedStatement ps = conn.prepareStatement(sqlStr);

conn.setAutoCommit(false);//自动提交记得关了....

int count = 0;

for(TempUser tu: users){

ps.setString(1, tu.getCardno());

ps.setLong(2, tu.getCount());

ps.setString(3, String.valueOf(tu.getAmount()));

ps.addBatch();

count ++;

if(count % batchSize == 0){

ps.executeBatch();

conn.commit();

ps.clearBatch();

}

}

ps.executeBatch();

conn.commit();

ps.close();

} catch (SQLException e) {

e.printStackTrace();

return false;

}

return true;

}

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
JavaMySQL批量存储数据可以使用批处理(batch)的方式进行,这样可以大大提高插入数据的效率。下面是一个简单的示例代码: ```java import java.sql.Connection; import java.sql.DriverManager; import java.sql.PreparedStatement; import java.sql.SQLException; public class BatchInsertDemo { public static void main(String[] args) { String url = "jdbc:mysql://localhost:3306/test"; String username = "root"; String password = "123456"; try { Class.forName("com.mysql.jdbc.Driver"); Connection conn = DriverManager.getConnection(url, username, password); conn.setAutoCommit(false);//关闭自动提交事务 PreparedStatement pstmt = conn.prepareStatement("insert into user(name, age) values (?, ?)"); for (int i = 1; i <= 10000; i++) { pstmt.setString(1, "user" + i); pstmt.setInt(2, i % 100); pstmt.addBatch();//添加到批处理中 } pstmt.executeBatch();//批量执行 conn.commit();//提交事务 pstmt.close(); conn.close(); } catch (ClassNotFoundException | SQLException e) { e.printStackTrace(); } } } ``` 在上面的示例中,我们创建了一个名为`BatchInsertDemo`的类,其中定义了一个`main()`方法。在`main()`方法中,我们首先定义了连接MySQL的URL、用户名和密码,然后使用`Class.forName()`方法加载了MySQL的驱动程序。接下来,我们通过`DriverManager.getConnection()`方法获得了与MySQL数据库的连接,并将自动提交事务关闭。 然后,我们使用`PreparedStatement`对象执行了一条插入语句,并使用`addBatch()`方法将其添加到批处理中。在循环结束后,我们使用`executeBatch()`方法批量执行所有的插入语句,并将事务提交。最后,我们关闭了`PreparedStatement`对象和数据库连接。 需要注意的是,批量插入数据时,每次插入的数据量不宜过大,否则可能会导致内存溢出或性能下降。一般来说,每批次插入的数据量在几千到一万条之间比较合适。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值