mysql 批量操作的问题

mysql 批量操作的问题

项目中使用批量操作,但是发现插入还是很慢,追踪了源码和查看了资料,发现一个平时没有注意到的问题,mysql的批量操作默认是没有开启的,开启之后操作速度是远远提高了。

batchupdate的操作需要url参数 rewriteBatchedStatements=true

参考1:
https://stackoverflow.com/questions/26307760/mysql-and-jdbc-with-rewritebatchedstatements-true

with rewriteBatchedStatements=true the JDBC will pack as many queries as possible into a single network packet, lowering this way the network overhead

参考2:
https://www.jianshu.com/p/04d3d235cb9f

满成条件情况下,会整合成形如:"insert into xxx_table values (xx),(yy),(zz)…"这样的语句
如果是update\delete语句,满成条件情况下,会整合成形如:"update t set … where id = 1; update t set … where id = 2; update t set … where id = 3 …"这样的语句
然后分批次发送给MySQL(会有一次发送的package大小限制,所以需要拆分批次)。

我对批量操作的理解是:还是按原来的顺序执行,只不过在发送到mysql前,进行了sql改造和网络发包变大,然后一次发出了多个sql语句。

感谢,祝生活愉快^_^

没有更多推荐了,返回首页