mysql插入2000万数据_Mysql千万级别数据批量插入，性能提高

最新推荐文章于 2024-06-25 10:30:00 发布

weixin_39807859

最新推荐文章于 2024-06-25 10:30:00 发布

阅读量3.3k

点赞数

文章标签： mysql插入2000万数据

本文链接：https://blog.csdn.net/weixin_39807859/article/details/113218138

版权

本文介绍了两种提高MySQL插入大规模数据的效率方法。方式一通过调整my.ini配置文件，增大bulk_insert_buffer_size和Max_allowed_packet，使用多条INSERT语句一次性插入数据。方式二利用ON DUPLICATE KEY UPDATE语法，结合executemany方法实现批量插入和更新，解决了主键冲突和性能问题。

摘要由CSDN通过智能技术生成

-----------------------------------------------------------方式1 ----------------------------------------------------------------------------------------

第一步：配置my.ini文件

文件中配置

bulk_insert_buffer_size=120M 或者更大

将insert语句的长度设为最大。

Max_allowed_packet=1M

Net_buffer_length=8k

保存

第二步：查看设置的参选有没有生效.

Mysql > SHOW VARIABLES;