mysql大量数据写入,分次写入和一次写入的效率测试

测试结果显示,随着数据量增加,一次性写入MySQL的效率远高于分次写入。在10到10000条数据的场景下,一次性写入的时间成本显著低于分次写入,尤其在处理大量数据时,优势更加明显。建议在实时性要求不高的情况下,优先选择一次性写入。
摘要由CSDN通过智能技术生成
  • 10条数据时:分次写入时间0.14秒,一次写入时间0.01秒
  • 100条数据时:分次写入时间1.46秒,一次写入时间0.01秒
  • 1000条数据时:分次写入时间14.82秒,一次写入时间0.05秒
  • 10000条数据时:分次写入时间164.04秒,一次写入时间0.31秒
    由此可见在实时性要求不高的情况下,同时需要写入的数据越多,越应该使用一次性写入,会非常显著的提升效率。

以下为测试条件及代码。

python版本:3.7.1,所用包mysql-connector-python==8.0.19
mysql版本:8.0.20

创建表
主键为id:int类型,自动增长
索引为txt:字符类型

CREATE TABLE xxxx
(
id INT NOT NULL AUTO_INCREMENT,
txt VARCHAR (200),
PRIMARY KEY (`id`) 
);

python程序

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值