mysql数据量与速度关系

向数据库中插入了4000W数据,然后用多线程去查询数据,统计时间如下:
当数据量为4000W时,查询速度如图所示
在这里插入图片描述
当数据量为3000W时,查询速度如图所示
在这里插入图片描述 当数据量为2000W时,查询速度如图所示
在这里插入图片描述
当数据量为1000W时,查询速度如图所示
在这里插入图片描述
由此可见数据查询速度和数据量是有关系的,当数据量足够大时,查询时间会相应延长(4000W的时候电脑一度卡的一批哈哈),而当数据量减少到一定量范围内时,查询速度几乎保持在一个水平,这说明此时查询已经达到了最优水平,这是我们最期望看到的数据量大小。
至于为什么数据量越大查询速度越慢呢,这是因为内存不足。当单表过大时,我们需要进行分表,否则在多线程下容易产生内存不足的情况,一般情况下500W数据量左右进行分表。
在有索引的情况下,mysql是将索引全部加入内存再匹配,导致分批次与磁盘进行交互,当我们一次性删除百万条数据时可能会响应很长时间,这时一个比较简单的缩短时间的方法是将百万条数据拆分成几十万来进行多次删除。

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
MySQL数据很大的表删除慢主要是由于以下几个原因: 1. 索引问题:如果表没有恰当的索引,那么删除操作需要搜索整个表才能找到要删除的行,这将导致删除操作的耗时增加。解决方法是为表添加合适的索引,使删除操作可以快速定位到要删除的行。 2. 外键约束:如果表中存在外键约束,那么在删除行之前,需要检查该行是否被其他表所引用。如果被引用,则需要先删除引用的行,这会导致删除操作的耗时增加。解决方法是在进行删除操作时,临时关闭外键约束检查,或者更改外键关系,以避免进行额外的关联查询。 3. 日志记录:MySQL在执行任何修改操作时,会将其写入日志中,以便在需要时进行回滚或恢复操作。当数据较大时,写入大的日志会导致删除操作变慢。解决方法是可以考虑减少或调整MySQL的日志记录设置,或者考虑将日志文件放在独立的存储设备上以提高性能。 4. 事务处理:如果删除操作包含在一个事务中,那么在事务提交之前,所有删除的行都需要被记录在事务日志中,这会增加删除操作的时间。解决方法是将删除操作分解成多个较小的事务,或者禁用事务处理。 5. 硬件性能:MySQL服务器的硬件性能也会对删除操作的速度产生影响。如果硬件资源不足,例如CPU、内存或磁盘I/O等,都会造成删除操作的延迟。解决方法是可以考虑升级硬件,增加服务器的性能。 综上所述,如果MySQL数据很大的表删除慢,可以通过添加索引、优化外键约束、调整日志记录设置、优化事务处理或提升硬件性能等方式来改善删除操作的速度

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值