背景
之前遇到过一个需求需要从一个拥有100W+数据的表中查询数据,但是给定的条件并没有添加索引,所以SQL查询的效率并不是很高。因此需要给这个字段添加索引,MySQL加索引会锁表,百万数据的表的话,耗时也要数秒时间,在这期间对业务可用性肯定会有一定影响。
解决方案
- 创建复制表
我们需要创建一张原表的复制表(原表a, 则copy表为 a_copy),在这张表上加上需要添加的目标索引, 并且复制表的自增id在原表的基础上要加上一定的值(这个值取决于这张表在你操作的这段时间可能的数据增量是多少,例如是1000,那么自增id可能尽量大一点设置成2000)
原表
复制表
- 将原表指定时间之前的数据插入复制表
假设现在是2024-04-24 14:31:00,我们可以将原表2024-04-24 14:30:00之前的数据插入复制表。
注:这里也不一定用insert的方式有其他更好的方式也可以。
-
原表更名为临时表,复制表更名为原表
-
将原表(此时原表表明已经是临时表了)指定时间(看第2步)之后的数据插入复制表(此时已经更名为原名)
- 删除临时表
总结
这种方式的好处就在于对生产的影响时间是比较短的,影响的范围也是比较小。
因为我们提前把表中绝大多数据copy到了复制表,然后在进行表的更名,更名时间成本是比较低的。