mysql 大表加缓存,【MySQL】实现线上千万数据表添加字段操作以及缓存刷新

需求背景:

由于业务需求,需要在线上用户表添加渠道字段,用于区分不同渠道注册的用户,目前该表有20+个字段,8个索引

线上用户数据大概1500W左右,需要不停机增加数据库字段,同时需要刷新Redis缓存中的用户数据

发生的问题:

问题1.添加字段可能会锁表,影响线上业务的操作;

问题2.删除Redis缓存中的数据,数据量过大,无法直接精准的进行删除处理,可能的情况就是造成一边删除旧用户信息,一边生成新用户信息

解决方案:

针对于问题一:

由于MySQL5.6版本以后,提供了在执行DDL语句时,无锁添加字段 添加索引的机制,即ALGORITHM=inplace,LOCK=NONE

最终添加字段的语句被优化成ALTER TABLE `表名`

ADD COLUMN .......(此处省略),ALGORITHM=inplace,LOCK=NONE;

线上执行共计花了250多秒,没有出现锁表的情况,不影响线上业务流程

针对于问题二:

缓存的清理涉及到数据量大的问题,这里采用了线上代码兼容的方式;

d3dc55e292f0c07425198d5d02544c5d.png

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值