Mysql千万级数据时间索引查询筛选方法

背景:在1500万行数据中,根据开始时间与结束时间索引查询数据,由于数据过多,需要间隔筛选。

数据表字段:ID、时间戳、数据1、数据2、数据3、数据4、数据5

其中ID为自增主键,增加时间戳为索引。

其他踩坑方法就不记录了。。。。

解决思路:

根据时间直接索引数据很慢的,ID是主键,在sql语句中操作主键速度很快,可以根据输入的开始时间与结束时间获取对应起始ID与结束ID,通过ID差值可以得到需要索引的数据总行数,最后通过ID为判断条件开始分页查询,注意:分页查询偏移量越大速度越慢,所以分页查询时,将偏移量固定为0,改变改变查询的起始ID即可。

关于筛选可以使用WHERE MOD ( 表.id, 10) = 0也可以用WHERE aaa.id%10  = 0,其中的10表示ID序号间隔10个进行查询。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值