最近工作中需要初始化一些历史数据,遇到了些问题,关于每次获取的条数,但是会死循环,每次获取n条,有可能第一次和第n次获取的数据是一样的。我给的解决方案是,把前一次结果md5,放入set中,下次获取数据比对,如果一直,获取本次结果的最大id,入参,跳过这部分数据。不过不能避免下次job开始还会跑到。这部分数据最终还是需要其他方案去解决。
下面我们来看一下limit的一些使用和原理;
mysql中我们一般这么用
1-SELECT * FROM student ORDER BY id limit 10; limt n 直接获取数量,EXPLAIN 后 rows 10;
2-SELECT * FROM student ORDER BY id limit 0,20; limit m,n;分页获取;EXPLAIN 后 rows 20; 可知,从第1条获取20条,总量是m条。m,n,获取的总条数为 m+n,返回 n条;
关于性能方面:
1 方式 直接获取n条;2 获取 m+n 条,当m较大时,比较耗费时间。可以使用只查询解决。
小优化:
未加所以的查询,知道条数的可以使用 limit 1 提高性能,没有索引的字段会全表扫描的;
最后,limit 一般要结合where-order by -group by 等等 筛选,排序等操作,具体问题具体分析,灵活运用,并且知其然并知其所以然。
持续更新中。。。。。