有遇到过这种需求,想法:
1.有损服务,只给他查一年内的数据,或者只存1kw条数据。建一个表存一年内的数据,每隔一个月把表最旧的数据迁到分表上面。如果需求方要查所有数据,让他自己选年份去查。
2.,根据前端传来的页面数请求(即limit,start),确定需要查询的数据在哪一个年份,或者数据是多个年份组合出来。
假如
2012 25,2013 40,2014 15 ,共 80条
limit 0,20 =>落到2012年,那么只需查2012就够了;
limit 20,20 =>2012 后5条 +2013 15条 以此类推。。
如果再折腾一下,可以以关键字+年份为key,把非当前年份的条数存个cache,减少计算次数
3.最后是无脑union了,应该会很慢
4.如果是针对特定的关键字做报表统计,一次性的那就随意了
果断的选了1,因为老数据基本是没什么人关心的了。。