mysql千万级数据量的订单统计

mysql千万级数据量的订单统计

背景：订单表中有两千万条数据，未做分区表或者水平分表。从包括此表在内的十张表中查询出聚合后的统计数据。

优化建议：
1.针对需求设计索引，索引适当冗余一些，以免mysql的执行计划改变导致索引失效。
2.使用explain工具 注意用小表撬动大表。
3.在数据库中使用sum，max等函数做数据的聚合查询。因为订单表数据量太大，已经超过了mysql的性能承载限制，如果每次查询都即时查询数据库会导致所需时间特别长。所以可以新建几张表，将要聚合的数据，通过定时任务的方式来插入到新表当中，当有查询需求的时候可以去新建的几张表中做聚合查询。
4.使用缓存，如果统计的数据都是不可变更的，就可以将历史数据都刷进缓存，对应用代码没有任何影响，可大大加快查询统计数据的时间。
5.大数据量的情况下，尽可能避免在mysql进行数据的聚合工作。将数据的聚合工作放在应用中来做，只要注意下空间复杂度和时间复杂度，效率将远高于在mysql。