在系统做日志记录的时候采用MySQL数据库,由于日志数据量较大,采用按月分表的形式进行处理。
分表思路
每个月的开始都要建立一张以月为单位的新表来存储过去一个月的数据。有一张表的表名是一直不变的,这张表是用来暂时存储新的一个月的数据的。
现在有一张表my_table ,前月份的数据就暂时存储在这张表中,首先需要将my_table表进行重命名。
rename table my_table to table_2020_02;
这时候重新命名了my_table这张表,但是原来的my_table这张表还是存在的,只不过所有的数据都已经存储在table_2020_02这张表上了。
用rename进行批处理的好处,大量的数据不需要进行导出和导入的操作,那样效率会很低,而且对数据库造成的压力会很大。
在重新命名了my_table这张表后需要重新要创建my_table这张表,CREAT my_table (…)。
分表实现
1、首先要保证event事件是开启状态,默认情况下是关闭的。
set GLOBAL event_scheduler=1;
或者
set GLOBAL event_scheduler=NO;
2、用存储过程实现分表
/* 用于按日期分表,先将 原表 修改表名为 表名+日期,复制修改后的表 为原表名 */
delimiter //
CREATE PROCEDURE copytable (var VARCHAR(20))
BEGIN
SET @pddl = concat('ALTER TABLE ', var, ' RENAME ', var, DATE_FORMAT(NOW(), '%Y_%m'));
PREPARE stmt FROM @pddl;
EXECUTE stmt;
DEALLOCATE PREPARE stmt;
SET @pdd2 = concat('CREATE table ', var, ' like ', var, DATE_FORMAT(NOW(), '%Y_%m'));
PREPARE stmt1 FROM @pdd2;
EXECUTE stmt1;
DEALLOCATE PREPARE stmt1;
END//
delimiter ;
create event copytable_event
on schedule every 1 MONTH STARTS '2019-04-01 00:00:02'
on completion preserve disable //表示创建后并不开始生效
do call copytable("member"); //该event(事件)的操作内容
alter event copytable_event on completion preserve enable; //开启已经创建好的事件
注:将倒数第二行do call copytale(“member”)中的member替换为你的表名