mysql 数据转移历史表_mysql 历史数据表迁移方案

当业务运行一段时间后，会出现有些表数据量很大，可能对系统性能产生不良的影响，常见的如订单表、登录log表等，这些数据很有时效性，比如我们一般很少去查上个月的订单，最多也就是报表统计会涉及到。

在我们的数据库中，用户登录表就是这种类型的表，一般而言，表中的数据是不可逆的，只有插入操作没有删除或者修改操作，表示在过去一段时间内完成的事实业务数据。比如登录表表示一段时间内用户的登录信息，登录一次游戏就会在数据库中记录一条数据。

1、对于备份这类表的策略是：

第一次备份全表的数据导入到备份表中，也就是全备。

以后每天只将增加的量自动迁移到备份表中，这里通过自增列的值相比较得到增量，如第一次全备导入备份表，这时自增列的最大值为max(idx)，通过这个值到从库中查询，只要大于这个值的所有记录形成增量。

备份完成后，分批删除主库上的数据。

2、下面是具体操作步骤：

第一次全备和恢复

select * from table into outfile "/data/backup/xxxx.txt"; --导出备份数据

load data infile "/data/backup/ xxxx.txt " into table bak_table; --在另外服务器备份表中恢复

脚本程序实现：拉取线上服务器上的增量数据，然后导入本服务器，实现增量备份

1)需要在同一目录下建立三个sql脚本，如a.sql  b.sql  c.sql

a.sql: 拼接增量备份sql，形成备份语句

use report