mysql数据迁移数据一致性检教_数据表迁移数据一致性验证

在迁移数据库的时候做一些必要的验证还是很有用的,比如说迁移前后的数据条数是否一致,数据是否一致,这个时候怎么办呢,验证条数还好说,要是验证数据是否一致呢,对于重要的数据当然要每条都不会有差错,随机抽样验证肯定是不行的,万一遗漏了就麻烦了,而且两张表不再同一台服务器上。这个时候该怎么办呢,有一种方法:

从表中选取几个重要字段,比如说A、B、C,用这几个字段作为比对的标尺。

从原表中导出每条数据的这三个字段到一个文件f1中。

从目的表中到处每条数据的这三个字段到文件f2中。

比对文件f1、f2文件中的每条数据是否相同。

得出结论

上面这种方法是同时想出来的,也还不错,但我觉得还有改进的余地:

首先就是不是所有字段,仍然有可能在非主要字段出现different。

整体效率比较低

我的想法是这样:

对表中的每n条数据进行拼接(直接连接起来,n取值取决于每条数据的数据量大小)。

计算这n条数据的md5值,添加到文件f1中,直到所有数据取值完成。

对目的表也一样,记录的文件f2中。

比对文件f1、f2文件的md5值,如果一致,ok,成功。

如果不一致,从上倒下比对每条md5值,找到第m条不一致。

得出结论,不一致的数据在m*(n-1)+1 ~ m*n之间,可以再次选择定位。

第二种方法的好处就是输出文件会在一定范围缩小,比对方便,但是也有缺点,不能像第一种方法一样直接通过关键字段

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值