利用Python&Pandas查找主从系统间不一致的数据

本文介绍了如何利用Python 3.6和Pandas库在10行内找出主从系统间的不一致数据。通过读取并比较两个系统数据文件,发现并定位了未成功复制的数据,展示了一种高效简洁的解决方案。
摘要由CSDN通过智能技术生成

写在前面

本文源自工作中的需要:后台服务器采用主从设计(一共有俩系统来做负载均衡),在数据复制的过程中由于网络传输等因素,会出现两系统数据不一致的情况,我需要找到并修复它(本文只涉及如何“找到”)。

其实工作中经常会碰上这样的小问题,我们可以用Java去读文件,存进set,然后比较……

但是用Python和Pandas这个库,我们可以仅用10行以内的代码做到,简单且方便


工具

Python 3.6 & Pandas


正文

先抽取出要比较的数据,出于数据保护,在此我不使用真实数据,而是自己伪造一些数据。

这是我的文件结构,files里面放的是准备使用的数据:


w71.txt:


w72.txt:


很明显能看出,在复制的过程中,w71系统上的Number为5的数据没有被复制到w72上&#

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值