服务器多个网站开启quarz,GitHub - WuLex/QuartzSynchroData: 多个不同站点服务器数据同步到总服务器(数据中心)...

QuartzSynchroData

多个不同站点服务器sqlserver数据库 同步到总服务器上的数据库 (数据中心)

目前支持40多个数据库(在数据库配置表DBconfig配置了)的同步,每天每个服务器数据量在几w条左右,定时同步到数据中心,数据中心大约有2000w条数据记录,此例子是我修改的,

其实使用这样的同步方案,里面存在很多的问题的:

1.性能略低,不过很灵活,字段可以根据模型增加,修改(可以处理异构表,源表和目标表字段不一样)

2.因为定时器 增删数据,数据中心易产生多余数据库日志

#几点改进--未实现#

1.如果是同构数据库(因为例子是为了处理数据中心的库和各站点的库不完全一致),完全可以把订单表也用批量处理

2.(这是最笨的方法)因为一定时间内,订单(如订单状态,用户修改了电话,地址等 )在不断改变,所以为了一致性,必须先删除数据中心原有的订单,重新把各站点的订单insert数据中心

(我目前想到未实现的方法)就是各站点的订单状态如果改变(update,delete操作时),同时发送对应订单的(订单号和数据编号,操作类型)到rabbitmq消息队列,

rabbitmq消费端集成到另一个Windows服务里只做update数据中心对应的那条订单 ,而代替了不断的delete和insert操作

QQ:827937686

在实际测试的时候,发现问题还是蛮多的,所以希望专业人士能够给出好的建议,如果有更好的技术希望能交流分享之,让此类问题的数据同步能够更加稳定,谢谢!!

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值