团队最近有个数据同步的需求,大致是两台或以上的数据库(MariaDB)服务器走VPN通道与一台数据库进行数据同步,先不关心VPN通道通迅的问题,对于这种多主一从的数据同步需求,也曾尝试通过MySQL本身的复制功能配置实现,但貌似不管是MySQL还是MariaDB目前都还没有实现多主一从的复制方案(官方说MariaDB从10.0开始支持,等到花儿都谢了)。
初步确定两种方案:
1.通过编码实现服务代码,定时主动向几个主库抓取数据并整合插入到从库中.
2.通过第三方的开源解决方案(其实也是服务代码,但封装实现较好),虽然配置要繁琐,但同步效率要高很多。
下面就记录下测试的一款第三方同步方案SymmetricDS(以下简称S)的使用过程,中文资料较少,而且存在一些版本上的差异,导致一些步骤根本不能通过或报错,自己简化了些操作,并没有按照官方的指导操作,鉴于英文水平有限,很多叙述都是基于自己的理解,也请有不同观点的兄弟留言指正或交流。
之所以选择SymmetricDS,大致三个原因:
1. 平台独立。不依赖其他组件包,独立配置完后实现功能。
2. 业务无关。不需要关心数据库中的业务,直接配置同步的表名等参数。
3. 同步及时。基于触发器的数据同步,保证数据传输的及时性。
官方地址:http://www.symmetricds.org
版本:symmetric-3.5.19-server.zip
下面是开源中国的一些图表介绍,引用下:
部署示意图,双箭头代表可以双向同步,而不是简单的单向复制。
配置数据模型:对于各个服务器,不管是主机还是从机,都需要配置S服务,用来监听或执行动作等,并且是以节点代表服务器来配置,至于触发器更体现它的实时性,一方数据库发生变化,首先被本机S服务监听,同时向关联的节点发起同步请求,关联节点接收请求并做响应动作。
运行时数据模型:当每个节点监听到本机的数据事件(即数据变动),会将变动的数据通过触发器与关联节点进行通迅。