Mysql使用Federate引擎实现操作本地表映射远程操作表

考虑这样一个场景,存在多台agent系统(每台均拥有自己的数据库)各自做完操作后,将会触发各自数据库的存储过程进行复杂运算,各自完成后均需要向远程某Master机器的数据库的表中擦入一条信息,以通知操作完成。初步设想有两个方案来实现。

  1. 在agent系统里面通过java代码调用存储过程,直到存储过程执行完成后,再将执结束信息写入到Master系统的数据库中。
  2. 通过为每一个agent系统中的数据库建立一个远程映射表,从而实现agent系统存储过程执行完成后,通过存储过程再将信息写入本地的映射表中,由mysql自动同步数据到Master上。(此处也凸显出mysql一个短板,本地存储过程不能调用远程数据库的存储过程,不能操作远程数据库的表,貌似oracle,sqlserver等都可以,不然就不用这么麻烦了╮(╯▽╰)╭)

因为在实际项目中,第一种方式的会因为存储过程的运行时间过长(半个小时甚至更久),会导致agent系统的性能有影响,迫于无赖才使用第二种方案。

首先需确保已经打开federated引擎,可通过show engines命令查看是否安装。然后具体步骤如下:

首先在Master机器上建立projects表,我们只需要将每个agent数据库中建立映射表projects

CREATE TABLE `projects` (
     `project_id` INT(11) NOT NULL AUTO_INCREMENT,
     `project_code` VARCHAR(50) NOT NULL,
     `test_code` VARCHAR(50) NOT NULL,
     `create_time` BIGINT(11) NULL DEFAULT NULL,
     `result` VARCHAR(255) NULL DEFAULT NULL,
     `ts` BIGINT(11) NOT NULL,
     PRIMARY KEY (`id`)
)
COLLATE='utf8_general_ci'
ENGINE=FEDERATED
CONNECTION='mysql://user:password@202.59.232.211:3306/testdb/tb_projects_tests';

注意connection语句的设置,需要远程Master数据库的用户名,密码以及映射表的相应信息,中然后在每一个存储过程执行完成后对本地的projects执行一条insert语句即可。

PS:需要注意的是,此种方式不适合大数据量的同步操作。



实现 RabbitMQ 插件 Federation 的远程发布功能,需要在本地 RabbitMQ 服务器和远程 RabbitMQ 服务器上分别安装配置 Federation 插件,并进行配置。下面是一个简单的远程发布配置示例: 1. 在本地 RabbitMQ 服务器上启用 Federation 插件,执行命令: ``` rabbitmq-plugins enable rabbitmq_federation ``` 2. 在远程 RabbitMQ 服务器上启用 Federation 插件,执行命令: ``` rabbitmq-plugins enable rabbitmq_federation ``` 3. 在本地 RabbitMQ 服务器上创建一个 Exchange,并配置 Federated Exchange: ``` # 创建 Exchange rabbitmqadmin declare exchange --vhost=local_vhost --username=admin --password=admin --exchange=my_exchange --type=topic # 配置 Federated Exchange rabbitmqctl set_parameter federation-upstream remote-upstream '{"uri":"amqp://remote_host","expires":1800000}' rabbitmqctl set_policy federate-me "^my_exchange$" '{"federation-upstream-set":"all"}' ``` 其中,`remote-upstream` 是远程 RabbitMQ 服务器的连接信息,`federate-me` 是一个 Policy,它将本地 Exchange `my_exchange` 和远程 Exchange 绑定在一起。 4. 在远程 RabbitMQ 服务器上创建一个 Exchange,与本地 Exchange 绑定: ``` # 创建 Exchange rabbitmqadmin declare exchange --vhost=remote_vhost --username=admin --password=admin --exchange=my_exchange --type=topic # 绑定 Exchange rabbitmqctl set_parameter federation-upstream local-upstream '{"uri":"amqp://local_host","expires":1800000}' rabbitmqctl set_policy federate-me "^my_exchange$" '{"federation-upstream-set":"all"}' ``` 其中,`local-upstream` 是本地 RabbitMQ 服务器的连接信息,`federate-me` 是一个 Policy,它将远程 Exchange `my_exchange` 和本地 Exchange 绑定在一起。 配置完成后,当本地 RabbitMQ 服务器上的 Exchange 发布消息时,通过配置的 Federated Exchange 和 Policy,消息将自动路由到远程 RabbitMQ 服务器上的 Exchange。需要注意的是,Federation 远程发布功能需要保证网络的稳定性和可靠性,否则可能会导致消息丢失或重复传输等问题。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值