RabbitMQ（七）Shovel插件对比Federation插件

Lucky_Turtle

于 2024-06-21 20:00:00 发布

阅读量326

点赞数 9

分类专栏： Java 文章标签： rabbitmq 分布式

本文链接：https://blog.csdn.net/qq_45742250/article/details/139832039

版权

Java 专栏收录该内容

68 篇文章 5 订阅

订阅专栏

文章目录

Shovel和Federation的主要区别（重点）
一、启用Shovel插件
二、配置Shovel
三、测试

Shovel和Federation的主要区别（重点）

• Shovel更简洁一些
• Federation更倾向于跨集群使用，而Shovel是否跨集群都可以
• Shovel源队列中的消息经过数据转移后相当于被消费了

一、启用Shovel插件

rabbitmq-plugins enable rabbitmq_shovel
rabbitmq-plugins enable rabbitmq_shovel_management

在这里插入图片描述

二、配置Shovel

amqp://guest:123456@192.168.217.134:51000
amqp://guest:123456@192.168.217.134:61000

在这里插入图片描述

三、测试

1、测试计划

节点	交换机	路由键	队列
深圳节点	exchange.shovel.test	exchange.shovel.test	queue.shovel.demo.shenzhen
上海节点	——	——	queue.shovel.demo.shanghai

2、测试效果

发布消息

在这里插入图片描述

源节点

在这里插入图片描述

目标节点

在这里插入图片描述

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

Lucky_Turtle

关注关注

9
点赞
踩
5

收藏

觉得还不错? 一键收藏
打赏
0
评论
RabbitMQ（七）Shovel插件对比Federation插件

Shovel插件对比Federation插件
复制链接

扫一扫

专栏目录

rabbitMQ插件shovel配置（数据同步）

康小虎的博客

03-16

2866

一、shovel是什么？其实，shovel和上一篇博客中的federation的功能是类似的，都是为了MQ间的消息同步。不同的是，federation需要每个MQ上都配置，它只是个拉取消息的功能，而shovel只需要在一个MQ上配置即可，它是个双向的动作，既能拉取消息，也能推送消息，所以只需要知道一台服务器ip就能实现双向通信，这在某些特定的场景下是特别适合的，比如有一台服务器的ip是不确定的。一般情况下都是一个MQ的队列和另一个MQ的交换机进行通信，当然这也不是必须的，只是普遍这么使用。...

RabbitMQ的Federation和Shovel的使用

Coding Farmer的博客

10-29

3925

一、跨越集群的界限 RabbitMQ可以通过3种方式实现分布式部署：集群、Federation、Shovel。Federation和Shovel可以为RabbitMQ的分布式部署提供更高的灵活性，但也提高了部署的复杂性二、Federation介绍与使用 2-1、Federation的目标 Federation插件的设计目标是使RbbitMQ在不同的 Broker 节点之间进行消息传递而...

参与评论您还未登录，请先登录后发表或查看评论

rabbitmq级联之shovel插件和exchange.bind

weixin_34289454的博客

02-20

179

有时候，由于各方面原因比如安全原因、系统间隔离，我们需要实现在多个rabbitmq实例或者一个rabbitmq实例的多个vhost间推送消息。在上一版的实现中，公司使用java自行实现了一个类似转发器的功能，其结构为：内部MQ->java-pusher->外部MQ 其中在java-pusher的配置文件里面定义内部MQ和外部MQ各队列之间的映射关系。这样做除了额外的开发和维护成本外，...

RabbitMQ 集群、Federation、Shovel

思变的博客

11-29

472

一：集群集群将多台机器连接在一起，形成一个逻辑代理通信是通过Erlang消息传递的，因此集群中的所有节点都必须具有相同的Erlang cookie 群集中计算机之间的网络链接必须可靠，群集中的所有计算机必须运行相同版本的RabbitMQ和Erlang 1.单机版缺陷： (1)单台RabbitMQ服务器的吞吐量有限 (2)单节点遇到内存崩溃、机器掉电或者主板故障会导致服务不可用 2.搭建步骤： (1)修改 3 台机器的主机名称 vim /etc/hostname (2)配置各个节点的 hosts 文

[官方翻译]RabbitMQ Federation&Shovel AP 集群

weixin_34107739的博客

03-21

183

2019独角兽企业重金招聘Python工程师标准>>> ...

MQ——RabbitMQ集群原理

庄小焱

09-25

1204

摘要主要讲述Federation和 Shovel这两个插件的使用、细节及相关原理。相对于集群的部署方式，Federation和Shovel可以部署在广域网中，为RabbitMQ提供更广泛的应用空间。 Federation Shovel

rabbitmq学习笔记和软件和插件

05-05

2. **Shovel Plugin**：允许在不同的RabbitMQ实例之间复制消息，实现数据迁移或备份。 3. **Federation Plugin**：跨集群的消息传递，确保在多个RabbitMQ集群间的高可用性。 4. **Prometheus & Grafana**：监控...

rabbitmq-server-3.10.1

11-09

- ** shovel**: 用于在不同RabbitMQ实例间复制或迁移队列。 - ** Federation**: 实现跨集群的消息传递。 **六、高可用性** RabbitMQ支持多种高可用性策略，如镜像队列、网络分区容忍和HAProxy集成，确保服务的连续...

rabbitmq基础入门

04-01

Federation和Shovel则帮助在多个RabbitMQ实例之间进行消息的迁移和复制。总的来说，RabbitMQ作为一款强大的消息中间件，提供了一整套完整的解决方案，不仅能够有效地管理消息流动，还能应对复杂的分布式系统挑战，...

rabbitmq-server-3.9.14

05-04

3. **高可用性**：RabbitMQ支持多种模式以实现高可用性，例如镜像队列、 Federation和Shovel插件。3.9.14版本可能对这些特性进行了改进，提升了集群的稳定性和数据一致性。 4. **安全性**：RabbitMQ支持用户身份...

RabbitMQ消息服务用户手册2

08-08

在广域网（WAN）环境下，建议使用Shovel或Federation插件来实现跨节点的数据同步。 7. **节点运行模式**： - 默认情况下，所有节点运行在disk模式以保证数据持久化，如果需要提高性能，可以考虑ram模式，但这将...

RabbitMQ集群/监控/Federation/Shovel

这是一个记录学习的博客

04-18

1363

RabbitMQ运维集群搭建单台RabbitMQ服务器可以满足每秒1000条的消息吞吐量 RabbitMQ集群不能保证消息的万无一失，即使将消息、队列、交换器等都设置为可持久化，生产端和消费端都正确地使用了确认方式。集群中所有节点都会备份所有的元数据信息，包括：队列、交换器、绑定关系、vhost元数据，但不会备份消息基于存储空间和性能的考虑，在RabbitMQ集群中创建队列，集群只会...

RabbitMQ集群之shovel插件的使用

XinhuaShuDiao的博客

02-25

2492

在前面的文章中，我们介绍了federation插件，在要实现的功能上基本都是一样的，主要目的都是如下功能： 1.

【原创】RabbitMQ 之 Shovel（翻译）

weixin_34080951的博客

12-18

512

2019独角兽企业重金招聘Python工程师标准>>> ...

RabbitMQ镜像集群与Shovel&Federation跨集群数据同步

qq_39344638的博客

07-14

1899

RabbitMQ跨集群数据同步，RabbitMQ的RPO测量与设定，Shovel和Federation工具的使用。

rabbitMQ Shovel与Federation

qq_25825923

07-18

733

Shovel shovel 是rabbitMQ的一个插件可以把源节点消息发送到目标节点。优点松耦合:Shovel 可以在不同的Broker和集群上传递消息，源节点和目标节点可以使用不同的用户和vhosts，不同的RabbitMQ版本。支持多个版本的AMQP协议支持广域网可以容忍网络断断续续保证可靠性。原理使用首先开启插件 rabbitmq-plu...

消息中间件 RabbitMQ 三种分布式架构区别 Clustering Federation Shovel

伍意的博客

05-31

2368

Distributed RabbitMQ brokers https://www.rabbitmq.com/distributed.html AMQP and the other messaging protocols supported by RabbitMQ via plug-ins (e.g. STOMP), are (of course) inherently di

RabbitMQ三种分布式策略总结

最新发布

06-08

要实现 RabbitMQ 插件 Federation 的远程发布功能，需要在本地 RabbitMQ 服务器和远程 RabbitMQ 服务器上分别安装配置 Federation 插件，并进行配置。下面是一个简单的远程发布配置示例： 1. 在本地 RabbitMQ 服务器上启用 Federation 插件，执行命令： ``` rabbitmq-plugins enable rabbitmq_federation ``` 2. 在远程 RabbitMQ 服务器上启用 Federation 插件，执行命令： ``` rabbitmq-plugins enable rabbitmq_federation ``` 3. 在本地 RabbitMQ 服务器上创建一个 Exchange，并配置 Federated Exchange： ``` # 创建 Exchange rabbitmqadmin declare exchange --vhost=local_vhost --username=admin --password=admin --exchange=my_exchange --type=topic # 配置 Federated Exchange rabbitmqctl set_parameter federation-upstream remote-upstream '{"uri":"amqp://remote_host","expires":1800000}' rabbitmqctl set_policy federate-me "^my_exchange$" '{"federation-upstream-set":"all"}' ``` 其中，`remote-upstream` 是远程 RabbitMQ 服务器的连接信息，`federate-me` 是一个 Policy，它将本地 Exchange `my_exchange` 和远程 Exchange 绑定在一起。 4. 在远程 RabbitMQ 服务器上创建一个 Exchange，与本地 Exchange 绑定： ``` # 创建 Exchange rabbitmqadmin declare exchange --vhost=remote_vhost --username=admin --password=admin --exchange=my_exchange --type=topic # 绑定 Exchange rabbitmqctl set_parameter federation-upstream local-upstream '{"uri":"amqp://local_host","expires":1800000}' rabbitmqctl set_policy federate-me "^my_exchange$" '{"federation-upstream-set":"all"}' ``` 其中，`local-upstream` 是本地 RabbitMQ 服务器的连接信息，`federate-me` 是一个 Policy，它将远程 Exchange `my_exchange` 和本地 Exchange 绑定在一起。配置完成后，当本地 RabbitMQ 服务器上的 Exchange 发布消息时，通过配置的 Federated Exchange 和 Policy，消息将自动路由到远程 RabbitMQ 服务器上的 Exchange。需要注意的是，Federation 远程发布功能需要保证网络的稳定性和可靠性，否则可能会导致消息丢失或重复传输等问题。