php rabbitmq mqtt,使用RabbitMQ和Spring Cloud进行MQTT客户端负载平衡

最新推荐文章于 2023-08-31 19:34:37 发布
最新推荐文章于 2023-08-31 19:34:37 发布
阅读量477 收藏
点赞数
文章标签： php rabbitmq mqtt

扩展您对MQTT客户端和负载平衡的了解。

介绍

MQTT是一种机器对机器(M2M)，物联网连接协议。它被设计为一个非常轻量级的发布和订阅消息传输。对于需要较小代码占用空间和/或网络带宽非常宝贵的远程位置的连接非常有用。

每个MQTT客户端都订阅某些主题，并在发布者开始推送有关这些主题的消息时接收消息。

如何扩展？

水平扩展的目的是在同一应用程序的多个实例之间分配负载。如果这些实例中的MQTT客户端订阅了相同的主题，则将向每个实例传递相同的MQTT消息，这不是所理想的行为。

38cd4a268a9179ba029bbebca4b768c2.png

竞争消费者

Spring Cloud Stream定义了“Consumer Groups”的概念，如下所示：

“虽然发布 - 订阅模型可以轻松地通过共享主题连接应用程序，但通过创建给定应用程序的多个实例来扩展的能力同样重要。当这样做时， 应用程序的不同实例被置于竞争的消费者关系中，其中只有一个实例可以处理给定的消息。“

基于此定义，Spring Cloud Stream允许跨多个客户端分配主题的负载，如下图所示。a58b353ccefbcf0c77a277e7f9d057f7.png示例

在此示例中，MQTT客户端将消息发布到RabbitMQ中的一个主题，并且多个消费者将共享该主题的消息。

安装RabbitMQ和MQTT插件

首先，我们将使用Docker镜像运行RabbitMQ的实例。然后，我们将安装MQTT插件。

>docker run   -d  --hostname vs29 --name vs29 -p  8081：15672 -p  5672：5672 -p  1883：1883 rabbitmq：3-management

现在，让我们检查一下该容器的启动日志：

>docker ps

CONTAINER ID        IMAGE                     COMMAND                  CREATED             STATUS              PORTS                                                                                                               NAMES

fbd443154bf6        rabbitmq:3-management     "docker-entrypoint.s..."   6 seconds ago       Up 2 seconds        4369/tcp, 0.0.0.0:1883->1883/tcp, 5671/tcp, 15671/tcp, 0.0.0.0:5672->5672/tcp, 25672/tcp, 0.0.0.0:8081->15672/tcp   vs29>docker logs fbd443154bf6 -f

....

....

...

2019-02-03 07:34:16.709 [info] <0.198.0>

node : rabbit@vs29

home dir : /var/lib/rabbitmq

config file(s) : /etc/rabbitmq/rabbitmq.conf

cookie hash : O+z+vUDvSh3J1vK/lV08Xw==

log(s) :

database dir : /var/lib/rabbitmq/mnesia/rabbit@vs29

日志的最后几行表示现在正在读取服务器。现在，让我们安装MQTT插件：

Navigate to the container first:>dockerexec-u 0 -it fbd443154bf6 /bin/bash

Enable the plugin now:

root@vs29:/#rabbitmq-plugins enable rabbitmq_mqtt

在RabbitMQ中添加新用户

让我们使用管理UI在RabbitMQ中添加一个新用户。打开URL http：// RabbitMQhost：8081 /然后导航到“Admin”选项卡(RabbitMQ中的默认凭据是guest / guest)。

要创建新用户：

在“用户名”字段中添加用户名。然后，让我们添加用户'client1'。在“密码”字段中设置密码，让我们将密码设置为“client1”

点击“添加用户”43542f3772adfaf24c094bc6bfabc32a.png

默认用户无权访问任何虚拟主机。单击“client1”以编辑此用户的权限。在新页面中，单击“设置权限”以授予用户访问所有虚拟主机的权限。

要验证一切正常，请使用MQTT客户端将数据推送到新服务器。在本教程中，我们将使用Mosquitto服务器提供的命令'mosquitto_pub'和'mosquitto_sub'。首先，让我们订阅服务器中的所有主题。其次，我们将一些数据推送到服务器。

..>mosquitto_pub -h xxx.xxx.xxx.xxx -t /my/topic -m "Hello World" -u client1 -P client1 -p 1883

..>mosquitto_sub -h xxx.xxx.xxx.xxx -t "#" -u client1 -P client1

Hello World

如果一切顺利，你应该收到'Hello World'

创建消息接收器服务

本教程的目标是在同一应用程序的多个实例之间分配负载。因此，让我们使用Spring Boot和Spring Cloud Stream创建一个使用消息的简单服务。

创建一个新的Spring Boot项目。您可以使用IDE或Spring Initializer

调整您的mvn文件以包含以下内容：

org.springframework.bootspring-boot-starter-parent2.1.2.RELEASE1.8Greenwich.RELEASEorg.springframework.bootspring-boot-starter-amqporg.springframework.cloudspring-cloud-streamorg.springframework.cloudspring-cloud-stream-binder-rabbitorg.springframework.bootspring-boot-starter-testtestorg.springframework.cloudspring-cloud-stream-test-supporttestorg.springframework.cloudspring-cloud-dependencies${spring-cloud.version}pomimportorg.springframework.bootspring-boot-maven-pluginspring-milestonesSpring Milestoneshttps://repo.spring.io/milestone

现在，让我们添加我们的流监听器：

import org.springframework.cloud.stream.annotation.EnableBinding;

import org.springframework.cloud.stream.annotation.Input;

import org.springframework.cloud.stream.annotation.StreamListener;

import org.springframework.messaging.SubscribableChannel;

@EnableBinding(MessageSink.InputChannel.class)

public class MessageSink {

@StreamListener(InputChannel.SINK)

public void handle(String message) {

System.out.println("new message:" + message + ", from worker :" + Thread.currentThread().getName());

try {

Thread.sleep(5000);

} catch (InterruptedException e) {

e.printStackTrace();

}

}

public interface InputChannel {

String SINK = "message-sink";

@Input(SINK)

SubscribableChannel sink();

}

}

下一步是定义和配置我们的Channel(这是本教程中最重要的部分)。配置将添加到application.yml文件中：

spring:

cloud:

stream:

bindings:

message-sink :

destination: amq.topic

binder: rabbit

group: messages-consumer-group

consumer :

concurrency: 1

rabbit:

bindings:

message-sink:

consumer:

durableSubscription: true

declareExchange: true

exchangeDurable: true

exchangeType: topic

queueNameGroupOnly: true

rabbitmq:

host: xxx.xxx.xxx.xxx

password: client1

username: client1

我们来讨论application.yml中的重要配置：

destination：amq.topic是MQTT插件使用的默认Exchange，因此我们需要订阅它。

group：根据Spring Cloud Documents，“订阅给定目标的所有组都会收到已发布数据的副本，但每个组中只有一个成员从该目标收到给定的消息”

consumer.concurrency：可用于处理此使用者中收到的消息的最大线程数。我们将此数字修改为任何正值，并且仍然应用“分组消费者”的概念。

queueNameGroupOnly：根据Spring Cloud Documents，'当为true时，从名称等于的队列中使用group。否则，队列名称为destination.group。例如，当使用Spring Cloud Stream从现有RabbitMQ队列中使用时，这很有用。实际上，这是一个非常重要的配置。省略此属性将在启动服务时导致许多错误，因为Spring将生成以'amq'开头的队列名称，这是RabbitMQ不允许的。您将在此主题中获得更多详细信息

验证负载分配

让我们启动服务的两个实例，并使用MQTT客户端推送一些数据。首先，打开命令Shell窗口，导航到项目源，然后使用该命令构建项目

>mvn clean compile package

其次，打开两个命令Shell窗口，导航到项目文件夹，然后使用该命令启动服务

>java -jar target\balanced_mqtt_client-0.0.1-SNAPSHOT.jar

现在，我们将从MQTT客户端推送一些数据：

>mosquitto_pub -h xxx.xxx.xxx.xxx -t /my/topic -m"message 1"-u client1 -P client1 -p 1883>mosquitto_pub -h xxx.xxx.xxx.xxx -t /my/topic -m"message 2"-u client1 -P client1 -p 1883>mosquitto_pub -h xxx.xxx.xxx.xxx -t /my/topic -m"message 3"-u client1 -P client1 -p 1883>mosquitto_pub -h xxx.xxx.xxx.xxx -t /my/topic -m"message 4"-u client1 -P client1 -p 1883>mosquitto_pub -h xxx.xxx.xxx.xxx -t /my/topic -m"message 5"-u client1 -P client1 -p 1883

在消费者方面，将看到以下消息：

消费者1：

2019-02-07 10:33:55.848  INFO 14284 --- [           main] o.s.i.a.i.AmqpInboundChannelAdapter      : started inbound.messages-consumer-group

2019-02-07 10:33:55.858  INFO 14284 --- [           main] r.n.cloud.rabbitmq.mqtt.MqttApplication  : Started MqttApplication in 8.824 seconds (JVM running for 9.318)

new message:message 1, from worker :messages-consumer-group-1

new message:message 3, from worker :messages-consumer-group-1

new message:message 5, from worker :messages-consumer-group-1

消费者2：

O 13832 --- [           main] o.s.i.a.i.AmqpInboundChannelAdapter      : started inbound.messages-consumer-group

O 13832 --- [           main] r.n.cloud.rabbitmq.mqtt.MqttApplication  : Started MqttApplication in 7.8 seconds (JVM running for 8.495)

worker :messages-consumer-group-1

worker :messages-consumer-group-1

我们可以看到，消息是在两个消费者之间分配的。

结论

本教程将介绍如何使用RabbitMQ服务器和“分组使用者”功能实现负载均衡的MQTT使用者。本文示例代码下载地址

weixin_39951378
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
mqtt rabbitmq java_rabbitmq作为mqtt服务器实现websocket消息推送给浏览器
weixin_39855706的博客
02-24 449
rabbitmq的RabbitMQ Web MQTT插件可以用来支持将rabbitmq作为MQTT协议的服务器，而websocket支持mqtt协议通信实现消息推送。因为我们目前使用rabbitmq，所以采用其作为ws的服务端(原来有过activemq的做法，其原生也支持MQTT协议)。首先安装RabbitMQ Web MQTT插件，如下：rabbitmq-plugins enable rabbi...
mqtt服务器性能分析,MQTT服务器动态负载均衡的研究与应用
weixin_30552495的博客
08-10 2183
1. 引言随着越来越多的工业设备接入物联网，因处理器能力、网络带宽等具有局限性，所以对其通信技术提出了更高的要求 [1]。作为网页标准的HTTP，已不能满足机器之间的大规模沟通，其请求/回答模式不再合适，取而代之的是发布/订阅模式 [1]。这种模式就是轻量级、可扩展的MQTT可以施展拳脚的舞台，MQTT技术在汽车软件、智能家居、智慧医疗等方面有着广泛的应用。近来MQTT的优势被深度发掘，当有大量的...
rabbitmq-mqtt：RabbitMQ MQTT插件
03-02
RabbitMQ MQTT插件 这已迁移到 该存储库已移至主要的RabbitMQ统一“ monorepo”，包括所有未解决的问题。 您可以在下找到源。 所有问题均已转移。 入门 这是RabbitMQ的MQTT插件。 该插件包含在RabbitMQ发行版中。 要启用它，请使用 ： rabbitmq-plugins enable rabbitmq_mqtt 插件使用的默认端口为1883 。 文献资料 可从rabbitmq.com获得。 贡献 参见 。 运行测试 克隆RabbitMQ伞库之后，转到rabbitmq-mqtt目录并运行 make tests 这将打开一个启用了插件的RabbitMQ节点，并对其进行集成测试。 请注意，端口1883和8883上不得运行任何其他MQTT服务器。 版权和许可 （c）2007年至2020年VMware，Inc.或其附属公司。 根据，与RabbitMQ相
php rabbitmq mqtt,使用docker安装rabbitmq（mqtt）-Go语言中文社区
weixin_39898380的博客
03-24 218
Rabbitmq是一个开源的amqp的实现，但是也支持mqtt协议，本文旨在使用docker搭建rabbitmq服务器，使用mqtt协议。搜索rabbitmq的镜像docker search rabbitmq其中第一个镜像rabbitmq是官方镜像，可以直接使用，但是这个默认是没有启动其他插件的。也可以直接使用rabbitmq:management镜像，这个是启用了网页管理端的；也可以直接使用ra...
mqtt 负载均衡_TDMQ——MQTT还能这样玩？！
weixin_39917485的博客
12-24 944
万物互联网时代，MQTT协议以其轻量级、可扩展等特性备受大家青睐，占据了物联网协议的半壁江山。平常我们做物联网项目时一般会选用开源的MQTT组件搭建服务，这能够实现发布订阅等基本功能，但面对连接控制、数据处理、安全管理等方面“刚需”时，不得不进行令人头大的二次开发。为此，得一物联打造了一款安全可信的企业级消息中间件TD-MQ，除了实现MQTT3.1.1全部功能外，还支持话题管理、权限控制...
php-mqtt 61613,rabbitmq 61613
weixin_33305349的博客
03-10 319
本文只讨论如何配置开启rabbitmq的web管理, 有关rabbitmq部署请参考http://kiss...61613 :::* LISTEN 0 0 0.0.0.0:57372 0.0.0.0:* LISTEN 0 0 0......rabbit常用端口 4369 (epmd) 25672 (Erlang distribution) 5672, 5671 (AMQP 0-9-1 withou...
RabbitMQ 安装包和开启MQTT功能
12-24
重启 RabbitMQ 服务，然后可以使用 MQTT 客户端连接到 `localhost:1883`（默认 MQTT 端口），如果一切正常，客户端应该能成功建立连接。例如，使用 MQTT.fx 或 mosquitto_pub/mosquitto_sub 工具。 6. **安全性...
spring cloud整合MQTT简单示例
04-24
spring cloud整合MQTT简单示例，分为三个项目eureka-server、service-hi、service-ribbon，MQTT环境需要自己提前搭好，我这搭的环境是apache-apollo-1.7.1
封装好的mqtt和rabbitmq可以直接使用
12-08
MQTT（Message Queuing Telemetry Transport）和RabbitMQ都是消息队列系统，它们在物联网（IoT）和分布式系统中广泛使用。MQTT是轻量级的发布/订阅协议，适用于低带宽、高延迟或不可靠的网络环境，而RabbitMQ是一个...
介绍Spring Cloud Stream与RabbitMQ集成
05-13
介绍Spring Cloud Stream与RabbitMQ集成的代码示例。Spring Cloud Stream是一个建立在Spring Boot和Spring Integration之上的框架，有助于创建事件驱动或消息驱动的微服务。
客户端负载均衡 - Ribbon
u013085496的博客
05-05 262
客户端负载均衡 - Ribbon Ribbon是Netflix公司开源的一个负载均衡的项目（https://github.com/Netflix/ribbon），它是一个基于HTTP、TCP的客户端负载均衡器。 服务端负载均衡 负载均衡是微服务架构中必须使用的技术，通过负载均衡来实现系统的高可用、集群扩容等功能。负载均衡可通过硬件设备及软件...
负载均衡 - MQTT Broker 集群详解（一）
emqx_broker的博客
08-17 3097
MQTT 协议在物联网，小型设备场景，移动应用等方面已经有了广泛的应用，并逐渐成为了物联网通讯的标准。本文重点介绍了组建 MQTT Broker 集群的挑战及负载均衡在 MQTT 集群中所起的作用。 MQTT 协议 与大家熟悉的 HTTP 协议类似，MQTT 协议同样基于 TCP/TLS 之上，属于应用层协议（它也可以基于 HTTP 协议之上工作，本文暂不涉及这部分内容）。 MQTT 标准委员会对 MQTT 协议的释义如下： MQTT 是用于物联网 (IoT) 的 OASIS 标准消息传递协议。它是一种非常
mqtt集群搭建并使用nginx做负载均衡_亲测得结论
最新发布
yinjl123的博客
08-31 1476
使用mqttx工具分别连接三台rabbitmq的1883端口,不使用nginx代理时1 同时都订阅topic:aaa/#,任意一台发送topic:aaa/bbb的数据,三台都能收到数据2 同时都订阅topic:bbb,任意一台发送topic:bbb的数据,一样的,三台都能收到数据3 rabbitmqctl stop_app命令,停一台rabbitmq应用,2台同时订阅,任意一台发数据,2台都能收到数据4 rabbitmqctl stop_app命令,停2台rabbitmq应用,另外一台,能正常使用。
rabbitmq使用__php客户端(消息发送者)
weixin_33735077的博客
10-28 194
&lt;?php $conn_args = array( 'host' =&gt; 'localhost', 'port' =&gt; '5672', 'login' =&gt; 'guest', 'password' =&gt; 'guest', 'vhost'=&gt;'/' ); $e_name = 'test_ex'; /...
php rabbitmq qos,RabbitMQ的应用场景以及基本原理介绍
weixin_35346761的博客
03-10 470
RabbitMQ是一个由erlang开发的AMQP(Advanced Message Queuing Protocol)的开源实现。AMQP ：高级消息队列协议，是应用层协议的一个开放标准，为面向消息的中间件设计。消息中间件主要用于组件之间的解耦，消息的发送者无需知道消息使用者的存在，反之亦然。 AMQP的主要特征是面向消息、队列、路由(包括点对点和发布/订阅)、可靠性、安全。 RabbitMQ是...
springboot整合ActiveMQ 2（主备模式，负载均衡）
weixin_34128534的博客
05-31 643
基本使用,www.tapme.top/blog/detail… 主备模式,www.tapme.top/blog/detail…   单个 MQ 节点总是不可靠的，一旦该节点出现故障，MQ 服务就不可用了，势必会产生较大的损失。这里记录 activeMQ 如何开启主从备份，一旦 master（主节点故障），slave（从节点）立即提供服务，实现原理是运行多个 MQ 使用同一个持久化数据源，这里以...
RabbitMQ(消息队列)
m0_55613286的博客
07-08 257
RabbitMQ 是一个由 Erlang 语言开发的 AMQP 的开源实现。 AMQP ：Advanced Message Queue(高级消息队列协议)。它是应用层协议的一个开放标准，为面向消息的中间件设计，基于此协议的客户端与消息中间件可传递消息，并不受产品、开发语言等条件的限制。 RabbitMQ 最初起源于金融系统，用于在分布式系统中存储转发消息，在易用性、扩展性、高可用性等方面表现不俗。RabbitMQ是Erlang语言开发的,所以要先安装Erlang语言的运行环境 下载Erlang的官方路径
RabbitMQ+PHP实现topic交换机消息队列
程序猿的世界
09-26 1271
多个生产者，一消费者 publisher.php路由key为why.one publisher1.php路由key为why.two consumer.php的交换机类型为topic，绑定路由模式为why.*（*是匹配1个单词，#是匹配多个单词） publisher.php <?php date_default_timezone_set("Asia/Shanghai"); $co...
Spring配置RabbitMQ实现负载均衡
weixin_34159110的博客
12-05 827
2019独角兽企业重金招聘Python工程师标准>>> ...
springboot集成rabbitmq mqtt实现消息订阅和发送
06-10
Spring Boot集成RabbitMQ和MQTT可以使用Spring Boot的AMQP和Paho客户端库。以下是集成步骤： 1. 添加依赖 在pom.xml中添加以下依赖： ``` <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-amqp</artifactId> </dependency> <dependency> <groupId>org.eclipse.paho</groupId> <artifactId>org.eclipse.paho.client.mqttv3</artifactId> <version>1.2.0</version> </dependency> ``` 2. 配置RabbitMQ连接 在application.properties中配置RabbitMQ连接信息： ``` spring.rabbitmq.host=localhost spring.rabbitmq.port=5672 spring.rabbitmq.username=guest spring.rabbitmq.password=guest ``` 3. 创建RabbitMQ消息接收者 创建一个类来接收RabbitMQ消息。在该类中，使用@RabbitListener注解标记方法，指定队列名称和消息处理方法。 ``` @Component public class RabbitMQReceiver { @RabbitListener(queues = "test") public void receive(String message) { // 处理消息 } } ``` 4. 创建MQTT消息接收者 创建一个类来接收MQTT消息。在该类中，实现MqttCallback接口，重写messageArrived方法来处理接收到的消息。 ``` @Component public class MQTTReceiver implements MqttCallback { @Override public void connectionLost(Throwable throwable) { // 连接丢失 } @Override public void messageArrived(String topic, MqttMessage mqttMessage) throws Exception { // 处理消息 } @Override public void deliveryComplete(IMqttDeliveryToken iMqttDeliveryToken) { // 消息发送完成 } } ``` 5. 创建RabbitMQ消息发送者 创建一个类来发送RabbitMQ消息。在该类中，注入AmqpTemplate并调用convertAndSend方法来发送消息到指定队列。 ``` @Component public class RabbitMQSender { @Autowired private AmqpTemplate amqpTemplate; public void send(String message) { amqpTemplate.convertAndSend("test", message); } } ``` 6. 创建MQTT消息发送者 创建一个类来发送MQTT消息。在该类中，注入MqttClient并调用connect、publish和disconnect方法来发送消息。 ``` @Component public class MQTTSender { @Autowired private MqttClient mqttClient; @Autowired private MqttConnectOptions mqttConnectOptions; public void send(String topic, String message) throws MqttException { MqttMessage mqttMessage = new MqttMessage(message.getBytes()); mqttClient.connect(mqttConnectOptions); mqttClient.publish(topic, mqttMessage); mqttClient.disconnect(); } } ``` 以上是在Spring Boot中集成RabbitMQ和MQTT实现消息订阅和发送的基本步骤。需要注意的是，AMQP和MQTT是不同的消息协议，需要根据实际情况选择使用哪个协议。另外，需要确保网络通畅，否则可能会出现消息丢失等问题。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值