文章目录
交换机 与 发布/订阅模式、路由模式、主题模式
在本节之前,我们用的交换机都是默认交换机。
在上一节中,我们创建了一个工作队列。我们假设的是工作队列背后,每个任务都恰好交付给一个消费者(工作进程),如下图:
而在这一部分中,我们将做一些完全不同的事情—我们将消息传达给多个消费者。这种模式称为 ”发布/订阅”。它依然还是一个队列中的消息只能被一个消费者消费,但是可以使用交换机把这条消息转发给另外一个队列,进而可以让另外一个消费者消费该消息。交换机与队列的绑定关系是通过RoutingKey来确定的,不同的RoutingKey对应着不同的队列。
下面我们先来看一下交换机。
1、Exchanges(交换机)
1.1. Exchanges 概念
RabbitMQ 消息传递模型的核心思想是:生产者生产的消息从不会直接发送到队列。实际上,通常生产者甚至都不知道这些消息传递传递到了哪些队列中。
相反,生产者只能将消息发送到交换机(exchange),交换机工作的内容非常简单,一方面它接收来自生产者的消息,另一方面将它们推入队列。交换机必须确切知道如何处理收到的消息。是应该把这些消息放到特定队列还是说把他们到许多队列中还是说应该丢弃它们。这些情况是由交换机的类型来决定。
1.2. Exchanges 的类型
总共有以下类型:
- 直接(direct) - 路由模式、
- 主题(topic) - 也是主题模式、
- 标题(headers) 、
- 扇出(fanout) - 也是发布订阅模式。
在第一节我们就说过RabbitMQ的六大模式:
-
简单模式、工作模式、发布确认模式
-
发布订阅模式、标题模式、主题模式
前三种在前面已经描述过了,前三种的讲解也都是在默认交换机的情况下(其实默认交换机的类型是direct)
而后面三种模式都是和交换机的类型紧密相关的。
1.3. 无名exchange - 默认交换机
在前面部分我们对 exchange 一无所知,但仍然能够将消息发送到队列。之前能实现的原因是因为我们使用的是默认交换,我们通过空字符串(“”)进行标识。
第一个参数是交换机的名称。空字符串表示默认或无名称交换机。
消息能路由发送到队列中其实是由routingKey (bindingkey) 绑定 key 指定的,如果是默认交换机,那routingKey默认就是队列名。
2、临时队列的概念
临时队列就是不持久化的队列。
之前的章节我们使用的是具有特定名称的队列(还记得 hello 和 ack_queue 吗?)。队列的名称我们来说至关重要:我们需要指定我们的消费者去消费哪个队列的消息。
每当我们连接到 RabbitMQ 时,我们都需要一个全新的空队列,为此我们可以创建一个具有随机名称的队列,或者能让服务器为我们选择一个随机队列名称那就更好了。其次一旦我们断开了消费者的连接,队列将被自动删除。
创建临时队列的方式如下: String queueName = channel.queueDeclare().getQueue();
创建出来之后长成这样:
3、交换机与队列之间的绑定(bindings)
什么是 bingding 呢?binding 其实是 exchange 和 queue 之间的桥梁(交换机和队列),它告诉我们 exchange 和那个队列进行了绑定关系。比如说下面这张图告诉我们的就是 X 与 Q1 和 Q2 进行了绑定。
交换机与队列的绑定关系是通过RoutingKey来确定的,不同的RoutingKey对应着不同的队列。
4、Fanout(扇出)- 发布订阅模式
4.1. Fanout 介绍
Fanout 这种类型非常简单。正如从名称中猜到的那样,它是将接收到的所有消息广播到它知道的所有队列中。系统中默认有些 exchange 是Fanout 类型。
4.2. Fanout 实战
为了说明 “发布/订阅” 模式,我们将构建一个简单的日志系统。它将由两个程序组成:第一个程序将发出日志消息,第二个程序是消费者。其中我们会启动两个消费者,其中一个消费者接收到消息后把日志存储在磁盘,另外一个消费者收到消息后把消息打印在屏幕上,事实上第一个程序发出的日志消息将广播给所有消费者。
Logs(交换机的名字) 和 临时队列 的绑定关系如下图:
它们的Routing Key 都是空串。
ReceiveLogs01 将接收到的消息打印在控制台:
package com.wlw.rabbitmq.five;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DeliverCallback;
import com.wlw.rabbitmq.utils.RabbitMqUtils;
/**
* 消费者1
*/
public class ReceiveLogs01 {
//交换机的名字
private static final String EXCHANGE_NAME = "logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMqUtils.getChannel();
//声明一个交换机
channel.exchangeDeclare(EXCHANGE_NAME, "fanout");
/**
* 生成一个临时的队列 队列的名称是随机的
* 当消费者断开和该队列的连接时 队列自动删除
*/
String queueName = channel.queueDeclare().getQueue();
//把该临时队列绑定我们的 exchange 其中 routingkey(也称之为 binding key)为空字符串
channel.queueBind(queueName, EXCHANGE_NAME, "");
System.out.println("ReceiveLogs01等待接收消息,把接收到的消息打印在屏幕........... ");
// 接收消息成功的回调
DeliverCallback deliverCallback = (consumerTag, delivery) -> {
String message = new String(delivery.getBody(), "UTF-8");
System.out.println("ReceiveLogs01控制台打印接收到的消息"+message);
};
//接收消息
channel.basicConsume(queueName, true, deliverCallback, consumerTag -> { });
}
}
ReceiveLogs02 将接收到的消息存储在磁盘:
package com.wlw.rabbitmq.five;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DeliverCallback;
import com.wlw.rabbitmq.utils.RabbitMqUtils;
import org.apache.commons.io.FileUtils;
import java.io.File;
/**
* 消费者2
*/
public class ReceiveLogs02 {
//交换机的名字
private static final String EXCHANGE_NAME = "logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMqUtils.getChannel();
//声明一个交换机
channel.exchangeDeclare(EXCHANGE_NAME, "fanout");
/**
* 生成一个临时的队列 队列的名称是随机的
* 当消费者断开和该队列的连接时 队列自动删除
*/
String queueName = channel.queueDeclare().getQueue();
//把该临时队列绑定我们的 exchange 其中 routingkey(也称之为 binding key)为空字符串
channel.queueBind(queueName, EXCHANGE_NAME, "");
System.out.println("ReceiveLogs02等待接收消息,把接收到的消息写到文件........... ");
// 接收消息成功的回调
DeliverCallback deliverCallback = (consumerTag, delivery) -> {
String message = new String(delivery.getBody(), "UTF-8");
File file = new File("D:\\Program Files\\IDEAworkspace4\\projects\\rabbitmq_info.txt");
FileUtils.writeStringToFile(file,message,"UTF-8");
System.out.println("ReceiveLogs02 数据写入文件成功");
};
//接收消息
channel.basicConsume(queueName, true, deliverCallback, consumerTag -> { });
}
}
EmitLog 发送消息给两个消费者接收:
package com.wlw.rabbitmq.five;
import com.rabbitmq.client.Channel;
import com.wlw.rabbitmq.utils.RabbitMqUtils;
import java.util.Scanner;
/**
* 发消息-生产者
*/
public class EmitLog {
//交换机的名字
private static final String EXCHANGE_NAME = "logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMqUtils.getChannel();
/**
* 声明一个 exchange
* 1.exchange 的名称
* 2.exchange 的类型
*/
channel.exchangeDeclare(EXCHANGE_NAME, "fanout");
Scanner sc = new Scanner(System.in);
System.out.println("请输入信息");
while (sc.hasNext()) {
String message = sc.nextLine();
//发送消息,
/**
* 1、指定交换机
* 2、交换机与队列的绑定RoutingKey(和消费者中保持一致,这里两个消费者的key都是空串-发布订阅模式),在之前的例子中此参数写的是队列名
* 3、这里未设置消息的持久化,用null
* 4、发送的消息
*/
channel.basicPublish(EXCHANGE_NAME, "", null, message.getBytes("UTF-8"));
System.out.println("生产者发出消息" + message);
}
}
}
最后的效果就是两个消费者都接收到了生产者发的消息。一发多接。
5、Direct exchange - 路由模式
5.1. 回顾Fanout
在上一小节中,我们构建了一个简单的日志记录系统。我们能够向许多接收者广播日志消息。在本节我们将向其中添加一些特别的功能-比方说我们只让某个消费者订阅发布的部分消息。例如我们只把严重错误消息定向存储到日志文件(以节省磁盘空间),同时仍然能够在控制台上打印所有日志消息。
我们再次来回顾一下什么是 bindings,绑定是交换机和队列之间的桥梁关系。也可以这么理解:队列只对它绑定的交换机的消息感兴趣。绑定用参数:routingKey 来表示也可称该参数为 binding key,
创建绑定我们用代码:channel.queueBind(queueName, EXCHANGE_NAME, “routingKey”);
绑定之后的意义由其交换类型决定。
路由模式与发布订阅模式的区别:发布订阅模式是交换机与所有的队列的routingKey都是相同的;而路由模式是交换机与每个队列都有不用的routingKey,从而实现让特定的消费者消费特定的消息。
5.2. Direct exchange 介绍
上一节中的我们的日志系统将所有消息广播给所有消费者,对此我们想做一些改变,例如我们希望将日志消息写入磁盘的程序仅接收严重错误(errros),而不存储哪些警告(warning)或信息(info)日志消息避免浪费磁盘空间。
Fanout(扇出)这种交换类型并不能给我们带来很大的灵活性:它只能进行无意识的广播,
在这里我们将使用 direct 这种类型来进行替换,这种类型的工作方式是,消息只去到它绑定的routingKey 队列中去,实现区别对待。
在上面这张图中,我们可以看到 X 绑定了两个队列,绑定类型是 direct。队列Q1 绑定键为 orange,队列 Q2 绑定键有两个:一个绑定键为 black,另一个绑定键为 green.
在这种绑定情况下,生产者发布消息到 exchange 上,绑定键为 orange 的消息会被发布到队列Q1。绑定键为 blackgreen 和的消息会被发布到队列 Q2,其他消息类型的消息将被丢弃。
5.3. 多重绑定
当然如果 exchange 的绑定类型是direct,但是它绑定的多个队列的 key 如果都相同,在这种情况下虽然绑定类型是 direct 但是它表现的就和 fanout 有点类似了,就跟广播差不多,如上图所示。
5.4. Direct实战
上图展示的是:交换机名字为:direct_logs、两个队列名分别为:console、disk,其中队列console有个两个RoutingKey。下面来看代码:
package com.wlw.rabbitmq.utils;
/**
* 交换机类型
*/
public enum BuiltinExchangeType {
DIRECT(" direct"),
FANOUT(" fanout"),
TOPIC(" topic"),
HEADERS(" headers") ;
private final String type;
BuiltinExchangeType(String type) {this.type = type;}
public String getType(){
return type;
}
}
消费者1:ReceiveLogsDirect01
package com.wlw.rabbitmq.six;
import com.rabbitmq.client.BuiltinExchangeType;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DeliverCallback;
import com.wlw.rabbitmq.utils.RabbitMqUtils;
import org.apache.commons.io.FileUtils;
import java.io.File;
/**
* 消费者1
*/
public class ReceiveLogsDirect01 {
//交换机名字
private static final String EXCHANGE_NAME = "direct_logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMqUtils.getChannel();
//声明一个交换机,类型为direct
channel.exchangeDeclare(EXCHANGE_NAME, BuiltinExchangeType.DIRECT);
//声明一个队列
String queueName = "disk";
channel.queueDeclare(queueName, false, false, false, null);
//绑定交换机和队列
channel.queueBind(queueName, EXCHANGE_NAME, "error");
System.out.println("ReceiveLogsDirect01等待接收消息........... ");
//成功接收消息的回调
DeliverCallback deliverCallback = (consumerTag, delivery) -> {
String message = new String(delivery.getBody(), "UTF-8");
message="接收绑定键:"+delivery.getEnvelope().getRoutingKey()+",消息:"+message;
File file = new File("D:\\Program Files\\IDEAworkspace4\\projects\\rabbitmq_info.txt");
FileUtils.writeStringToFile(file,message,"UTF-8");
System.out.println("错误日志已经接收");
};
//接收消息
channel.basicConsume(queueName, true, deliverCallback, consumerTag -> {});
}
}
消费者2:ReceiveLogsDirect02
package com.wlw.rabbitmq.six;
import com.rabbitmq.client.BuiltinExchangeType;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DeliverCallback;
import com.wlw.rabbitmq.utils.RabbitMqUtils;
/**
* 消费者2
*
* @auther wlw
* @date 2022/3/12
*/
public class ReceiveLogsDirect02 {
//交换机名字
private static final String EXCHANGE_NAME = "direct_logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMqUtils.getChannel();
//声明一个交换机,类型为direct
channel.exchangeDeclare(EXCHANGE_NAME, BuiltinExchangeType.DIRECT);
//声明一个队列
String queueName = "console";
channel.queueDeclare(queueName, false, false, false, null);
//绑定交换机和队列
channel.queueBind(queueName, EXCHANGE_NAME, "info");
channel.queueBind(queueName, EXCHANGE_NAME, "warning");
System.out.println("ReceiveLogsDirect02等待接收消息........... ");
//成功接收消息的回调
DeliverCallback deliverCallback = (consumerTag, delivery) -> {
String message = new String(delivery.getBody(), "UTF-8");
System.out.println("接收绑定键:"+delivery.getEnvelope().getRoutingKey()+", 消息:"+message);
};
//接收消息
channel.basicConsume(queueName, true, deliverCallback, consumerTag -> {});
}
}
生产者:
package com.wlw.rabbitmq.six;
import com.rabbitmq.client.BuiltinExchangeType;
import com.rabbitmq.client.Channel;
import com.wlw.rabbitmq.utils.RabbitMqUtils;
import java.util.HashMap;
import java.util.Map;
/**
* 生产者
*/
public class EmitLogDirect {
//交换机名字
private static final String EXCHANGE_NAME = "direct_logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMqUtils.getChannel();
channel.exchangeDeclare(EXCHANGE_NAME, BuiltinExchangeType.DIRECT);
//创建多个 bindingKey
Map<String, String> bindingKeyMap = new HashMap<>();
bindingKeyMap.put("info","普通 info 信息");
bindingKeyMap.put("warning","警告 warning 信息");
bindingKeyMap.put("error","错误 error 信息");
//debug 没有消费者接收这个消息 所有就丢失了
bindingKeyMap.put("debug","调试 debug 信息");
for (Map.Entry<String, String> bindingKeyEntry: bindingKeyMap.entrySet()){
String bindingKey = bindingKeyEntry.getKey();
String message = bindingKeyEntry.getValue();
//发送消息,想发给谁,完全取决于routingKey,交换机都是一样的
channel.basicPublish(EXCHANGE_NAME, bindingKey, null, message.getBytes("UTF-8"));
System.out.println("生产者发出消息:" + message);
}
}
}
6、Topics - 主题模式
6.1. 之前类型的问题
在上一个小节中,我们改进了日志记录系统。我们没有使用只能进行随意广播的 fanout 交换机,而是使用了 direct 交换机,从而有能实现有选择性地接收日志。
尽管使用direct 交换机改进了我们的系统,但是它仍然存在局限性:比方说我们想接收的日志类型有info.base 和 info.advantage,某个队列只想要 info.base 的消息,那这个时候direct 就办不到了。这个时候就只能使用 topic 类型。
6.2. Topic 的要求
发送到类型是 topic 交换机的消息的 routingKey 不能随意写,必须满足一定的要求:它必须是一个单词列表,以点号分隔开。这些单词可以是任意单词,比如说:“stock.usd.nyse”, “nyse.vmw”, “quick.orange.rabbit”,这种类型的。当然这个单词列表最多不能超过 255 个字节。
在这个规则列表中,其中有两个替换符是大家需要注意的:
- *(星号)可以代替一个单词
- #(井号)可以替代零个或多个单词
6.3. Topic 匹配案例
下图绑定关系如下:
- Q1–>绑定的是 :中间带 orange 带 3 个单词的字符串(.orange.)
- Q2–>绑定的是 :最后一个单词是 rabbit 的 3 个单词(..rabbit) 、第一个单词是 lazy 的多个单词(lazy.#)
上图是一个队列绑定关系图,我们来看看他们之间数据接收情况是怎么样的
quick.orange.rabbit 被队列 Q1、Q2 接收到
lazy.orange.elephant 被队列 Q1、Q2 接收到
quick.orange.fox 被队列 Q1 接收到
lazy.brown.fox 被队列 Q2 接收到
lazy.pink.rabbit 虽然满足两个绑定但只被队列 Q2 接收一次
quick.brown.fox 不匹配任何绑定不会被任何队列接收到会被丢弃
quick.orange.male.rabbit 是四个单词不匹配任何绑定会被丢弃
lazy.orange.male.rabbit 是四个单词但匹配 Q2
当队列绑定关系是下列这种情况时需要引起注意:
- 当一个队列绑定键是#,那么这个队列将接收所有数据,就有点像 fanout 了
- 如果队列绑定键当中没有#和*出现,那么该队列绑定类型就是 direct 了
6.4. Topics实战
生产者:EmitLogTopic
package com.wlw.rabbitmq.seven;
import com.rabbitmq.client.Channel;
import com.wlw.rabbitmq.utils.RabbitMqUtils;
import java.util.HashMap;
import java.util.Map;
/**
* 生产者
*/
public class EmitLogTopic {
//交换机名字
private static final String EXCHANGE_NAME = "topic_logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMqUtils.getChannel();
//声明一个交换机,并指定类型
channel.exchangeDeclare(EXCHANGE_NAME, "topic");
/**
* Q1-->绑定的是:中间带 orange 带 3 个单词的字符串(*.orange.*)
* Q2-->绑定的是 :最后一个单词是 rabbit 的 3 个单词(*.*.rabbit) 、第一个单词是 lazy 的多个单词(lazy.#)
*/
Map<String, String> bindingKeyMap = new HashMap<>();
bindingKeyMap.put("quick.orange.rabbit", "被队列 Q1Q2 接收到");
bindingKeyMap.put("lazy.orange.elephant", "被队列 Q1Q2 接收到");
bindingKeyMap.put("quick.orange.fox", "被队列 Q1 接收到");
bindingKeyMap.put("lazy.brown.fox", "被队列 Q2 接收到");
bindingKeyMap.put("lazy.pink.rabbit", "虽然满足两个绑定但只被队列 Q2 接收一次");
bindingKeyMap.put("quick.brown.fox", "不匹配任何绑定不会被任何队列接收到会被丢弃");
bindingKeyMap.put("quick.orange.male.rabbit", "是四个单词不匹配任何绑定会被丢弃");
bindingKeyMap.put("lazy.orange.male.rabbit", "是四个单词但匹配 Q2");
for (Map.Entry<String, String> bindingKeyEntry: bindingKeyMap.entrySet()){
String bindingKey = bindingKeyEntry.getKey();
String message = bindingKeyEntry.getValue();
//发送消息
channel.basicPublish(EXCHANGE_NAME, bindingKey, null, message.getBytes("UTF-8"));
System.out.println("生产者发出消息" + message);
}
}
}
消费者1:ReceiveLogsTopic01
package com.wlw.rabbitmq.seven;
import com.rabbitmq.client.BuiltinExchangeType;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DeliverCallback;
import com.wlw.rabbitmq.utils.RabbitMqUtils;
/**
* 消费者1
*/
public class ReceiveLogsTopic01 {
//交换机名字
private static final String EXCHANGE_NAME = "topic_logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMqUtils.getChannel();
//声明一个交换机,并指定类型
channel.exchangeDeclare(EXCHANGE_NAME, BuiltinExchangeType.TOPIC);
//声明 Q1 队列与绑定关系
String queueName="Q1";
channel.queueDeclare(queueName, false, false, false, null);
channel.queueBind(queueName, EXCHANGE_NAME, "*.orange.*");
System.out.println("ReceiveLogsTopic01等待接收消息........... ");
//成功接收消息的回调
DeliverCallback deliverCallback = (consumerTag, delivery) -> {
String message = new String(delivery.getBody(), "UTF-8");
System.out.println(" 接收队列 :"+queueName+" 绑定键:"+delivery.getEnvelope().getRoutingKey()+",消息:"+message);
};
//接收消息
channel.basicConsume(queueName, true, deliverCallback, consumerTag -> {});
}
}
消费者2:ReceiveLogsTopic02
package com.wlw.rabbitmq.seven;
import com.rabbitmq.client.BuiltinExchangeType;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DeliverCallback;
import com.wlw.rabbitmq.utils.RabbitMqUtils;
/**
* 消费者2
*/
public class ReceiveLogsTopic02 {
//交换机名字
private static final String EXCHANGE_NAME = "topic_logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMqUtils.getChannel();
//声明一个交换机,并指定类型
channel.exchangeDeclare(EXCHANGE_NAME, BuiltinExchangeType.TOPIC);
//声明 Q2 队列与绑定关系
String queueName="Q2";
channel.queueDeclare(queueName, false, false, false, null);
channel.queueBind(queueName, EXCHANGE_NAME, "*.*.rabbit");
channel.queueBind(queueName, EXCHANGE_NAME, "lazy.#");
System.out.println("ReceiveLogsTopic02等待接收消息........... ");
//成功接收消息的回调
DeliverCallback deliverCallback = (consumerTag, delivery) -> {
String message = new String(delivery.getBody(), "UTF-8");
System.out.println(" 接收队列 :"+queueName+" 绑定键:"+delivery.getEnvelope().getRoutingKey()+",消息:"+message);
};
//接收消息
channel.basicConsume(queueName, true, deliverCallback, consumerTag -> {});
}
}