5 交换机
前面创建了一个工作队列。我们假设的是工作队列背后,每个任务都恰好交付给一个消费者(工作进程)。在这一部分中,我们将做一些完全不同的事情-我们将消息传达给多个消费者。这种模式称为 ”发布/订阅”.为了说明这种模式,我们将构建一个简单的日志系统。它将由两个程序组成:第一个程序将发出日志消息,第二个程序是消费者。其中我们会启动两个消费者,其中一个消费者接收到消息后把日志存储在磁盘,另外一个消费者接收到消息后把消息打印在屏幕上,事实上第一个程序发出的日志消息将广播给所有消费者。
5.1. Exchanges
5.1.1 Exchanges 概念
RabbitMQ消息传递模型的核心思想是: 生产者生产的消息从不会直接发送到队列。实际上,通常生产者甚至都不知道这些消息传递传递到了哪些队列中。相反,生产者只能将消息发送到交换机(exchange),交换机工作的内容非常简单,一方面它接收来自生产者的消息,另一方面将它们推入队列。交换机必须确切知道如何处理收到的消息。是应该把这些消息放到特定队列还是说把他们到许多队列中还是说应该丢弃它们。这就的由交换机的类型来决定。
5.1.2 Exchanges 的类型
类型:direct、topic、headers、fanout
5.1.3 空exchange
在此之前我们对exchange不了解,但仍然能够将消息发送到队列。之前能实现的原因是因为我们使用的是默认交换,我们通过空字符串("")进行标识。
发生消息的函数第一个参数是交换机的名称。空字符串表示默认交换机:消息能路由发送到队列中其实是由routingKey(bindingkey)
绑定key
指定的,如果它存在的话。
5.2 临时队列
之前的章节我们使用的是具有特定名称的队列(还记得 hello 和 ack_queue 吗?)。队列的名称我们来说至关重要-我们需要指定我们的消费者去消费哪个队列的消息。每当我们连接到 Rabbit 时,我们都需要一个全新的空队列,为此我们可以创建一个具有随机名称的队列,或者能让服务器为我们选择一个随机队列名称那就更好了。其次一旦我们断开了消费者的连接,队列将被自动删除。创建临时队列的方式如下:
String queueName = channel.queueDeclare().getQueue();
创建出来之后长成这样:
5.3. 绑定(bindings)
什么是 bingding 呢,binding 其实是 exchange 和 queue 之间的桥梁,它告诉我们 exchange 和那个队
列进行了绑定关系。比如说下面这张图告诉我们的就是 X 与 Q1 和 Q2 进行了绑定
5.4. Fanout
Fanout这种类型非常简单。它是将接收到的所有消息广播到绑定的所有队列中。
生产者:
package com.zjw.rabbitmq.exchanger.fanout;
import com.rabbitmq.client.Channel;
import com.zjw.rabbitmq.util.RabbitMQUtil;
import java.nio.charset.StandardCharsets;
import java.util.Scanner;
/**
* @author zjwblog <cn.zjwblog@gmail.com>
* @version 1.0
*/
public class Producer {
private static final String EXCHANGE_NAME = "logs";
public static void main(String[] argv) throws Exception {
try (Channel channel = RabbitMQUtil.getChannel()) {
// 声明一个exchange 1.exchange的名称;2.exchange类型为fanout
channel.exchangeDeclare(EXCHANGE_NAME, "fanout");
Scanner sc = new Scanner(System.in);
System.out.println("请输入信息内容:");
while (sc.hasNext()) {
String message = sc.nextLine();
channel.basicPublish(EXCHANGE_NAME, "", null, message.getBytes(StandardCharsets.UTF_8));
System.out.println("生产者发出消息:" + message);
}
}
}
}
消费者1:
package com.zjw.rabbitmq.exchanger.fanout;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DeliverCallback;
import com.zjw.rabbitmq.util.RabbitMQUtil;
import java.nio.charset.StandardCharsets;
/**
* @author zjwblog <cn.zjwblog@gmail.com>
* @version 1.0
*/
public class Consumer01 {
private static final String EXCHANGE_NAME = "logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMQUtil.getChannel();
channel.exchangeDeclare(EXCHANGE_NAME, "fanout");
// 生成一个临时的队列 队列的名称是随机的 当消费者断开和该队列的连接时 队列自动删除
String queueName = channel.queueDeclare().getQueue();
// 把该临时队列绑定我们的exchange其中routingkey(也称之为binding key)为空字符串
channel.queueBind(queueName, EXCHANGE_NAME, "");
channel.basicConsume(
queueName,
true,
(tag, msg) -> {
String message = new String(msg.getBody(), StandardCharsets.UTF_8);
System.out.println("接收到的消息: " + message);
},
consumerTag -> {
});
}
}
消费者2:
package com.zjw.rabbitmq.exchanger.fanout;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DeliverCallback;
import com.zjw.rabbitmq.util.RabbitMQUtil;
import java.io.File;
import java.nio.charset.StandardCharsets;
import org.apache.commons.io.FileUtils;
/**
* @author zjwblog <cn.zjwblog@gmail.com>
* @version 1.0
*/
public class Consumer02 {
private static final String EXCHANGE_NAME = "logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMQUtil.getChannel();
channel.exchangeDeclare(EXCHANGE_NAME, "fanout");
// 生成一个临时的队列 队列的名称是随机的 当消费者断开和该队列的连接时 队列自动删除
String queueName = channel.queueDeclare().getQueue();
// 把该临时队列绑定我们的exchange其中routingkey(也称之为binding key)为空字符串
channel.queueBind(queueName, EXCHANGE_NAME, "");
channel.basicConsume(
queueName,
true,
(tag, msg) -> {
String message = new String(msg.getBody(), StandardCharsets.UTF_8);
File file = new File("rabbitmq_info.txt");
FileUtils.writeStringToFile(file, message + "\n", "UTF-8", true);
System.out.println("写入数据到文件文件[rabbitmq_info.txt]成功");
},
consumerTag -> {
}
);
}
}
5.5. Direct
在上一节中,我们构建了一个简单的日志记录系统。我们能够向许多接收者广播日志消息。在本节我们将向其中添加一些特别的功能-比方说我们只让某个消费者订阅发布的部分消息。例如我们只把严重错误消息定向存储到日志文件(以节省磁盘空间),同时仍然能够在控制台上打印所有日志消息。我们再次来回顾一下什么是 bindings,绑定是交换机和队列之间的桥梁关系。也可以这么理解:队列只对它绑定的交换机的消息感兴趣。绑定用参数:routingKey 来表示也可称该参数为 binding key,创建绑定我们用代码channel.queueBind(queueName, EXCHANGE_NAME, "routingKey");
绑定之后的意义由其交换类型决定。
5.5.1 Direct exchange 介绍
上一节中的我们的日志系统将所有消息广播给所有消费者,对此我们想做一些改变,例如我们希望将日志消息写入磁盘的程序仅接收严重错误(errros),而不存储哪些警告(warning)或信息(info)日志消息避免浪费磁盘空间。Fanout 这种交换类型并不能给我们带来很大的灵活性,它只能进行无意识的广播,在这里我们将使用 direct 这种类型来进行替换,这种类型的工作方式是,消息只去到它绑定的routingKey 队列中去。
5.5.2 多重绑定
当然如果 exchange 的绑定类型是direct,但是它绑定的多个队列的 key 如果都相同,在这种情况下虽然绑定类型是 direct 但是它表现的就和 fanout 有点类似了,就跟广播差不多。
5.5.3 实战
Producer生产不同等级的消息,并发送到direct交换机
package com.zjw.rabbitmq.exchanger.direct;
import com.rabbitmq.client.BuiltinExchangeType;
import com.rabbitmq.client.Channel;
import com.zjw.rabbitmq.util.RabbitMQUtil;
import java.nio.charset.StandardCharsets;
import java.util.HashMap;
import java.util.Map;
import java.util.Scanner;
/**
* @author zjwblog <cn.zjwblog@gmail.com>
* @version 1.0
*/
public class Producer {
private static final String EXCHANGE_NAME = "direct_logs";
public static void main(String[] argv) throws Exception {
try (Channel channel = RabbitMQUtil.getChannel()) {
channel.exchangeDeclare(EXCHANGE_NAME, BuiltinExchangeType.DIRECT);
// 创建多个 bindingKey
Map<String, String> bindingKeyMap = new HashMap<>();
bindingKeyMap.put("info", "普通 info 信息");
bindingKeyMap.put("warning", "警告 warning 信息");
bindingKeyMap.put("error", "错误 error 信息");
// debug 没有消费这接收这个消息 所有就丢失了
bindingKeyMap.put("debug", "调试 debug 信息");
for (Map.Entry<String, String> bindingKeyEntry : bindingKeyMap.entrySet()) {
String bindingKey = bindingKeyEntry.getKey();
String message = bindingKeyEntry.getValue();
channel.basicPublish(EXCHANGE_NAME, bindingKey, null, message.getBytes(StandardCharsets.UTF_8));
System.out.println("生产者发出[" + bindingKey + "]级别消息: [" + message + "]");
}
}
}
}
Consumer02接收消息并保存到文件
package com.zjw.rabbitmq.exchanger.direct;
import com.rabbitmq.client.BuiltinExchangeType;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DeliverCallback;
import com.zjw.rabbitmq.util.RabbitMQUtil;
import java.io.File;
import java.nio.charset.StandardCharsets;
import org.apache.commons.io.FileUtils;
/**
* @author zjwblog <cn.zjwblog@gmail.com>
* @version 1.0
*/
public class Consumer01 {
private static final String EXCHANGE_NAME = "direct_logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMQUtil.getChannel();
channel.exchangeDeclare(EXCHANGE_NAME, BuiltinExchangeType.DIRECT);
String queueName = "disk";
channel.queueDeclare(queueName, false, false, false, null);
channel.queueBind(queueName, EXCHANGE_NAME, "error");
channel.basicConsume(
queueName,
true,
(tag, msg) -> {
String message = new String(msg.getBody(), StandardCharsets.UTF_8);
message = "接收[" + msg.getEnvelope().getRoutingKey() + "]级别消息:[" + message + "]\n";
File file = new File("rabbitmq_err.log");
FileUtils.writeStringToFile(file, message, "UTF-8", true);
},
consumerTag -> {
}
);
}
}
Consumer02接收消息并打印到控制台
package com.zjw.rabbitmq.exchanger.direct;
import com.rabbitmq.client.BuiltinExchangeType;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DeliverCallback;
import com.zjw.rabbitmq.util.RabbitMQUtil;
import java.io.File;
import java.nio.charset.StandardCharsets;
import org.apache.commons.io.FileUtils;
/**
* @author zjwblog <cn.zjwblog@gmail.com>
* @version 1.0
*/
public class Consumer02 {
private static final String EXCHANGE_NAME = "direct_logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMQUtil.getChannel();
channel.exchangeDeclare(EXCHANGE_NAME, BuiltinExchangeType.DIRECT);
String queueName = "console";
channel.queueDeclare(queueName, false, false, false, null);
channel.queueBind(queueName, EXCHANGE_NAME, "info");
channel.queueBind(queueName, EXCHANGE_NAME, "warning");
channel.basicConsume(
queueName,
true,
(tag, msg) -> {
String message = new String(msg.getBody(), "UTF-8");
System.out.println(" 接收[" + msg.getEnvelope().getRoutingKey() + "]级别消息[" + message + "]");
},
consumerTag -> {
}
);
}
}
5.6. Topics
5.6.1 之前类型的问题
在上一个小节中,我们改进了日志记录系统。我们没有使用只能进行随意广播的 fanout 交换机,而是使用了 direct 交换机,从而有能实现有选择性地接收日志。
尽管使用direct 交换机改进了我们的系统,但是它仍然存在局限性,比如接收的日志类型有info.base 和 info.advantage,某个队列只想 info.base 的消息,那这个时候direct 就办不到了。这个时候就只能使用 topic 类型
5.6.2 Topic 的要求
发送到类型是 topic 交换机的消息的 routing_key 不能随意写,必须满足一定的要求,它必须是一个单词列表,以点号分隔开。这些单词可以是任意单词,比如说:stock.usd.nyse
, nyse.vmw
,quick.orange.rabbit
。
当然这个单词列表最多不能超过255个字节。在这个规则列表中,其中有两个替换符是大家需要注意的:
-
*
(星号)可以代替一个单词 -
#
(井号)可以替代零个或多个单词
5.6.3 Topic 匹配案例
例如:
Q1–>绑定中间带orange
并且为.
连接的3个单词的字符串(.orange.)
Q2–>绑定最后一个单词是rabbit
并且为.
连接的3个单词的字符串(..rabbit) 和 第一个单词是lazy
并且为.
连接的多个单词(lazy.#)
分析匹配关系:
quick.orange.rabbit: 被队列 Q1Q2 接收到
lazy.orange.elephant: 被队列 Q1Q2 接收到
quick.orange.fox: 被队列 Q1 接收到
lazy.brown.fox: 被队列 Q2 接收到
lazy.pink.rabbit: 虽然满足两个绑定但只被队列 Q2 接收一次
quick.brown.fox: 不匹配任何绑定不会被任何队列接收到会被丢弃
quick.orange.male.rabbit: 是四个单词不匹配任何绑定会被丢弃
lazy.orange.male.rabbit: 是四个单词但匹配 Q2
当队列绑定关系是下列这种情况时需要引起注意
-
当一个队列绑定键是
#
,那么这个队列将接收所有数据,类似fanout
-
如果队列绑定键当中没有#和*出现,类似
direct
5.6.4 实战
Producer生产出不同binding key的消息:
package com.zjw.rabbitmq.exchanger.topic;
import com.rabbitmq.client.Channel;
import com.zjw.rabbitmq.util.RabbitMQUtil;
import java.nio.charset.StandardCharsets;
import java.util.HashMap;
import java.util.Map;
import java.util.Scanner;
/**
* @author zjwblog <cn.zjwblog@gmail.com>
* @version 1.0
*/
public class Producer {
private static final String EXCHANGE_NAME = "topic_logs";
public static void main(String[] argv) throws Exception {
try (Channel channel = RabbitMQUtil.getChannel()) {
channel.exchangeDeclare(EXCHANGE_NAME, "topic");
Map<String, String> bindingKeyMap = new HashMap<>();
bindingKeyMap.put("quick.orange.rabbit", "被队列 Q1Q2 接收到");
bindingKeyMap.put("lazy.orange.elephant", "被队列 Q1Q2 接收到");
bindingKeyMap.put("quick.orange.fox", "被队列 Q1 接收到");
bindingKeyMap.put("lazy.brown.fox", "被队列 Q2 接收到");
bindingKeyMap.put("lazy.pink.rabbit", "虽然满足两个绑定但只被队列 Q2 接收一次");
bindingKeyMap.put("quick.brown.fox", "不匹配任何绑定不会被任何队列接收到会被丢弃");
bindingKeyMap.put("quick.orange.male.rabbit", "是四个单词不匹配任何绑定会被丢弃");
bindingKeyMap.put("lazy.orange.male.rabbit", "是四个单词但匹配 Q2");
for (Map.Entry<String, String> bindingKeyEntry : bindingKeyMap.entrySet()) {
String bindingKey = bindingKeyEntry.getKey();
String message = bindingKeyEntry.getValue();
channel.basicPublish(EXCHANGE_NAME, bindingKey, null, message.getBytes("UTF-8"));
System.out.println("生产者发出key为[" + bindingKey + "]的消息: [" + message + "]");
}
}
}
}
Consumer01绑定*.orange.*
的key队列:
package com.zjw.rabbitmq.exchanger.topic;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DeliverCallback;
import com.zjw.rabbitmq.util.RabbitMQUtil;
import java.nio.charset.StandardCharsets;
/**
* @author zjwblog <cn.zjwblog@gmail.com>
* @version 1.0
*/
public class Consumer01 {
private static final String EXCHANGE_NAME = "topic_logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMQUtil.getChannel();
channel.exchangeDeclare(EXCHANGE_NAME, "topic");
String queueName = "Q1";
channel.queueDeclare(queueName, false, false, false, null);
channel.queueBind(queueName, EXCHANGE_NAME, "*.orange.*");
channel.basicConsume(
queueName,
true,
(consumerTag, delivery) -> {
String message = new String(delivery.getBody(), StandardCharsets.UTF_8);
System.out.println("接收队列[" + queueName + "]键[" + delivery.getEnvelope().getRoutingKey() + "]的消息[" + message + "]");
},
consumerTag -> {
}
);
}
}
Consumer02接收一个队列,并一个队列绑定了两个key:
package com.zjw.rabbitmq.exchanger.topic;
import com.rabbitmq.client.Channel;
import com.rabbitmq.client.DeliverCallback;
import com.zjw.rabbitmq.util.RabbitMQUtil;
import java.io.File;
import java.nio.charset.StandardCharsets;
import java.util.HashMap;
import java.util.Map;
import org.apache.commons.io.FileUtils;
/**
* @author zjwblog <cn.zjwblog@gmail.com>
* @version 1.0
*/
public class Consumer02 {
private static final String EXCHANGE_NAME = "topic_logs";
public static void main(String[] argv) throws Exception {
Channel channel = RabbitMQUtil.getChannel();
channel.exchangeDeclare(EXCHANGE_NAME, "topic");
String queueName = "Q2";
channel.queueDeclare(queueName, false, false, false, null);
channel.queueBind(queueName, EXCHANGE_NAME, "*.*.rabbit");
channel.queueBind(queueName, EXCHANGE_NAME, "lazy.#");
channel.basicConsume(
queueName,
true,
(consumerTag, delivery) -> {
String message = new String(delivery.getBody(), StandardCharsets.UTF_8);
System.out.println("接收队列[" + queueName + "]键[" + delivery.getEnvelope().getRoutingKey() + "]的消息[" + message + "]");
},
consumerTag -> {
}
);
}
}
注:原始资料来源于尚硅谷,笔者学习过程中做了整理,加入了自己的实验代码