RabbitMQ消息队列 集成java Work Queues

RabbitMQ消息队列

RabbitMQ 的概念

RabbitMQ 是一个消息中间件：它接受并转发消息。你可以把它当做一个快递站点，当你要发送一个包裹时，你把你的包裹放到快递站，快递员最终会把你的快递送到收件人那里，按照这种逻辑 RabbitMQ 是一个快递站，一个快递员帮你传递快件。RabbitMQ 与快递站的主要区别在于，它不处理快件而是接收，存储和转发消息数据。

四大核心概念

• 生产者
  产生数据发送消息的程序是生产者
• 交换机
  交换机是 RabbitMQ 非常重要的一个部件，一方面它接收来自生产者的消息，另一方面它将消息推送到队列中。交换机必须确切知道如何处理它接收到的消息，是将这些消息推送到特定队列还是推送到多个队列，亦或者是把消息丢弃，这个得有交换机类型决定
• 队列
  队列是 RabbitMQ 内部使用的一种数据结构，尽管消息流经 RabbitMQ 和应用程序，但它们只能存储在队列中。队列仅受主机的内存和磁盘限制的约束，本质上是一个大的消息缓冲区。许多生产者可以将消息发送到一个队列，许多消费者可以尝试从一个队列接收数据。这就是我们使用队列的方式
• 消费者
  消费与接收具有相似的含义。消费者大多时候是一个等待接收消息的程序。请注意生产者，消费者和消息中间件很多时候并不在同一机器上。同一个应用程序既可以是生产者又是可以是消费者。

RabbitMQ 核心部分

各个名词介绍

1. Broker：接收和分发消息的应用，RabbitMQ Server 就是 Message Broker
2. Virtual host：出于多租户和安全因素设计的，把 AMQP 的基本组件划分到一个虚拟的分组中，类似于网络中的 namespace 概念。当多个不同的用户使用同一个 RabbitMQ server 提供的服务时，可以划出多个 vhost，每个用户在自己的 vhost 创建 exchange／queue 等
3. Connection：publisher／consumer 和 broker 之间的 TCP 连接
4. Channel：如果每一次访问 RabbitMQ 都建立一个 Connection，在消息量大的时候建立 TCP Connection 的开销将是巨大的，效率也较低。Channel 是在 connection 内部建立的逻辑连接，如果应用程序支持多线程，通常每个 thread 创建单独的 channel 进行通讯，AMQP method 包含了 channel id 帮助客户端和 message broker 识别 channel，所以 channel 之间是完全隔离的。Channel 作为轻量级的Connection 极大减少了操作系统建立 TCP connection 的开销
5. Exchange：message 到达 broker 的第一站，根据分发规则，匹配查询表中的 routing key，分发消息到 queue 中去。常用的类型有：direct (point-to-point), topic (publish-subscribe) and fanout (multicast)
6. Queue：消息最终被送到这里等待 consumer 取走
7. Binding：exchange 和 queue 之间的虚拟连接，binding 中可以包含 routing key，Binding 信息被保存到 exchange 中的查询表中，用于 message 的分发依据

安装

1. 官网地址
   https://www.rabbitmq.com/download.html
2. 文件上传
   上传到/usr/local/software 目录下(如果没有 software 需要自己创建)
3. 安装文件(分别按照以下顺序安装)
   rpm -ivh erlang-21.3-1.el7.x86_64.rpm
   yum install socat -y
   rpm -ivh rabbitmq-server-3.8.8-1.el7.noarch.rpm
4. 常用命令(按照以下顺序执行)
   添加开机启动 RabbitMQ 服务
   chkconfig rabbitmq-server on
   启动服务
   /sbin/service rabbitmq-server start
   查看服务状态
   /sbin/service rabbitmq-server status
   停止服务(选择执行)
   /sbin/service rabbitmq-server stop
   开启 web 管理插件
   rabbitmq-plugins enable rabbitmq_management
   用默认账号密码(guest)访问地址 http://47.115.185.244:15672/出现权限问题
5. 添加一个新的用户
   创建账号
   rabbitmqctl add_user admin 123
   设置用户角色
   rabbitmqctl set_user_tags admin administrator
   设置用户权限
   set_permissions [-p ]
   rabbitmqctl set_permissions -p “/” admin “." ".” “.*”
   用户 user_admin 具有/vhost1 这个 virtual host 中所有资源的配置、写、读权限当前用户和角色
   rabbitmqctl list_users
6. 再次利用 admin 用户登录
7. 重置命令
   关闭应用的命令为
   rabbitmqctl stop_app
   清除的命令为rabbitmqctl reset
   重新启动命令为
   rabbitmqctl start_app

RabbitMQ 集成java

“ P”是我们的生产者，“ C”是我们的消费者。中间的框是一个队列-RabbitMQ 代表使用者保留的消息缓冲区

依赖

<!--指定 jdk 编译版本-->
<build>
 <plugins>
 <plugin>
 <groupId>org.apache.maven.plugins</groupId>
 <artifactId>maven-compiler-plugin</artifactId>
 <configuration>
 <source>8</source>
 <target>8</target>
 </configuration>
 </plugin>
 </plugins>
</build>
<dependencies>
 <!--rabbitmq 依赖客户端-->
 <dependency>
 <groupId>com.rabbitmq</groupId>
 <artifactId>amqp-client</artifactId>
 <version>5.8.0</version>
 </dependency>
 <!--操作文件流的一个依赖-->
 <dependency>
 <groupId>commons-io</groupId>
 <artifactId>commons-io</artifactId>
 <version>2.6</version>
 </dependency>
</dependencies>

消息生产者

public class Producer {
 private final static String QUEUE_NAME = "hello";
 public static void main(String[] args) throws Exception {
 //创建一个连接工厂
 ConnectionFactory factory = new ConnectionFactory();
 factory.setHost("182.92.234.71");
 factory.setUsername("admin");
 factory.setPassword("123");
 //channel 实现了自动 close 接口 自动关闭 不需要显示关闭
 try(Connection connection = factory.newConnection();Channel channel = 
connection.createChannel()) {
 /**
 * 生成一个队列
 * 1.队列名称
 * 2.队列里面的消息是否持久化 默认消息存储在内存中
 * 3.该队列是否只供一个消费者进行消费 是否进行共享 true 可以多个消费者消费
 * 4.是否自动删除 最后一个消费者端开连接以后 该队列是否自动删除 true 自动删除
 * 5.其他参数
 */
 channel.queueDeclare(QUEUE_NAME,false,false,false,null);
 String message="hello world";
 /**
 * 发送一个消息
 * 1.发送到那个交换机
 * 2.路由的 key 是哪个
 * 3.其他的参数信息
 * 4.发送消息的消息体
 */
 channel.basicPublish("",QUEUE_NAME,null,message.getBytes());
 System.out.println("消息发送完毕");
 }
 }
}

消息消费者

public class Consumer {
 private final static String QUEUE_NAME = "hello";
 public static void main(String[] args) throws Exception {
 ConnectionFactory factory = new ConnectionFactory();
 factory.setHost("182.92.234.71");
 factory.setUsername("admin");
 factory.setPassword("123");
 Connection connection = factory.newConnection();
 Channel channel = connection.createChannel();
 System.out.println("等待接收消息....");
 //推送的消息如何进行消费的接口回调
 DeliverCallback deliverCallback=(consumerTag,delivery)->{
 String message= new String(delivery.getBody());
 System.out.println(message);
 };
 //取消消费的一个回调接口 如在消费的时候队列被删除掉了
 CancelCallback cancelCallback=(consumerTag)->{
 System.out.println("消息消费被中断");
 };
 /**
 * 消费者消费消息
 * 1.消费哪个队列
 * 2.消费成功之后是否要自动应答 true 代表自动应答 false 手动应答
 * 3.消费者未成功消费的回调
 */
 channel.basicConsume(QUEUE_NAME,true,deliverCallback,cancelCallback);
 }
}

Work Queues

轮训分发消息

我们会启动两个工作线程，一个消息发送线程，我们来看看他们两个工作线程是如何工作的。

抽取工具类

public class RabbitMqUtils {
 //得到一个连接的 channel
 public static Channel getChannel() throws Exception{
 //创建一个连接工厂
 ConnectionFactory factory = new ConnectionFactory();
 factory.setHost("182.92.234.71");
 factory.setUsername("admin");
 factory.setPassword("123");
 Connection connection = factory.newConnection();
 Channel channel = connection.createChannel();
 return channel;
 }
}

启动两个工作线程

public class Worker01 {
 private static final String QUEUE_NAME="hello";
 public static void main(String[] args) throws Exception {
 Channel channel = RabbitMqUtils.getChannel();
 DeliverCallback deliverCallback=(consumerTag,delivery)->{
 String receivedMessage = new String(delivery.getBody());
 System.out.println("接收到消息:"+receivedMessage);
 };
 CancelCallback cancelCallback=(consumerTag)->{
 System.out.println(consumerTag+"消费者取消消费接口回调逻辑");
 };
 System.out.println("C2 消费者启动等待消费......");
 channel.basicConsume(QUEUE_NAME,true,deliverCallback,cancelCallback);
 }
}

启动一个发送线程

public class Task01 {
 private static final String QUEUE_NAME="hello";
 public static void main(String[] args) throws Exception {
 try(Channel channel=RabbitMqUtils.getChannel();) {
 channel.queueDeclare(QUEUE_NAME,false,false,false,null);
 //从控制台当中接受信息
 Scanner scanner = new Scanner(System.in);
 while (scanner.hasNext()){
 String message = scanner.next();
 channel.basicPublish("",QUEUE_NAME,null,message.getBytes());
 System.out.println("发送消息完成:"+message);
 }
 }
 }
}

结果展示

通过程序执行发现生产者总共发送 4 个消息，消费者 1 和消费者 2 分别分得两个消息，并且是按照有序的一个接收一次消息