RabbitMQ 简介
RabbitMQ 是一个开源的消息代理和队列服务器,用来通过普通协议在完全不同的应用之间共享数据。RabbitMQ 是使用 Erlang 语言来编写的,并且 RabbitMQ 是基于 AMQP 协议(Advanced Message Queuing Protocol
)。
AMQP 协议模型
AMQP 协议其实就是定义一组规范,它的协议模型如下图:
- 消息生产者
- 消息消费者
- RabbitMQ 服务器
- 虚拟主机
- 交换机
- 消息队列
消息生产者把消息投递到 RabbitMQ 服务器,经过虚拟主机和交换机,交换机通过某种路由规则(routing key
)把对应的消息关联到某个消息队列,而消息消费者只需监听消息队列即可。
RabbitMQ 核心概念
Server
:又称Broker
,接受客户端的连接,实现 AMQP 实体服务Connection
:连接,应用程序与Broker
的网络连接Channel
:网络通道,几乎所有操作都在Channel
中进行,Channel
是进行信息读写的通道,客户端可建立多个Channel
,每个Channel
代表一个会话任务Message
:信息,服务器和应用程序之间传送的数据,由Properties
和Body
组成Properties
可以对信息进行修饰,比如消息的优先级,延迟等高级特性Body
:消息体内容
Virtual host
:虚拟地址,用于进行逻辑隔离,最上层的消息路由,一个Virtual host
可以有若干个Exchange
和Queue
,同一个Virtual host
不能有相同名称的Exchange
和Queue
Exchange
:交换机,接收消息,根据路由键转发消息到绑定的队列binding
:Exchange
和Queue
之间的虚拟连接,binding
中可以包含routing key
routing key
:一个路由规则,虚拟机可用它来确定如何路由一个特定消息Queue
:又称为Message Queue
,消息队列,保存消息并将它们转发给消费者
RabbitMQ 的消息流转:如下图(里头缺少一个 Virtual host
),生产者发送消息时,需要指定发送到哪一个 Exchange
上,同时还需要指定一个 routing key
指定路由到哪一个 Queue
1 安装 Rabbit
1.1 rpm 安装 Rabbit
环境准备:
yum install build-essential openssl openssl-devel unixODBC unixODBC-devel make gcc gcc-c++ kernel-devel m4 ncurses-devel tk tc xz
rpm 包下载准备:
Erlang
:
https://github.com/rabbitmq/erlang-rpm/releases/download/v18.3.4.5/erlang-18.3.4.5-1.el7.centos.x86_64.rpm
socat
:
wget http://repo.iotti.biz/CentOS/7/x86_64/socat-1.7.3.2-5.el7.lux.x86_64.rpm
RabbitMQ
wget https://github.com/rabbitmq/rabbitmq-server/releases/download/rabbitmq_v3_6_5/rabbitmq-server-3.6.5-1.noarch.rpm
由于 RabbitMQ 的语言是 Erlang 而且依赖 socat
,所以安装 RPM 包的顺序如下:
# 安装erlang
rpm -ivh erlang-18.3.4.5-1.el7.centos.x86_64.rpm
# 安装socat
rpm -ivh socat-1.7.3.2-5.el7.lux.x86_64.rpm
# 安装rabbitmq
rpm -ivh rabbitmq-server-3.6.5-1.noarch.rpm
修改配置:
# 修改配置文件rabbit.app
vim /usr/lib/rabbitmq/lib/rabbitmq_server-3.6.5/ebin/rabbit.app
# 比如修改密码、配置等等,例如:loopback_users中的<<”guest”>>, 只保留guest
开启端口:
firewall-cmd --permanent --add-port=15672/tcp
firewall-cmd --permanent --add-port=5672/tcp
启动 RabbitMQ
# 启动
rabbitmq-server start &
管理插件:
# 查看所有插件
rabbitmq-plugins list
# 启动rabbitmq_management
rabbitmq-plugins enable rabbitmq_management
访问控制台:
# 访问rabbitmq管理后台
http://{你的linux服务器ip}:15672
# 使用用户名guest,密码guest登录
2 RabbitMQ 集群架构模型与原理解释
RabbitMQ 的四种集群架构如下:
- 主备模式
主备模式也称为warren
(兔子窝),主节点如果宕机了,从节点提供服务,与 Nginx 利用 keepalive 做主备模式一样,其中扮演 keepalive 角色的是 HaProxy。
- 远程模式
远距离通信和复制,可以实现双活的模式,简称 Shovel 模式,所谓 Shovel 就是可以把消息进行不同数据中心的复制工作,可以跨地域的让两个 MQ 集群互联(可以看作多个主备模式集群的一个方式),由于配置复杂,很少用
- 镜像模式
集群模式非常经典的就是 Mirror 镜像模式,保证 100% 数据不丢失。在实际工作中实现集群用的最多的方式,由于每个镜像数据都相同,所以它的缺陷就是不能支持横向的扩展,多于3台横向扩容并无任何意义,该模式并不能提高并发量
- 多活模式
多活模式是可以解决镜像模式不能提高并发量的缺陷,这种模式也是实现异地数据复制的主流模式,因为 Shovel 配置复杂,所以一般异地集群都是使用这种双活或多活模式实现。这种模型需要依赖 RabbitMQ 的 federation 插件,可以实现持续可靠的 AMQP 数据通信。
下图是双中心模式,在两套数据中心中各部署一套 RabbitMQ 集群(镜像模式),各中心的 RabbitMQ 服务除了要为业务提供正常的消息服务外,中心之间还需要实现部分队列消息共享(既可以共享一些关键数据)。