什么是mq?
MQ全称 Message Queue(消息队列),是在消息的传输过程中保存消息的容器。多用于分布式系统之间进行通信。
mq的优缺点?
1.应用解耦: 降低系统之间的耦合,提高系统的可维护性。
2.异步提速: 可以系统的吞吐量。
3.削峰填谷: 可以提高系统的稳定性。
缺点
系统可用性降低
系统引入的外部依赖越多,系统稳定性越差。一旦 MQ 宕机,就会对业务造成影响。如何保证MQ的高可用?
系统复杂度提高
MQ 的加入大大增加了系统的复杂度,以前系统间是同步的远程调用,现在是通过 MQ 进行异步调用。如何保证消息没有被重复消费?怎么处理消息丢失情况?那么保证消息传递的顺序性?
一致性问题
A 系统处理完业务,通过 MQ 给B、C、D三个系统发消息数据,如果 B 系统、C 系统处理成功,D 系统处理失败。如何保证消息数据处理的一致性?
如何选择mq
生产者不需要从消费者处获得反馈。引入消息队列之前的直接调用,其接口的返回值应该为空,这才让明明下层的动作还没做,上层却当成动作做完了继续往后走,即所谓异步成为了可能。
容许短暂的不一致性。
确实是用了有效果。即解耦、提速、削峰这些方面的收益,超过加入MQ,管理MQ这些成本
常见的mq产品。
RabbitMQ、RocketMQ、ActiveMQ、Kafka、ZeroMQ、MetaMq
rabbitmq的简介
Broker:接收和分发消息的应用,RabbitMQ Server就是 Message Broker
Virtual host:出于多租户和安全因素设计的,把 AMQP 的基本组件划分到一个虚拟的分组中,类似于网络中的 namespace 概念。当多个不同的用户使用同一个 RabbitMQ server 提供的服务时,可以划分出多个vhost,每个用户在自己的 vhost 创建 exchange/queue 等
Connection:publisher/consumer 和 broker 之间的 TCP 连接
Channel:如果每一次访问 RabbitMQ 都建立一个 Connection,在消息量大的时候建立 TCP Connection的开销将是巨大的,效率也较低。Channel 是在 connection 内部建立的逻辑连接,如果应用程序支持多线程,通常每个thread创建单独的 channel 进行通讯,AMQP method 包含了channel id 帮助客户端和message broker 识别 channel,所以 channel 之间是完全隔离的。Channel 作为轻量级的 Connection 极大减少了操作系统建立 TCP connection 的开销
Exchange:message 到达 broker 的第一站,根据分发规则,匹配查询表中的 routing key,分发消息到queue 中去。常用的类型有:direct (point-to-point), topic (publish-subscribe) and fanout (multicast)
Queue:消息最终被送到这里等待 consumer 取走
Binding:exchange 和 queue 之间的虚拟连接,binding 中可以包含 routing key。Binding 信息被保存到 exchange 中的查询表中,用于 message 的分发依据
如何安装rabbitmq
1. 上传安装软件(1.erlang 2.rabbitmq)
2. 安装rabbitmq依赖的环境
yum install -y gcc socat openssl openssl-devel
3. 安装erlang 和 rabbitMQ
rpm -ivh erlang-22.0.7-1.el7.x86_64.rpm
rpm -ivh rabbitmq-server-3.7.17-1.el7.noarch.rpm
4. 开启管理界面及配置 ---理解为图形化界面
rabbitmq-plugins enable rabbitmq_management
开设一个用户用来访问rabbitMQ
进入rabbitMQ的配置目录
cd /usr/share/doc/rabbitmq-server-3.7.17
cp rabbitmq.config.example /etc/rabbitmq/rabbitmq.config
(1) 上传rabbitmq和erlang软件到指定目录
(2)安装rabbitmq的依赖
yum install -y gcc socat openssl openssl-devel
(3)安装erlang和rabbitmq软件
rpm -ivh erlang-22.0.7-1.el7.x86_64.rpm
rpm -ivh rabbitmq-server-3.7.17-1.el7.noarch.rpm
(4)开启图形化管理
rabbitmq-plugins enable rabbitmq_management
(5)开启rabbitmq服务
systemctl start rabbitmq-server
(6) 访问rabbitmq图形化界面
http://ip:15672/
注意:这里的账号和密码并没有开放。
1.进入cd /usr/share/doc/rabbitmq-server-3.7.17
2.把上面目录里面的rabbitmq.config.example 复制到/etc/rabbitmq/rabbitmq.config
重启rabbitmq
systemctl restart rabbitmq-server