文章目录
RabbitMQ简介
1.什么是MQ
消息队列(Message Queue,简称MQ),从字面意思上看,本质是个队列,FIFO先入先出,只不过队列中存放的内容是message而已。
其主要用途:不同进程Process/线程Thread之间通信。
为什么会产生消息队列?有几个原因:
不同进程(process)之间传递消息时,两个进程之间耦合程度过高,改动一个进程,引发必须修改另一个进程,为了隔离这两个进程,在两进程间抽离出一层(一个模块),所有两进程之间传递的消息,都必须通过消息队列来传递,单独修改某一个进程,不会影响另一个;
不同进程(process)之间传递消息时,为了实现标准化,将消息的格式规范化了,并且,某一个进程接受的消息太多,一下子无法处理完,并且也有先后顺序,必须对收到的消息进行排队,因此诞生了事实上的消息队列;
MQ框架非常之多,比较流行的有RabbitMq、ActiveMq、ZeroMq、kafka,以及阿里开源的RocketMQ。本文主要介绍RabbitMq。
2. 初识RabbitMQ
RabbitMQ是—个开源的消息代理和队列服务器,用来通过普通协议 在完全不同的应用之间共享数据
- MQ为Message Queue,消息队列是应用程
和应用程序之间的通信方法。 - RabbitMQ是-一个开源的,在
AMQP
基础.上完
整的,可复用的企业消息系统。 - 支持主流的操作系统,
Linux、Windows、
MacOX等。 - 多种开发语言支持,Java、 Python、
Ruby、.NET、 PHP、C/C++、 node.js等
3. RabbitMQ高性能的原因
Erlang语言最初在于交换机领域的架构模式,这样使得 RabbitMQ在Broker之间进行数据交互的性能是非常优秀的
Erlang的优点:Erlang有着和原生Socket—样的延迟
哪些大厂在用RabbitMQ,为什幺?
滴滴、美团、头条、去哪儿、艺龙…
开源、性能优秀,稳定性保障
提供可靠性消息投递模式(confirm)、返回模式(return )
与SpringAMQP完美的整合、API丰富
集群模式丰富,表达式配置,HA模式,镜像队列模型
保证数据不丟失的前提做到高可靠性、可用性
3.什么是AMQP
高级消息队列协议?
AMQP定义:
是具有现代特征的二进制协议;
是一个提供统一消息服务的应用层标准高级消息队列协议;
是应用层协议的一个开放标准,为面向消息的中间件设计;
主要是面向消息、队列、路由(包括点对点和发布 /订阅)、可靠性、安全。AMQP协议更多用在企业系统内,
对数据_致 性、稳定性和可靠性要求很髙的场景,对性能和吞吐量的要求还在其次。
AMQP核心概念(重点)
Producer:消息生产者,负责产生和发送消息到 Broker;
Consumer:消息消费者,负责从 Broker 中获取消息,并进行相应处理;
Server:又称Broker,接受客户端的连接,实现AMQP实体服务,消息处理中心。负责消息存储、确认、重试等,一般其中会包含多个 queue;
Connection:连接:应用程序与Broker的网络连接
Channel:网络通道,几乎所有的操作都在Channel中进行,Channel是进行消息读写的通道;客户端可建立多个Channel,每个Channel代表一个会话任务;
Message:消息,服务器与应用程序之间传递的数据,由Properties和Body组成。Properties可以对消息进行装饰,比如消息的优先级、延迟等高级特性;Body则就是消息体内容;
Virtual host:虚拟地址,用于进行逻辑隔离,最上层的消息路由;一个Virtual Host里面可以有若干个Exchange和Queue,同一个Virtual Host里面不能有相同名称的Exchange或Queue;
Exchange:交换机,交换消息,根据路由键转发消息到绑定的队列;
Binding:Exchange和Queue之间的虚拟连接,binding中可以包含routing key;
Routing key:一个路由规则,虚拟机可用它来确定如何路由一个特定消息
Queue:也称为Message Queue,消息队列,保存消息并将它们转发给消费者
特性
异步性
将耗时的同步操作,通过以发送消息的方式,进行了异步化处理。减少了同步等待的时间。
松耦合
消息队列减少了服务之间的耦合性,不同的服务可以通过消息队列进行通信,而不用关心彼此的实现细节,只要定义好消息的格式就行。
分布式
通过对消费者的横向扩展,降低了消息队列阻塞的风险,以及单个消费者产生单点故障的可能性(当然消息队列本身也可以做成分布式集群)。
可靠性
消息队列一般会把接收到的消息存储到本地硬盘上(当消息被处理完之后,存储信息根据不同的消息队列实现,有可能将其删除),这样即使应用挂掉或者消息队列本身挂掉,消息也能够重新加载。
RabbitMQ安装及使用
Centos安装方式
注意:Erlang语言与RabbitMQ安装版本必须匹配
安装与使用
官网地址:https://www.rabbitmq.com/
提前准备:安装Linux必要依赖包
下载RabbitMQ必须安装包
配置文件修改
服务的启动:rabbitmq-server start &
服务的停止:rabbitmqctl stop_app
管理插件:rabbitmq-plugins enable rabbitmq_management
访问地址:http://ip:15672/
详细步骤
准备:
yum install \
build-essential openssl openssl-devel unixODBC unixODBC-devel \
make gcc gcc-c++ kernel-devel m4 ncurses-devel tk tc xz -y
下载:
wget www.rabbitmq.com/releases/erlang/erlang-18.3-1.el7.centos.x86_64.rpm
wget http://repo.iotti.biz/CentOS/7/x86_64/socat-1.7.3.2-5.el7.lux.x86_64.rpm
wget www.rabbitmq.com/releases/rabbitmq-server/v3.6.5/rabbitmq-server-3.6.5-1.noarch.rpm
安装:
rpm -ivh erlang-18.3-1.el7.centos.x86_64.rpm
rpm -ivh socat-1.7.3.2-1.1.el7.x86_64.rpm --nodeps --force
rpm -ivh rabbitmq-server-3.6.5-1.noarch.rpm
配置文件:
vi /usr/lib/rabbitmq/lib/rabbitmq_server-3.6.5/ebin/rabbit.app
比如修改密码、配置等等,例如:loopback_users 中的 <<"guest">>,只保留guest
服务启动和停止:
启动 rabbitmq-server start &
停止 rabbitmqctl app_stop
查看服务是否成功:
yum install lsof
lsof -i:5672
管理插件:rabbitmq-plugins enable rabbitmq_management
访问地址:http://192.168.147.146:15672/
Docker安装
注意获取镜像的时候要获取management版本的,不要获取last版本的,management版本的才带有管理界面
#1.查询镜像
docker search rabbitmq:management
#2.获取镜像
docker pull rabbitmq:management
#3.运行镜像
##方式一:默认guest用户,密码也是guest
docker run -d -p 5672:5672 -p 15672:15672 --name rabbitmq rabbitmq:management
##方式二:设置用户名和密码
docker run -d \
--name my-rabbitmq \
-p 5672:5672 -p 15672:15672 \
-v /data:/var/lib/rabbitmq \
--hostname my-rabbitmq-host \
-e RABBITMQ_DEFAULT_VHOST=my_vhost \
-e RABBITMQ_DEFAULT_USER=admin \
-e RABBITMQ_DEFAULT_PASS=admin \
--restart=always \
rabbitmq:management
参数说明: -d:后台运行容器
-name:指定容器名
-p:指定服务运行的端口(5672:应用访问端口;15672:控制台Web端口号)
-v:映射目录或文件,启动了一个数据卷容器,数据卷路径为:/var/lib/rabbitmq,再将此数据卷映射到住宿主机的/data目录
–hostname:主机名(RabbitMQ的一个重要注意事项是它根据所谓的 “节点名称” 存储数据,默认为主机名) -e:指定环境变量;(RABBITMQ_DEFAULT_VHOST:默认虚拟机名;
RABBITMQ_DEFAULT_USER:默认的用户名;RABBITMQ_DEFAULT_PASS:默认用户名的密码)
–restart=always:当Docker重启时,容器能自动启动 rabbitmq:management:镜像名
注1:RABBITMQ_DEFAULT_VHOST=my_vhost,my_vhost名字请记好,在之后的编程中要用到,
如果启动时没指定,默认值为/
#4.进入RabbitMQ管理平台进行相关操作
注2:容器启动后,可以通过docker logs 窗口ID/容器名字 查看日志
docker logs my-rabbitmq 注2:停止并删除所有容器
docker stop $(docker ps -aq) && docker rm $(docker ps -aq)
常用操作命令
命令行与管控台-基础操作
rabbitmqctl stop_app: | 关闭应用 |
---|---|
关闭应用 | 启动应用 |
rabbitmqctl status: | 节点状态 |
rabbitmqctl add_user username password:添加用户 | |
rabbitmqctl list_users: | 列出所有用户 |
rabbitmqctl delete_user username: | 删除用户 |
rabbitmqctl clear_permissions -p vhostpath username: | 清除用户权限 |
rabbitmqctl list_user_permissions username: | 列出用户权限 |
rabbitmqctl change_password username newpassword: | 修改密码 |
rabbitmqctl set_permissions -p vhostpath username | “.” “.” “.*” |
rabbitmqctl add_vhost vhostpath: | 创建虚拟主机 |
rabbitmqctl list_vhosts: | 列出所有虚拟主机 |
rabbitmqctl list_permissions -p vhostpath: | 列出虚拟主机上所有权限 |
rabbitmqctl delete_vhost vhostpath: | 删除虚拟主机 |
rabbitmqctl list_queues: | 查看所有队列信息 |
rabbitmqctl -p vhostpath purge_queue blue: | 清除队列里的消息 |
命令行与管控台-高级操作
rabbitmqctl reset: | 移除所有数据,要在rabbitmqctl stop_app之后使用 |
---|---|
rabbitmqctl join_cluster [–ram]: | 组成集群命令 |
rabbitmqctl cluster_status: | 查看集群状态 |
rabbitmqctl change_cluster_node_type disc | ram: |
rabbitmqctl forget_cluster_node {–offline} | 忘记节点 (摘除节点) |
rabbitmqctl rename_cluster_node oldnode1 newnode1 [oldnode2] [newnode2…] | (修改节点名称) |
RabbitMQ快速入门
极速入门-消息生产与消费
ConnectionFactory:获取连接工厂
Connection:一个链接
Channel:数据通信通道,课发送和接收消息
Queue:具体的消息存储队列
Producer & Consumer:生产和消费者
创建一个springboot项目: rabbitmq-api
导入pom依赖
<dependency>
<groupId>com.rabbitmq