RabbiMQ集群

RabbiMQ集群

普通集群准备环境

192.168.6.199  rabbitmq-1

192.168.6.200 rabbitmq-2

192.168.6.201 rabbitmq-3

配置hosts文件

三个节点配置安装rabbitmq软件

[root@rabbitmq-1 ~]# yum install -y epel-release gcc-c++ unixODBC unixODBC-devel openssl-devel ncurses-devel

yum安装erlang

[root@rabbitmq-1 ~]# curl-s https://packagecloud.io/install/repositories/rabbitmq/erlang/script.rpm.sh | sudo bash

[root@rabbitmq-1 ~]# yum install erlang-21.3.8.21-1.el7.x86_64

安装rabbitmq

[root@rabbitmq-1 ~]# yum install rabbitmq-server-3.7.10-1.el7.noarch.rpm

3.启动

[root@rabbitmq-1 ~]# systemctl daemon-reload

[root@rabbitmq-1 ~]# systemctl start rabbitmq-server

[root@rabbitmq-1 ~]# systemctl enable rabbitmq-server

每台都操作开启rabbitmq的web访问界面：

[root@rabbitmq-1 ~]# rabbitmq-plugins enable rabbitmq_management

创建用户

注意:在一台机器操作

添加用户和密码

[root@rabbitmq-1 ~]# rabbitmqctl add_user newrain 123456

Creating user "newrain" ...

...done.

这是为管理员

[root@rabbitmq-1 ~]# rabbitmqctl set_user_tags newrain administrator

Setting tags for user "newrain" to [administrator] ...

...done.

查看用户

[root@rabbitmq-1 ~]# rabbitmqctl list_users

Listing users ...

guest [administrator]

newrain [administrator]

...done.

此处设置权限时注意'.*'之间需要有空格 三个'.*'分别代表了conf权限，read权限与write权限 例如：当没有给

newrain设置这三个权限前是没有权限查询队列，在ui界面也看不见

[root@rabbitmq-1 ~]# rabbitmqctl set_permissions -p "/" newrain ".*" ".*" ".*"

Setting permissions for user "newrain" in vhost "/" ...

...done.

所有机器都操作:开启用户远程登录:

[root@rabbitmq-1 ~]# cd /etc/rabbitmq/

[root@rabbitmq-1 rabbitmq]# cp /usr/share/doc/rabbitmq-server-3.7.10/rabbitmq.config.example /etc/rabbitmq/rabbitmq.config

[root@rabbitmq-1 rabbitmq]# ls

enabled_plugins  rabbitmq.config

[root@rabbitmq-1 rabbitmq]# vim rabbitmq.config

修改如下:

三台机器都操作重启服务服务:

[root@rabbitmq-1 ~]# systemctl restart rabbitmq-server

访问:192.168.6.199:15672

rabbitmq默认管理员用户:guest   密码:guest

新添加的用户为:newrain 密码:123456

开始部署集群三台机器都操作:

[root@rabbitmq-1 ~]# mkdir -p /data/rabbitmq/data

[root@rabbitmq-1 ~]# mkdir -p /data/rabbitmq/logs

[root@rabbitmq-1 ~]# chmod 777 -R /data/rabbitmq

[root@rabbitmq-1 ~]# chown rabbitmq.rabbitmq /data/ -R

创建配置文件:

[root@rabbitmq-1 ~]# vim /etc/rabbitmq/rabbitmq-env.conf

[root@rabbitmq-1 ~]# cat /etc/rabbitmq/rabbitmq-env.conf

RABBITMQ_MNESIA_BASE=/data/rabbitmq/data

RABBITMQ_LOG_BASE=/data/rabbitmq/logs

重启服务

[root@rabbitmq-1 ~]# systemctl restart rabbitmq-server

⽤scp的⽅式将rabbitmq-1节点的.erlang.cookie的值复制到其他两个节点中。

[root@rabbitmq-1 ~]# scp /var/lib/rabbitmq/.erlang.cookie root@192.168.6.200:/var/lib/rabbitmq/

[root@rabbitmq-1 ~]# scp /var/lib/rabbitmq/.erlang.cookie root@192.168.6.201:/var/lib/rabbitmq/

将mq-2、mq-3作为内存节点加⼊mq-1节点集群中

在mq-2、mq-3执⾏如下命令：

[root@rabbitmq-2 ~]# systemctl restart rabbitmq-server

[root@rabbitmq-2 ~]# rabbitmqctl stop_app  #停止节点

[root@rabbitmq-2 ~]# rabbitmqctl reset   #如果有数据需要重置，没有则不用

[root@rabbitmq-2 ~]# rabbitmqctl join_cluster --ram rabbit@rabbitmq-1  #添加到磁盘节点

Clustering node 'rabbit@rabbitmq-2' with 'rabbit@rabbitmq-1' ...

[root@rabbitmq-2 ~]# rabbitmqctl start_app  #启动节点

Starting node 'rabbit@rabbitmq-2' ...

======================================================================

[root@rabbitmq-3 ~]# systemctl restart rabbitmq-server

[root@rabbitmq-3 ~]# rabbitmqctl stop_app

Stopping node 'rabbit@rabbitmq-3' ...

[root@rabbitmq-3 ~]# rabbitmqctl reset

Resetting node 'rabbit@rabbitmq-3' ...

[root@rabbitmq-3 ~]# rabbitmqctl join_cluster --ram rabbit@rabbitmq-1

Clustering node 'rabbit@rabbitmq-3' with 'rabbit@rabbitmq-1' ...

[root@rabbitmq-3 ~]# rabbitmqctl start_app

Starting node 'rabbit@rabbitmq-3' ...

（1）默认rabbitmq启动后是磁盘节点，在这个cluster命令下，mq-2和mq-3是内存节点，

mq-1是磁盘节点。

（2）如果要使mq-2、mq-3都是磁盘节点，去掉--ram参数即可。

（3）如果想要更改节点类型，可以使⽤命令rabbitmqctl change_cluster_node_type

disc(ram),前提是必须停掉rabbit应⽤

注:

#如果有需要使用磁盘节点加入集群

 [root@rabbitmq-2 ~]# rabbitmqctl join_cluster  rabbit@rabbitmq-1

 [root@rabbitmq-3 ~]# rabbitmqctl join_cluster  rabbit@rabbitmq-1

查看集群状态

[root@rabbitmq-1 ~]# rabbitmqctl cluster_status

打开浏览器输⼊192.168.6.199:15672, 输⼊默认的Username：guest，输⼊默认的

Password:guest

登录后出现如图所示的界⾯。

根据界⾯提示创建⼀条队列

RabbitMQ镜像集群配置

创建镜像集群:

rabbitmqctl set_permissions  ".*" ".*" ".*"         (后面三个”*”代表用户拥有配置、写、读全部权限)

[root@rabbitmq-1 ~]# rabbitmqctl set_policy  ha-all "^" '{"ha-mode":"all"}'

Setting policy "ha-all" for pattern "^" to "{"ha-mode":"all"}" with priority "0" for vhost "/" ...

[root@rabbitmq-2 ~]# rabbitmqctl set_policy  ha-all "^" '{"ha-mode":"all"}'

Setting policy "ha-all" for pattern "^" to "{"ha-mode":"all"}" with priority "0" for vhost "/" ...

[root@rabbitmq-3 ~]# rabbitmqctl set_policy  ha-all "^" '{"ha-mode":"all"}'

Setting policy "ha-all" for pattern "^" to "{"ha-mode":"all"}" with priority "0" for vhost "/" ...

安装并配置负载均衡器HA

在192.168.6.199安装HAProxy

yum -y install haproxy

修改 /etc/haproxy/haproxy.cfg

[root@rabbitmq-1 ~]# cp /etc/haproxy/haproxy.cfg /etc/haproxy/haproxy.cfg.bak

[root@rabbitmq-1 ~]# vim /etc/haproxy/haproxy.cfg

global

    log         127.0.0.1 local2

    chroot      /var/lib/haproxy

    pidfile     /var/run/haproxy.pid

    maxconn     4000

    user        haproxy

    group       haproxy

    nbproc      4

    daemon

    # turn on stats unix socket

    stats socket /var/lib/haproxy/stats

#---------------------------------------------------------------------

defaults

    mode                    http

    log                     global

    retries                 3

    timeout connect         10s

    timeout client          1m

    timeout server          1m

    timeout check           10s

    maxconn                 2048

#---------------------------------------------------------------------

##监控查看本地状态#####

listen admin_stats

        bind *:80

    mode http

    option httplog

    option httpclose

    log 127.0.0.1 local0 err

    stats uri  /haproxy

    stats auth newrain:123456

    stats refresh 30s

####################################

###反代监控

frontend server

    bind *:5670

    log global

    mode tcp

    #option forwardfor

    default_backend rabbitmq

    maxconn 3

backend rabbitmq

    mode        tcp

    log         global

    balance     roundrobin

    server      rabbitmq1 192.168.50.138:5672 check inter 2000s rise 2 fall 3

    server      rabbitmq2 192.168.50.139:5672 check inter 2000s rise 2 fall 3

    server      rabbitmq3 192.168.50.140:5672 check inter 2000s rise 2 fall 3

[root@rabbitmq-1 ~]# systemctl start haproxy

浏览器输入http://192.168.6.199/haproxy查看rabbitmq的状态。