Rabbitmq集群docker单机部署

Rabbitmq集群docker单机部署

服务器准备

系统版本	系统规格	IP地址
centos7.9	2c4g80G	192.168.117.151

本次使用单机docker集群部署，docker安装详情其他文档

集群部署

拉取镜像

docker pull rabbitmq:3.7-management

创建映射卷

docker volume create rabbitmq01
docker volume create rabbitmq02
docker volume create rabbitmq03
docker volume list

启动容器

节点1

docker run -d --hostname rabbitmq01 --name rabbitmqCluster01 -v rabbitmq01:/var/lib/rabbitmq -p 15673:15672 -p 5673:5672 -e RABBITMQ_ERLANG_COOKIE='rabbitmqCookie' rabbitmq:3.7-management

节点2

docker run -d --hostname rabbitmq02 --name rabbitmqCluster02 -v rabbitmq02:/var/lib/rabbitmq -p 15674:15672 -p 5674:5672 -e RABBITMQ_ERLANG_COOKIE='rabbitmqCookie'  --link rabbitmqCluster01:rabbitmq01 rabbitmq:3.7-management

节点3

docker run -d --hostname rabbitmq03 --name rabbitmqCluster03 -v rabbitmq03:/var/lib/rabbitmq -p 15675:15672 -p 5675:5672 -e RABBITMQ_ERLANG_COOKIE='rabbitmqCookie'  --link rabbitmqCluster01:rabbitmq01 --link rabbitmqCluster02:rabbitmq02  rabbitmq:3.7-management

查询容器启动情况 up为启动成功

docker ps

注： --hostname 设置容器的主机名RABBITMQ_ERLANG_COOKIE 节点认证作用，部署集成时 需要同步该值

启动容器成功后，可以访问

192.168.117.151:15673
192.168.117.151:15674
192.168.117.151:15675

账号/密码：guest / guest

登陆后，查看overview Tab页，可看到节点信息。

容器节点加入集群

容器1

docker exec -it rabbitmqCluster01 bash

rabbitmqctl stop_app
rabbitmqctl reset
rabbitmqctl start_app
exit

容器2

docker exec -it rabbitmqCluster02 bash

rabbitmqctl stop_app
rabbitmqctl reset
rabbitmqctl join_cluster --ram rabbit@rabbitmq01
rabbitmqctl start_app
exit

容器3

docker exec -it rabbitmqCluster03 bash

rabbitmqctl stop_app
rabbitmqctl reset
rabbitmqctl join_cluster --ram rabbit@rabbitmq01
rabbitmqctl start_app
exit

执行上述操作，这时候 再查看 http://192.168.117.151:15673/#/的overview面板中的Nodes信息，可查看到节点信息。

现在集群就已经部署完毕

负载均衡设置

有了集群之后 还要设置负载均衡,为了防止出现对单一节点造成高负载的情况。 本次测试用例 采用nginx为中间件，可根据自身需要进行选择。

拉取nginx镜像

docker pull nginx

创建映射目录及配置文件

mkdir /home/rabbitmqnginx
vim /home/rabbitmqnginx/rabbitmq.conf

user  nginx;
worker_processes  2;

error_log  /var/log/nginx/error.log warn;
pid        /var/run/nginx.pid;


events {
    worker_connections  10240;
}


http {
    include       /etc/nginx/mime.types;
    default_type  application/octet-stream;

    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';

    access_log  /var/log/nginx/access.log  main;

    sendfile        on;
    #tcp_nopush     on;
    keepalive_timeout  65;
    #gzip  on;
    proxy_redirect          off;
    proxy_set_header        Host $host;
    proxy_set_header        X-Real-IP $remote_addr;
    proxy_set_header        X-Forwarded-For $proxy_add_x_forwarded_for;
    client_max_body_size    10m;
    client_body_buffer_size   128k;
    proxy_connect_timeout   5s;
    proxy_send_timeout      5s;
    proxy_read_timeout      5s;
    proxy_buffer_size        4k;
    proxy_buffers           4 32k;
    proxy_busy_buffers_size  64k;
    proxy_temp_file_write_size 64k;
    
    #rabbitmq管理界面
    upstream rabbitManage {
        server 192.168.117.151:15673;
        server 192.168.117.151:15674;
        server 192.168.117.151:15675;
    }
    server {
        listen       15672;
        server_name  192.168.117.151;
        location / {
            proxy_pass   http://rabbitManage;
        }

    }
}
# rabbitmq通信
stream{
    upstream rabbitTcp{
        server 192.168.117.151:5673;
        server 192.168.117.151:5674;
        server 192.168.117.151:5675;
    }

    server {
        listen 5672;
        proxy_pass rabbitTcp;
    }
}

创建nginx容器

docker run  -d --name nginxRabbitmq -v /home/rabbitmqnginx/rabbitmq.conf:/etc/nginx/nginx.conf  --privileged --net=host nginx

然后可以通过 192.168.117.151:15672 进行管理 以及通过 5672 端口 进行rabbitmq通信。

192.168.117.151:15672

创建新admin用户

docker exec -it rabbitmqCluster01 bash
rabbitmqctl add_user admin admin
rabbitmqctl set_user_tags admin administrator 

再次登录即可使用admin用户 密码因为admin