Rabbitmq+HA+LB

最新推荐文章于 2024-08-02 23:04:43 发布
最新推荐文章于 2024-08-02 23:04:43 发布
阅读量613 收藏 1
点赞数
分类专栏： 运维 文章标签： 负载均衡 linux 运维
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_46393740/article/details/108688402
版权

Rabbitmq镜像模式+HA+LB

拓扑图：

在这里插入图片描述

​

一、搭建rabbitmq集群
准备：三台机器
iphostname版本
192.168.166.130rabbitmq1Centos7.4
192.168.166.134rabbitmq2Centos7.4
192.168.166.135rabbitmq3Centos7.4

防火墙 selinux 关闭 配置好本地解析

ANSIBLE 搭配 SHELL脚本部署 RABBITMQ集群
脚本：
#!/bin/bash
user=root
pass=123
account(){
        rabbitmqctl add_user admin admin
        rabbitmqctl set_user_tags admin administrator
        rabbitmqctl add_user  user_monitoring  passwd_monitor
        rabbitmqctl set_user_tags user_monitoring monitoring
        rabbitmqctl set_user_tags user_monitoring management
        rabbitmqctl list_users
}
check(){
        if [ $? -eq 0 ];then
                echo "succesful"
        else
                echo "failed"
                exit 9
        fi
}
echo "即将安装ansible"
yum install -y ansible &> /dev/null
check && echo " Successful!!! "
sed -ri '/^#host_key/c\host_key_checking=false/' /etc/ansible/ansible.cfg
read -p "请输入节点数量： " num
echo "[rabbitmqs]" >> /etc/ansible/hosts
for i in `seq 1 $num`
do
        read -p "请输入第 $i 个的ip: " ip
        echo "ip$i $ip ansible_ssh_user='"$user"' ansible_ssh_pass='"$pass"'" >> /root/ip.txt
        get=`grep "ip$i" /root/ip.txt |awk  '{print $2,$3,$4}'`
        echo "$get hostname=rabbitmq$i" >> /etc/ansible/hosts

        hosts=`awk -v i=$i 'NR==i{print $2}' /root/ip.txt`
        arr[$i]=$hosts
        echo ${arr[$i]} " rabbitmq$i" >> /etc/hosts
done
echo "[rabbitmq23]" >> /etc/ansible/hosts
for i in `seq 2 $num`
do
ll=`awk -v i=$i 'NR==i{print $2}' ./ip.txt`
echo $ll >> /etc/ansible/hosts
done
grep "rabbitmq*" /etc/hosts > /root/hosts.txt
yum install -y expect
echo "开始生成密钥"
sleep 1
                echo "正在生成密钥"
rm -rf ~/.ssh/{known_hosts,id_rsa*}
ssh-keygen -f ~/.ssh/id_rsa -t rsa -N '' &>/dev/null
if [ $? -eq 0 ];then
                echo "密钥生成成功"
else
                echo "密钥生成失败"
fi
ansible-playbook /root/rabbitmq01.yaml
for i in `seq 1 $num`
do
        ip=`awk -v i=$i 'NR==i{print $2}' /root/ip.txt`
        echo "[rabbitmq$i]" >> /etc/ansible/hosts
        echo $ip >> /etc/ansible/hosts
done
echo "即将设置本地解析和主机名，请等待"
for i in `seq 1 $num`
do
        #ip=`awk -v i=$i 'NR==i{print $1}' /root/hosts.txt`
        #ssh root@$ip "cat /root/hosts.txt >> /etc/hosts"

        ansible rabbitmq$i -m hostname -a "name=rabbitmq$i"
done
check
ansible-playbook /root/rabbitmq02.yaml
check
ansible-playbook /root/rabbitmq03.yaml
check
echo "部署成功"

yaml1:
---
- name: "安装rabbitmq集群"
  hosts: rabbitmqs
  gather_facts: no
  remote_user: root
  vars:
    soft:
      - erlang
      - socat
      - rabbitmq-server
  tasks:
    - name: "传送公钥"
      authorized_key:
         user: root
         key: "{{ lookup('file', '/root/.ssh/id_rsa.pub') }}"
    - name: "安装应用"
      yum:
        name: "{{ item }}"
        state: present
      loop: "{{ soft  }}"
    - name: "拷贝hosts文件"
      copy: src=/root/hosts.txt dest=/root/
    - name: "启动应用"
      systemd: name="rabbitmq-server.service" state="started"
    - name: "设置开机自启"
      systemd: name="rabbitmq-server.service" enabled="yes"

yaml2:
---
- name: "一般模式集群配置"
  hosts: rabbitmq1
  gather_facts: no
  remote_user: root
  tasks:
    - name: "创建账号配置"
      shell: rabbitmqctl add_user admin admin && rabbitmqctl set_user_tags admin administrator && rabbitmqctl add_user  user_monitoring  passwd_monitor && rabbitmqctl set_user_tags user_monitoring monitoring && rabbitmqctl set_user_tags user_monitoring management
    - name: "插件加载"
      shell: rabbitmq-plugins enable rabbitmq_management
    - name: "创建用户"
      shell: rabbitmqctl add_user superrd superrd &&  rabbitmqctl  set_permissions -p /  admin '.*' '.*' '.*'  &&  rabbitmqctl set_permissions -p / superrd ".*" ".*" ".*" && rabbitmqctl set_user_tags superrd administrator
    - name: "修改权限"
      shell: chmod 600 /var/lib/rabbitmq/.erlang.cookie

yaml3:(有偷懒，自动化的话请在shell脚本里ssh<重定向指定脚本来执行命令，因为指定的主机组需要用变量获取)
---
- name: "配置其它节点"
  hosts: rabbitmq23
  gather_facts: no
  remote_user: root
  tasks:
    - name: "传送erlang.cookie"
      copy: src=/var/lib/rabbitmq/.erlang.cookie dest=/var/lib/rabbitmq/
    - name: "重启服务"
      systemd: name=rabbitmq-server state=restarted
    - name: "Rabbitmq集群添加节点"
      shell: rabbitmqctl stop_app && rabbitmqctl join_cluster --ram rabbit@rabbitmq1 && rabbitmqctl start_app
    - name: "等待添加"
      shell: rabbitmq-plugins enable rabbitmq_management && systemctl restart rabbitmq-server.service

运行中的部分状态：
在这里插入图片描述

查看集群：
在这里插入图片描述

二、keepalived部署

1.环境

  • 两台虚拟机或者选择集群中的任意两个节点配置
  • keepalived1：192.168.166.131
  • keepalived2：192.168.166.132
  • VIP地址：192.168.166.160

2.安装keepalived

在这里插入图片描述
在这里插入图片描述3、修改配置文件

1、keepalived1 配置
[root@localhost log]# cat /etc/keepalived/keepalived.conf
! Configuration File for keepalived

global_defs {
   router_id directory1
}

vrrp_script check_run {
   script "/etc/keepalived/keepalived_check_haproxy.sh"
   interval 5
}
vrrp_instance VI_1 {
    state MASTER
    nopreempt
    interface ens33
    virtual_router_id 80
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    track_script {
        check_run
    }
    virtual_ipaddress {
        192.168.166.160/24
    }
}
1234567891011121314151617181920212223242526272829
2、keepalived2 配置
[root@localhost log]# cat /etc/keepalived/keepalived.conf
! Configuration File for keepalived

global_defs {
   router_id directory2
}

vrrp_script check_run {
   script "/etc/keepalived/keepalived_check_haproxy.sh"
   interval 5
}
vrrp_instance VI_1 {
    state BACKUP
    nopreempt
    interface ens33
    virtual_router_id 80
    priority 50
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    track_script {
        check_run
    }
    virtual_ipaddress {
        192.168.166.160/24
    }
}
1234567891011121314151617181920212223242526272829
3、健康检测脚本 haproxy_chk.sh
[root@localhost keepalived]# cat keepalived_check_haproxy.sh 
#!/bin/bash                                                                      
systemctl status haproxy &>/dev/null   
if [ $? -ne 0 ];then                                                         
        /usr/bin/systemctl stop keepalived                                        
fi 

1234567
4、开启服务验证是VIP

可以看到vip在192.168.166131keepalived上

在这里插入图片描述

而192.168.166.132上没有vip
在这里插入图片描述

三、部署haproxy

1、安装 haproxy 主192.168.166.131 备192.168.166.132

主：

在这里插入图片描述

备：
在这里插入图片描述

2、创建 haproxy.conf

主：

global
    log                     127.0.0.1 local2
    chroot                  /var/lib/haproxy
    pidfile                 /var/run/haproxy.pid
    maxconn                 4000
    user                    haproxy
    group                   haproxy
    daemon

defaults
    mode                     http
    log                      global
    option                   dontlognull
    retries                  3
    maxconn                  3000
    contimeout               50000
    clitimeout               50000
    srvtimeout               50000

listen stats
    bind                    *:8888
    stats                   enable
    stats                    hide-version
    stats uri               /haproxy
    stats realm             Haproxy\ stats
    stats auth              admin:admin
    stats admin             if TRUE

frontend web
    option                   httplog
    option                   http-server-close
    option forwardfor        except 127.0.0.0/8
    mode                     http
    bind                     *:5672
    default_backend          rabbitmqs

backend  rabbitmqs
    balance roundrobin    
	    server  rabbitmq1 192.168.166.130:5672 weight 1  check maxconn 2000
        server  rabbitmq2 192.168.166.134:5672 weight 1  check maxconn 2000
        server  rabbitmq3 192.168.166.135:5672 weight 1  check maxconn 2000


备：

[root@localhost log]# cat /etc/haproxy/haproxy.cfg
global
    log                     127.0.0.1 local2
    chroot                  /var/lib/haproxy
    pidfile                 /var/run/haproxy.pid
    maxconn                 4000
    user                    haproxy
    group                   haproxy
    daemon

defaults
    mode                     http
    log                      global
    option                   dontlognull
    retries                  3
    maxconn                  3000
    contimeout               50000
    clitimeout               50000
    srvtimeout               50000

listen stats
    bind                    *:8888
    stats                   enable
    stats                    hide-version
    stats uri               /haproxy
    stats realm             Haproxy\ stats
    stats auth              admin:admin
    stats admin             if TRUE

frontend web
    option                   httplog
    option                   http-server-close
    option forwardfor        except 127.0.0.0/8
    mode                     tcp
    bind                     *:5672
    default_backend           rabbitmqs

backend  rabbitmqs
    balance roundrobin    
        server  rabbitmq1 192.168.166.130:5672 weight 1  check maxconn 2000
        server  rabbitmq2 192.168.166.134:5672 weight 1  check maxconn 2000
        server  rabbitmq3 192.168.166.135:5672 weight 1  check maxconn 2000

在这里插入图片描述

3、Haproxy rsyslog 日志配置

主备配置相同：

[root@localhost log]# vim /etc/rsyslog.conf

#开启接收功能
# Provides UDP syslog reception
$ModLoad imudp
$UDPServerRun 514

# Provides TCP syslog reception
$ModLoad imtcp
$InputTCPServerRun 514


#添加在这个下边#### RULES ####
local2.*                                                /var/log/haproxy.log


#重启rsyslog服务
[root@localhost ~]# systemctl restart rsyslog
123456789101112131415161718
#可以看到我们在指定的目录下的haproxy.log日志
[root@localhost log]# ls
anaconda  boot.log  chrony  dmesg      firewalld           haproxy.log  maillog   rhsm    spooler   tuned  yum.log
audit     btmp      cron    dmesg.old  grubby_prune_debug  lastlog      messages  secure  tallylog  wtmp
#查看日志内容
[root@localhost log]# cat haproxy.log 
Sep 18 17:43:07 localhost haproxy[1589]: Proxy stats started.
Sep 18 17:43:07 localhost haproxy[1589]: Proxy web started.
Sep 18 17:43:07 localhost haproxy[1589]: Proxy redisservers started.
Sep 18 17:46:37 localhost haproxy[1590]: Connect from 192.168.166.1:64428 to 192.168.166.131:8888 (stats/HTTP)
Sep 18 17:46:37 localhost haproxy[1590]: Connect from 192.168.166.1:64429 to 192.168.166.131:8888 (stats/HTTP)
Sep 18 17:47:09 localhost haproxy[1590]: Connect from 192.168.166.1:64435 to 192.168.166.131:8888 (stats/HTTP)
Sep 18 17:47:09 localhost haproxy[1590]: Connect from 192.168.166.1:64436 to 192.168.166.131:8888 (stats/HTTP)

1234567891011121314

结果：访问vip及定义端口

在这里插入图片描述

郭漂亮哟
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
RabbitMQ 集群
bier_zm的博客
11-08 3362
RabbitMQ 集群 RabbitMQ 有 3 种模式，其中 2 种是集群模式。 单一模式：即单机情况不做集群，就单独运行一个 RabbitMQ 而已。 普通模式：默认模式，以两个节点（A、B）为例来进行说明： 当消息进入 A 节点的 Queue 后，Consumer 从 B 节点消费时，RabbitMQ 会在 A 和 B 之间创建临时通道进行消息传输，把 A 中的消息实体取出并经过通过交给 B 发送给 Consumer。 当 A 故障后，B 就无法取到 A 节点中未消费的消息实体；如果做了消息
springboot+rabbitMQ+websocket
07-28
而RabbitMQ作为一款强大的消息中间件，常用于处理异步任务和消息队列。WebSocket协议则为双向通信提供了可能，使得服务器可以主动向客户端推送信息。接下来，我们将深入探讨如何利用Spring Boot、RabbitMQ和...
RabbitMQ 集群 + HA + Keepalived 的高可用部署
RAB
10-07 828
RabbitMQ 集群 + HA + Keepalived 的高可用部署。
Rabbitmq+HAproxy+Keepalived实现高可用加负载均衡
向北北
12-28 633
文章目录前言一、erlang 22.31.安装二、rabbitmq 3.8.11.安装2.简单命令3.登录 前言 rabbitmq由erlang语言开发，安装rabbitmq之前，需安装对应版本的erlang,rabbitmq和erlang的对应关系可前往erlang官网进行查看，erlang和rabbitmq对应关系。 本次安装的rabbitmq3.8.1和erlang22.3均提供下载地址 网盘链接: https://pan.baidu.com/s/1CUxFJX8oMsRd9tPeIqLU
RabbitMQ + Keepalived + lvs高可用镜像集群
weixin_61718665的博客
03-25 2029
如图所示： 前端采用keepalived+lvs实现高可用负载均衡， RabbitMQ HA 队列（镜像队列）进行消息队列结构复制。本方案中搭建两个节点，并且都是磁盘节点（所有节点状态保持一致，节点完全对等），只要有任何一个节点能够工作，RabbitMQ 集群对外就能提供服务。任务处理进程同时监控每一太RabbitMQ节点（每个节点都相应部署一份任务处理模块）。这样一来,每一份任务处理模块只需要处理自己所监听的rabbitMQ-server接受的任务即可,两份任务处理模块功能完全一致，但相互不影响；当其..
【系统运维】Centos部署Haproxy+Keepalived+RabbitMQ高可用集群
互联网小阿祥
12-03 798
【系统运维】Centos部署Haproxy+Keepalived+RabbitMQ高可用集群
RABBITMQ集群及HA、LB
weixin_34380296的博客
11-24 303
RABBITMQ集群及HA、LB一、Rabbitmq简介RabbitMQ是一个开源的AMQP实现，服务器端用Erlang语言编写，支持多种客户端，如：Python、Ruby、.NET、Java、JMS、C、PHP、ActionScript、XMPP、STOMP等，支持AJAX。用于在分布式系统中存储转发消息，在易用性、扩展性、高可用性等方面表现不俗。AMQP，即Advance...
HAProxy+Keepalived搭建RabbitMQ高可用集群
domain.5忘初心
10-13 2126
HAProxy+Keepalived搭建RabbitMQ高可用集群
K8S部署RabbitMQ集群+镜像模式实现高可用
lc2288的博客
07-25 3059
K8S部署RabbitMQ集群+镜像模式实现高可用
LVS+KeepAlived，RabbitMQ高可用负载均衡
weixin_34349320的博客
07-07 480
最近团队准备对项目进行重构，其中用到了RabbitMQ,也考虑了几个方案,下边着重介绍在项目中即将采用的方案。关于RabbitMQ就不在这里详细说明，具体查看 RabbitMQ中文手册。直接看架构图：如图所示： 前端采用keepalived+lvs实现高可用负载均衡， RabbitMQ HA 队列（镜像队列）进行消息队列结构复制。本方案中搭建两个节点，并且都是磁盘节点（所有...
rabbitMq+eralng
04-12
**RabbitMQ与Erlang详解** RabbitMQ是一个开源的消息代理和队列服务器，它基于AMQP（Advanced Message Queuing Protocol）协议，用于在分布式系统中高效地路由和传递消息。Erlang则是一种并发并行编程语言，以其...
RabbitMq+Haproxy
11-27
RabbitMq+Haproxy 高可用安装步骤 RabbitMq 是一个流行的消息队列系统，它提供了高性能、可靠的消息传递服务。Haproxy 是一个知名的负载均衡器，它可以帮助我们实现高可用的服务器集群。在这里，我们将讲解如何在 ...
rabbitmq+erlang.rar
07-30
RabbitMQ是一款开源的消息队列系统，它基于AMQP（Advanced Message Queuing Protocol）协议实现，用于高效地处理异步任务和消息通信。Erlang是一种面向并发的、函数式编程语言，因其强大的分布式计算能力和容错性，...
SpringBoot+RabbitMQ+WebSocket
04-25
在本项目中，"SpringBoot+RabbitMQ+WebSocket" 的组合被用来构建一个实时通信系统，其中SpringBoot作为后端框架，RabbitMQ作为消息中间件，WebSocket提供双向通信能力。下面将详细阐述这三个技术及其在项目中的应用...
AWS-负载均衡-创建一个对外的HTTPS ALB
墨痕诉清风的博客
07-25 1256
Elastic Load Balancing 支持三种类型的负载均衡器：Application Load Balancer、Network Load Balancer 和 Classic Load Balancer。这里用ALB( Application Load Balancer)说明。
Linux初学基本命令
yuan20010401的博客
07-25 1196
1、rm 文件名称 删除多个文件多个目录需要用空格 删除根目录（rm -rf /*）1、touch 文件名字 用于linux创建文件 创建多个目录需要用空格隔开。2、mkdir 目录名称 用于创建文件夹 创建多个嵌套文件夹需要用/隔开。1、cp 当前文件 其他目录名称 拷贝文件夹需要在最后 -r。退出不保存时按Esc+:q!1、ls 查看当前目录下面的文件或者文件夹。2、more 文件名称 查看文件更多内容。1、mv 原文件路径 目标文件路径。退出保存时按Esc + :wq。
linux 常用的命令
最新发布
caoyanzhi的博客
08-02 465
一、文件和目录操作 ls：列出目录内容。 cd：切换当前工作目录。 pwd：显示当前工作目录的绝对路径。 mkdir：创建新目录。 rmdir：删除空目录。 rm：删除文件或目录（使用-r选项递归删除目录）。 cp：复制文件或目录。 mv：移动或重命名文件或目录。 touch：创建空文件或修改文件时间戳。 find：在目录树中搜索文件，并执行指定的操作。 二、文本查看和处理 cat：查看文件内容，并可以将多个文件内容合并后输出。 more：分页显示文件内容。 less：与more类
Linux 内核源码分析---I/O 体系结构与访问设备
学习记录
07-30 1065
学习记录
springboot+rabbitmq+TLS
05-20
RabbitMQ是一个开源的消息代理，它支持多种协议，包括AMQP、STOMP和MQTT等。TLS协议则是一种加密传输协议，它可以保证数据在传输过程中的安全性。 在Spring Boot应用程序中使用RabbitMQ需要引入相应的依赖，可以...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值