Zabbix监控nginx高可用是否脑裂

最新推荐文章于 2024-09-25 17:53:40 发布
最新推荐文章于 2024-09-25 17:53:40 发布
阅读量453 收藏 6
点赞数 13
文章标签： zabbix nginx 运维
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_65309423/article/details/136669044
版权

Zabbix监控nginx高可用是否脑裂

实验环境

所有机关闭防火墙与selinux

第一台机zabbix 192.168.159.141 lamp、zabbix_server、zabbix_agentd

第二台机lb1 192.168.159.139 keepalived、nginx_master负载均衡rs1和rs2的网页测试页面

第三台机lb2 192.168.159.147 keepalived、nginx_slave负载均衡rs1和rs2的网页测试页面、zabbix_agentd

第四台机rs1 192.168.159.148 nginx网页测试页面

第五台机rs2 192.168.159.149 nginx网页测试页面

本次高可用虚拟IP（VIP）地址暂定为 192.168.159.250

keepalived安装
配置主keepalived
[root@lb1 ~]# yum -y install keepalived
编写配置文件
[root@lb1 ~]# cd /etc/keepalived/ 
[root@lb1 keepalived]# ls
keepalived.conf
[root@lb1 keepalived]# mv keepalived.conf{,.bak}
[root@lb1 keepalived]# ls
keepalived.conf.bak
[root@lb1 keepalived]# vim keepalived.conf
[root@lb1 keepalived]# cat keepalived.conf
! Configuration File for keepalived

global_defs {
   router_id lb01
}

vrrp_instance VI_1 {
    state MASTER
    interface ens33
    virtual_router_id 71
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 123456
    }
    virtual_ipaddress {
        192.168.159.250
    }
}

virtual_server 192.168.159.250 80 {
    delay_loop 6
    lb_algo rr
    lb_kind DR
    persistence_timeout 50
    protocol TCP

    real_server 192.168.159.139 80 {
        weight 1
        TCP_CHECK {
            connect_port 80
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
        }
    }

    real_server 192.168.159.147 80 {
        weight 1
        TCP_CHECK {
            connect_port 80
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
        }
    }
}

启动服务发现有vip了
[root@lb1 ~]# systemctl enable --now keepalived
[root@lb1 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc fq_codel state UP group default qlen 1000
    link/ether 00:0c:29:b6:d6:ff brd ff:ff:ff:ff:ff:ff
    altname enp2s1
    inet 192.168.159.139/24 brd 192.168.159.255 scope global dynamic noprefixroute ens33
       valid_lft 1348sec preferred_lft 1348sec
    inet 192.168.159.250/32 scope global ens33
       valid_lft forever preferred_lft forever
    inet6 fe80::20c:29ff:feb6:d6ff/64 scope link noprefixroute 
       valid_lft forever preferred_lft forever

用同样的方法在备服务器上安装keepalived

[root@lb2 ~]# yum -y install keepalived
[root@lb2 ~]# cd /etc/keepalived/ 
[root@lb2 keepalived]# ls
keepalived.conf
[root@lb2 keepalived]# mv keepalived.conf{,.bak}
[root@lb2 keepalived]# vim keepalived.conf
[root@lb2 keepalived]# cat keepalived.conf
! Configuration File for keepalived

global_defs {
   router_id lb02
}

vrrp_instance VI_1 {
    state BACKUP
    interface ens160
    virtual_router_id 71
    priority 80
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 123456
    }
    virtual_ipaddress {
        192.168.159.250
    }
}

virtual_server 192.168.159.250 80 {
    delay_loop 6
    lb_algo rr
    lb_kind DR
    persistence_timeout 50
    protocol TCP

    real_server 192.168.159.139 80 {
        weight 1
        TCP_CHECK {
            connect_port 80
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
        }
    }

    real_server 192.168.159.147 80 {
        weight 1
        TCP_CHECK {
            connect_port 80
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
        }
    }
}
[root@lb2 keepalived]# systemctl enable --now keepalived
Created symlink /etc/systemd/system/multi-user.target.wants/keepalived.service → /usr/lib/systemd/system/keepalived.service.
[root@lb2 keepalived]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: ens160: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000
    link/ether 00:0c:29:f6:3c:cb brd ff:ff:ff:ff:ff:ff
    altname enp3s0
    inet 192.168.159.147/24 brd 192.168.159.255 scope global dynamic noprefixroute ens160
       valid_lft 1141sec preferred_lft 1141sec
    inet6 fe80::20c:29ff:fef6:3ccb/64 scope link noprefixroute 
       valid_lft forever preferred_lft forever

在浏览器上访问试试，确保nginx负载均衡服务能够正常访问
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

备节点上需要停止nginx服务主节点上的vip才能访问的到

[root@lb2 ~]# systemctl stop nginx

在这里插入图片描述
在这里插入图片描述

让keepalived监控nginx负载均衡机

keepalived通过脚本来监控nginx负载均衡机的状态

在lb1上编写脚本

[root@lb1 ~]# mkdir /scripts
[root@lb1 ~]# cd /scripts/
[root@lb1 scripts]# vim check_nginx.sh
[root@lb1 scripts]# chmod +x check_nginx.sh 
[root@lb1 scripts]# vim notify.sh
[root@lb1 scripts]# cat notify.sh 
#!/bin/bash

case "$1" in
  master)
    nginx_status=$(ps -ef|grep -Ev "grep|$0"|grep '\bnginx\b'|wc -l)
    if [ $nginx_status -lt 1 ];then
	systemctl start nginx
	fi
  ;;
  backup)
    nginx_status=$(ps -ef|grep -Ev "grep|$0"|grep '\bnginx\b'|wc -l)
	if [ $nginx_status -gt 0 ];then
	systemctl stop nginx
    fi
  ;;
  *)
    echo "Usage:$0 master|backup VIP"
  ;;
esac

将此脚本传给备节点，主节点不用，只做备份
[root@lb1 scripts]# scp notify.sh 192.168.159.147:/scripts/
The authenticity of host '192.168.159.147 (192.168.159.147)' can't be established.
ED25519 key fingerprint is SHA256:bkL+H8KDU3f4oa6FUb2+zdbsK+6fCEjjgbuaDzWjdoE.
This key is not known by any other names
Are you sure you want to continue connecting (yes/no/[fingerprint])? yes
Warning: Permanently added '192.168.159.147' (ED25519) to the list of known hosts.
root@192.168.159.147's password: 
notify.sh                                                100%  372   315.7KB/s   00:00

lb2上

[root@lb2 ~]# cd /scripts/
[root@lb2 scripts]# ls
check_process.sh  log.py  notify.sh
[root@lb2 scripts]# chmod +x notify.sh 
[root@lb2 scripts]# ls
check_process.sh  log.py  notify.sh

配置keepalived加入监控脚本的配置

配置主keepalived

[root@lb1 ~]# vim  /etc/keepalived/keepalived.conf
[root@lb1 ~]# cat /etc/keepalived/keepalived.conf
! Configuration File for keepalived

global_defs {
   router_id lb01
}

vrrp_script nginx_check {
    script "/scripts/check_nginx.sh"
    interval 1
    wgight -30
}

vrrp_instance VI_1 {
    state MASTER
    interface ens33
    virtual_router_id 71
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 123456
    }
    virtual_ipaddress {
        192.168.159.250
    }
    track_script {
        nginx_check
    }
}

virtual_server 192.168.159.250 80 {
    delay_loop 6
    lb_algo rr
    lb_kind DR
    persistence_timeout 50
    protocol TCP

    real_server 192.168.159.139 80 {
        weight 1
        TCP_CHECK {
            connect_port 80
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
        }
    }

    real_server 192.168.159.147 80 {
        weight 1
        TCP_CHECK {
            connect_port 80
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
        }
    }
}

[root@lb1 ~]# systemctl restart keepalived

配置备keepalived

[root@lb2 ~]# vim /etc/keepalived/keepalived.conf
[root@lb2 ~]# cat /etc/keepalived/keepalived.conf
! Configuration File for keepalived

global_defs {
   router_id lb02
}

vrrp_instance VI_1 {
    state BACKUP
    interface ens160
    virtual_router_id 71
    priority 80
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 123456
    }
    virtual_ipaddress {
        192.168.159.250
    }
    notify_master "/scripts/notify.sh master"
    notify_backup "/scripts/notify.sh backup"
}

virtual_server 192.168.159.250 80 {
    delay_loop 6
    lb_algo rr
    lb_kind DR
    persistence_timeout 50
    protocol TCP

    real_server 192.168.159.139 80 {
        weight 1
        TCP_CHECK {
            connect_port 80
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
        }
    }

    real_server 192.168.159.147 80 {
        weight 1
        TCP_CHECK {
            connect_port 80
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
        }
    }
}

[root@lb2 ~]# systemctl restart keepalived

此时的效果

在lb1上停掉nginx服务,keepalived服务也会停止，同时vip会出现在lb2上，lb2上的nginx服务和keepalived服务也会启动

[root@lb1 ~]# systemctl stop nginx
[root@lb1 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc fq_codel state UP group default qlen 1000
    link/ether 00:0c:29:b6:d6:ff brd ff:ff:ff:ff:ff:ff
    altname enp2s1
    inet 192.168.159.139/24 brd 192.168.159.255 scope global dynamic noprefixroute ens33
       valid_lft 962sec preferred_lft 962sec
    inet6 fe80::20c:29ff:feb6:d6ff/64 scope link noprefixroute 
       valid_lft forever preferred_lft forever


[root@lb2 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: ens160: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc mq state UP group default qlen 1000
    link/ether 00:0c:29:f6:3c:cb brd ff:ff:ff:ff:ff:ff
    altname enp3s0
    inet 192.168.159.147/24 brd 192.168.159.255 scope global dynamic noprefixroute ens160
       valid_lft 944sec preferred_lft 944sec
    inet 192.168.159.250/32 scope global ens160
       valid_lft forever preferred_lft forever
    inet6 fe80::20c:29ff:fef6:3ccb/64 scope link noprefixroute 
       valid_lft forever preferred_lft forever
[root@lb2 ~]# ss -antl
State     Recv-Q    Send-Q       Local Address:Port        Peer Address:Port    Process    
LISTEN    0         128                0.0.0.0:22               0.0.0.0:*                  
LISTEN    0         511                0.0.0.0:80               0.0.0.0:*                  
LISTEN    0         4096               0.0.0.0:10050            0.0.0.0:*                  
LISTEN    0         128                   [::]:22                  [::]:*                  
LISTEN    0         511                   [::]:80                  [::]:*

对keepalived进行监控

对keepalived服务的监控应在备用服务器上进行，通过添加zabbix自定义监控进行。

监控的信息是备上面有无VIP地址（192.168.159.250）

所有要在在lb2上编写监控脚本

[root@lb2 ~]# cd /scripts/
[root@lb2 scripts]# ls
check_process.sh  log.py  notify.sh
[root@lb2 scripts]# vim check_keepalived.sh
[root@lb2 scripts]# chmod +x check_keepalived.sh 
[root@lb2 scripts]# cat check_keepalived.sh 
#!/bin/bash

if [ `ip a show ens160 | grep 192.168.159.250 | wc -l` -ne 0 ]
then
	    echo "1"
    else
	        echo "0"
fi

[root@lb2 scripts]# ll check_keepalived.sh 
-rwxr-xr-x 1 root root 125 Mar  4 17:07 check_keepalived.sh
[root@lb2 scripts]# ./check_keepalived.sh
1
此处显示1就是说明备上面有vip，显示0则说明备上面没有vip

进入配置文件，创建自定义监控任务
[root@lb2 scripts]# vim /usr/local/etc/zabbix_agentd.conf
添加自定义监控任务
UserParameter=check_keepalived,/bin/bash /scripts/check_keepalived.sh
因为我们修改了配置文件，所以需要重启服务，重新读取配置文件内容
[root@lb2 scripts]# systemctl restart zabbix_agentd.service

创建自定义监控任务后，我们需要在server端去测试一下是否能接受到被监控端的值

[root@zabbix ~]# zabbix_get -s 192.168.159.147 -k check_keepalived
1
成功接收到值，因为备上此时有vip所有显示的是1

在zabbix监控页面添加监控

创建监控项
在这里插入图片描述

成功创建
在这里插入图片描述

创建触发器
在这里插入图片描述

因为此时我的主服务器上的nginx服务已经关闭，所以vip在备上面，此时提取出来的值是1，所以服务异常

在这里插入图片描述

烟雨时遇
关注
Nginx 集成Zipkin服务链路追踪
gmHappy
01-08 1744
一、背景 Nginx是一款自由的、开源的、高性能的HTTP服务器和反向代理服务器，对其进行跟踪可以帮助我们更好的了解应用服务的运行状况。本文将详细介绍Nginx的链路跟踪的安装过程。 二、操作步骤 本文基于docker构建集成镜像，本地化安装方式请参照本文后续参照链接 载Dockerfile并编译部署 下载链接 nginx-zipkin-docker目录结果如下： 解压并构建镜像 tar -xzvf nginx-zipkin-docker.tgz cd nginx-zipkin-docker // 编
zabbix 监控keepalived高可用 脑裂
m0_60072944的博客
10-24 194
zabbix 监控keepalived高可用 脑裂 脑裂 在高可用（HA）系统中，当联系2个节点的“心跳线”断开时，本来为一整体、动作协调的HA系统，就分裂成为2个独立的个体。由于相互失去了联系，都以为是对方出了故障。两个节点上的HA软件像“裂脑人”一样，争抢“共享资源”、争起“应用服务”，就会发生严重后果——或者共享资源被瓜分、2边“服务”都起不来了；或者2边“服务”都起来了，但同时读写“共享存储”，导致数据损坏（常见如数据库轮询着的联机日志出错）。 　　 对付HA系统“裂脑”的对策，目前达成共识的的大概
实现Zabbix高可用分布式架构：打造强大的监控数据可视化平台_zabbix高可用架构(1)
2401_83739727的博客
05-07 1060
313d78a17a7821d208eb568dd2e587bc.png](https://img-blog.csdnimg.cn/img_convert/313d78a17a7821d208eb568dd2e587bc.png) **学习书籍推荐****往期发布文章**!
SpringCloud微服务：Zipkin组件，实现请求链路追踪
qq_40742949的博客
05-16 508
一、链路追踪简介 1、Sleuth组件简介 Sleuth是SpringCloud微服务系统中的一个组件，实现了链路追踪解决方案。可以定位一个请求到底请求了哪些具体的服务。在复杂的微服务系统中，如果请求发生了异常，可以快速捕获问题所在的服务。 2、项目结构 启动顺序如下 * 注册中心 node07-eureka-7001 * 链路数据收集服务 node07-zipkin-7003 * 服务提供 node07-provider-6001 node07-provider-6002 * 网关路由 node07-
zabbix监控nginx和fpm（网站并发数）自定义key
weixin_34178244的博客
08-21 146
监控nginx，主要讲解监控并发数：1: nginx编译参数：--prefix=/usr/local/nginx --with-http_stub_status_module zabbix编译参数的查看：/usr/local/nginx/sbin/nginx -Vnginx version: nginx/1.8.1built by gcc 4.4.7 20120313 (Red Hat 4.4.7...
keepalived+nginx高可用 脑裂监控
QWQ45597316的博客
08-31 2661
keepalived+nginx 脑裂的监控
zabbix监控keepalived脑裂
馆主的博客
10-09 651
在高可用（HA）系统中，当联系2个节点的“心跳线”断开时，本来为一整体、动作协调的HA系统，就分裂成为2个独立的个体。对脑裂的监控应在备用服务器上进行，通过添加zabbix自定义监控进行。监控备上有无VIP地址
keepalived-通过zabbix监控是否发生脑裂
哭的博客
10-09 732
在高可用（HA）系统中，当联系2个节点的“心跳线”断开时，本来为一整体、动作协调的HA系统，就分裂成为2个独立的个体。两个节点上的HA软件像“裂脑人”一样，争抢“共享资源”、争起“应用服务”，就会发生严重后果——或者共享资源被瓜分、两边“服务”都起不来了；（3）设置仲裁机制。不仅“心跳”、还兼对外“服务”的本端网络链路断了，即使启动（或继续）应用服务也没有用了，那就主动放弃竞争，让能够ping通参考IP的一端去起服务。（1）添加冗余的心跳线，例如：双心跳线（心跳线也HA），尽量减少“裂脑”发生几率；
zabbix监控keepalived高可用脑裂
R972965的博客
03-09 1433
zabbix监控keepalived高可用脑裂1. 搭建lamb架构（用脚本安装，过程略）2. 配置zabbix3. 配置keepalived 1. 搭建lamb架构（用脚本安装，过程略） 2. 配置zabbix [root@zml ~]# yum -y install net-snmp-devel libevent-devel [root@zml ~]# cd /usr/src/ [root@z...
zabbix监控部署keepalived高可用
m0_56681539的博客
10-19 3313
在高可用（HA）系统中，当联系2个节点的“心跳线”断开时，本来为一整体、动作协调的HA系统，就分裂成为2个独立的个体。两个节点上的HA软件像“裂脑人”一样，争抢“共享资源”、争起“应用服务”，就会发生严重后果——或者共享资源被瓜分、两边“服务”都起不来了；（3）设置仲裁机制。不仅“心跳”、还兼对外“服务”的本端网络链路断了，即使启动（或继续）应用服务也没有用了，那就主动放弃竞争，让能够ping通参考IP的一端去起服务。（1）添加冗余的心跳线，例如：双心跳线（心跳线也HA），尽量减少“裂脑”发生几率；
使用nginx basic增加身份验证
yanyuan_1118的专栏
12-05 514
前言： zipkin不提供可视化页面身份验证，借nginx basic认证反向代理访问zipkin可视化页面。 nginx basic 在Nginx的插件模块中有一个模块auth_basic可以要求用户进行身份认证，默认情况下nginx已经安装了这个模块 。 操作步骤 1.生成账号密码 htpasswd没安装可以使用yum install htpasswd htpasswd -bc /et...
还在用什么Zipkin，Skywalking才是最香的
05-12 2769
但是我想说现在更好的选择可能是Apache Skywalking，简单来说，Zipkin能做的事情，Skywalking也能做，而且做得更好，Skywalking具备的独特能力，Zipkin却没有满足，并且社区的活跃度在下降。微服务架构带来了整体服务之间调用的复杂性，而链路跟踪是其中非常重要的一环。4、插件扩展：Apache Skywalking提供了一套丰富的插件系统，可以与各种第三方组件和应用程序集成，另外已经原生集成了MySQL、APISIX、kubernetes等组件的监控，还支持自监控。
GPU服务器本地搭建Dify+xinference实现大模型应用
最新发布
qq_43548590的博客
09-25 509
GPU服务器本地搭建Dify+xinference实现大模型应用
一体化运维管理软件在医院信息化运维体系中的必要性
MXsoft618的博客
09-21 348
监控易在医院的应用已经相当普及。这些软件在医院信息化运维中发挥着关键作用，提高了医院信息系统的稳定性和可靠性，确保了医疗服务的高效运行。例如，在郑州人民医院、某市第一人民医院等诸多医疗机构中，监控易已经被成功应用并取得了显著的效果。监控易一体化运维管理软件在医院信息化运维体系中扮演着“智能守护者”的角色。它通过全面的监控和管理功能，确保医院信息系统的稳定运行，提高运维效率，并为医院提供高效、精准的运营管理服务。随着医院信息化建设的不断深入，信息系统的稳定性和安全性对于医疗服务的质量和效率至关重要。
828华为云征文 | 华为云 X 实例服务器存储性能测试与优化策略
cooldream2009的博客
09-25 1447
在当今数字化时代，服务器的存储性能对于企业和个人用户来说至关重要。华为云作为全球领先的云服务提供商，其 X 实例服务器以强大的性能和可靠性备受关注。本文将详细介绍对华为云 X 实例服务器存储性能的测试过程，并探讨相应的优化策略，帮助读者更好地了解和利用这一强大的云服务资源。
【CSP】2024第二轮前的准备工作
m0_54696634的博客
09-24 343
第二轮成绩还没出，估分有希望但不高，发个帖子涨rp。
grpcweb 客户端请求grpc-java服务器
nddjava的专栏
09-24 366
1. 定义grpc proto文件：HelloWorld.proto。5.grpc-web代理：nginx。3. grpc-web js生成。2. java grpc服务。4. grpc-web代码。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值