带你学习Keepalived 如喝水一样简单！！！

已于 2024-08-14 15:03:19 修改
阅读量844 收藏 12
点赞数 23
文章标签： linux 服务器
于 2024-08-14 15:02:58 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Sons1/article/details/141190794
版权

目录

一.高可用集群

系统可用性

系统故障

实现高可用

VRRP：Virtual Router Redundancy Protocol（心跳所用的协议）

VRRP 相关术语

VRRP 相关技术

二.Keepalived 部署

keepalived 简介

Keepalived 架构

全局配置

配置虚拟路由器

Keepalived 环境准备

keepalived虚拟路由管理示例

开启通信功能及独立日志

实现独立子配置文件

三.Keepalived 企业应用示例

实现master/slave的 Keepalived 单主架构

MASTER配置

BACKUP配置

抢占模式和非抢占模式

非抢占模式 nopreempt

抢占延迟模式 preempt_delay

VIP单播配置

邮件配置

Keepalived 通知脚本配置

通知脚本类型

脚本的调用方法

创建通知脚本

实战案例：实现 Keepalived 状态切换的通知脚本

实现 master/master 的 Keepalived 双主架构

实现IPVS的高可用性

IPVS相关配置

虚拟服务器配置结构

virtual server （虚拟服务器）的定义格式

虚拟服务器配置

应用层监测

TCP监测

实战案例1：实现单主的 LVS-DR 模式

实战案例：实现HAProxy高可用

一.高可用集群

  • LB：Load Balance 负载均衡 LVS/HAProxy/nginx（http/upstream, stream/upstream）

  • HA：High Availability 高可用集群 数据库、Redis

  • SPoF: Single Point of Failure，解决单点故障

    HPC：High Performance Computing 高性能集群

系统可用性

SLA：Service-Level Agreement 服务等级协议（提供服务的企业与客户之间就服务的品质、水准、性能 等方面所达成的双方共同认可的协议或契约）

A = MTBF / (MTBF+MTTR）

 99.95%:(60*24*30)*(1-0.9995)=21.6分钟 #一般按一个月停机时间统计

指标 ：99.9%, 99.99%, 99.999%,99.9999%

系统故障

硬件故障：设计缺陷、wear out（损耗）、非人为不可抗拒因素（硬件出现问题）

软件故障：设计缺陷 bug

实现高可用

提升系统高用性的解决方案：降低MTTR- Mean Time To Repair(平均故障时间)

解决方案：建立冗余机制

  • active/passive 主/备

  • active/active 双主

  • active --> HEARTBEAT --> passive

  • active <--> HEARTBEAT <--> active

VRRP：Virtual Router Redundancy Protocol（心跳所用的协议）

虚拟路由冗余协议,解决静态网关单点风险

  • 物理层:路由器、三层交换机

  • 软件层:keepalived

 

VRRP 相关术语

  • 虚拟路由器：Virtual Router

  • 虚拟路由器标识：VRID(0-255)，唯一标识虚拟路由器

  • VIP：Virtual IP

  • VMAC：Virutal MAC (00-00-5e-00-01-VRID)

  • 物理路由器：

  1. master：主设备

  2. backup：备用设备

  3. priority：优先级

VRRP 相关技术

通告：心跳，优先级等；周期性

工作方式：抢占式，非抢占式

安全认证：

  • 无认证

  • 简单字符认证：预共享密钥

  • MD5

工作模式：

  • 主/备：单虚拟路由器

  • 主/主：主/备（虚拟路由器1），备/主（虚拟路由器2）

二.Keepalived 部署

keepalived 简介

vrrp 协议的软件实现，原生设计目的为了高可用 ipvs服务

  • Keepalived 是一个用于实现 Linux 服务器高可用性（High Availability，简称 HA）的软件。

    Keepalived 主要有以下几个关键特点和功能：

    1. 虚拟 IP（VIP）管理：可以为一组服务器配置一个虚拟 IP 地址。当主服务器故障时，虚拟 IP 会自动漂移到备用服务器上，从而实现服务的不间断切换。

    2. 健康检查：通过多种方式（如 TCP 连接、HTTP 请求等）对服务器进行健康检查，以确定服务器是否正常运行。

    3. 主备切换：基于健康检查的结果，自动在主服务器和备用服务器之间进行切换，确保服务的连续性。

    4. 通知机制：在发生主备切换等重要事件时，可以发送通知（如邮件、短信等）给管理员。

    例如，在一个 Web 服务架构中，使用 Keepalived 配置了两台服务器，一台作为主服务器，一台作为备用服务器，并为其分配了一个虚拟 IP。当主服务器出现故障时，Keepalived 会检测到并将虚拟 IP 切换到备用服务器上，使得客户端的请求能够继续得到响应，实现了高可用性。

    总的来说，Keepalived 能够有效地提高服务器系统的可用性和可靠性，减少因服务器故障导致的服务中断时间。

Keepalived 架构

 

  • 用户空间核心组件：

    vrrp stack：VIP消息通告

    checkers：监测real server system call：实现 vrrp 协议状态转换时调用脚本的功能

    SMTP：邮件组件 IPVS

    wrapper：生成IPVS规则

    Netlink Reflector：网络接口

    WatchDog：监控进程

  • 控制组件：提供keepalived.conf 的解析器，完成Keepalived配置 ；

  • IO复用器：针对网络目的而优化的自己的线程抽象；

  • 内存管理组件：为某些通用的内存管理功能（例如分配，重新分配，发布等）提供访问权限。

全局配置

! Configuration File for keepalived
global_defs {
	notification_email {
		1563448814@qq.com #keepalived 发生故障切换时邮件发送的目标邮箱，可以按行区分写多个
		timiniglee-zln@163.com
}
		notification_email_from keepalived@KA1.Sons1.org #发邮件的地址
		smtp_server 127.0.0.1 #邮件服务器地址
		smtp_connect_timeout 30 #邮件服务器连接timeout
		router_id KA1.Sons1.org #每个keepalived主机唯一标识
								#建议使用当前主机名，但多节点重名不影响
	vrrp_skip_check_adv_addr #对所有通告报文都检查，会比较消耗性能
							#启用此配置后，如果收到的通告报文和上一
个报文是同一 #个路由器，则跳过检查，默认
值为全检查
	vrrp_strict #严格遵循vrrp协议
			#启用此项后以下状况将无法启动服务:
			#1.无VIP地址
			#2.配置了单播邻居
			#3.在VRRP版本2中有IPv6地址
			#建议不加此项配置
	vrrp_garp_interval 0 #报文发送延迟，0表示不延迟
	vrrp_gna_interval 0 #消息发送延迟
	vrrp_mcast_group4 224.0.0.18 #指定组播IP地址范围：
}

配置虚拟路由器

vrrp_instance VI_1 {
	state MASTER
	interface eth0 #绑定为当前虚拟路由器使用的物理接口，如：eth0,可以和VIP不在一个网卡
	virtual_router_id 51 #每个虚拟路由器惟一标识,范围：0-255，每个虚拟路由器此值必须唯一
					#否则服务无法启动
					#同属一个虚拟路由器的多个keepalived节点必须相同
					#务必要确认在同一网络中此值必须唯一
	priority 100 #当前物理节点在此虚拟路由器的优先级，范围：1-254
				#值越大优先级越高,每个keepalived主机节点此值不同
	advert_int 1 #vrrp通告的时间间隔，默认1s
authentication { #认证机制
	auth_type AH|PASS #AH为IPSEC认证(不推荐),PASS为简单密码(建议使用)
	uth_pass 1111 #预共享密钥，仅前8位有效
#同一个虚拟路由器的多个keepalived节点必须一样
}
virtual_ipaddress { #虚拟IP,生产环境可能指定上百个IP地址
	<IPADDR>/<MASK> brd <IPADDR> dev <STRING> scope <SCOPE> label <LABEL>
	172.25.254.100 #指定VIP，不指定网卡，默认为eth0,注意：不指定/prefix,默认32
	172.25.254.101/24 dev eth1
	172.25.254.102/24 dev eth2 label eth2:1
}
}

Keepalived 环境准备

keepalived虚拟路由管理示例

#首先把防火墙关掉
systemctl stop firewalld
#禁用防火墙
systemctl mask firewalld
yum install keepalived -y
[root@ka1 ~]# cat /etc/keepalived/keepalived.conf 
! Configuration File for keepalived

global_defs {
   notification_email {
   2036315692@qq.com #keepalived 发生故障切换时邮件发送的目标邮箱，可以按行区
分写多个
}
   notification_email_from Alexandre.Cassen@Ka1.Sons1.loc
   smtp_server 127.0.0.1
   smtp_connect_timeout 30
   router_id Ka1.sons1.org
   vrrp_skip_check_adv_addr 
   vrrp_strict 
   vrrp_garp_interval 0
   vrrp_gna_interval 0
   vrrp_mcast_group4 224.0.0.18 
}

vrrp_instance VI_1 {
    state MASTER
    interface eth0
    virtual_router_id 111 #rout_id是唯一的
    priority 100 #路由器的优先级，范围：1-25
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.100/24 dev eth0 label eth0:1
    }
}

[root@ka1 ~]# systemctl enable --now keepalived.service 
[root@ka1 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether 00:0c:29:79:22:77 brd ff:ff:ff:ff:ff:ff
    inet 172.25.254.10/24 brd 172.25.254.255 scope global noprefixroute eth0
       valid_lft forever preferred_lft forever
    inet `172.25.254.100/24` scope global secondary eth0:1
       valid_lft forever preferred_lft forever
    inet6 fe80::20c:29ff:fe79:2277/64 scope link 
       valid_lft forever preferred_lft forever
#把配置文件拷过去
[root@ka1 ~]# scp /etc/keepalived/keepalived.conf root@172.25.254.20:/etc/keepalived/keepalived.conf 
#Ka2上修改
[root@ka2 ~]# cat /etc/keepalived/keepalived.conf
vrrp_instance VI_1 {
    state BACKUP #修改为备用设备 
    interface eth0
    virtual_router_id 111
    priority 11 #路由器的优先级，范围：1-25
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.100/24 dev eth0 label eth0:1
    }
}
[root@ka1 ~]# systemctl enable --now keepalived.service


[root@ka1 ~]# tcpdump -i eth0 -nn host 224.0.0.18
tcpdump: verbose output suppressed, use -v or -vv for full protocol decode
listening on eth0, link-type EN10MB (Ethernet), capture size 262144 bytes
11:29:51.852562 IP 172.25.254.10 > 224.0.0.18: VRRPv2, Advertisement, vrid 111, prio 100, authtype simple, intvl 1s, length 20
11:29:52.854114 IP 172.25.254.10 > 224.0.0.18: VRRPv2, Advertisement, vrid 111, prio 100, authtype simple, intvl 1s, l
[root@ka1 ~]# systemctl stop  keepalived.service 
#ka1挂掉之后就启用ka2
11:30:48.785080 IP 172.25.254.10 > 224.0.0.18: VRRPv2, Advertisement, vrid 111, prio 100, authtype simple, intvl 1s, length 20
11:30:50.103265 IP 172.25.254.20 > 224.0.0.18: VRRPv2, Advertisement, vrid 111, prio 11, authtype simple, intvl 1s, length 20

开启通信功能及独立日志

[root@KA1 ~]# vim /etc/sysconfig/keepalived
KEEPALIVED_OPTIONS="-D -S 6"
[root@ka1 ~]#vim /etc/rsyslog.conf
local6.* /var/log/keepalived.log
[root@ka1 ~]# > /var/log/keepalived.log #清空一下日志
[root@ka1 ~]#systemctl restart  rsyslog.service
[root@ka1 ~]#systemctl restart keepalived.service
[root@ka1 ~]# tail -f /var/log/keepalived.long 
Aug 12 18:25:51 ka1 Keepalived_healthcheckers[13454]: SMTP alert successfully sent.
Aug 12 18:25:52 ka1 Keepalived_healthcheckers[13454]: Timeout connecting server [192.168.201.100]:443.
Aug 12 18:25:54 ka1 Keepalived_healthcheckers[13454]: Error connecting server [192.168.200.3]:1358.
Aug 12 18:25:54 ka1 Keepalived_healthcheckers[13454]: Check on service [192.168.200

实现独立子配置文件

当生产环境复杂时， /etc/keepalived/keepalived.conf 文件中内容过多，不易管理

将不同集群的配置，比如：不同集群的VIP配置放在独立的子配置文件中利用include 指令可以实现包含 子配置文件

格式：

include /path/file

示例：

[root@KA1 ~]# mkdir /etc/keepalived/conf.d
[root@ka1 ~]# cat /etc/keepalived/keepalived.conf 
! Configuration File for keepalived

global_defs {
   notification_email {
   2036315692@qq.com
}
   notification_email_from Alexandre.Cassen@firewall.loc
   smtp_server 127.0.0.1
   smtp_connect_timeout 30
   router_id Ka1.sons1.org
   vrrp_skip_check_adv_addr 
   #vrrp_strict 
   vrrp_garp_interval 0
   vrrp_gna_interval 0
   vrrp_mcast_group4 224.0.0.18 
}
include /etc/keepalived/conf.d/*.conf #相关子配置文件

[root@ka1 ~]# cat /etc/keepalived/conf.d/172.25.254.100.conf 
vrrp_instance VI_1 {
	state MASTER
	interface eth0
	virtual_router_id 111
	priority 100
	advert_int 1
	authentication {
		auth_type PASS
		auth_pass 1111
}
	virtual_ipaddress {
		172.25.254.100/24 dev eth0 label eth0:1
}
}

三.Keepalived 企业应用示例

实现master/slave的 Keepalived 单主架构

MASTER配置

[root@ka1 ~]# cat /etc/keepalived/keepalived.conf 
! Configuration File for keepalived

global_defs {
   notification_email {
   2036315692@qq.com 
分写多个
}
   notification_email_from Alexandre.Cassen@Ka1.Sons1.loc
   smtp_server 127.0.0.1
   smtp_connect_timeout 30
   router_id Ka1.sons1.org
   vrrp_skip_check_adv_addr 
   #vrrp_strict #添加此选项无法访问vip，可以用nft list ruleset查看
   vrrp_garp_interval 0
   vrrp_gna_interval 0
   vrrp_mcast_group4 224.0.0.18 
}

vrrp_instance VI_1 {
    state MASTER
    interface eth0
    virtual_router_id 111 
    priority 100 
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.100/24 dev eth0 label eth0:1
    }
}

BACKUP配置

#配置文件和master基本一致，只需修改三行
[root@ka1 ~]# cat /etc/keepalived/keepalived.conf 
! Configuration File for keepalived

global_defs {
   notification_email {
   2036315692@qq.com 
}
   notification_email_from Alexandre.Cassen@Ka1.Sons1.loc
   smtp_server 127.0.0.1
   smtp_connect_timeout 30
   router_id Ka1.sons1.org
   vrrp_skip_check_adv_addr 
   #vrrp_strict #添加此选项无法访问vip，可以用nft list ruleset查看
   vrrp_garp_interval 0
   vrrp_gna_interval 0
   vrrp_mcast_group4 224.0.0.18 
}

vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 111 #相同id管理同一个虚拟路由
    priority 11 #低优先级
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.100/24 dev eth0 label eth0:1
    }
}

抓包观察  

tcpdump -i eth0 -nn host 224.0.0.18

抢占模式和非抢占模式

非抢占模式 nopreempt

默认为抢占模式preempt，即当高优先级的主机恢复在线后，会抢占低先级的主机的master角色， 这样会使vip在KA主机中来回漂移，造成网络抖动，

建议设置为非抢占模式 nopreempt ，即高优先级主机恢复后，并不会抢占低优先级主机的master角色

非抢占模块下,如果原主机down机, VIP迁移至的新主机, 后续也发生down时,仍会将VIP迁移回原主机。

Note

注意：要关闭 VIP抢占，必须将各 keepalived 服务器state配置为BACKUP

#Ka1主机配置
vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 111 
    priority 11 #优先级高
    nopreempt #非抢占模式
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.100/24 dev eth0 label eth0:1
    }
}


#KA2主机配置
vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 111 
    priority 11 #优先级高
    nopreempt #非抢占模式
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.100/24 dev eth0 label eth0:1
    }
}

抢占延迟模式 preempt_delay

抢占延迟模式，即优先级高的主机恢复后，不会立即抢回VIP，而是延迟一段时间（默认300s）再抢回 VIP

preempt_delay # #指定抢占延迟时间为#s，默认延迟300s 

Note

注意：需要各keepalived服务器state为BACKUP,并且不要启用 vrrp_strict

示例：

#Ka1主机配置
vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 111 
    priority 100 #优先级高
    preempt_delay 10s #抢占延迟10s
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.100/24 dev eth0 label eth0:1
    }
}


#KA2主机配置
vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 111 
    priority 11 #优先级低
    preempt_delay 5s #抢占延迟5s 
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.100/24 dev eth0 label eth0:1
    }
}

VIP单播配置

默认keepalived主机之间利用多播相互通告消息，会造成网络拥塞，可以替换成单播，减少网络流量

注意：启用 vrrp_strict 时，不能启用单播

示例：

#master 主机配置
[root@ka1 ~]# cat /etc/keepalived/keepalived.conf 
! Configuration File for keepalived

global_defs {
   notification_email {
   2036315692@qq.com
}
   notification_email_from Alexandre.Cassen@firewall.loc
   smtp_server 127.0.0.1
   smtp_connect_timeout 30
   router_id Ka1.sons1.org
   vrrp_skip_check_adv_addr 
   #vrrp_strict 					#注释此参数，与vip单播模式冲突
   vrrp_garp_interval 0
   vrrp_gna_interval 0
   vrrp_mcast_group4 224.0.0.18 
}
include /etc/keepalived/conf.d/*.conf
vrrp_instance VI_1 {
    state MASTER
    interface eth0
    virtual_router_id 111
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.100/24 dev eth0 label eth0:1
    }
    unicast_src_ip 172.25.254.10 #本机IP
    unicast_peer {
			172.25.254.20 		#指向对方主机IP
							   #如果有多个keepalived,再加其它节点的IP
}
}



#backup 主机配置
[root@ka2 ~]# cat /etc/keepalived/keepalived.conf 
! Configuration File for keepalived

global_defs {
   notification_email {
   2036315692@qq.com
}
   notification_email_from Alexandre.Cassen@firewall.loc
   smtp_server 127.0.0.1
   smtp_connect_timeout 30
   router_id Ka2.sons1.org
   vrrp_skip_check_adv_addr 
   #vrrp_strict 					#注释此参数，与vip单播模式冲突
   vrrp_garp_interval 0
   vrrp_gna_interval 0
   vrrp_mcast_group4 224.0.0.18 
}

vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 111
    priority 11
    nopreempt
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.100/24 dev eth0 label eth0:1
    }
    unicast_src_ip 172.25.254.20 #本机IP
    unicast_peer {
                        172.25.254.10   #指向对方主机IP
							         #如果有多个keepalived,再加其它节点的IP

}
}

抓包看效果

[root@ka1 ~]# tcpdump -i eth0 -nn src host 172.25.254.20 and dst 172.25.254.10
tcpdump: verbose output suppressed, use -v or -vv for full protocol decode
listening on eth0, link-type EN10MB (Ethernet), capture size 262144 bytes
19:22:18.349729 IP 172.25.254.20 > 172.25.254.10: VRRPv2, Advertisement, vrid 111, prio 11, authtype simple, intvl 1s, length 20
19:22:19.351258 IP 172.25.254.20 > 172.25.254.10: VRRPv2, Advertisement, vrid 111, prio 11, authtype simple, intvl 1s, length 20
19:22:20.353265 IP 172.25.254.20 > 172.25.254.10: VRRPv2, Advertisement, vrid 111, prio 11, authtype simple, intvl 1s, length 20



[root@ka2 ~]# tcpdump -i eth0 -nn src host 172.25.254.20 and 172.25.254.10
tcpdump: expression rejects all packets
[root@ka2 ~]# tcpdump -i eth0 -nn src host 172.25.254.10 and dst 172.25.254.20
tcpdump: verbose output suppressed, use -v or -vv for full protocol decode
listening on eth0, link-type EN10MB (Ethernet), capture size 262144 bytes
19:23:31.469587 IP 172.25.254.10 > 172.25.254.20: ICMP 172.25.254.10 protocol 112 unreachable, length 48
19:23:32.472701 IP 172.25.254.10 > 172.25.254.20: ICMP 172.25.254.10 protocol 112 unreachable, length 48
19:23:33.474021 IP 172.25.254.10 > 172.25.254.20: ICMP 172.25.254.10 protocol 112 unreachable, length 48

邮件配置

安装邮件发送工具

[root@KA1 ~]# dnf install mailx -y

QQ邮箱配置

[root@KA1 ~]# vim /etc/mail.rc
#######mail set##########
set from=24664624426@qq.com
set smtp=smtp.qq.com
set smtp-auth-user=24664624426@qq.com
set smtp-auth-password=isjatjwmcxtxbefj #去QQ邮箱生成授权码
set smtp-auth=login
set ssl-verify=ignore

 

发送测试邮件

[root@KA1 ~]# echo test message |mail -s test 24664624426@qq.com

 

Keepalived 通知脚本配置

当keepalived的状态变化时，可以自动触发脚本的执行，比如：发邮件通知用户

默认以用户keepalived_script身份执行脚本

如果此用户不存在，以root执行脚本可以用下面指令指定脚本执行用户的身份

 global_defs {
......
script_user <USER>
......
}

通知脚本类型

当前节点成为主节点时触发的脚本

notify_master <STRING>|<QUOTED-STRING> 

当前节点转为备节点时触发的脚本  

notify_backup <STRING>|<QUOTED-STRING>

当前节点转为“失败”状态时触发的脚本

notify_fault <STRING>|<QUOTED-STRING>

通用格式的通知触发机制，一个脚本可完成以上三种状态的转换时的通知

notify <STRING>|<QUOTED-STRING>

当停止VRRP时触发的脚本

notify_stop <STRING>|<QUOTED-STRING>

脚本的调用方法

在 vrrp_instance VI_1 语句块的末尾加下面行

notify_master "/etc/keepalived/notify.sh master"
notify_backup "/etc/keepalived/notify.sh backup"
notify_fault "/etc/keepalived/notify.sh fault"

 

创建通知脚本

[root@ka1 ~]# cat /etc/keepalived/mail.sh 
mail_dest='2036315692@qq.com'
mail_send()
{
mail_subj="$HOSTNAME to be $1 vip move"
mail_mess="`date +%F\ %T`: vrrp move,$HOSTNAME change $1"
echo "$mail_mess" | mail -s "$mail_subj" $mail_dest
}
case $1 in
	master)
	mail_send master
	;;
	backup)
	mail_send backup
	;;
	fault)
	mail_send fault
	;;
	*)
	exit 1
	;;
esac

实战案例：实现 Keepalived 状态切换的通知脚本

#在所有 keepalived节点配置如下
[root@ka1 + ka2 ~]# cat /etc/keepalived/mail.sh 
mail_dest='2036315692@qq.com'
mail_send()
{
mail_subj="$HOSTNAME to be $1 vip move"
mail_mess="`date +%F\ %T`: vrrp move,$HOSTNAME change $1"
echo "$mail_mess" | mail -s "$mail_subj" $mail_dest
}
case $1 in
	master)
	mail_send master
	;;
	backup)
	mail_send backup
	;;
	fault)
	mail_send fault
	;;
	*)
	exit 1
	;;
esac
[root@ka1 +ka2 ~]# chmod +x /etc/keepalived/mail.sh
[root@ka1 +ka2 ~]#vim /etc/keepalived/keepalived.conf
[root@ka1 ~]# cat /etc/keepalived/keepalived.conf 
! Configuration File for keepalived

global_defs {
   notification_email {
   2036315692@qq.com
}
   notification_email_from Alexandre.Cassen@firewall.loc
   smtp_server 127.0.0.1
   smtp_connect_timeout 30
   router_id Ka1.sons1.org
   vrrp_skip_check_adv_addr 
   #vrrp_strict 
   vrrp_garp_interval 0
   vrrp_gna_interval 0
   vrrp_mcast_group4 224.0.0.18 
}
#include /etc/keepalived/conf.d/*.conf
vrrp_instance VI_1 {
    state MASTER #ka2的是BACKUP
    interface eth0
    virtual_router_id 111
    priority 100 #ka2的是11
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.100/24 dev eth0 label eth0:1
    }
    unicast_src_ip 172.25.254.10 
    unicast_peer {
			172.25.254.20 
}
	notify_master "/etc/keepalived/mail.sh master"
	notify_backup "/etc/keepalived/mail.sh backup"
	notify_fault "/etc/keepalived/mail.sh fault"

}
#模拟master故障
[root@ka1 ~]# systemctl stop keepalived.service

 Ka1挂掉随后启动Ka2变成master

实现 master/master 的 Keepalived 双主架构

master/slave的单主架构，同一时间只有一个Keepalived对外提供服务，此主机繁忙，而另一台主机却 很空闲，利用率低下，可以使用master/master的双主架构，解决此问题。

master/master 的双主架构：

即将两个或以上VIP分别运行在不同的keepalived服务器，以实现服务器并行提供web访问的目的，提高 服务器资源利用率。

[root@ka1 ~]# cat /etc/keepalived/keepalived.conf 
vrrp_instance VI_1 {
    state MASTER
    interface eth0
    virtual_router_id 111
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.100/24 dev eth0 label eth0:1
    }
    unicast_src_ip 172.25.254.10 
    unicast_peer {
			172.25.254.20 
}
}


vrrp_instance VI_2 {
    state BACKUP
    interface eth0
    virtual_router_id 200
    priority 80
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.200/24 dev eth0 label eth0:2
    }
    unicast_src_ip 172.25.254.10 
    unicast_peer {
			172.25.254.20 
}
}


[root@ka2 ~]# cat /etc/keepalived/keepalived.conf 


vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 111
    priority 11
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.100/24 dev eth0 label eth0:1
    }
    unicast_src_ip 172.25.254.20 
    unicast_peer {
                        172.25.254.10

}
}

vrrp_instance VI_2 {
    state MASTER
    interface eth0
    virtual_router_id 200
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
    172.25.254.200/24 dev eth0 label eth0:2
    }
    unicast_src_ip 172.25.254.20 
    unicast_peer {
			172.25.254.10
}
}

实现IPVS的高可用性

IPVS相关配置

虚拟服务器配置结构

virtual_server IP port {
...
real_server {
...
}
real_server {
...
}
…
}

virtual server （虚拟服务器）的定义格式

virtual_server IP port #定义虚拟主机IP地址及其端口
virtual_server fwmark int #ipvs的防火墙打标，实现基于防火墙的负载均衡集群
virtual_server group string #使用虚拟服务器组 

虚拟服务器配置

 virtual_server IP port { #VIP和PORT
delay_loop <INT> #检查后端服务器的时间间隔
lb_algo rr|wrr|lc|wlc|lblc|sh|dh #定义调度方法
lb_kind NAT|DR|TUN #集群的类型,注意要大写
persistence_timeout <INT> #持久连接时长
protocol TCP|UDP|SCTP #指定服务协议,一般为TCP
sorry_server <IPADDR> <PORT> #所有RS故障时，备用服务器地址
real_server <IPADDR> <PORT> { #RS的IP和PORT
weight <INT> #RS权重
notify_up <STRING>|<QUOTED-STRING> #RS上线通知脚本
notify_down <STRING>|<QUOTED-STRING> #RS下线通知脚本
HTTP_GET|SSL_GET|TCP_CHECK|SMTP_CHECK|MISC_CHECK { ... } #定义当前主机健康状态检测方法
}
}
#注意:括号必须分行写,两个括号写在同一行,如: }} 会出错

应用层监测

应用层检测：HTTP_GET|SSL_GET

HTTP_GET|SSL_GET {
url {
path <URL_PATH> #定义要监控的URL
status_code <INT> #判断上述检测机制为健康状态的响应码，一般为 200
}
connect_timeout <INTEGER> #客户端请求的超时时长, 相当于haproxy的timeout server
nb_get_retry <INT> #重试次数
delay_before_retry <INT> #重试之前的延迟时长
connect_ip <IP ADDRESS> #向当前RS哪个IP地址发起健康状态检测请求
connect_port <PORT> #向当前RS的哪个PORT发起健康状态检测请求
bindto <IP ADDRESS> #向当前RS发出健康状态检测请求时使用的源地址
bind_port <PORT> #向当前RS发出健康状态检测请求时使用的源端口
} 

TCP监测

传输层检测：TCP_CHECK

TCP_CHECK {
connect_ip <IP ADDRESS> #向当前RS的哪个IP地址发起健康状态检测请求
connect_port <PORT> #向当前RS的哪个PORT发起健康状态检测请求
bindto <IP ADDRESS> #发出健康状态检测请求时使用的源地址
bind_port <PORT> #发出健康状态检测请求时使用的源端口
connect_timeout <INTEGER> #客户端请求的超时时长
                        #等于haproxy的timeout server
} 

实战案例1：实现单主的 LVS-DR 模式


# 在两台后端RealServer上安装httpd
[root@realserver1 + realserver2 ~]# yum install httpd -y
[root@realserver1 ~]# echo realserver1 - 172.25.254.110 > /var/www/html/index.html
[root@realserver2 ~]# echo realserver2 - 172.25.254.120 > /var/www/html/index.html
[root@realserver1 + realserver2 ~]# systemctl enable --now httpd.service 

# 配置环回IP地址
[root@realserver1 + realserver2 ~]# ip a a 172.25.254.100/32 dev lo

# 禁止ARP响应
[root@realserver1 + realserver2 ~]# vim /etc/sysctl.d/arp.conf
net.ipv4.conf.all.arp_ignore=1
net.ipv4.conf.all.arp_announce=2
net.ipv4.conf.lo.arp_ignore=1
net.ipv4.conf.lo.arp_announce=2

[root@realserver1 ~]# sysctl --system


#安装ipvsadm可以查看他的调度规则
[root@ka1 ~]# yum install ipvsadm -y

[root@ka1 + ka2 ~]# cat /etc/keepalived/keepalived.conf 

virtual_server 172.25.254.100 80 {
    delay_loop 6
    lb_algo wrr
    lb_kind DR
    protocol TCP

    real_server 172.25.254.110 80 {
        weight 1
       HTTP_GET {
            url {
              path /
              status_code 200
            }
            connect_timeout 3
            nb_get_retry 2
            delay_before_retry 2
        }
    }

    real_server 172.25.254.120 80 {
        weight 1
        HTTP_GET {
            url {
              path /
              status_code 200
            }
            connect_timeout 3
            nb_get_retry 2
            delay_before_retry 2
        }
    }
}
#配置完成之后重启服务
[root@ka1 + ka2 ~]# systemctl restart keepalived.service 
[root@ka1 ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  172.25.254.100:80 wrr
  -> 172.25.254.110:80            Route   1      0          0         
  -> 172.25.254.120:80            Route   1      0          0  
[root@Sons1 ~]# while true; do curl 172.25.254.100; sleep 0.5; done
realserver1 - 172.25.254.110
realserver2 - 172.25.254.120
realserver1 - 172.25.254.110
realserver2 - 172.25.254.120
realserver1 - 172.25.254.110
realserver2 - 172.25.254.120
realserver1 - 172.25.254.110
realserver2 - 172.25.254.120
#模拟故障
#第一台realserver1故障，自动切换至realserver2
[root@realserver1 ~]# systemctl stop httpd
[root@realserver1 ~]# while true; do curl 172.25.254.100; sleep 0.5; done
realserver2 - 172.25.254.120
realserver2 - 172.25.254.120
realserver2 - 172.25.254.120
realserver2 - 172.25.254.120
realserver2 - 172.25.254.120
realserver2 - 172.25.254.120
[root@ka1 ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  172.25.254.100:80 wrr   
  -> 172.25.254.120:80            Route   1      0          0

实战案例：实现HAProxy高可用

[root@realserver1 + realserver2 ~]# ip a d 172.25.254.100/32 dev lo
# 开启ARP响应
[root@realserver1 ~]# vim /etc/sysctl.d/arp.conf
net.ipv4.conf.all.arp_ignore=0
net.ipv4.conf.all.arp_announce=0
net.ipv4.conf.lo.arp_ignore=0
net.ipv4.conf.lo.arp_announce=0

# 注释掉在Keepalived主机上的LVS策略部分

[root@ka1 + ka2 ~]# yum install haproxy -y

#在两个ka1和ka2两个节点启用内核参数
[root@ka1 + ka2 ~]# vim /etc/sysctl.conf
net.ipv4.ip_nonlocal_bind = 1
[root@ka1 + ka2 ~]# sysctl -p

[root@ka1 + ka2 ~]# vim /etc/haproxy/haproxy.cfg
isten webcluster
    bind 172.25.254.100:80
    mode http
    balance roundrobin
    server web1 172.25.254.110:80 check inter 3 fall 2 rise 5
    server web2 172.25.254.120:80 check inter 3 fall 2 rise 5
    
# 编写脚本监测HAProxy状态
[root@ka1 ~]# vim /etc/keepalived/haproxy.sh
#!/bin/bash
killall -0 haproxy
[root@ka1 ~]# chmod +x /etc/keepalived/haproxy.sh
#如果无法使用killall这个指令下载psmisc指令包
[root@ka1 ~]# yum install psmisc -y

[root@ka1 ~]# vim /etc/keepalived/keepalived.conf 

#建议把这个配置写在vrrp_instance上面
vrrp_script check_haproxy {
        script "/etc/keepalived/haproxy.sh"
        interval 1
        weight -30
        fall 2
        rise 2
        timeout 2
}

vrrp_instance VI_1 {
    state MASTER
    interface eth0
    virtual_router_id 100
    priority 100
    advert_int 1
    #nopreempt
    #preempt_delay 5s
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:1
   }
   unicast_src_ip 172.25.254.10
   unicast_peer {
        172.25.254.20
   }
   track_script {
      check_haproxy
   }
}

[root@ka2 ~]# vim /etc/keepalived/keepalived.conf 

vrrp_script check_haproxy {
        script "/etc/keepalived/haproxy.sh"
        interval 1
        weight -30
        fall 2
        rise 2
        timeout 2
}

vrrp_instance VI_1 {
    state BACKUP
    interface eth0
    virtual_router_id 100
    priority 80
    advert_int 1
    #nopreempt
    #preempt_delay 5s
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        172.25.254.100/24 dev eth0 label eth0:1
   }
   unicast_src_ip 172.25.254.20
   unicast_peer {
        172.25.254.10
   }
   track_script {
      check_haproxy
   }
}

#测试
[root@ka1 ~]# systemctl stop haproxy.service
[root@ka1 ~]# curl 172.25.254.100
realserver2 - 172.25.254.120
[root@ka1 ~]# curl 172.25.254.100
realserver1 - 172.25.254.110
[C:\~]$ curl 172.25.254.100
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
100    29  100    29    0     0  10312      0 --:--:-- --:--:-- --:--:-- 14500
realserver2 - 172.25.254.120

[C:\~]$ curl 172.25.254.100
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
100    29  100    29    0     0   2121      0 --:--:-- --:--:-- --:--:--  2230
realserver1 - 172.25.254.110

Sons1
关注
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值