KVS+keepalived群集
Keepalived
1、支持故障自动切换(Failover)
2、支持节点健康状态检查(Health Checking)
判断LVS负载调度器、节点服务器的可用性,当master主机出现故障及时切换到backup节点保证业务正常,当 master 故障主机恢复后将其重新加入群集并且业务重新切换回 master 节点。
Keepalived及其工作原理
Keepalived是一个基于VRRP协议来实现的LVS服务高可用方案,可以解决静态路由出现的单点故障问题。
在一个LVS服务集群中通常有主服务器(MASTER) 和备份服务器(BACKUP) 两种角色的服务器,但是对外表现为一个 虚拟IP,主服务器会发送VRRP通告信息给备份服务器,当备份服务器收不到VRRP消息的时候,即主服务器异常的时候,备份服务器就会接管虚拟IP,继续提供服务,从而保证了高可用性。
Keepalived+LVS高可用部署案例
主机 | 操作系统 | IP地址 | 主要软件 |
---|---|---|---|
负载调度器 1 | CentOS 7 | 192.168.64.128 | ipvsadm keepalived |
负载调度器 2 | CentOS 7 | 192.168.64.129 | ipvsadm keepalived |
web服务器 1 | CentOS 7 | 192.168.64.130 | httpd |
web服务器 2 | CentOS 7 | 192.168.64.130 | httpd |
VIP | 虚拟网卡 | 192.168.64.100 | ens33:0 |
客户端 | win10 | 192.168.64.200 | 浏览器 |
首先配置DR负载调度器(192.168.64.128和192.168.64.129两台一样的配置)
systemctl stop firewalld
setenforce 0
modprobe ip_vs
cat /proc/net/ip_vs
yum install -y ipvsadm
----------------配置虚拟IP地址----------------
cd /etc/sysconfig/network-scripts/
cp ifcfg-ens33 ifcfg-ens33:0 #若隧道模式,复制为 ifcfg-tunl0
vim ifcfg-ens33:0
DEVICE=ens33:0
ONBOOT=yes
IPADDR=192.168.64.100
NETMASK=255.255.255.255
ifup ifcfg-ens33:0
ifconfig
---------------调整proc响应参数-----------------
vim /etc/sysctl.conf
net.ipv4.ip_forward = 0
net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0
sysctl -p
---------------配置负载分配策略---------------
ipvsadm-save > /etc/sysconfig/ipvsadm
ipvsadm
systemctl start ipvsadm
ipvsadm -C
ipvsadm -A -t 192.168.64.100:80 -s rr
ipvsadm -a -t 192.168.64.100:80 -r 192.168.64.130:80 -g #若隧道模式,-g替换为-i
ipvsadm -a -t 192.168.64.100:80 -r 192.168.64.131:80 -g
ipvsadm
ipvsadm -ln
配置web服务器(192.168.64.130和192.168.64.131 两台一样的配置)
systemctl stop firewalld.service
setenforce 0
yum install -y httpd
systemctl start httpd
cd /etc/sysconfig/network-scripts/
cp ifcfg-lo ifcfg-lo:0
vim ifcfg-lo:0
DEVICE=lo:0
IPADDR=192.168.64.100
NETMASK=255.255.255.255
ONBOOT=yes
ifup lo:0
ifconfig
route add -host 192.168.64.100 dev lo:0
route -n
-------调整内核的ARP响应参数以阻止更新VIP的MAC地址,避免发生冲突-----
vim /etc/sysctl.conf
net.ipv4.conf.lo.arp_ignore = 1 #系统只响应目的IP为本地IP的ARP请求
net.ipv4.conf.lo.arp_announce = 2 #系统不使用IP包的源地址来设置ARP请求的源地址,而选择发送接口的IP地址
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
sysctl -p
------------准备Web网页------------
cd /var/www/html/
echo "umi my wife !" > index.html
Web2的设置和Web1一样。
配置keepalved (主备两台DR负载调度器)
yum -y install ipvsadm keepalived
cd /etc/keepalived/
cp keepalived.conf keepalived.conf.bak
vim keepalived.conf
......
global_defs { #定义全局参数
-----------------------------10行修改----------------------------
smtp_server 127.0.0.1
---------------12行修改指定服务器(路由器)的名称,主备服务器名称须不同,主为LVS_01,备为LVS_02-----------
router_id LVS_01
-----------------------------14行修改--------------
#vrrp_strict #加注释
-----------------------------20行修改-------------
state MASTER
-----------------------------21行修改--------------
interface ens33
-----------------------------22行修改--------------
virtual_router_id 10
-----------------------------23行修改--------------
priority 100
advert_int 1
-----------------------------27行修改-------------
auth_pass 123456 #指定验证密码,主备服务器保持一致
-----------------------------30行修改--------------
virtual_ipaddress {
192.168.73.100 #指定群集vip地址
}
-----------------------------34行修改-------------
virtual_server 192.168.73.100 80 { #指定虚拟服务器地址(VIP)、端口,定义虚拟服务器和Web服务器池参数
delay_loop 6
lb_algo rr
-----------------------------37行修改-------------
lb_kind DR #指定为DR
-----------------------------41行修改-------------
real_server 192.168.64.130 80 { #指定第一个Web节点的地址、端口
-----------------------------43行修改-------------
real_server 192.168.73.131 80 {
weight 1
TCP_CHECK {
connect_port 80
connect_timeout 3
nb_get_retry 3
delay_before_retry 3
}
}
real_server 192.168.73.132 80 {
weight 1
TCP_CHECK {
connect_port 80
connect_timeout 3
nb_get_retry 3
delay_before_retry 3
}
}
}
删除后面多余的配置即可
systemctl start keepalived
ip addr show dev ens33 #查看虚拟网卡vip
===================第二台DR服务器(备)=================
cd /etc/keepalived/
mv keepalived.conf keepalived.conf.bak #备份一下
=================去主DR服务器DR1进行远程复制===============
scp keepalived.conf root@192.168.64.129:/etc/keepalived/
==================回到备DR服务器=================
vim keepalived.conf
--------------12行--------------
router_id LVS_02 #LVS修改成02
--------------20行--------------
state BACKUP #修改成BACKUP
priority 99 #优先级设置成99
其他保持不变
systemctl start keepalived
ip addr show dev ens33 #查看虚拟网卡vip
最后在客户机上来回刷新192.168.64.100网页