高可用群集之部署LVS+Keepalived 高可用群集(DR模式)
一、LVS+Keepalived 高可用群集
1、LVS
Linux虚拟服务器(Linux Virtual Server)
LVS 实际上相当于基于IP地址的虚拟化应用, 为基于IP地址和内容请求分发的负载均衡提出了一种高效的解决方法
2、Keepalived
- 支持故障自动切换(Failover)
- 支持节点健康状态检查(Health Checking)
判断LVS负载调度器、节点服务器的可用性,当master主机出现故障及时切换到backup节点保证业务正常,当 master 故障主机恢复后将其重新加入群集并且业务重新切换回 master 节点。
3、Keepalived实现原理剖析
- keepalived采用VRRP热备份协议实现Linux 服务器的多机热备功能
- VRRP(虚拟路由冗余协议)是针对路由器的一种备份解决方案。
- 由多台路由器组成一个热备份组,通过共用的虚拟IP地址对外提供服务
- 每个热备组内同时只有一台主路由器提供服务,其他路由器处于冗余状态
- 若当前在线的路由器失效,则其他路由器会根据设置的优先级自动接替虚拟IP地址,继续提供服务
二、LVS+Keepalived 高可用群集部署
1. 配置负载调度器 DR
主负载调度器:192.168.118.12
备负载调度器:192.168.118.16
下面是两个调度器一样的配置
Web服务器两台
Web1:192.168.118.14
Web2:192.168.118.15
客户机
192.168.118.202
------------------关防火墙,加载ip_vs模块-----------------
systemctl stop firewalld.service
systemctl disable firewalld.service
setenforce 0
modprobe ip_vs
cat /proc/net/ip_vs
yum -y install ipvsadm
----------------配置虚拟IP地址----------------
cd /etc/sysconfig/network-scripts/
cp ifcfg-ens33 ifcfg-ens33:0 #若隧道模式,复制为 ifcfg-tunl0
vim ifcfg-ens33:0
DEVICE=ens33:0
ONBOOT=yes
IPADDR=192.168.118.100
NETMASK=255.255.255.255
ifup ifcfg-ens33:0
ifconfig
-------------------调整 proc 响应参数---------------------
vim /etc/sysctl.conf
net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0
sysctl -p 加载内核配置
------------------配置负载分配策略----------------------
这里有点轻微的区别
主负载调度器:192.168.118.12
ipvsadm-save > /etc/sysconfig/ipvsadm
systemctl start ipvsadm.service
ipvsadm -C
#这里-t指定的虚拟地址为本机ens33网卡ip
ipvsadm -A -t 192.168.118.12:80 -s rr
ipvsadm -a -t 192.168.118.12:80 -r 192.168.118.14:80 -g
ipvsadm -a -t 192.168.118.12:80 -r 192.168.118.15:80 -g
ipvsadm
ipvsadm -ln
备负载调度器:192.168.118.16
ipvsadm-save > /etc/sysconfig/ipvsadm
systemctl start ipvsadm.service
ipvsadm -C
#这里-t指定的虚拟地址为本机ens33网卡ip
ipvsadm -A -t 192.168.118.16:80 -s rr
ipvsadm -a -t 192.168.118.16:80 -r 192.168.118.14:80 -g
ipvsadm -a -t 192.168.118.16:80 -r 192.168.118.15:80 -g
ipvsadm
ipvsadm -ln
2、配置Web服务器(192.168.118.14和192.168.118.15)
systemctl stop firewalld.service
setenforce 0
yum install -y httpd
systemctl start httpd
cd /etc/sysconfig/network-scripts/
cp ifcfg-lo ifcfg-lo:0
vim ifcfg-lo:0
DEVICE=lo:0
IPADDR=192.168.14.100
NETMASK=255.255.255.255
ONBOOT=yes
ifup lo:0
ifconfig
route add -host 192.168.14.100 dev lo:0
route -n
-------调整内核的ARP响应参数以阻止更新VIP的MAC地址,避免发生冲突-----
vim /etc/sysctl.conf
net.ipv4.conf.lo.arp_ignore = 1 #系统只响应目的IP为本地IP的ARP请求
net.ipv4.conf.lo.arp_announce = 2 #系统不使用IP包的源地址来设置ARP请求的源地址,而选择发送接口的IP地址
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
sysctl -p
------------准备Web网页------------
cd /var/www/html/
echo "ni hao 1" > index.html
Web2的设置和Web一样。
3、配置Keepalived(主、备两台DR服务器)
yum -y install ipvsadm keepalived
cd /etc/keepalived/
cp keepalived.conf keepalived.conf.bak
vim keepalived.conf
......
global_defs { #定义全局参数
-----------------------------10行修改----------------------------
smtp_server 127.0.0.1
---------------12行修改指定服务器(路由器)的名称,主备服务器名称须不同,主为LVS_01,备为LVS_02-----------
router_id LVS_01
-----------------------------14行修改--------------
#vrrp_strict #加注释
-----------------------------20行修改-------------
state MASTER # MASTER为主
-----------------------------21行修改--------------
interface ens33
-----------------------------22行修改--------------
virtual_router_id 10
-----------------------------23行修改--------------
priority 100 #优先级,主比备大就行
advert_int 1
-----------------------------27行修改-------------
auth_pass 123456 #指定验证密码,主备服务器保持一致
-----------------------------30行修改--------------
virtual_ipaddress {
192.168.16.100 #指定群集vip地址
}
-----------------------------34行修改-------------
virtual_server 192.168.16.100 80 { #指定虚拟服务器地址(VIP)、端口,定义虚拟服务器和Web服务器池参数
delay_loop 6
lb_algo rr
-----------------------------37行修改-------------
lb_kind DR #指定为DR
-----------------------------41行修改-------------
real_server 192.168.118.14 80 { #指定第一个Web节点的地址、端口
-----------------------------43行修改-------------
real_server 192.168.118.14 80 {
weight 1
TCP_CHECK {
connect_port 80
connect_timeout 3
nb_get_retry 3
delay_before_retry 3
}
}
real_server 192.168.73.166 80 {
weight 1
TCP_CHECK {
connect_port 80
connect_timeout 3
nb_get_retry 3
delay_before_retry 3
}
}
}
删除后面多余的配置即可
systemctl start keepalived
ip addr show dev ens33 #查看虚拟网卡vip
===================第二台DR服务器(备)=================
cd /etc/keepalived/
mv keepalived.conf keepalived.conf.bak #备份一下
=================去主DR服务器DR1进行远程复制===============
scp keepalived.conf root@192.168.118.15:/etc/keepalived/
==================回到备DR服务器=================
vim keepalived.conf
--------------12行--------------
router_id LVS_02 #LVS修改成02
--------------20行--------------
state BACKUP #修改成BACKUP
priority 99 #优先级设置成99
其他保持不变
systemctl start keepalived
ip addr show dev ens33 #查看虚拟网卡vip