负载均衡群集LVS-DR

1.LVS-DR原理

1.1示意图

1.2 LVS-DR数据包流向分析

1. 客户机向虚拟IP发出请求，调度服务器接收请求
2. 调度器根据负载均衡算法选择节点服务器，不修改也不封装IP报文，而是将数据帧的MAC地址改为节点服务器的MAC地址，然后在局域网上发送
3. 节点服务器收到这个数据帧，解封装后发现目标IP与本机匹配，于是处理这个报文。随后重新封装报文，发送到路由器
4. 客户端通过Internet收到回复报文，客户端认为得到正常的服务，而不会知道是那一台服务器处理的

1.3 LVS-DR中的APR问题及解决

问题：
在局域网中具有相同的IP地址，会造成各服务器APR通信的紊乱。当APR广播发送到LVS-DR集群时，因为负载均衡器和节点服务器都是连接到相同的网络上，它们都会接收到APR广播。
解决需求：
只有负载均衡器进行响应，其他节点服务器不应该响应APR广播
解决方法：
对节点服务器进行处理，使其不响应针对虚拟IP的ARP请求
使用虚拟接口承载虚拟IP地址
设置内核参数arp_ignore=1，系统只响应目的IP为本地IP的ARP请求
新问题：
节点服务器返回报文经路由器转发，重新封装报文时，需要先获取路由器的MAC地址
发送ARP请求时，Linux默认使用IP包的源IP地址（即虚拟IP）作为ARP请求包中的源IP地址，而不使用发送接口的IP地址
路由器收到ARP请求后，将更新ARP表项，原有的虚拟IP对应的负载均衡器MAC地址会被更新为虚拟IP对应节点服务器的MAC地址
路由器根据ARP表项，会将新来的请求报文发送给节点服务器，导致负载均衡器虚拟IP失效
解决方法：
对节点服务器进行设置，设置内核参数arp_announce=2，系统不使用IP包的源地址来设置ARP请求的源地址，而选择发送接口的IP地址

2.LVS-DR实验

环境：
一台调度服务器：
真实IP：192.168.20.80，虚拟IP：192.168.20.200
两台节点服务器：
真实IP：192.168.20.100，192.168.20.40，虚拟IP192.168.20.200
一台NFS共享存储服务器：
地址192.168.20.10
一台客户机

2.1 NFS共享存储服务器配置

yum -y install nfs-utils rpcbind
mkdir -p /opt/web1
mkdir -p /opt/web2
vi /etc/exports
/opt/web1 192.168.20.100/32 (ro)
/opt/web2 192.168.20.40/32 (ro)

systemctl start nfs
showmount -e	#查看本机共享存储发布情况

2.2节点服务器

web1

showmount -e 192.168.20.10	##查看NFS服务器发布情况
yum -y install httpd
mount 192.168.20.10:/opt/web1 /var/www/html
vi dr.sh
#!/bin/bash
# DRjiedian
ifconfig lo:0 192.168.20.200 broadcast 192.168.20.200 netmask 255.255.255.255 up		
#添加虚拟网口
route add -host 192.168.20.200 dev lo:0		#给lo:0添加路由
echo "1" > /proc/sys/net/ipv4/conf/lo/arp_ignore
echo "1" > /proc/sys/net/ipv4/conf/all/arp_ignore
##系统只响应目的IP为本地真实IP的ARP请求
echo "2" > /proc/sys/net/ipv4/conf/lo/arp_announce
echo "2" > /proc/sys/net/ipv4/conf/all/arp_announce
##系统不使用IP包的源地址来设置ARP请求的源地址，而选择发送真实接口的IP地址
sysctl -p &> /dev/null

sh dr.sh
ifconfig	#查看虚拟网口配置情况

web2

showmount -e 192.168.20.10	
yum -y install httpd
mount 192.168.20.10:/opt/web2 /var/www/html
vi dr.sh
#!/bin/bash
# DRjiedian
ifconfig lo:0 192.168.20.200 broadcast 192.168.20.200 netmask 255.255.255.255 up		
#添加虚拟网口
route add -host 192.168.20.200 dev lo:0		#给lo:0添加路由
echo "1" > /proc/sys/net/ipv4/conf/lo/arp_ignore
echo "1" > /proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" > /proc/sys/net/ipv4/conf/lo/arp_announce
echo "2" > /proc/sys/net/ipv4/conf/all/arp_announce
sysctl -p &> /dev/null

sh dr.sh
ifconfig	#查看虚拟网口配置情况

2.3调度服务器

加载LVS内核模块

modprobe ip_vs

查看当前系统ip_vs模块版本信息

cat /proc/net/ip_vs

安装管理软件ipvsadm，无需启动

yum -y install ipvsadm

编辑调度服务器脚本并执行

vi dr.sh
#!/bin/bash
# DRdiaoduqi
ifconfig ens33:0 192.168.20.200 broadcast 192.168.20.200 netmask 255.255.255.255 up		
#添加虚拟地址的虚拟接口
route add -host 192.168.20.200 dev ens33:0	#给ens33:0添加路由
ipvsadm -C
ipvsadm -A -t 192.168.20.200:80 -s rr
ipvsadm -a -t 192.168.20.200:80 -r 192.168.20.100:80 -g
ipvsadm -a -t 192.168.20.200:80 -r 192.168.20.40:80 -g
ipvsadm -Ln		#查看调度信息

sh dr.sh
ifconfig		#查看虚拟网口配置情况

2.4测试效果

预期效果： 为了测试实验效果，所以web1和web2两台节点服务器网页不同，客户机访问虚拟地址192.168.20.200，应遵循负载均衡轮询算法，每次访问不同节点服务器

客户机第一次访问虚拟地址192.168.20.200

客户机第二次访问