LVS-学习总结( VS/DR实践)

实践环境

主机名	系统	IP地址	作用
vmhost	rhel7.5	192.168.12.7/24	真机，提供虚拟机node1-3进行实践练习环境，同时进行测试
node1	rhel7.5	192.168.12.11/24 192.168.27.11/24	虚拟机node1，安装ipvadm软件，模拟LVS调度服务器 同时node1是双网卡:一个IP地址（外网地址）用来模拟VIP与真机在同一网段，方便测试；一个IP地址（内网地址）是与后端服务器在同一网段进行通信的
node2	rhel7.5	192.168.27.12/24	虚拟机node2，安装httpd服务，模拟后端服务器
node3	rhel7.5	192.168.27.13/24	虚拟机ndoe3，安装httpd服务，模拟后端服务器

测试将192.168.12.X看为外网地址，192.168.27.X看为内网地址

操作步骤

1. 与VS/NAT实践中一样，检测node1服务器内核是否有IPVS功能
2. 与VS/NAT实践中一样，node1服务器安装ipvsadm软件
3. node1服务器配置VS/DR策略

#先清空ipvsadm配置，保持环境纯净
[root@node1 ~]# ipvsadm -C

#添加规则VS/DR策略，调度方式为rr
[root@node1 ~]# ipvsadm -A -t 192.168.12.11:80 -s rr
[root@node1 ~]# ipvsadm -a -t 192.168.12.11:80 -r 192.168.27.12:80 -g
[root@node1 ~]# ipvsadm -a -t 192.168.12.11:80 -r 192.168.27.13:80 -g
    

#查看策略是否添加成功
[root@node1 ~]# ipvsadm -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.12.11:80 rr
  -> 192.168.27.12:80             Route   1      0          0         
  -> 192.168.27.13:80             Route   1      0          0     

4. node2、node3服务器安装httpd
   后端服务正常情况下应该是提供一样的服务内容，本次为了在测试时，显示轮询rr调度策略，将访问页面建立为不一样的

#配置后端服务器 node2 与 node3
[root@node2 ~]# yum install httpd -y
[root@node2 ~]# systemctl start httpd
[root@node2 ~]echo node2 > /var/www/html/index.html
[root@node2 ~]# curl 192.168.27.12
node2

[root@node3 ~]# yum install httpd -y
[root@node3 ~]# systemctl start httpd
[root@node3 ~]echo node3 > /var/www/html/index.html
[root@node3 ~]# curl 192.168.27.13
node3

5. node2和node3服务器均需要添加VIP地址
   VS/DR模型后端服务器需要直接通过网络通信测试客户端，所以需要添加VIP地址信息

[root@node2 ~]# ip addr add 192.168.12.11/32 dev eth0
[root@node2 ~]# ip addr
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether 52:54:00:f7:70:e8 brd ff:ff:ff:ff:ff:ff
    inet 192.168.27.12/24 brd 192.168.27.255 scope global noprefixroute eth0
       valid_lft forever preferred_lft forever
    inet 192.168.12.11/32 scope global eth0
       valid_lft forever preferred_lft forever
    inet6 fe80::5054:ff:fef7:70e8/64 scope link 
       valid_lft forever preferred_lft forever


[root@node3 ~]# ip addr add 192.168.12.11/32 dev eth0
[root@node3 ~]# ip addr
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP group default qlen 1000
    link/ether 52:54:00:6d:9a:74 brd ff:ff:ff:ff:ff:ff
    inet 192.168.27.13/24 brd 192.168.27.255 scope global noprefixroute eth0
       valid_lft forever preferred_lft forever
    inet 192.168.12.11/32 scope global eth0
       valid_lft forever preferred_lft forever
    inet6 fe80::5054:ff:fe6d:9a74/64 scope link 
       valid_lft forever preferred_lft forever

6. node2和node3服务器的网关设置为192.168.12.1，而192.168.12.1作为网关地址
   VS/DR模型后端服务器需要直接通过网络通信测试客户端，所以此处建立通信网关

[root@node2 ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.12.1    0.0.0.0         UG    100    0        0 eth0
192.168.12.1    0.0.0.0         255.255.255.255 UH    100    0        0 eth0
192.168.27.0    0.0.0.0         255.255.255.0   U     100    0        0 eth0


[root@node3 ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.12.1    0.0.0.0         UG    100    0        0 eth0
192.168.12.1    0.0.0.0         255.255.255.255 UH    100    0        0 eth0
192.168.27.0    0.0.0.0         255.255.255.0   U     100    0        0 eth0

7. 因为没有真实网关服务器，所以为满足测试，临时将192.168.12.1填在真机的网卡上，作为网关使用

[root@vmhost images]#ip addr add 192.168.12.1/32 dev br0

8. 关闭node2与node3服务器的arp功能
   VS/DR模型需要所有的后端服务器把VIP地址配置在各自的Non-ARP网络设备上

[root@node2 ~]# yum install arptables.x86_64 -y
#安装aprtables工具，修改arp策略
[root@node2 ~]# arptables -A INPUT -d 192.168.12.11 -j DROP
#丢弃node2服务器对VIP（192.168.12.11)地址的所有arp请求响应
[root@node2 ~]# arptables -A OUTPUT -s 192.168.12.11 -j mangle --mangle-ip-s 192.168.27.12
#ARP发送消息时将响应回答消息内容中的真实后端服务器node3的地址，转变为VIP（192.168.27.12）地址

[root@node3 ~]# yum install arptables.x86_64 -y
[root@node3 ~]# arptables -A INPUT -d 192.168.12.11 -j DROP
[root@node3 ~]# arptables -A OUTPUT -s 192.168.12.11 -j mangle --mangle-ip-s 192.168.27.13

测试结果

使用真机的外网地址192.168.12.7，访问192.168.12.11VIP进行测试

[root@vmhost ~]# curl 192.168.12.11
node3
[root@vmhost ~]# curl 192.168.12.11
node2
[root@vmhost ~]# curl 192.168.12.11
node3
[root@vmhost ~]# curl 192.168.12.11
node2
#有轮巡调度效果