LVS之负载均衡(DR模式，IP隧道模式，NAT模式)

什么是LVS?

LVS是Linux Virtual Server的简写，意即Linux虚拟服务器，是一个虚拟的服务器集群系统。

LVS集群

LVS集群采用IP负载均衡技术和基于内容请求分发技术。调度器具有很好的吞吐率，将请求均衡地转移到不同的服务器上执行，且调度器自动屏蔽掉服务器的故障，从而将一组服务器构成一个高性能的、高可用的虚拟服务器。整个服务器集群的结构对客户是透明的，而且无需修改客户端和服务器端的程序。

LVS的直接路由模式(VS-DR)

负载均衡器和RS都使用同一个IP对外服务，但只有DR对ARP请求进行响应,所有RS对本身这个IP的ARP请求保持静默，也就是说,网关会把对这个服务IP的请求全部定向给DR,而DR收到数据包后根据调度算法,找出对应的RS,把目的MAC地址改为RS的MAC（因为IP一致）并将请求分发给这台RS。这时RS收到这个数据包,处理完成之后，由于IP一致，可以直接将数据返给客户，则等于直接从客户端收到这个数据包无异,处理后直接返回给客户端。由于负载均衡器要对二层包头进行改换,所以负载均衡器和RS之间必须在一个广播域,也可以简单的理解为在同一台交换机上。

DR模式搭建步骤：
首先，选用一台虚拟主机作为调度器，这里我使用的虚拟主机名称为server1。之后再选用两台虚拟主机作为服务器，使用调度器使两台虚拟机轮循工作，实现负载均衡，这里我使用的主机名称为server2，server3。
注：
server1的ip地址为:172.25.62.1
server2的ip地址为:172.25.62.2
server3的ip地址为:172.25.62.3
接下来对调度器server1进行配置。
1.yum源修改

[root@server1 ~]# vim /etc/yum.repos.d/rhel-source.repo

在原有的基础上加入下面部分，因为一般的配置只能获得基础的包，不能获得ipvsadm。
2.安装ipvsadm调度器，查看调度器规则

[root@server1 ~]# yum install ipvsadm -y
[root@server1 ~]# ipvsadm -l

此时还未写入规则。
3.添加外网服务ip地址

[root@server1 ~]# ip addr add 172.25.62.100/24 dev eth0

添加的这个ip虚拟ip的目的是使客户机访问这个ip时进行调度。
4.编写调度器规则

[root@server1 ~]# ipvsadm -A -t 172.25.62.100:80 -s rr			

让客户端在访问172.25.8.100的时候采用轮循算法访问

[root@server1 ~]# ipvsadm -a -t 172.25.62.100:80 -r 172.25.62.2:80 -g
[root@server1 ~]# ipvsadm -a -t 172.25.62.100:80 -r 172.25.62.3:80 -g

添加需要轮循访问的两台服务器server2，server3。

[root@server1 ~]# /etc/init.d/ipvsadm save

保存设定规则。

[root@server1 ~]# /etc/init.d/ipvsadm start

开启服务。

调度器配置好之后还要对两台服务器server2，server3进行配置，主要是要添加ip地址。

[root@server2 ~]# ip addr add 172.25.62.100/32 dev eth0

[root@server3 ~]# ip addr add 172.25.62.100/32 dev eth0

之后在这两台主机上分别编写测试页方便进行测试。
测试：
重新找一台客户主机进行测试

[root@foundation62 ~]# curl 172.25.62.100

之后查看访问的主机，因为此时三台主机的ip都为172.25.62.100，所以此时不一定能访问到调度器server1上，所以要进行多次测试。

[root@foundation62 ~]# arp -d 172.25.62.100

使用这条命令可以清除缓存。

直到出现以下结果：

这样说明DR模式搭建成功，使用调度器实现了负载均衡功能。

LVS健康状况检查

上面搭建好的服务是没有健康状况检查的，也就是说，如果有一台服务器不能正常工作，调度器依然会执行调度功能，访问这台不能正常工作的服务器，这是不合理的。
在server1调度器上进行配置
1.修改yum源

[root@server1 ~]# vim /etc/yum.repos.d/rhel-source.repo

[rhel6.5]
name=rhel6.5
baseurl=http://172.25.62.250/rhel6.5
enabled=1
gpgcheck=0

[LoadBalancer]
name=LoadBalancer
baseurl=http://172.25.62.250/rhel6.5/LoadBalancer
enabled=1
gpgcheck=0

[HighAvailability]
name=HighAvailability
baseurl=http://172.25.62.250/rhel6.5/HighAvailability
enabled=1
gpgcheck=0
#使其获得高可用源。

2.获得ldirectord-3.9.5-3.1.x86_64.rpm软件包，并进行安装

yum install -y ldirectord-3.9.5-3.1.x86_64.rpm

3.查看生成文件

[root@server1 ~]# rpm -qpl ldirectord-3.9.5-3.1.x86_64.rpm 

获取配置路径后就可以对配置文件进行修改了。
4.将模板文件进行复制，从而进行编写

[root@server1 ~]# vim /etc/ha.d/ldirectord.cf

设置需要进行健康检查的调度器ip以及调度服务器的ip。

[root@server1 ~]# /etc/init.d/ldirectord start

启动服务，使文件生效。
在客户主机进行测试：

当server2，server3正常工作时，使用调度器正常轮循访问

当其中一台服务器不能正常工作时，访问另一台服务器，如果两台服务器都不能正长工作，则可以返回一个报错页，这个页面可以在调度器上编写。

LVS的IP隧道模式（VS-TUN）

互联网上的大多Internet服务的请求包很短小，而应答包通常很大。那么隧道模式就是，把客户端发来的数据包，封装一个新的IP头标记(仅目的IP)发给RS,RS收到后,先把数据包的头解开,还原数据包,处理后,直接返回给客户端,不需要再经过负载均衡器。注意,由于RS需要对负载均衡器发过来的数据包进行还原,所以说必须支持IPTUNNEL协议。所以,在RS的内核中,必须编译支持IPTUNNEL这个选项。
IP隧道模式搭建步骤：
首先，我们要为实验准备一个纯净的环境，所以要对前面的实验进行清除。

[root@server1 ~]# /etc/init.d/ldirectord stop

关闭软件

[root@server1 ~]# ipvsadm -C

清除规则。
1.加载隧道模块

[root@server1 ~]# modprobe ipip

2.给tunl0添加ip，并立即激活

[root@server1 ~]# ip addr del 172.25.62.100/24 dev eth0
[root@server1 ~]# ip addr add 172.25.62.100/24 dev tunl0

首先删除原来的设备，之后添加ip。

[root@server1 ~]# ip link set up  tunl0

激活tunlp0。

同时，在server2，server3也执行相同的操作，唯一要变化的就是添加的ip子网掩码改为32。

3.编写新策略

[root@server1 ~]# ipvsadm -A -t 172.25.62.100:80 -s rr

添加vip，对后端服务器采用轮循算法

[root@server1 ~]# ipvsadm -a -t 172.25.62.100:80 -r 172.25.62.2:80 -i
[root@server1 ~]# ipvsadm -a -t 172.25.62.100:80 -r 172.25.62.3:80 -i

添加后端真实服务器

[root@server1 ~]# /etc/init.d/ipvsadm save

保存策略
4.关闭真实服务器内核反向过滤功能

[root@server2 ~]# sysctl -a | grep rp_filter

查看参数状态
将上面为1的参数都改为0

[root@server2 ~]# sysctl -w net.ipv4.conf.default.rp_filter=0
[root@server2 ~]# sysctl -w net.ipv4.conf.lo.rp_filter=0
[root@server2 ~]# sysctl -w net.ipv4.conf.eth0.rp_filter=0
[root@server2 ~]# sysctl -w net.ipv4.conf.tunl0.rp_filter=0

关闭内核反向过滤功能
需要注意的是在两台真实服务器主机上都要执行这个操作，这里就不重复了。
测试：

正常实现轮循功能。

[root@server1 ~]# ipvsadm -l

查看调度状态。
添加火墙策略使客户机能正常访问调度器。

yum install arptables_jf.x86_64 -y
[root@server2 html]# arptables -A IN -d 172.25.62.100 -j DROP		
[root@server2 html]# arptables -A OUT -s 172.25.62.100 -j mangle --mangle-ip-s 172.25.62.2		
[root@server2 html]# arptables -L
[root@server2 html]# /etc/init.d/arptables_jf save

火墙策略要写在所有真实服务器上。

LVS的NAT模式

NAT模式就是把客户端发来的数据包的IP头的目的地址，在负载均衡器上换成其中一台RS的IP地址，并发至此RS来处理,RS处理完成后把数据交给经过负载均衡器,负载均衡器再把数据包的原IP地址改为自己的IP，将目的地址改为客户端IP地址即可。期间,无论是进来的流量,还是出去的流量,都必须经过负载均衡器。
NAT模式的搭建：
在调度器server1上：
1.添加网卡，设置外网ip

[root@server1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth1

设置ip为172.25.254.100设置的ip要和两台服务器不在同一网段上。

设置之后的网卡信息。
2安装调度器

[root@server1 ~]# yum install ipvsadm -y

3.编写策略

[root@server1 ~]# ipvsadm -A -t 172.25.254.100:80 -s rr
[root@server1 ~]# ipvsadm -a -t 172.25.254.100:80 -r 172.25.62.2:80 -m
[root@server1 ~]# ipvsadm -a -t 172.25.254.100:80 -r 172.25.62.3:80 -m

编写策略，vip为172.25.254.100，两台服务器主机的ip为172.25.62.2和 172.25.62.3。

[root@server1 ~]# ipvsadm -ln

查看编写的策略。

[root@server1 ~]# modprobe iptable_nat		#加载模块

4.打开ip路由功能

vim /etc/sysctl.conf

sysctl -p

5.在server2和server3两台服务器中设置网关

route add default gw 172.25.62.1
[root@server2 ~]# vim /etc/sysconfig/network

设置网关ip为调度器server1的ip。
测试：

成功实现两台服务器的轮循访问。