centos 部署LVS的NET模式_网络地址转换

一、LVS的基本原理

1. 当用户向负载均衡调度器（Director Server）发起请求，调度器将请求发往至内核空间。
2. PREROUTING链首先会接收到用户请求，判断目的IP确定是本机IP，将数据包发往INPUT链。
3. IPVS是工作在INPUT链上的，当用户请求到达INPUT时，IPVS会将用户请求和自己已定义好的群服务进行比对，如果用户请求的就是定义的集群服务，那么此时IPVS会强行修改数据包里的目标IP地址及端口，并将新的数据包发往POSTROUTING链。
4. POSTROUTING链接收数据包后发现目标IP地址刚好是自己的后端服务器，那么此时通过选路，将数据包最终发送给后端的服务器。

二、LVS组成

LVS由2部分程序组成，包括ipvs和ipvadm。

1. IPVS（ip virtual server）:一段代码工作在内核空间，叫IPVS，是真正生效实现调度的代码，IPVS的总体结构主要由IP包处理、负载均衡算法、系统配置、系统配置与管理三个模块及虚拟服务器与真实服务器链表组成。
2. ipvsadm:另外一段是工作在用户空间，即IPVS管理器，负责为ipvs内核框架编写规则，定义谁是集群服务，而谁是后端真实的服务器(Real Server)。

三、LVS技术术语

• DS:Director Server 指的是前端负载均衡器节点。
• RS: Real Server 后端真实的工作服务器。
• VIP:Director Server IP，主要用于和内部主机通讯的IP地址。
• RIP ：Real Server IP, 后端服务器的IP地址。
• CIP：Client IP,访问客户端的IP地址。

四、NAT模式测试

NET原理

• 当用户请求到达Director Server，此时请求的数据报文会先到内核空间的PREROUTING链。 此时报文的源IP为CIP，目标IP为VIP。
• PREROUTING检查发现数据包的目标IP是本机，将数据包送至INPUT链。
• IPVS比对数据包请求的服务是否为集群服务，若是，修改数据包的目标IP地址为后端服务器IP，然后将数据包发至POSTROUTING链。 此时报文的源IP为CIP，目标IP为RIP。
• POSTROUTING链通过选路，将数据包发送给Real Server。
• Real Server比对发现目标为自己的IP，开始构建响应报文发回给Director Server。 此时报文的源IP为RIP，目标IP为CIP。
• Director Server在响应客户端前，此时会将源IP地址修改为自己的VIP地址，然后响应给客户端。 此时报文的源IP为VIP，目标IP为CIP。

LVS调度算法

rr：轮询（round robin）这种算法是最简单的，就是按依次循环的方式将请求调度到不同的服务器上，该算法最大的特点就是简单。轮询算法假设所有的服务器处理请求的能力都是一样的，调度器会将所有的请求平均分配给每个真实服务器，不管后端 RS 配置和处理能力，非常均衡地分发下去。这个调度的缺点是，不管后端服务器的繁忙程度是怎样的，调度器都会讲请求依次发下去。如果A服务器上的请求很快请求完了，而B服务器的请求一直持续着，将会导致B服务器一直很忙，而A很闲，这样便没起到均衡的左右。

wrr：加权轮询（weight round robin）这种算法比 rr 的算法多了一个权重的概念，可以给 RS 设置权重，权重越高，那么分发的请求数越多，权重的取值范围 0 – 100。主要是对rr算法的一种优化和补充， LVS 会考虑每台服务器的性能，并给每台服务器添加要给权值，如果服务器A的权值为1，服务器B的权值为2，则调度到服务器B的请求会是服务器A的2倍。权值越高的服务器，处理的请求越多。

NET特性

• RIP最好是内网IP
• RS的网关必须指向DIP。
• DIP和RIP必须在同一个网段内。
• 请求和回应的报文都必须经过director，director容易成为瓶颈。
• nat支持端口转发。

1）测试环境

Director： centos 7.6 VIP：172.20.10.12（虚拟机桥接模式）
DIP：192.168.72.130（虚拟机NET模式）

RealServer1： centos7.6 RIP：192.168.72.128

RealServer2： centos7.6 RIP：192.168.72.129

2）Director配置

安装ipvsadm

yum install ipvsadm -y

检查ipvsadm

[root@localhost ~]# ipvsadm -v
ipvsadm v1.27 2008/5/15 (compiled with popt and IPVS v1.2.1)

[root@localhost ~]# systemctl status ipvsadm
● ipvsadm.service - Initialise the Linux Virtual Server
   Loaded: loaded (/usr/lib/systemd/system/ipvsadm.service; disabled; vendor preset: disabled)
   Active: active (exited) since 四 2019-11-07 19:46:12 CST; 4h 24min ago
  Process: 9319 ExecStart=/bin/bash -c exec /sbin/ipvsadm-restore < /etc/sysconfig/ipvsadm (code=exited, status=0/SUCCESS)
 Main PID: 9319 (code=exited, status=0/SUCCESS)
   CGroup: /system.slice/ipvsadm.service

11月 07 19:46:12 localhost.localdomain systemd[1]: Starting Initialise the Linux Virtual Server...
11月 07 19:46:12 localhost.localdomain systemd[1]: Started Initialise the Linux Virtual Server.

LVS脚本

[root@localhost lvs]# cat install.sh
#director设置 nat 防火墙
iptables -t nat -F

#!/bin/bash
VIP=172.20.10.12
DIP=192.168.72.130
RIP1=192.168.72.128
RIP2=192.168.72.129
# director服务器上开启路由转发功能:
echo 1 > /proc/sys/net/ipv4/ip_forward
# 关闭 icmp 的重定向
echo 0 > /proc/sys/net/ipv4/conf/all/send_redirects
echo 0 > /proc/sys/net/ipv4/conf/default/send_redirects
echo 0 > /proc/sys/net/ipv4/conf/ens32/send_redirects
echo 0 > /proc/sys/net/ipv4/conf/ens34/send_redirects
# director设置 ipvsadm
IPVSADM='/sbin/ipvsadm'
$IPVSADM -C
$IPVSADM -A -t $VIP:80 -s rr
$IPVSADM -a -t $VIP:80 -r $RIP1:80 -m
$IPVSADM -a -t $VIP:80 -r $RIP2:80 -m

3）Real Server服务器的配置

两台realserver执行添加默认路由走调度器192.168.72.130

route add -net 0.0.0.0 gw 192.168.72.130

安装httpd

yum –y install httpd
标记网页：
RealServer1：echo ”I am RealServer1 192.168.72.128”>/var/www/html/index.html
RealServer2：echo “I am RealServer2 192.168.72.129”>/var/www/html/index.html

4)验证

http://172.20.10.12 查询轮询情况。

[root@localhost lvs]# curl  http://172.20.10.12
”I am RealServer1 192.168.72.128”
[root@localhost lvs]# curl  http://172.20.10.12
”I am RealServer1 192.168.72.129”

[root@localhost lvs]# ipvsadm  -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  172.20.10.12:80 rr
  -> 192.168.72.128:80            Masq    1      0          1
  -> 192.168.72.129:80            Masq    1      0          1