手把手教你企业群集的部署和原理——LVS负载均衡（NAT调度）

一、什么是群集

群集也叫作集群，cluster，由多台主机构成，但对外只是一个整体；
它的产生是由于互联网应用中，站点对硬件性能、响应速度、服务稳定性、数据可靠性等要求越来越高，单台服务器力不从心，需要多台服务器分担压力，而多台服务器就构成l一个群集。

二、企业群集的分类

根据群集所针对的目标差异，可分为三种类型
●负载均衡群集
●高可用群集
●高性能运算群集

2.1 负载均衡群集

负载均衡群集(Load Balance Cluster)
●提高应用系统的响应能力、尽可能处理更多的访问请求、减少延迟为目标，获得高并发、高负载(LB)的整体性能
●LB的负载分配依赖于主节点的分流算法

2.2 高可用群集

高可用群集(High Availability Cluster)
●提高应用系统的可靠性、尽可能地减少中断时间为目标，确保服务的连续性，达到高可用(HA）的容错效果
●HA的工作方式包括双工和主从两种模式

2.3 高性能群集

高性能运算群集(High Performance Computer Cluster)
●提高应用系统的CPU运算速度、扩展硬件资源和分析能力为目标获得相当于大型、超级计算机的高性能运算(HPC)能力
●高性能依赖于“分布式运算”、“并行计算”，通过专用硬件和软件将多个服务器的CPU、内存等资源整合在一起，实现只有大型、超级计算机才具备的计算能力

三、详述负载均衡群集架构

3.1 负载均衡的结构

负载均衡的结构
●第一层，负载调度器(Load Balancer或Director)
●第二层，服务器池(Server Pool)
●第三层，共享存储(Share Storage)

3.2 负载均衡群集的工作模式分析

负载均衡群集是目前企业用得最多的群集类型，群集的负载调度技术有三种工作模式：

• 地址转换
• IP隧道
• 直接路由

3.2.1 NAT模式

地址转换：
●Network Address Translation，简称NAT模式
●类似于防火墙的私有网络结构，负载调度器作为所有服务器节点的网关，即作为客户机的访问入口，也是各节点回应客户机的访问出口
●服务器节点使用私有IP地址，与负载调度器位于同一个物理网络，安全性要优于其他两种方式

3.2.2 TUN模式

■IP隧道
●IP Tunnel,简称TUN模式
●采用开放式的网络结构，负载调度器仅作
为客户机的访问入口，各节点通过各自的
Internet连接直接回应客户机，而不再经过
负载调度器
●服务器节点分散在互联网中的不同位置,
具有独立的公网IP地址，通过专用IP隧道
与负载调度器相互通信

3.2.3 直接路由(Direct Routing)

●简称DR模式，采用半开放式的网络结构，与TUN模式的结构类似，但各节点并不是分散在各地，而是与调度器位于同一个物理网络
●负载调度器与各节点服务器通过本地网络连接，不需要建立专用的IP隧道

3.3 负载调度器上的LVS虚拟服务器

针对Linux内核的负载均衡解决方案
1998年5月，由我国的章文嵩博士创建
官方网站:http://www.linuxvirtualserver.org/

3.4 LVS的负载调度算法

1、轮询(Round Robin)
将收到的访问请求按照顺序轮流分配给群集中的各节点（真实服务器)，均等地对待每一台服务器，而不管服务器实际的连接数和系统负载

2.加权轮询（Weighted Round Robin)
根据真实服务器的处理能力轮流分配收到的访问请求，调度器可以自动查询各节点的负载情况，并动态调整其权重

3、最少连接(Least Connections)
根据真实服务器已建立的连接数进行分配，将收到的访问请求优先分配给连接数最少的节点

4、加权最少连接（Weighted Least Connections)
在服务器节点的性能差异较大的情况下，可以为真实服务器自动调整权重
权重较高的节点将承担更大比例的活动连接负载

3.5 NFS共享存储服务

为群集提供存储服务

1.Network File System，网络文件系统
依赖于RPC(远端过程调用)
需安装nfs-utils.rpcbind软件包
系统服务:nfs、rpcbind
共享配置文件:/etc/exports

2、使用NFS发布共享资源
安装nfs-utils.rpcbind软件包
设置共享目录
启动NFS服务程序
查看本机发布的NFS共享目录

3、在客户机中访问共享资源
安装rpcbind软件包，并启动rpcbind服务
手动挂载NFS共享目录
fstab自动挂载设置

四、案例部署（NAT模式）

4.1 案例环境

一台调度服务器：双网卡
ens33网卡 IP：192.168.10.130（内网，VMnet1仅主机模式），与web服务器处于同一网段
ens37网卡 IP：192.168.1.46 （外网，桥接模式）即虚拟服务器地址，客户端访问地址

两台web服务器：单网卡，VMnet1
web1服务器： IP地址：192.168.10.140，网关指向192.168.10.130
web2服务器： IP地址：192.168.10.150，网关指向192.168.10.130

一台NFS共享服务器：单网卡，VMnet1
IP：192.168.10.160

4.2 配置调度服务器

4.2.1开启路由地址转换功能

[root@lvs ~]# vi /etc/sysctl.conf 
末行添加
net.ipv4.ip_forward=1
[root@lvs ~]# sysctl -p
net.ipv4.ip_forward = 1
[root@lvs ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.1.1     0.0.0.0         UG    100    0        0 ens37
192.168.1.0     0.0.0.0         255.255.255.0   U     100    0        0 ens37
192.168.10.0    0.0.0.0         255.255.255.0   U     100    0        0 ens33
192.168.122.0   0.0.0.0         255.255.255.0   U     0      0        0 virbr0

4.2.2 LVS的配置

加载LVS内核

[root@lvs ~]# modprobe ip_vs
[root@lvs ~]# cat /proc/net/ip_vs
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port Forward Weight ActiveConn InActConn

安装管理软件ipvsadm，不需要启动

[root@lvs ~]# rpm -ivh /mnt/Packages/ipvsadm-1.27-7.el7.x86_64.rpm 
警告：/mnt/Packages/ipvsadm-1.27-7.el7.x86_64.rpm: 头V3 RSA/SHA256 Signature, 密钥 ID f4a80eb5: NOKEY
准备中...                          ################################# [100%]
正在升级/安装...
   1:ipvsadm-1.27-7.el7               ################################# [100%]

编辑调度服务器的脚本进行配置

[root@lvs ~]# vi nat.sh
!/bin/bash
echo "1" > /proc/sys/net/ipv4/ip_forward
ipvsadm -C   #清除内核虚拟服务器表中的所有记录
ipvsadm -A -t 192.168.1.46:80 -s rr  #创建虚拟服务器
ipvsadm -a -t 192.168.1.46:80 -r 192.168.10.140:80 -m #添加服务器节点
ipvsadm -a -t 192.168.1.46:80 -r 192.168.10.150:80 -m #添加服务器节点
ipvsadm -Ln  #查看节点状态，加n以数字形式显示地址、端口信息
//选项注释
-A :表示添加虚拟服务器
-a :表示添加真实服务器
-t ：用来指定VIP地址及TCP端口
-r ：用来指定RIP地址及TCP端口
-s ：用来指定负载调度算法————（rr：轮询，wrr：加权轮询，lc：最少连接，wlc：加权最少连接）
-m ：表示使用NAT群集模式（“-g”是DR模式，“-i”是TUN模式）

执行脚本，可查看到权重，Masq代表NAT

[root@lvs ~]# sh nat.sh 
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.1.46:80 rr
  -> 192.168.10.140:80            Masq    1      0          0         
  -> 192.168.10.150:80            Masq    1      0          0         

4.3 配置NFS服务器

[root@nfs ~]# yum -y install nfs-utils rpcbind
[root@nfs ~]# systemctl start nfs-utils
[root@nfs ~]# systemctl start rpcbind
[root@nfs ~]# mkdir /opt/web1 /opt/web2  #建立测试网页
[root@nfs ~]# cd /opt/web1
[root@nfs web1]# echo "server1" > index.html  #给web1服务器使用
[root@nfs web1]# cd /opt/web2
[root@nfs web2]# echo "server2" > index.html  #给web2服务器使用
[root@nfs web2]# vi /etc/exports
/opt/web1 192.168.10.140 (ro,sync)
/opt/web2 192.168.10.150 (ro,sync)
[root@nfs web2]# systemctl restart nfs
[root@nfs web2]# systemctl restart rpcbind
#关闭防火墙核心防护
[root@nfs web2]# systemctl stop firewalld
[root@nfs web2]# setenforce 0

4.4 配置web服务器

以web1为例
安装httpd网页服务

[root@web1 ~]# yum -y install httpd

查看nfs服务器的发布

#关闭防火墙核心防护
[root@web1 ~]# systemctl stop firewalld
[root@web1 ~]# setenforce 0
[root@web1 ~]# showmount -e 192.168.10.160
Export list for 192.168.10.160:
/opt/web2 (everyone)
/opt/web1 (everyone)

挂载使用nfs服务器的网页

[root@web1 ~]# mount 192.168.10.160:/opt/web1 /var/www/html
[root@web1 ~]# systemctl start httpd #开启网络服务

web2用/opt/web2

4.5 效果验证

多次访问调度服务器的外网地址，即虚拟服务器地址

发现页面以web1和web2的页面轮询出现，两个服务器轮流提供服务

在调度服务器查看记录