LVS负载均衡群集

1、负载均衡群集
（1）群集的概述
■根据群集所针对的目标差异，可分为三种类型

●负载均衡群集

●高可用群集

●高性能运算群集

■负载均衡群集（load balance cluster）

●提高医用系统的响应能力、尽可能处理更多的访问请求、减少延迟目标，获得高并发、高负载（LB）的整体性能

●LB的负载分配依赖于主节点的分流算法

2）负载均衡群集结构

（3）负载均衡群集三种工作模式
■地址转换（NAT地址映射）

■IP隧道（隧道式叠加网络 特殊场景下才会使用）

■直接路由（DR）

LVS-NAT模式结构图

LVS-NAT模式

简单来说：就是通过防火墙规则+LVS-ipvsadm管理工具

1、先做内外网地址转换（映射）

2、基于LVS-NAT模式的RR轮训策略，对于 HTTP访问的请求，以轮询的方式转发给后端（使用LVS的ipvsadm工具来控制的）

以L4层的方式，直接基于TCP协议的IP: port端口进行转发

注：实验时，需要将外网的服务器网关指向lvs调度器，将内网的服务器网关也指向lLVS调度器

LVS-NAT 模式的特性:

1、负载均衡器和真实服务器，均在同一物理网络

2、接受请求、响应请求，均通过负载均衡器

3、内外网的映射，通过LVS服务器上的iptables的映射规则来完成
、

 2、关于LVS虚拟服务器
■LVS的负载调度算法

（1）轮询（Round Robin）

将收到的访问请求按照顺序轮流分配给群集中的各节点（真实服务器），均等的对待每一台服务器，而不管服务期实际的连接数和系统负载

（2）加权轮询（Weighted Round Robin）

●根据调度器设置的权重值来分发请求，权重高的节点优先获得任务，分配的请求数越多

●保证性能的服务器承担更多的访问流量

（3）最少连接（Least Counnections）

根据真实服务器已建立的连接数进行分配，将收到的访问请求分配给连接数最少的节点

（4）加权最少连接（Weighted Least Counnections ）

●在服务器节点的性能差异较大时，可以为真实服务器自动调整权重

●性能较高的节点将承担更大比例的活动连接负载
 

4.4 加载 LVS 所有的负载调度算法

LVS 所有的负载调度算法文件在 /usr/lib/modules/3.10.0-693.el7.x86_64/kernel/net/netfilter/ipvs/ 目录下：

 

 可以将加载调度算法的命令写入脚本中：

五、ipvsadm工具

ipvsadm是一个工具，同时它也是一条命令，用于管理LVS的策略规则。

ipvsadm是ipvs的管理器，需要yum安装。

ipvsadm工具的作用：

LVS群集创建与管理：

• 创建虚拟服务器
• 添加、删除服务器节点
• 查看群集及节点情况
• 保存负载分配策略

ipvsadm 命令选项说明：

• 选项
  -A	添加虚拟服务器
  -D	删除整个虚拟服务器
  -s	指定负载调度算法(轮询: rr、加权轮询: wrr、 最少连接: lc、 加权最少连接: wlc)
  -a	表示添加真实服务器(节点服务器)
  -t	指定VIP地址及TCP端口 （调度器使用）
  -r	指定RIP地址及TCP端口 （节点服务器使用）
  -m	表示使用NAT群集模式
  -g	表示使用DR模式
  -i	表示使用TUN模式
  -w	设置权重（权重为0时表示暂停节点） ，默认值为1
  -p 60	表示保持长连接60秒。默认值就是60秒。
  -l	列表查看LVS虚拟服务器（默认为查看所有）
  -n	以数字形式显示地址、端口等信息，常与“-l”选项组合使用。-l需要在-n之前。ipvsadm -ln

  六、LVS-NAT模式操作实例

  实验内容：

  LVS调度器作为Web服务器池的网关，LVS两块网卡，分别连接内外网，使用轮询（rr）调度算法。

  实验环境：

  一台NFS服务器： 192.168.72.192/24

  两台WEB服务器： 192.168.72.30/24，192.168.72.40/24

  一台LVS负载调度服务器（2块网卡）： 内网192.168.72.10/24（ens33)，外网12.0.0.254/24（ens36）

  win10 客户机： 12.0.0.200/24

  部署NFS共享存储服务(NFS服务器：192.168.100.30/24)

•  #1、关闭防火墙
   [root@localhost ~]# systemctl disable --now firewalld
   [root@localhost ~]# setenforce 0
   ​
   #2、安装nfs-utils、rpcbind软件包
   [root@localhost ~]# yum install nfs-utils rpcbind -y
   ​
   #3、新建共享目录，并创建站点文件
   [root@localhost ~]# mkdir /share/
   [root@localhost ~]# cd /share/
   [root@localhost share]# mkdir boy man
   [root@localhost share]# echo "wz is a boy" > boy/index.html
   [root@localhost share]# echo "wz is a man" > man/index.html
   ​
   #4、修改共享配置文件，设置共享策略
   [root@localhost share]# pwd
    /share
   [root@localhost share]# vim /etc/exports
   /share/boy  192.168.192.0/24
   /share/man  192.168.192.0/24
   ​
   #5、启动两个服务，查看本机的NFS共享目录
   [root@localhost share]# systemctl start rpcbind
   [root@localhost share]# systemctl start nfs
   [root@localhost share]# showmount -e        //查看本机发布的NFS共享目录
• 
  

• 6.2 部署两台WEB服务器（节点服务器）
  6.2.1第一台web服务器（192.168.100.31/24）
   #1、关闭防火墙
   [root@localhost ~]# systemctl stop firewalld
   [root@localhost ~]# setenforce 0
    
   #2、安装httpd
   [root@localhost ~]# yum install -y httpd
    
   #3、查看nfs服务器的共享信息
   [root@localhost ~]# showmount -e 192.168.100.30
   Export list for 192.168.100.30:
   /share/boy 192.168.100.0/24
   /share/man 192.168.100.0/24
   showmount -e 192.168.100.10
   ​
   #4、挂载站点。将NFS服务器的共享目录/share/boy/，挂载到httpd服务的根目录
   #法一：临时挂载
   [root@localhost ~]# mount 192.168.192.10:/share/boy/ /var/www/html
   [root@localhost ~]# df           //查看挂载是否成功
   [root@localhost ~]# cat /var/www/html/index.html   //查看站点文件
   zzq is a boy
   ​
   #法二：永久挂载
   vim /etc/fstab
   192.168.192.10:/share/boy/  /var/www/html/        nfs     defaults,_netdev 0 0 
   mount -a
      
   #5、指定网关，网关地址设置为负载调度器的内网地址
   [root@localhost ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33 
   GATEWAY=192.168.100.30
   #DNS1=8.8.8.8
    
   #6、重启网络服务，开启httpd服务
   [root@localhost ~]# systemctl restart network
   [root@localhost ~]# systemctl start httpd

第二台web服务器（192.168.100.32/24）
 #1、指定网关，网关地址设置为负载调度器的内网地址
 [root@localhost ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33 
 GATEWAY=192.168.192.100.30
 #DNS1=8.8.8.8
 [root@localhost ~]# systemctl restart network
 ​
 #2、关闭防火墙
 [root@localhost ~]# systemctl stop firewalld
 [root@localhost ~]# setenforce 0
 ​
 #3、安装httpd
 [root@localhost ~]# yum install -y httpd
    
 #4、查看nfs服务器的共享信息
 [root@localhost ~]# showmount -e 192.168.100.30
 Export list for 192.168.100.30:
 /share/boy 192.168.100.30/24
 /share/man 192.168.100.30/24
 showmount -e 192.168.100.30
  
 5. #挂载NFS的共享目录
 #法一：临时挂载
 [root@localhost ~]# mount 192.168.100.30:/share/man/ /var/www/html
 [root@localhost ~]# df           //查看挂载是否成功
 [root@localhost ~]# cat /var/www/html/index.html
 zzq is a man
 ​
 #法二：永久挂载
 vim /etc/fstab
 192.168.100.30:/share/man/  /var/www/html/        nfs     defaults,_netdev 0 0 
 mount -a
    
 6. #开启httpd服务
 [root@localhost ~]# systemctl start httpd
 

 

 

部署LVS负载调度服务器
内网网卡：192.168.100.100（ens33） ，外网网卡：12.0.0.254（ens36）

 #1、添加一块网卡，我这里是ens36，配置网卡，重启网络
 [root@localhost ~]# cd /etc/sysconfig/network-scripts/
 [root@localhost network-scripts]# vim ifcfg-ens33
 #GATEWAY=192.168.192.2     //将网卡和DNS服务器地址注释掉
 #DNS1=8.8.8.8
 [root@localhost network-scripts]# cp ifcfg-ens33 ifcfg-ens36
 [root@localhost network-scripts]# vim ifcfg-ens36
 IPADDR=12.0.0.254        //设置IP地址
 NETMASK=255.255.255.0
 #GATEWAY=192.168.100.2
 #DNS1=8.8.8.8
 [root@localhost network-scripts]# systemctl restart network
 ​
 #2、关闭防火墙
 [root@localhost ~]# systemctl stop firewalld
 [root@localhost ~]# setenforce 0
 ​
 #3、开启路由转发功能
 [root@localhost ~]# vim /etc/sysctl.conf
 net.ipv4.ip_forward = 1    //添加这一行
 [root@localhost ~]# sysctl -p          //读取修改后的配置
 net.ipv4.ip_forward = 1
 ​
 #4、配置SNAT策略（如果内网想主动连接外网的话，需要配置SNAT策略）
 [root@localhost ~]# iptables -t nat -F
 [root@localhost ~]# iptables -t nat -A POSTROUTING -s 192.168.192.0/24 -o ens36 -j SNAT --to 12.0.0.254
 [root@localhost ~]# iptables -nL POSTROUTING -t nat
 ​
 #5、加载LVS内核模块
 [root@localhost ~]# modprobe ip_vs         //加载ip_vs模块
 [root@localhost ~]# cat /proc/net/ip_vs    //查看ip_vs模块的版本
 #加载LVS所有调度算法
 [root@localhost ~]# for i in $(ls /usr/lib/modules/$(uname -r)/kernel/net/netfilter/ipvs|grep -o "^[^.]*");do echo $i; /sbin/modinfo -F filename $i >/dev/null 2>&1 && /sbin/modprobe $i;done
 ​
 #6、安装ipvsadm管理工具，开启服务
 [root@localhost ~]# mount /dev/sr0 /mnt
 [root@localhost ~]# yum install -y ipvsadm
 #开启服务前必须保存负载分配策略，生成/etc/sysconfig/ipvsadm文件。如果该文件不存在，服务无法启动。
 [root@localhost ~]# ipvsadm-save >/etc/sysconfig/ipvsadm
 [root@localhost ~]# systemctl start ipvsadm.service
 ​
 #7、配置负载分配策略（NAT模式只需要在负载器上配置，节点服务器不需要特殊配置）
 [root@localhost ~]# ipvsadm -C       //清空原有规则
 
 #指定指定VIP地址及TCP端口，-s rr 指定负载调度策略为轮询
 [root@localhost ~]# ipvsadm -A -t 12.0.0.254:80 -s rr
 
 #先指定虚拟服务器再添加真实服务器地址，-r指定真实服务器地址，-m指定nat模式。-w指定权重值，权重为1时可省略不写
 [root@localhost ~]# ipvsadm -a -t 12.0.0.254:80 -r 192.168.100.31:80 -m -w 1  
 [root@localhost ~]# ipvsadm -a -t 12.0.0.254:80 -r 192.168.100.32 -m -w 1
 [root@localhost ~]# ipvsadm     //查看策略
 IP Virtual Server version 1.2.1 (size=4096)
 Prot LocalAddress:Port Scheduler Flags
   -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
 TCP  localhost.localdomain:http rr
   -> 192.168.100.31:http           Masq    1      0          0
   -> 192.168.100.32:http           Masq    1      0          0
 [root@localhost ~]# ipvsadm-save >/etc/sysconfig/ipvsadm   //保存负载分配策略
 [root@localhost ~]# ipvsadm -ln     //以数字形式查看策略，Masq表示NAT模式
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  12.0.0.254:80 rr
  -> 192.168.100.31:80             Masq    1      0          0
  -> 192.168.100.32:80             Masq    1      0          0

 

 

 

 

win10客户机访问测试

win10客户机，网关地址设置为负载调度器的外网IP。

浏览器访问负载调度器的外网IP地址12.0.0.254