LVS负载均衡群集——NAT模式实例

一、集群

企业集群的含义

• Cluster ， 集群、群集
• 由多台主机构成，但对外只表现为一个整体，只提供一个访问入口（域名或IP地址），相当于一台大型计算机

企业集群分类

根据群集所针对的目标差异，可分为三种类型

• 负载均衡群集
• 高可用群集
• 高性能运算群集

高可用群集

• 提高应用系统的可靠性，尽可能的减少中断时间为目标，确保服务的连续性，达到高可用的容错效果
• HA工作方式包括双工和主从两种模式，双工即所有节点同时在线；主从则只有主节点在线，但是当出现故障时从节点能自动切换为主节点。

高性能运算群集

• 以提高应用系统的可靠性，尽可能地减少中断时间为目标，确保服务的连续性，达到高可用的容错效果
• 高性能依赖于“分布式运算”、“并行计算”通过专用硬件和软件将多个服务器的CPU、内存等资源整合在一起，实现只有大型、超级计算机才具备的计算力

负载均衡群集架构

1. 第一层，负载调度器（Load Balancer或Director）

2. 第二层，服务器池（Server Pool）

3. 第三层，共享存储（Share Storage）

LVS的负载调度算法
①轮询（Round Robin）
将收到的访问请求按照顺序轮流分配给群集中的各节点 (真实服务器)

均等地对待每台服务器，而不管服务器实际的连接数和系统负载。

②加权轮询（Weighted Round Robin）
根据调度器设置的权重值来分发请求

权重值高的节点优先获得任务并且分配的请求越多

这样可以保证性能高的节点承担更 多请求。

③最少连接（Least Connections）
根据真实服务器已建立的连接数进行分配

将收到的访问请求优先分配给连接数最少的节点

如果所有的服务器节点性能相近，采用这种方式可以更好的均衡负载

④加权最少连接（Weighted Least Connections）
在服务器节点的性能差异较大的 情况下，调度器可以根据节点服务器负载自动调整权重

权重较高的节点将承担更 大比例的活动连接负载。

⑤IP_Hash
根据请求来源的IP地址进行Hash计算，得到后端服务器

这样来自同一个IP的请求总是会落到同一台服务器上处理，以致于可以将请求上下文信息存储在这个服务器上

⑥url_hash
按访问url的hash结果来分配请求，使每个url定向到同一个后端服务器

后端服务器为缓存时比较有效

⑦fair
采用的不是内建负载均衡使用的轮换的均衡算法

而是可以根据页面大小、加载时间长短智能的进行负载均衡

也就是根据后端服务器时间来分配用户请求，响应时间短的优先分配

分布式系统
分布式存储： 将数据分散存储在多台独立的设备上 。Ceph，GlusterFS，FastDFS，MogileFS

分布式计算： 将该应用分解成许多小的部分，分配给多台计算机进行处理。 hadoop，Spark

分布式常见应用

分布式应用-服务按照功能拆分，使用微服务（单一应用程序划分成一组小的服务，服务之间互相协调、互相配合，为用户提供最终价值服务）

分布式静态资源--静态资源放在不同的存储集群上

分布式数据和存储--使用key-value缓存系统

分布式计算--对特殊业务使用分布式计算，比如Hadoop集群

二、NAT模式 

 LVS-NAT部署实践

 部署步骤：

1.加载ip_vs模块，安装ipvsadm工具

2.开启路由转发

3.新建LVS虚拟服务器并添加节点服务器

4.配置节点服务器

• 建立测试网站
• 挂载NFS共享存储
• 建立测试网页

5.保存规则并测试

NFS共享存储服务

六、LVS-NAT模式操作实例

实验内容：

LVS调度器作为Web服务器池的网关，LVS两块网卡，分别连接内外网，使用轮询（rr）调度算法。

实验环境：

一台NFS服务器：172.16.10.101/24

两台WEB服务器：172.16.10.10/24 172.16.10.20/24

一台LVS负载调度服务器（2块网卡）：内网172.16.10.200/24（ens33），外网12.0.0.254/24（ens36）
 

部署NFS共享存储服务(NFS服务器：172.16.10.10/24）

 #1、关闭防火墙
 [root@localhost ~]# systemctl disable --now firewalld
 [root@localhost ~]# setenforce 0
 ​
 #2、安装nfs-utils、rpcbind软件包
 [root@localhost ~]# yum install nfs-utils rpcbind -y
 ​
 #3、新建共享目录，并创建站点文件
 [root@localhost ~]# mkdir /nfs/
 [root@localhost ~]# cd /nfs/
 [root@localhost nfs]# mkdir xiaozhu laoguo
 [root@localhost nfs]# echo '<h1>xiaozhu likes women!</h1>' > xiaozhu/index.html
 [root@localhost nfs]# echo '<h1>laoguo likes men!</h1>' > laoguo/index.html

 ​
 #4、修改共享配置文件，设置共享策略
 [root@localhost share]# vim /etc/exports
  /opt/nfs/xiaozhu 172.16.10.0.0/24
  /opt/nfs/laoguo 172.16.10.0.0/24
 ​
 #5、启动两个服务，查看本机的NFS共享目录
 [root@localhost nfs]# systemctl start rpcbind
 [root@localhost nfs]# systemctl start nfs
 [root@localhost nfs]# showmount -e        //查看本机发布的NFS共享目录

 检测共享是否正常

 

 

6.2 部署两台WEB服务器（节点服务器）

6.2.1第一台web服务器（172.16.10.10/24）

 #1、关闭防火墙
 [root@localhost ~]# systemctl stop firewalld
 [root@localhost ~]# setenforce 0
  
 #2、安装httpd
 [root@localhost ~]# yum install -y httpd
  
 #3、查看nfs服务器的共享信息
 [root@localhost ~]# showmount -e 172.16.10.10
 Export list for 172.16.10.10:
 /ufs/xiaozhu 172.16.10.0/24
 /ufs/laoguo 172.16.10.0/24
 showmount -e 172.16.10.10
 ​
 #4、挂载站点。将NFS服务器的共享目录/share/boy/，挂载到httpd服务的根目录
 #法一：临时挂载
 [root@localhost ~]# mount 172.16.10.10:/ufs/xiaozhu/ /var/www/html
 [root@localhost ~]# df           //查看挂载是否成功
 [root@localhost ~]# cat /var/www/html/index.html   //查看站点文件
 zzq is a boy
 ​
 #法二：永久挂载
 vim /etc/fstab
 172.16.10.10:/ufs/xiaozhu/  /var/www/html/        nfs     defaults,_netdev 0 0 
 mount -a
    
 #5、指定网关，网关地址设置为负载调度器的内网地址
 [root@localhost ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33 
 GATEWAY=172.16.10.1
 #DNS1=8.8.8.8
  
 #6、重启网络服务，开启httpd服务
 [root@localhost ~]# systemctl restart network
 [root@localhost ~]# systemctl start httpd

 

 

6.3 部署LVS负载调度服务器

内网网卡：172.16.10.200（ens33） ，外网网卡：12.0.0.254（ens36）

 #1、添加一块网卡，我这里是ens36，配置网卡，重启网络
 [root@localhost ~]# cd /etc/sysconfig/network-scripts/
 [root@localhost network-scripts]# vim ifcfg-ens33
 #GATEWAY=172.16.10.200     //将网卡和DNS服务器地址注释掉
 #DNS1=8.8.8.8
 [root@localhost network-scripts]# cp ifcfg-ens33 ifcfg-ens36
 [root@localhost network-scripts]# vim ifcfg-ens36
 IPADDR=12.0.0.254        //设置IP地址
 NETMASK=255.255.255.0
 #GATEWAY=192.168.192.2
 #DNS1=8.8.8.8
 [root@localhost network-scripts]# systemctl restart network
 ​
 #2、关闭防火墙
 [root@localhost ~]# systemctl stop firewalld
 [root@localhost ~]# setenforce 0
 ​
 #3、开启路由转发功能
 [root@localhost ~]# vim /etc/sysctl.conf
 net.ipv4.ip_forward = 1    //添加这一行
 [root@localhost ~]# sysctl -p          //读取修改后的配置
 net.ipv4.ip_forward = 1
 ​
 #4、配置SNAT策略（如果内网想主动连接外网的话，需要配置SNAT策略）
 [root@localhost ~]# iptables -t nat -F
 [root@localhost ~]# iptables -t nat -A POSTROUTING -s 192.168.192.0/24 -o ens36 -j SNAT --to 12.0.0.254
 [root@localhost ~]# iptables -nL POSTROUTING -t nat
 ​
 #5、加载LVS内核模块
 [root@localhost ~]# modprobe ip_vs         //加载ip_vs模块
 [root@localhost ~]# cat /proc/net/ip_vs    //查看ip_vs模块的版本
 #加载LVS所有调度算法
 [root@localhost ~]# for i in $(ls /usr/lib/modules/$(uname -r)/kernel/net/netfilter/ipvs|grep -o "^[^.]*");do echo $i; /sbin/modinfo -F filename $i >/dev/null 2>&1 && /sbin/modprobe $i;done
 ​
 #6、安装ipvsadm管理工具，开启服务
 [root@localhost ~]# mount /dev/sr0 /mnt
 [root@localhost ~]# yum install -y ipvsadm
 #开启服务前必须保存负载分配策略，生成/etc/sysconfig/ipvsadm文件。如果该文件不存在，服务无法启动。
 [root@localhost ~]# ipvsadm-save >/etc/sysconfig/ipvsadm
 [root@localhost ~]# systemctl start ipvsadm.service
 ​
 #7、配置负载分配策略（NAT模式只需要在负载器上配置，节点服务器不需要特殊配置）
 [root@localhost ~]# ipvsadm -C       //清空原有规则
 
 #指定指定VIP地址及TCP端口，-s rr 指定负载调度策略为轮询
 [root@localhost ~]# ipvsadm -A -t 12.0.0.254:80 -s rr
 
 #先指定虚拟服务器再添加真实服务器地址，-r指定真实服务器地址，-m指定nat模式。-w指定权重值，权重为1时可省略不写
 [root@localhost ~]# ipvsadm -a -t 12.0.0.254:80 -r 172.16.10.10:80 -m -w 1  
 [root@localhost ~]# ipvsadm -a -t 12.0.0.254:80 -r 172.16.10.20:80 -m -w 1
 [root@localhost ~]# ipvsadm     //查看策略
 IP Virtual Server version 1.2.1 (size=4096)
 Prot LocalAddress:Port Scheduler Flags
   -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
 TCP  localhost.localdomain:http rr
   -> 172.16.10.10:http           Masq    1      0          0
   -> 172.16.10.20:http           Masq    1      0          0
 [root@localhost ~]# ipvsadm-save >/etc/sysconfig/ipvsadm   //保存负载分配策略
 [root@localhost ~]# ipvsadm -ln     //以数字形式查看策略，Masq表示NAT模式
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  12.0.0.254:80 rr
  -> 172.16.10.10:80             Masq    1      0          0
  -> 172.16.10.20:80             Masq    1      0          0

 

 

 

 

开启路由转发功能

 

 

 

 

 

6.4 win10客户机访问测试

win10客户机，网关地址设置为负载调度器的外网IP。

浏览器访问负载调度器的外网IP地址12.0.0.254。

 

 最后检验访问