案例：LVS负载均衡群集（NAT模式）

主机	操作系统	IP 地址	角色
服务器	CentOS7.9	192.168.10.101	调度器
服务器	CentOS7.9	192.168.10.102	Web服务器
服务器	CentOS7.9	192.168.10.103	Web服务器
服务器	CentOS7.9	192.168.10.104	NFS共享存储
测试机	CentOS7.9 带桌面端	172.16.16.200	客户端，测试机

实验终端除了带桌面的客户端，其他最小安装的虚拟机统一使用XShell连接

基本环境设置

调度器

因为调度器需要有两个网卡接口，一个连外网一个连内网，所以先为101主机添加一块网卡

把调度器新加的网卡和客户端的网卡都设为VMnet1模式，模拟外网通信

先进入存放网卡配置文件的目录，使用ip a命令查看新加网卡的标识，然后为该网卡配置对应文件

[root@localhost ~]# cd /etc/sysconfig/network-scripts/

拷贝配置文件，修改以下内容

[root@localhost network-scripts]# cp ifcfg-ens33 ifcfg-ens36
[root@localhost network-scripts]# vim ifcfg-ens36
IPADDR=172.16.16.172
NETMASK=255.255.255.0
#GATEWAY=192.168.10.254    # 连接外网的网卡不需要网关，这里注释掉

NAME=ens36
DEVICE=ens36

保存并退出，重启网络服务，使用ip a命令查看ens36网卡的IP是否被改变

[root@localhost network-scripts]# systemctl restart network
[root@localhost network-scripts]# ip a
3: ens36: 
    inet 172.16.16.172/24

客户端

修改客户端的IP为集群环境示例图中的IP

[root@localhost ~]# cd /etc/sysconfig/network-scripts/
[root@localhost network-scripts]# vim ifcfg-ens33
IPADDR=172.16.16.200
PREFIX=24
#GATEWAY=192.168.10.254
[root@localhost network-scripts]# systemctl restart network
[root@localhost network-scripts]# ip a
2: ens33: 
    inet 172.16.16.200/24

在101（调度器）操作

然后在调度器主机尝试ping外网的客户端，要确保能ping通

[root@localhost network-scripts]# ping 172.16.16.200
PING 172.16.16.200 (172.16.16.200) 56(84) bytes of data.
64 bytes from 172.16.16.200: icmp_seq=1 ttl=64 time=0.434 ms
64 bytes from 172.16.16.200: icmp_seq=2 ttl=64 time=0.217 ms
64 bytes from 172.16.16.200: icmp_seq=3 ttl=64 time=0.268 ms

网站服务

右键XShell终端空白处，为两个内网服务器开启会话同步（102、103），其他的都单独关闭会话同步，准备快速部署网站服务

101、104都关闭会话同步

在102（Web服务器①）操作

安装Apache，为了方便实验关闭防火墙，关闭内核安全机制，开启Apache服务

[root@localhost ~]# yum -y install httpd
[root@localhost ~]# systemctl stop firewalld
[root@localhost ~]# setenforce 0
[root@localhost ~]# systemctl start httpd

关闭会话同步

为了区分两个Web服务器，所以修改两个Web服务器的网页内容，因此也需要关闭全部的会话同步

在102（Web服务器①）操作

创建网页文件，添加下方内容

[root@localhost ~]# vim /var/www/html/index.html
Test Web 01

在103（Web服务器②）操作

创建网页文件，添加下方内容

[root@localhost ~]# vim /var/www/html/index.html
Test Web 02

测试

使用调度器进行测试，确保能够访问到网页内容

在101（调度器）操作

[root@localhost ~]# curl 192.168.10.102
Test Web 01
[root@localhost ~]# curl 192.168.10.103
Test Web 02

修改网关

根据刚才的集群图，102和103两个Web服务器的应答应该都是经过调度器服务器的，所以调度器就是这两个Web服务器的网关

这里修改两个Web服务器的网管为调度器

在102（Web服务器①）操作

[root@localhost ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33
GATEWAY=192.168.10.101
[root@localhost ~]# systemctl restart network

在103（Web服务器②）操作

[root@localhost ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33
GATEWAY=192.168.10.101
[root@localhost ~]# systemctl restart network

安装LVS

在101（调度器）操作

为了方便实验，先关闭防火墙和内核安全机制

[root@localhost ~]# systemctl stop firewalld
[root@localhost ~]# setenforce 0

实际上LVS已经被集成到内核里了，所以这里安装的其实是LVS的管理工具

[root@localhost ~]# yum -y install ipvsadm

基于NAT模式设置LVS

本次案例我们使用NAT模式来管理LVS，那么调度器就需要有一个IP转发功能，既作为网关又作为调度器

修改内核配置文件，添加以下内容

[root@localhost ~]# vim /etc/sysctl.conf
net.ipv4.ip_forward=1

使用sysctl -p命令，在不重启系统的情况下，使内核配置文件中新加的参数生效

[root@localhost ~]# sysctl -p
net.ipv4.ip_forward = 1

LVS并没有配置文件，但是可以使用ipvsadm-save命令来查看当前的策略信息

还可以加上-C选项来清理当前策略

[root@localhost ~]# ipvsadm-save
[root@localhost ~]# ipvsadm -C

添加调度策略

使用-A选项添加群集服务，再指定虚拟服务器的IP和端口，然后指定调度算法为权重轮询

然后使用-a选项向指定的虚拟服务器中添加一个后端服务器（192.168.10.102和103），启用地址伪装，指定权重为2

-m：启用地址伪装模式：对后端服务器的响应进行SNAT（源地址转换）
-w：指定后端服务器的权重值

w：权重，分发请求时根据权重的值来分发请求数量

rr：轮询（请求依次轮流）

[root@localhost ~]# ipvsadm -A -t 172.16.16.172:80 -s wrr
[root@localhost ~]# ipvsadm -a -t 172.16.16.172:80 -r 192.168.10.102:80 -m -w 2
[root@localhost ~]# ipvsadm -a -t 172.16.16.172:80 -r 192.168.10.103:80 -m -w 1

调度算法

轮询（Round Robin）
- 将受到的访问请求按照顺序轮流分配给群集中的各节点，（真实服务器），均等的对待每一台服务器，而不管服务器实际的连接数和系统负载
加权轮询（Weighted Round Robin）
- 根据调度器设置的权重值来分发请求，权重值高的节点优先获得任务，分配的请求书越多
- 保证性能强的服务器承担更多的请求数量

查看LVS策略

添加过策略后，可以使用ipvsadm-save命令来查看现有的策略

[root@localhost ~]# ipvsadm-save
-A -t localhost.localdomain:http -s wrr
-a -t localhost.localdomain:http -r 192.168.10.102:http -m -w 2
-a -t localhost.localdomain:http -r 192.168.10.103:http -m -w 1

或者还可以使用ipvsadm -ln也可以查看现有策略

[root@localhost ~]# ipvsadm -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  172.16.16.172:80 wrr
  -> 192.168.10.102:80            Masq    2      0          0         
  -> 192.168.10.103:80            Masq    1      0          0

Masq：NAT模式
ActiveConn：活跃的连接数（正在连接）
InActConn：不活跃的连接数（断开连接）

导出LVS策略

通过重定向，导出策略内容到文本中，可以实现策略的保存

[root@localhost ~]# ipvsadm-save > /opt/save.txt

删除条目

删除群集

如果要删除一个群集服务，可以使用-D选项来删除

[root@localhost ~]# ipvsadm -D -t 172.16.16.172:80

删除后端服务器

如果要删除一个群集中的后端服务器，可以使用-d选项来删除群集中的指定后端服务器

[root@localhost ~]# ipvsadm -d -t 192.168.10.172:80 -r 192.168.10.103

LVS常用选项

选项	说明
-s	指定调度算法 rr：轮询 wrr：加权轮询 lc：最小链接数 wlc：加权最小连接数
-A	添加一个新的集群服务
-E	修改一个己有的集群服务
-D	删除指定的集群服务
-S	保存ipvsadm设定的规则策略，默认保存在/etc/sysconfig/ipvsadm中
-R	载入己保存的规则策略，默认加载/etc/sysconfig/ipvsadm
-C	清除所有集群服务
-Z	清除所有记数器
-L	显示当前己有集群服务，能通过相应的options查看不同状态信息
-a	向指定的集群服务中添加RS及属性
-e	修改RS属性
-t	指定为tcp协议
-u	指定为udp协议
-s	调度方法，默认为wlc
-w	指定权重，默认为1
-g	Gateway, DR模型
-i	ipip, TUN模型
-m	masquerade, NAT模型
-r	指定后端服务器的地址

测试

在172.16.16.200（外网客户端）操作

通过for循环使用curl访问内网的Web服务，由于我们刚才指定了权重轮询的算法，所以每3次请求会有2个请求分发给102，1个请求分发给103

[root@localhost ~]# for i in $(seq 1000);do curl 172.16.16.172;done

在101（调度器）操作

此时如果在调度器查看策略信息和状态，可以看到：断开连接的数量，根据客户端的访问次数发生了变化

[root@localhost ~]# ipvsadm -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  172.16.16.172:80 wrr
  -> 192.168.10.102:80            Masq    2      0          674       
  -> 192.168.10.103:80            Masq    1      0          336

共享存储

作为共享存储的服务器不需要连接到外网中（不需要上网），这里使用NFS作为共享存储的技术

NFS服务器是存储内网服务器网页文件或者数据，如果能够上网，那么安全性也有所降低。

所以NFS服务器不需要设置网关

在104（共享存储服务器）操作

安装并配置NFS

为了方便实验关闭防火墙和内核安全机制

安装NFS共享存储所需的两个软件包

[root@localhost ~]# systemctl stop firewalld
[root@localhost ~]# setenforce 0
[root@localhost ~]# yum -y install nfs-utils rpcbind

打开NFS的配置文件，指定共享目录的路径，和能够挂载该目录的网络范围，然后指定读写权、同步等选项

并创建出在配置文件中指定用于共享的目录

[root@localhost ~]# vim /etc/exports
/opt/wwwroot 192.168.10.0/24(rw,sync,no_root_squash)
[root@localhost ~]# mkdir /opt/wwwroot

rw：可读写的权限
ro：只读的权限
no_root_squash：使用该共享目录时相当于该目录的拥有者，如果是root使用这个共享的目录来说，他就具有root的权限，这个参数不安全，谨慎使用
root_squash：使用该共享目录时相当于该目录的拥有者。如果以root身份使用这个共享目录的时候，那么这个使用者（root）的权限将被压缩成为匿名使用者，通常他的UID与GID都会变成nobody
all_squash：不论登入NFS的使用者身份为何，他的身份都会被压缩成为匿名使用者，也就是nobody
sync：资料同步写入到内存与硬盘当中（同步）
async：资料会先暂存于内存当中，而非直接写入硬盘，减少了硬盘IO（异步）
insecure：允许从这台机器过来的非授权访问

启动NFS服务

[root@localhost ~]# systemctl start nfs
[root@localhost ~]# systemctl start rpcbind

在Web服务器挂载共享目录

在102（Web服务器①）操作

Linux 系统需要安装nfs-utils软件包来支持NFS文件系统，所以需要先安装所需软件包

然后使用mount命令挂载指定IP的指定目录，再指定挂载位置

最后使用df命令查看挂载是否成功

[root@localhost ~]# yum -y install nfs-utils
[root@localhost ~]# mount -t nfs 192.168.10.104:/opt/wwwroot /var/www/html/
[root@localhost ~]# df -h
文件系统                     容量  已用  可用 已用% 挂载点
192.168.10.104:/opt/wwwroot  195G  1.9G  194G    1% /var/www/html

在103（Web服务器②）操作

步骤同上，确保挂载成功

[root@localhost ~]# yum -y install nfs-utils
[root@localhost ~]# mount -t nfs 192.168.10.104:/opt/wwwroot /var/www/html/
[root@localhost ~]# df -h
文件系统                     容量  已用  可用 已用% 挂载点
192.168.10.104:/opt/wwwroot  195G  1.9G  194G    1% /var/www/html

cd进入挂载的位置，因为/var/www/html目录下之前是有网页文件的，挂载上共享目录后，共享目录会覆盖该目录，所以该目录目前是空的

因此我们创建一个网页文件用于测试

网页内容如下（代码块内最后一行）

[root@localhost ~]# cd /var/www/html/
[root@localhost html]# vim index.html
NFS Test

测试

在172.16.16.200（外网客户端）操作

还是使用for循环多次访问Web服务测试

[root@localhost ~]# for i in $(seq 100);do  curl 172.16.16.172;done
NFS Test
NFS Test
NFS Test
...

至此，LVS基于NAT模式的集群部署完成

变成我

关注

22
点赞
踩
18

收藏

觉得还不错? 一键收藏
0
评论
案例：LVS负载均衡群集（NAT模式）

讲解集群相关概念，部署LVS中NAT模式的案例的详细操作步骤
复制链接

扫一扫

专栏目录