LVS负载均衡群集——NAT模式实例

	NAT	TUN	DR
优点	端口转换	WAN	性能最好
缺点	性能瓶颈	服务器支持隧道模式	不支持跨网段
真实服务器要求	any
支持网络	私网	私网/公网	私网
真实服务器数量	10~20	100	100
真实服务器网关	lvs内网地址	网工定义	网工定义

1.6LVS的负载调度算法

轮询（Round Robin）

将收到的访问请求按照顺序轮流分配给群集中的各节点 (真实服务器)
均等地对待每台服务器，而不管服务器实际的连接数和系统负载。

加权轮询（Weighted Round Robin）

根据调度器设置的权重值来分发请求
权重值高的节点优先获得任务并且分配的请求越多
这样可以保证性能高的节点承担更多请求。

最少连接（Least Connections）

根据真实服务器已建立的连接数进行分配
将收到的访问请求优先分配给连接数最少的节点
如果所有的服务器节点性能相近，采用这种方式可以更好的均衡负载

加权最少连接（Weighted Least Connections）

在服务器节点的性能差异较大的情况下，调度器可以根据节点服务器负载自动调整权重
权重较高的节点将承担更大比例的活动连接负载。

目标地址散列调度算法(dh)

该算法是根据目标 IP 地址通过散列函数将目标 IP 与服务器建立映射关系，出现服务器不可用或负载过高的情况下，发往该目标 IP 的请求会固定发给该服务器。

源地址散列调度算法(sh)

与目标地址散列调度算法类似，但它是根据源地址散列算法进行静态分配固定的服务器资源。

基于局部性的最少连接 (lblc)

基于局部性的最少连接调度算法用于目标 IP 负载平衡，通常在高速缓存群集中使用。如服务器处于活动状态且处于负载状态，此算法通常会将发往 IP 地址的数据包定向到其服务器。如果服务器超载（其活动连接数大于其权重），并且服务器处于半负载状态，则将加权最少连接服务器分配给该 IP 地址

1.7LVS虚拟服务器

负载调度器（LVS：Linux Virtual Server）

整个SLB系统由3部分构成:四层负载均衡，七层负载均衡和控制系统

四层负载均衡，采用开源软件LVS (linux virtual server)，并根据云计算需求对其进行了定制化;该技术已经在阿里巴巴内部业务全面上线应用2年;
七层负载均衡，采用开源软件Tengine;该技术已经在阿里巴巴内部业务全面上线应用3年多;·控制系统，用于配置和监控负载均衡系统;

LVS现在已成为Linux内核的一部分，默认编译为ip_ vs模块，必要时能够自动调用。在CentOS 7系统中，以下操作可以手动加载ip_ vs模块，并查看当前系统中ip_ vs模块的版本信息。

工作在网络层

modprobe ip_vs
cat /proc/net/ip_vs #确认内核对LVS的支持

ip_vs模块

1.8ipvsadm工具

	功能说明
选项
-A	添加虚拟服务器
-D	删除整个虚拟服务器
-s	指定负载调度算法（轮询：rr、加权轮询：wrr、最少连接：lc、加权最少连接：wlc）
-a	表示添加真实服务器（节点服务器）
-d	删除某一个节点
-r	指定 RIP地址及 TCP端口
-m	表示使用 NAT群集模式
-g	表示使用 DR模式
-i	表示使用 TUN模式
-w	设置权重（权重为 0 时表示暂停节点）
-p60	表示保持长连接60秒
-l	列表查看 LVS 虚拟服务器（默认为查看所有）
-n	以数字形式显示地址、端口等信息，常与“-l”选项组合使用。ipvsadm -ln

二、NAT模式 LVS负载均衡部署

配置环境

两台WEB服务器集群池：192.168.98.104、192.168.98.105

一台NFS共享服务器：192.168.98.94

负载调度器：双网卡：内网（ens33：192.168.98.101）外网（ens36：12.0.0.1）

客户端

节点服务器1

df -h 查看挂载是否成功

1. #关闭防火墙
systemctl stop firewalld
setenforce 0

2. #安装httpd
yum install -y httpd

3. #查看nfs服务
showmount -e 192.168.98.94

4. #挂载站点
#法一：临时挂载
df
cat /var/www/html/index.html
mount 192.168.98.94:/opt/xc /var/www/html/
#法二：永久挂载
vim /etc/fstab
192.168.98.94:/opt/xc/ /var/www/html/ nfs defaults,_netdev 0 0
mount -a

5. #开启httpd服务
systemctl start httpd

6. #指定网关
vim /etc/sysconfig/network-scripts/ifcfg-ens33
GATEWAY=192.168.98.101
#DNS1=8.8.8.8

7. #重启网络服务
systemctl restart network

关闭防火墙

安装httpd

查看nfs服务

挂载站点,永久挂载

开启httpd服务

指定网关

重启网络服务

节点服务器2

1. #关闭防火墙
systemctl stop firewalld
setenforce 0

2. #安装httpd
yum install -y httpd

3. #查看nfs服务
showmount -e 192.168.98.94

4. #挂载站点
#法一：临时挂载
mount 192.168.98.94:/opt/mxh /var/www/html/
df
cat /var/www/html/index.html
#法二：永久挂载
vim /etc/fstab
192.168.98.94:/opt/mxh/ /var/www/html nfs defaults,_netdev 0 0
mount -a

5. #开启httpd服务
systemctl start httpd

6. #指定网关
vim /etc/sysconfig/network-scripts/ifcfg-ens33
GATEWAY=192.168.59.118
#DNS1=8.8.8.8

7. #重启网络服务
systemctl restart network

关闭防火墙

安装httpd

查看nfs服务

挂载站点,永久挂载

开启httpd服务

指定网关

重启网络服务

部署共享存储

NFS服务器：192.168.98.94

创建共享目录

修改/etc/exports

设置共享目录给192.168.98.0/24(rw,no_root_squash,sync同步数据到硬盘和内存中)

1. #关闭防火墙
systemctl stop firewalld
setenforce 0

2. #安装nfs服务
yum install nfs-utils rpcbind -y

3. #新建目录，并创建站点文件
cd /opt/
mkdir xc mxh
echo "this is xc" >xc/index.html
echo "this is mxh" >mxh/index.html

4. #开启服务
systemctl start rpcbind
systemctl start nfs

5. #授权
chmod 777 xc/ mxh/

6. #设置共享策略
vim /etc/exports
/opt/yxp 192.168.98.0/24(rw,sync)
/opt/dhc 192.168.98.0/24(rw,sync)

7. #发布服务
systemctl restart nfs
exportfs -rv

关闭防火墙

安装nfs服务

新建目录，并创建站点文件

开启服务

授权

设置共享策略

发布服务

负载调度器

内网192.168.98.101(ens33) 外网卡：12.0.0.1(ens36)

1. #关闭防火墙
systemctl stop firewalld
setenforce 0

2. #安装ipvsadm
yum install -y ipvsadm*

3. #添加一块网卡，我这里是ens36，配置网卡，重启网络
cd /etc/sysconfig/network-scripts/
cp ifcfg-ens33 ifcfg-ens36
vim ifcfg-ens36
去掉网关、UUID、修改IP
vim ifcfg-ens33
去掉网关
systemctl restart network

4. #打开路由转发功能
vim /etc/sysctl.conf
net.ipv4.ip_forward = 1
sysctl -p

5. #防火墙做策略
#查看策略
iptables -nL -t nat
#清空策略
iptables -F
#添加策略
iptables -t nat -A POSTROUTING -s 192.168.98.0/24 -o ens36 -j SNAT --to 12.0.0.1
#查看策略
iptables -nL -t nat

6. #加载LVS内核模块
modprobe ip_vs
cat /proc/net/ip_vs

7. #开启ipvsadm服务
ipvsadm-save >/etc/sysconfig/ipvsadm
systemctl start ipvsadm.service
创建虚拟服务器
8. #清空策略
ipvsadm -C

9. #制定策略
#指定IP地址外网的入口 -s rr 轮询
ipvsadm -A -t 12.0.0.1:80 -s rr
#先指定虚拟服务器再添加真实服务器地址，-r:真实服务器地址 -m指定nat模式 -t指定vip地址

添加节点服务器
ipvsadm -a -t 12.0.0.1:80 -r 192.168.98.104:80 -m
ipvsadm -a -t 12.0.0.1:80 -r 192.168.98.105:80 -m
#开启服务
ipvsadm

10. 查看策略
ipvsadm -ln

保存为默认配置