LVS负载均衡群集基础

最新推荐文章于 2025-12-03 10:56:30 发布

原创最新推荐文章于 2025-12-03 10:56:30 发布 · 置顶 · 630 阅读

1 ·

CC 4.0 BY-SA版权

文章标签：

#lvs #负载均衡器

群集专栏收录该内容

4 篇文章

订阅专栏

前言：在各种互联网应用中，随着站点对硬件性能、响应速度、服务稳定性、数据可靠性等的要求越来越高，单台服务器将难以承担所有的访问。除了使用价格昂贵的大型机、专用负载分流设备以外，企业还有另外一种选择来解决难题，那就是构建群集服务器——通过整合多台相对廉价的普通服务器，以同一个地址对外提供相同的服务。

在企业中常用的一种群集技术就是——LVS（Linux Virtual Server，Linux虚拟服务器）。
群集的称呼来自于英文单词“Cluster”，表示一群、一串的意思，用在服务器领域则表示大量服务器的集合体，以区分于单个服务器。

一、群集技术概述

根据企业实际环境的不同，群集所提供的功能也各不相同，采用的技术细节也可能各有千秋。然而从整体上来看，需要先了解一些关于群集的共性特征，这样才能在构建和维护群集的工作中做到心中有数，避免操作上的盲目性。

1、群集的类型

无论是哪种群集，都至少包括两台节点服务器，而对外表现为一个整体，只提供一个访问入口（域名或IP地址），相当于一台大型计算机。根据群集所针对的目标差异，可分为一下三种类型。

1）负载均衡群集（Load Balance Cluster）

负载均衡群集是目前企业用的最多的群集类型
群集的负载调度技术有三种工作模式
- 地址转换
- IP隧道
- 直接路由

2）高可用群集（High Availability Cluster）

以提高应用系统的可靠性、尽可能地减少中断时间为目标，确保服务地连续性，达到高可用（HA）地容错效果。
HA的工作方式包括双工和主从两种模式
双工即所有节点同时在线；主从则只有主节点在线，但当出现故障时从节点能自动切换为主节点

3）高性能运算群集（High Performance Computer Cluster）

以提高应用系统的CPU运算速度、扩展硬件资源和分析能力为目标，获得相当于大型、超级计算机的高性能运算（HPC）能力。
不同类型的群集在必要时可以合并，如高可用的负载均衡群集

2.负载均衡分层结构

在这里插入图片描述
如上图，在典型的负载均衡群集中，包括三个层次的组件，前端至少有一个负载均衡器（Load Balancer，或称为Director）负责响应并发来自客户机的访问请求；后端由大量真实服务器（Real Server）构成服务器池（Server Pool），提供实际的应用服务，整个群集的伸缩性通过增加、删除服务器节点来完成，而这些过程对客户机是透明的；为了保持服务的一致性，所有节点使用共享存储设备

第一层：负载调度器。这是访问整个群集系统的唯一入口，对外使用所有服务器共有的VIP（Virtual IP，虚拟IP）地址，也成为群集IP地址。通过会配置主、备两台调度器实现热备份，当主调度器失效以后平滑替换至备用调度器，确保高可用性
第二层：服务器池。群集所提供的应用服务（如HTTP、FTP）由服务器池承担，其中的每个节点具有独立的RIP（Real IP，真实IP）地址，只处理调度器分发过来的客户机请求。当某个节点暂时失效时，负载调度器的容错机制将其隔离，等待错误排除以后再重新纳入服务器池
第三层：共享存储。为服务器池中的所有节点提供稳定、一致的文件存取服务，确保整个群集的统一性。在Linux/UNIX环境中，共享存储可以使用NAS设备，或者提供NFS（Network File System，网络文件系统）共享服务的专用服务器

3.负载均衡的工作模式

1）地址转换（Network Address Translation）

简称NAT模式，类似于防护墙的私有网络结构，负载调度器作为所有服务器节点的网关，即作为客户机的访问入口，也是各节点回应客户机的访问出口。服务器节点使用私有IP地址，与负载调度器位于同一个物理网络，安全性要优于其他两种方式

2）IP隧道（IP Tunnel）

简称TUN模式，采用开放式的网络结构，负载调度器仅作为客户机的访问入口，各节点通过各自的Internet连接直接回应客户机，而不再经过负载调度器。服务器节点分散在互联网中的不同位置，具有独立的公网IP地址，通过专用IP隧道与负载调度器相互通信

3）直接路由（Direct Routing）

简称DR模式，采用半开放式的网络结构，与TUN模式的结构类似，但各节点并不是分散在各地，而是与调度器位于同一个物理网络。负载调度器与各节点服务器通过本地网络连接，不需要建立专用的IP隧道

以上三种工作模式中，NAT方式只需要一个公网IP地址，从而成为最易用的一种负载均衡模式，安全性也比较好，许多硬件负载均衡设备就是采用这种方式；相比较而言，DR模式和TUN模式的负载能力更加强大、适用范围更广，但节点的安全性要稍差一些

二、LVS虚拟服务器

LVS实际上相当于基于IP地址的虚拟化应用，为基于IP地址和内容请求分发的负载均衡提出了一种高效的解决方法
LVS现在已经成为了Linxu内核的一部分，默认编译为IP_VS模块，必要时能够自动调用

//手动加载ip_vs模块并查看当前系统中ip_vs模块的版本信息
[root@localhost ~]# modprobe ip_vs                   //加载ip_vs模块
[root@localhost ~]# cat /proc/net/ip_vs              //查看ip_vs版本信息
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port Forward Weight ActiveConn InActConn

1.LVS的负载调度算法

针对不同的网络服务和配置需要，LVS调度器提供多种不同的负载均衡调度算法，其中最常见的四种算法包括轮询、加权轮询、最少连接和加权最少连接

1）轮询（Round Robin）

将收到的访问请求按照顺序轮流分配给群集中的各节点（真实服务器），均等地对待每一台服务器，而不管服务器实际的连接数和系统负载

2）加权轮询（Weighted Round Robin）

根据真实服务器的处理能力轮流分配收到的访问请求，调度器可以自动查询各节点的负载情况，并动态调整其权重。这样可以保证处理能力强的服务器承担更多的访问流量

3）最少连接（Least Connections）

根据真实服务器已建立的连接数进行分配，将收到的访问请求优先分配给连接数最少的节点。如果所有的服务器节点性能相近，采用这种方式可以更好地均衡负载

4）加权最少连接（Weighted Least Connections）

在服务器节点上的性能差异较大的情况下，可以为真实服务器自动调整权重，权重较高的节点将承担更大比例的活动连接负载

2.使用ipvsadm管理工具

ipvsadm是在负载调度器上使用的LVS群集管理工具，通过ip_vs模块来添加、删除服务器节点，以及查看群集的运行状态

[root@localhost ~]# yum install ipvsadm -y   //手动安装软件包
[root@localhost ~]# ipvsadm -v
ipvsadm v1.27 2008/5/15 (compiled with popt and IPVS v1.2.1)

LVS群集的管理工作主要包括创建虚拟服务器、添加服务器节点、查看群集节点状态、删除服务器节点和保存负载分配策略

1）创建虚拟服务器

创建一个虚拟服务器，VIP地址为172.16.16.172，针对TCP80端口提供负载分流服务，使用的调度算法为轮询

[root@localhost ~]# ipvsadm -A -t 172.16.16.172:80 -s rr

-A表示添加虚拟服务器，-t用来指定VIP地址及TCP端口 -s用来指定负载调度算法——轮询（rr）、加权轮询（wrr）、最少连接（lc）、加权最少连接（wlc）
对于负载均衡调度器来说，VIP必须是本机实际已启用的IP地址

2）添加服务器节点

为虚拟服务器172.16.16.172添加四个服务器节点，IP地址依次为192.168.7.21~24。

[root@localhost ~]# ipvsadm -a -t 172.16.16.172:80 -r 192.168.7.21:80 -m -w 1
[root@localhost ~]# ipvsadm -a -t 172.16.16.172:80 -r 192.168.7.22:80 -m -w 1
[root@localhost ~]# ipvsadm -a -t 172.16.16.172:80 -r 192.168.7.23:80 -m -w 1
[root@localhost ~]# ipvsadm -a -t 172.16.16.172:80 -r 192.168.7.24:80 -m -w 1

-a表示添加真实服务器，-t用来指定VIP地址及TCP端口，-r用来指定RIP地址及TCP端口，-m表示使用NAT群集模式（-g为DR模式；-i为TUN模式），-w用来设置权重（权重为0时表示暂停节点）。若希望使用保持连接，还应添加“-p 60”选项，其中60为保持时间（秒）

3）查看群集节点状态

结合选项-l可以列表查看LVS虚拟服务器，可以指定只查看某一个VIP地址（默认为查看所有），结合选项-n将以数字形式显示地址、端口等信息

[root@localhost ~]# ipvsadm -ln            //查看节点状态
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  172.16.16.172:80 rr
  -> 192.168.7.21:80              Masq    1      0          0         
  -> 192.168.7.22:80              Masq    1      0          0         
  -> 192.168.7.23:80              Masq    1      0          0         
  -> 192.168.7.24:80              Masq    1      0          0

上述输出结果中，Forward列下的Masq对应Masquerada（地址伪装），表示采用的群集模式为NAT；如果是Route，则表示采用的群集模式为DR

4）删除服务器节点

需要从服务器池中删除某一个节点时，使用选项-d。执行删除操作必须指定目标对象，包括节点地址、虚拟IP地址

[root@localhost ~]# ipvsadm -d -r 192.168.7.24:80 -t 172.16.16.172:80

需要删除整个虚拟服务器时，使用选项-D并指定虚拟IP地址即可，无需指定节点

5）保存负载分配策略

使用导出/导入工具ipvsadm-save/ipvsadm-restore可以保存、恢复LVS策略，操作方法类似于iptables规则的导出、导入。通过系统服务ipvsadm也可以保存策略，如可执行“service ipvsadm save”；当然也可以快速清除、重建负载分配策略

[root@localhost ~]# ipvsadm-save > /etc/sysconfig/ipvsadm    //保存策略
[root@localhost ~]# cat /etc/sysconfig/ipvsadm                //确认保存结果
-A -t 172.16.16.172:http -s rr
-a -t 172.16.16.172:http -r 192.168.7.21:http -m -w 1
-a -t 172.16.16.172:http -r 192.168.7.22:http -m -w 1
-a -t 172.16.16.172:http -r 192.168.7.23:http -m -w 1
[root@localhost ~]# service ipvsadm stop         //停止服务（清楚策略）
ipvsadm：Clearing the current IPVS table          [确定]
ipvsadm：Unloading modules：                      [确定]
[root@localhost ~]# service ipvsadm start       //启动服务（重建规则）
ipvsadm：Clearing the current IPVS table：        [确定]
ipvsadm：Applying IPVS configuration：            [确定]