LVS负载均衡群集

LVS集群应用基础

企业群集应用概述

群集的含义

• Cluster，集群、群集
• 由多台主机构成，但对外只表现为一个整体

解决方法

• 实验价格昂贵的小型机、大型机
• 使用普通服务器购机服务群集

企业集群分类

根据集群所针对的目标差异，可以分为三种类型：

• 负载均衡群集（Load Balance Cluster）
  • 提高应用系统的响应能力、尽可能处理更多的访问请求、减少延迟为目标，获得高并发、高负载（LB）的整体性
  • LB的负载分配依赖于主节点的分流算法
• 高可用群集（High Availability Cluster）
  • 提高系统应用系统的可靠性、尽可能地减少中断时间为目标，确保服务端连续性，达到高可用（HA）的容错效果
  • HA的工作方式包括双工和主从两种模式
• 高性能运算群集（High Performance Computer Cluster）
  • 提高应用系统的CPU运算速度、扩展硬件资源和分析能力为目标，获得相当于大型、超级九三级的高性能运算（HPC能力）
  • 高性能依赖于“分布式运算”、“并行计算”，通过专用硬件和软件将多个服务器的CPU、内存等资源整合再一起，实现只有大型、超级计算机才具备的计算能力

负载均衡群集架构

负载均衡的结构

• 第一层，负载调度器（Load Balance或Director）
• 第二层，服务器池（Server Pool）
• 第三层，共享存储（Share Storage）

负载均衡群集工作模式分析

• 负载均衡群集是目前企业用的最多的群集类型
• 群集的负载调度技术有三种工作模式
  • 地址转换
  • IP隧道
  • 直接路由

NAT模式

适合小型部署

• Network Address Translation,简称NAT模式
• 类似于防火墙的私有网络结构，负载调度器作为所有服务器节点的网关，即作为客户机的访问入口，也是各节点回应客户机的访问出口
• 服务器节点使用私有IP地址，与负载调度器位于同一个物理网络，安全性要优于其他两种方式

DR模式

适合大规模部署

直接路由

• Direct Routing，简称DR模式
• 采用半开放式的网络结构，与TUN模式的结构类似，但各节点并不是分散在各地，而是和调度器位于同一个物理网络
• 负载调度器与各节点服务器通过本地网络连接，不需要建立专用的IP隧道

TUN模式

IP隧道

• IP Tunnel，简称TUN模式
• 采用开放式的网络结构，负载调度器仅作为客户机的访问入口，各节点通过个字段Internet连接直接回应客户机，而不再经过负载调度器
• 服务器节点分散在互联网中的不同位置，具有独立的公网IP地址，通过专用IP隧道和负载相互通信

构建LVS负载均衡群集

地址转换模式（LVS-NAT）

实验环境

配置负载调度器

[root@localhost ~]# yum -y install ipvsadm 
[root@localhost ~]# ipvsadm -v ipvsadm v1.27 2008/5/15 (compiled with popt and IPVS v1.2.1) [root@localhost ~]# ipvsadm -A -t 172.16.16.172:80 -s wrr 
[root@localhost ~]# ipvsadm -a -t 172.16.16.172:80 -r 192.168.10.102:80 -m -w 1 [root@localhost ~]# ipvsadm -a -t 172.16.16.172:80 -r 192.168.10.103:80 -m -w 2 [root@localhost ~]# ipvsadm-save 
-A -t localhost.localdomain:http -s wrr 
-a -t localhost.localdomain:http -r 192.168.10.102:http -m -w 1 
-a -t localhost.localdomain:http -r 192.168.10.103:http -m -w 2 
[root@localhost network-scripts]# vim /etc/sysctl.conf net.ipv4.ip_forward = 1 [root@localhost network-scripts]# sysctl -p net.ipv4.ip_forward = 1

ipvsadm各选项：

-s：指定调度算法

rr：轮询

wrr：加权轮询

lc：最小链接数

wlc：加权最小连接数

-A    添加一个新的集群服务；

-E    修改一个己有的集群服务；

-D    删除指定的集群服务；

-a    向指定的集群服务中添加RS及属性；

-e    修改RS属性；

-t    指定为tcp协议；

-u    指定为udp协议；

-s    调度方法，默认为wlc；

-w    指定权重，默认为1；

-g    Gateway, DR模型；

-i    ipip, TUN模型；

-m    masquerade, NAT模型；

-S    保存ipvsadm设定的规则策略，默认保存在/etc/sysconfig/ipvsadm中；

-R    载入己保存的规则策略，默认加载/etc/sysconfig/ipvsadm；

-C    清除所有集群服务；

-Z    清除所有记数器；

-L    显示当前己有集群服务，能通过相应的options查看不同状态信息；

-r          指定真实服务器的地址

配置web节点服务器

[root@localhost ~]# yum -y install httpd [root@localhost ~]# vim /var/www/html/index.html 
test web1     #web1 
test web2     #web2
//两台web服务器的测试界面使用不同内容，可以看出调度效果

测试

使用客户端访问172.16.16.172进行测试

[root@localhost ~]# for i in $(seq 10 );do curl 172.16.16.172;done    
test2 
test2 
test1 
test2 
test2 
test1 
test2 
test2 
test1 
test2
 //可以看到test1和test2的出现频率为1：2，这就是前面指定权重的意义

NFS共享存储服务

再启动一台主机，安装rpcbind和nfs-utils

[root@localhost ~]# yum -y install nfs-utils rpcbind

设置共享目录

[root@localhost ~]# mkdir -p /opt/wwwroot 
[root@localhost ~]# vi /etc/exports 
/opt/wwwroot 192.168.10.0/24(rw,sync,no_root_squash) 
[root@localhost ~]# systemctl start rpcbind 
[root@localhost ~]# systemctl start nfs

在web节点挂载nfs

[root@localhost ~]# yum -y install nfs-utils 
[root@localhost ~]# mount -t nfs 192.168.10.104:/opt/wwwroot /var/www/html

在nfs上创建测试网页

[root@localhost ~]# vi /var/www/html/index.html test

用客户端来测试

[root@localhost ~]# for i in $(seq 5);do curl 172.16.16.172;done 
test 
test 
test 
test 
test