LVS负载均衡群集（群集）

一、LVS-DR集群概述

LVS-DR（Linux Virtual Server Director Server）工作模式，是生产环境中最常用的一 种工作模式。

1、LVS-DR 工作原理

LVS-DR 模式，Director Server 作为群集的访问入口，不作为网关使用，节点 Director Server 与 Real Server 需要在同一个网络中，返回给客户端的数据不需要经过 Director Server。为了响应对整个群集的访问，Director Server 与 Real Server 都需要配置 VIP 地址。

工作原理如下图所示：

2、LVS-DR数据包流量分析（同一局域网）

客户端向目标VIP发送请求，负载均衡器接收

负载均衡器根据负载均衡算法选择后端真实服务器，不修改也不封装IP报文，而是将数据帧的MAC地址改为后端真实服务器的MAC地址，然后在局域网上发送

后端真实服务器收到这个帧，解封装后发现目标IP与本机匹配（事先绑定了VIP），于是处理这个报文。随后重新封装报文，将响应报文通过lo接口传送给物理网卡然后向外发出

客户端将收到回复报文。客户端认为得到正常的服务，而不会知道是哪一台服务器处理的

如果跨网段，则报文通过路由器经由 internet 返回给用户

3、LVS-DR中的ARP问题

问题一

在LVS-DR负载均衡集群中，负载均衡器与节点服务器都要配置相同的VIP地址，在局域网中具有相同的IP地址。势必会造成各服务器ARP通信的紊乱

当ARP广播发送到LVS-DR集群时，因为负载均衡器和节点服务器都是连接到相同的网络上，它们都会接收到ARP广播

只有前端的负载均衡器进行响应，其他节点服务器不应该响应ARP广播

解决方法：

对节点服务器进行处理，使其不响应针对VIP的ARP请求

使用虚接口lo:0承载VIP地址

设置内核参数arp_ ignore=1: 系统只响应目的IP为本地IP的ARP请求

问题二

问题说明：RealServer返回报文（源IP是VIP）经路由器转发，重新封装报文时，需要先获取路由器的MAC地址，发送ARP请求时，Linux默认使用IP包的源IP地址（即VIP）作为ARP请求包中的源IP地址，而不使用发送接口的IP地址，路由器收到ARP请求后，将更新ARP表项，原有的VIP对应Director的MAC地址会被更新为VIP对应RealServer的MAC地址。

路由器根据ARP表项，会将新来的请求报文转发给RealServer，导致Director的VIP失效

解决方法：

对节点服务器进行处理，设置内核参数arp_announce=2：系统不使用IP包的源地址来设置ARP请求的源地址，而选择发送接口的IP地址

4、LVS-DR处理问题后的流量分析

客户端发送请求到Director server (负载均衡器)，请求的数据报文(源IP是CIP，目标IP是VIP)到达内核空间。

Director Server和Real server在同一个网络中，数据通过二层数据链路层来传输。

内核空间判断数据包的目标I是本机VIP，此时IPVS (IP虚拟服务器)比对数据包请求的服务是否是集群服务，是集群服务就重新封装数据包。修改源MAC地址为Director Server的MAC地址，修改目标MAC地址为Real Server的MAC地址，源IP地址与目标IP地址没有改变，然后将数据包发送给Real Server。

到达Real server的请求报文的MAC地址是自身的MAC地址，就接收此报文。数据包重新封装报文(源IP地址为VIP，目标IP为CIP)，将响应报文通过 lo 接口传送给物理网卡然后向外发出。

Real Server 直接将响应报文传送到客户端。

5、LVS-DR 特性

Director Server和Real Server必须在同一-个物理网络中。

Real Server可以使用私有地址，也可以使用公网地址。如果使用公网地址，可以通过互联网对RIP进行直接访问。

Director Server作为群集的访问入口，但不作为网关使用。

所有的请求报文经由Director Server，但回复响应报文不能经过Director Server

Real Server的网关不允许指向Director Server IP，即Real Server发送的数据包不允许经过Director Server。

Real Server上的10接口配置VIP的IP地址。

搭建Net模式负载均衡的集群；

实验环境：101作为调度器（网关设备；需要具有两个网卡）；102和103作为web服务器；104作为共享存储服务器；201作为客户端进行测试；（客户端尽量采用图形化的界面；）

首先在调度器上添加一块网卡；并编辑其网卡配置文件；

因为是实验环境；添加的那块网卡和客户机的网卡要保持一致；都定义成v1类型；

然后重启网络；

查看网卡是否配置成功

再修改客户端的IP地址；

重启网络；

开启同步会话搭建web网站；102和103；

再把会话功能关闭；添加测试文件进行第一次测试；

103同理；

使用101进行访问测试；

再把两个网站的网关地址设置为101主机的；        

然后重启网络；

配置调度器；

开启该服务器的路由功能；

用测试语句检查并开启该功能；

然后yum安装搭建集群所需要的工具；ipvsadm

可以查看下工具的版本信息；

然后在调度器上开始搭建集群；

如果之前搭建过可以进行清理；

创建集群然后添加服务器池各节点；

创建集群；

这边类型设置为加权轮询；

添加服务器节点；

会按照1:2的比例进行轮询分配；

然后进行保存；

再将该服务设置开机自启；

进入到客户端进行测试；

按照1:2的比例轮询分配；

        

查看调度器的状态；

然后配置共享存储服务器；104

修改nfs的配置文件；指定共享目录及同步方式等参数；

启动该服务；

创建指定的共享目录及测试文件；

然后在web服务器挂载该共享目录；102；103；

首先linux操作系统不支持nfs的文件系统；先下载相应的软件包；

yum -y install nfs-utils 两个web服务器都下载一下；

        

然后开始挂载；

两个web服务器都挂载一下，这样就实现了共享数据；

然后在用客户端去测试；