LVS-负载均衡集群+Keepalived高可用---DR模式---RR轮询策略

一、Keepalived

1. keepalived是什么

• Keepalived是Linux下一个轻量级别的高可用解决方案。高可用(High Avalilability,HA)，其实两种不同的含义：广义来讲，是指整个系统的高可用行，狭义的来讲就是之主机的冗余和接管，
• Keepalived起初是为LVS设计的，专门用来监控集群系统中各个服务节点的状态，它根据TCP/IP参考模型的第三、第四层、第五层交换机制检测每个服务节点的状态，如果某个服务器节点出现异常，或者工作出现故障，Keepalived将检测到，并将出现的故障的服务器节点从集群系统中剔除，这些工作全部是自动完成的，不需要人工干涉，需要人工完成的只是修复出现故障的服务节点。
• 后来Keepalived又加入了VRRP的功能，VRRP（Vritrual Router Redundancy Protocol,虚拟路由冗余协议)出现的目的是解决静态路由出现的单点故障问题，通过VRRP可以实现网络不间断稳定运行，因此Keepalvied 一方面具有服务器状态检测和故障隔离功能，另外一方面也有HA cluster功能

2. keepalived实现原理

• keepalived采用VRRP热备份协议实现Linux 服务器的多机热备功能
  VRRP（虚拟路由冗余协议）是针对路由器的一种备份解决方案。
  由多台路由器组成一个热备份组，通过共用的虚拟IP地址对外提供服务
  每个热备组内同时只有一台主路由器提供服务，其他路由器处于冗余状态
• 若当前在线的路由器失效，则其他路由器会根据设置的优先级自动接替虚拟IP地址，继续提供服务

二、LVS-DR模式特点

• Director Server 和 Real Server 必须在同一个物理网络中。
• Real Server 可以使用私有地址，也可以使用公网地址。如果使用公网地址，可以通过互联网对 RIP 进行直接访问。
• Director Server 作为群集的访问入口，但不作为网关使用。
• 所有的请求报文经由 Director Server，但回复响应报文不能经过 Director Server。
• Real Server的网关不允许指向Director Server IP，即 Real Server 发送的数据包不允许经过 Director Server。
• Real Server 上的 lo 接口配置 VIP 的 IP 地址。

1. 数据包流向分析

第一段：客户端发送请求到 Director Server (负载均衡器），请求的数据报文到达内核空间

IP和MAC变化

• 源 IP ------客户端的 IP
• 目标 IP ------ VIP
• 源 MAC ------客户端的 MAC
• 目的 MAC ------ Director Server 的 MAC

第二段：内核空间判断数据包的目标 IP 是本机 VIP ，此时 IPVS（IP 虚拟服务器）比对数据包请求的服务是否是集群服务，是集群服务就重新封装数据包。然后将数据包发送给根据负载均衡算法选择的 Real Server。（Director Server 和 Real Server 在同一个网络中，数据通过二层数据链路层来传输。）

IP和MAC变化

• 源 IP ------ 客户端的 IP
• 目标 IP ------ VIP
• 源 MAC ------ Director Server 的 MAC
• 目的 MAC ------ Real Server 的 MAC

第三段：到达 Real Server 的请求报文的 MAC 地址是自身的 MAC 地址，就接收此报文。数据包重新封装报文，将响应报文通过 lo 接口传送给物理网卡然后向外发出。

IP和MAC变化

• 源 IP ------ VIP
• 目标 IP ------ 客户端的 IP
• 源 MAC ------ Real Server 的 MAC
• 目的 MAC ------ 客户端的 MAC

最后回应：通过交换机和路由器将响应报文传送到客户端。客户端收到回复报文，得到想要的服务，但是不会知道是哪台服务器处理的（因为源ip为vip）。

2. LVS-DR模式与ARP的冲突及解决方法

最明显的冲突：

• 集群内的负载均衡服务器及其他节点服务器都配置同样的vip地址 即使是vip地址 在同一个局域网内 也是会造成ARP紊乱
• 这是因为当ARP广播发送到LVS-DR集群时，因为负载均衡器和节点服务器都是连接到相同网络上，它们都会接收到ARP广播。所以默认情况下 都会进行响应

解决方法

• 设置成只有前端的负载均衡器进行响应，其他节点服务器不响应ARP广播。
• 使用虚接口lo:0承载VIP地址
• 设置内核参数arp_ignore=1:系统只响应目的IP为本地IP的ARP请求

第二个问题

数据包返回客户端时 会把负载均衡服务器的MAC地址顶掉

大致过程如下：

• RealServer返回报文（源IP是VIP）经路由器转发，重新封装报文时，需要先获取路由器的MAC地址。
• 发送ARP请求时，Linux默认使用IP包的源IP地址（即VIP）作为ARP请求包中的源IP地址，而不使用发送接口的IP地址
• 路由器收到ARP请求后，将更新ARP表项
  原有的VIP对应Di