LVS+Keepalived高可用集群部署

一.集群

由多台主机构成，但对外只表现为一个整体，只提供一个访问入口（域名或者ip）,相当于一个大型计算机。

为什么需要集群
随着互联网的高度发展，对站点的硬件性能，响应速度，服务稳定性，数据可靠性等要求越来越高，单台服务器已满足不了负载均衡及高可用性能的要求。

怎么解决
①、使用昂贵的小型机，大型机
②、使用多台相对廉价的普通服务器构建服务集群
通过整合多台服务器，使用LVS来达到服务器的高可用和负载均衡，并且同一个IP地址对外提供相同的服务。
在企业中常用的一种集群技术——LVS（Linux Virtual Server，Linux虚拟服务器
企业集群分类
1、根据群集所针对的目标差异，可分为三种类型
①、负载均衡群集
提高应用系统的响应能力、尽可能处理更多的访问请求、减少延迟为目标，获得高并发、高负载(LB)的整体性能。
LB的负载分配依赖于主节点的分流算法，将来自客户机的访问请求分担给多个服务器节点，从而缓解整个系统的负载。
②、高可用群集
提高应用系统的可靠性、尽可能地减少中断时间为目标，确保服务的连续性，达到高可用(HA) 的容错效果。
HA的工作方式包括双工和主从两种模式，双工即所有节点同时在线；主从则只有主节点在线，但当出现故障时从节点能自动切换为主节点。
例如：“故障切换”、“双机热备” 等
③、高性能运算群集
以提高应用系统的CPU运算速度、扩展硬件资源和分析能力为目标，获得相当于大型、超级计算机的高性能运算(HPC)能力。
高性能依赖于"分布式运算”、“并行计算” ， 通过专用硬件和软件将多个服务器的CPU、内存等资源整合在一起，实现只有大型、超级计算机才具备的计算能力。

负载均衡群集架构
第一层，负载调度器(Load Balancer或Director)
访问整个群集系统的唯一入口， 对外使用所有服务器共有的VIP地址，也称为群集IP地址。通常会配置主、备两台调度器实现热备份
作用：当主调度器失效以后能够平滑替换至备用调度器，确保高可用性。
第二层，服务器池(Server Pool)
群集所提供的应用服务、由服务器池承担，其中每个节点具有独立的RIP地址(真实IP)，只处理调度器分发过来的客户机请求。
作用：当某个节点暂时失效时，负载调度器的容错机制会将其隔离，等待错误排除以后再重新纳入服务器池。
第三层，共享存储(Share Storage)
为服务器池中的所有节点提供稳定、一致的文件存取服务， 确保整个群集的统一性共享存储可以使用NAS设备,或者提供NFS共享服务的专用服务器。

负载均衡群集工作模式分析
群集的负载调度技术有3种工作模式
地址转换（NAT模式）
类似于防火墙的私有网络结构，负载调度器作为所有服务器节点的网关，即作为客户机的访问入口，也是各节点回应客户机的访问出口。
服务器节点使用私有IP地址，与负载调度器位于同一个物理网络，安全性要优于其他两种方式。
IP隧道（TUN模式）
采用开放式的网络结构，负载调度器仅作为客户机的访问入口，各节点通过各自的Internet连接直接回应客户机，而不再经过负载调度器。
服务器节点分散在互联网中的不同位置,具有独立的公网IP地址，通过专用IP隧道与负载调度器相互通信。
直接路由（DR模式）
采用半开放式的网络结构，与TUN模式的结构类似，但各节点并不是分散在各地，而是与调度器位于同一个物理网络。
负载调度器与各节点服务器通过本地网络连接，不需要建立专用的IP隧道。

LVS虚拟服务器
针对Linux内核开发的负载均衡解决方案
LVS 实际上相当于基于IP地址的虚拟化应用， 为基于IP地址和内容请求分发的负载均衡提出了一种高效的解决方法。

LVS现在已成为Linux内核的一部分，默认编译为ip_ vs模块，必要时能够自动调用。在CentOS 7系统中，以下操作可以手动加载ip_ vs模块，并查看当前系统中ip_ vs模块的版本信息。

LVS的负载调度算法
轮询(Round Robin)
● 将收到的访问请求按照顺序轮流分配给群集中的各节点(真实服务器) ,均等地对待每一台服务器 ，而不管服务器实际的连接数和系统负载。

加权轮询 (Weighted Round Robin)
● 根据调度器设置的权重值来分发请求，权重值高的节点优先获得任务，分配的请求数越。多
● 保证性能强的服务器承担更多的访问流量。

最少连接 (Least Connections )
● 根据真实服务器已建立的连接数进行分配，将收到的访问请求优先分配给连接数最少的节点。

加权最少连接(Weighted L east Connections )
● 在服务器节点的性能差异较大时，可以为真实服务器自动调整权重。
● 性能较高的节点将承担更大比例的活动连接负载。
NAT地址转换

创建web主页文件

配置LVS的IP

1、理解Keepalived实现原理

1.1 Keepalived工具介绍

企业应用中,单台服务器承担应用存在单点故障的危险
单点故障一旦发生,企业服务将发生中断,造成极大的危害

1.2 Keepalived使用场景

专为LVS和HA设计的一款健康检查工具
支持故障自动切换(Failover)
支持节点健康状态检查(Health Checking)
官方网站:http://www.keepalived.org

1.3 Keepalived实现原理剖析

Keepalived采用VRRP热备份协议实现Linux服务器的多机热备功能
VRRP(虚拟路由冗余协议)是针对路由器的一种备份解决方案
由多台路由器组成一个热备组,通过公用的虚拟IP地址对外提供服务
每个热备组内同时只有一台主路由器提供服务,其他路由器处于冗余状态
若当前在线的路由器失效,则其他路由器会根据设置的优先级自动接替虚拟IP地址,继续提供服务

二、Keepalived的部署

2.1 Keepalived案例讲解

Keepalived可实现多机热备，每个热备组可有多台服务器
双机热备的故障切换是由虚拟IP地址的漂移来实现，适用于各种应用服务器
实现基于Web服务的双机热备
漂移地址：192.168.100.10（VIP）
主、备服务器：192.168.100.11、192.168.100.55
提供的应用服务：Web

2.2 Keepalived安装与启动

在LVS群集环境中应用时，也需用到ipvsadm管理工具
YUM安装Keepalived
启用Keepalived服务

2.3 配置Keepalived master服务器

Keepalived配置目录位于/etc/keepalived/

keepalived.conf是主配置文件

global_defs{…}区段指定全局参数
vrrp_instance实例名称{…}区段指定VRRP热备参数
注释文字以"!"符号开头
目录samples，提供了许多配置样例作为参考
常用配置选项

router_id HA_TEST_R1：本路由器（服务器）的名称
vrrp_instance V1_1：定义VRRP热备实例
state MASTER：热备状态，MASTER表示主服务器
interface ens33：承载VIP地址的物理接口（之前的版本是eth0，一定要修改）
virtual_router_id 1：虚拟路由器的ID号，每个热备组保持一致
常用配置选项

priority 100：优先级，数值越大优先级越高（0-100）
adver_int 1：通告间隔秒数（心跳频率）
auth_type PASS：认证类型
auth_pass 123456：密码字串
virtual_ipaddress{vip}：指定漂移地址（VIP），可以有多个
Keepalived备份服务器的配置与master的配置有三个选项不同

router_id：设为自有名称
state：设为BACKUP （大写）
priority：值低于主服务器
其他选项与master相同

2.4 Keepalived双机热备效果测试

测试双机热备的效果
主、备均启用Web服务，设置不同内容
先后禁用、启用主服务器的网卡
执行的测试
测试1：使用ping检测14.0.0.11的
测试2：访问http://14.0.0.11，确认可用性及内容变化
测试3：查看日志文件/var/log/messages中的变化

三、LVS+Keepalived高可用群集部署

3.1 案例：负载均衡+高可用群集

Keepalived的设计目标是构建高可用的LVS负载均衡群集，可用调用ipvsadm工具来创建虚拟服务器、管理服务器池，而不仅仅用作双机热备
使用Keepalived构建LVS群集更加简便易用
主要优势
对LVS负载调度器实现热备切换，提高可用性
对服务器池中的节点进行健康检查，自动移除失效节点，恢复后再重新加入

3.2 案例拓扑

在基于LVS+Keepalived实现的群集结构中，至少包括两台热备的负载调度器，三台以上的节点服务器

配置主调度器
【1】全局配置、热备配置

应为主、从调度器实现热备功能，漂移地址使用LVS群集的VIP地址
【2】Web服务器池配置

在Keepalived的热备配置基础上，添加“virtual_server VIP 端口 {…}” 区段来配置虚拟服务器

包括对负载调度算法、群集工作模式、健康检查间隔、真实服务器地址等参数的设置
【3】重启Keepalived服务

配置从调度器
【1】从调度器的配置与主调度器基本相同

包括全局配置、热备配置、服务器池配置
【2】只需要调整router_id、state、priority参数
【3】配置完成后重启Keepalived服务

配置Web节点服务器
在DR模式的LVS集群中，除了需要调整/proc系统的ARP响应参数以外，还需要为虚拟接口lo:0配置VIP地址，并添加一条到VIP的本地路由
测试群集
客户机浏览器中，能够通过群集的VIP地址（14.0.0.11）正常访问Web页面内容
当主、从调度器任何一个失效时，Web站点仍然可以访问
只要服务器池有两台及以上的真实服务器可用，就可以实现访问量的负载均衡
通过主、从调度器 的/var/log/messages日志文件，可以跟踪故障切换流程
可执行“ipvsadm -ln”、“ipvasdm -lnc”操作命令查看负分配情况

四、实操

【1】DR调度服务器 192.168.100.11 keepalived ipvsadm
【3】DR调度服务器 192.168.100.33 keepalived ipvsadm
【5】节点服务器 192.168.100.55 httpd
【6】节点服务器 192.168.100.66 httpd
【2】win 10客户端 192.168.100.20
漂移地址：192.168.100.10

——————————————DR调度服务器——————————————————
【1】
[root@localhost ~]# iptables -F
[root@localhost ~]# setenforce 0

[root@localhost ~]# yum install keepalived ipvsadm -y

[root@localhost ~]# vim /etc/sysctl.conf
net.ipv4.ip_forward=1
####proc响应关闭重定向功能
net.ipv4.conf.all.send_redirects=0
net.ipv4.conf.default.send_redirects=0
net.ipv4.conf.ens33.send_redire