KEEPALIVED的高可用实现

目录

一.高可用集群 

1.1 集群类型 

Keepalived 环境准备

1.2Keepalived 相关文件

1.3实验步骤

1.3.1HTTP配置

1.3.2安装KA

1.3.3实现master/slave的 Keepalived 单主架构

1.3.4抢占模式和非抢占模式

非抢占模式

抢占模式

抢占延迟模式 preempt_delay

1.3.5开启KA的日志功能

1.3.6独立子配置文件

1.3.7 VIP单播配置

1.3.8邮件服务器

编写邮件

编写脚本

1.3.9keepalived双主架构

1.3.10实现IPVS的高可用性

1.3.11Haproxy高可用

---

一.高可用集群 

1.1 集群类型 

LB：Load Balance 负载均衡
LVS/HAProxy/nginx（http/upstream, stream/upstream）
HA：High Availability 高可用集群
数据库、Redis
SPoF: Single Point of Failure，解决单点故障
HPC：High Performance Computing 高性能集群

Keepalived 环境准备

各节点时间必须同步：ntp, chrony

关闭防火墙及SELinux

4台rh7

vip 100

2台KA 110 120

两台 webserver 10 20

KA1	172.25.250.110
KA2	172.25.250.120
webserver1	172.25.250.10
webserver2	172.25.250.20

1.2Keepalived 相关文件

软件包名：keepalived 
主程序文件：/usr/sbin/keepalived
主配置文件：/etc/keepalived/keepalived.conf
配置文件示例：/usr/share/doc/keepalived/
Unit File：/lib/systemd/system/keepalived.service
Unit File的环境配置文件：/etc/sysconfig/keepalived

RHEL7中可能会遇到以下bug

systemctl restart keepalived #新配置可能无法生效

systemctl stop keepalived;systemctl start keepalived #无法停止进程，需要 kill 停 止

1.3实验步骤

1.3.1HTTP配置

两个RS上下载httpd

yum install httpd

启动httpd

写入网页文件

rs1和rs2都要写

在KA上curl测试访问

1.3.2安装KA

KA1,KA2都要安装

1.3.3实现master/slave的 Keepalived 单主架构

配置文件

vim /etc/keepalived/keepalived.conf

KA1--MASTER

KA2--SLAVE

重启服务

进行抓包

tcpdump -i eth0 -nn host 224.0.0.18

一开始一直是10

因为KA2优先级低抢不过KA1

把10关闭就会变成20

停止10的ka服务

1.3.4抢占模式和非抢占模式

默认为抢占模式preempt，即当高优先级的主机恢复在线后，会抢占低先级的主机的master角色，

这样会使vip在KA主机中来回漂移，造成网络抖动

建议设置为非抢占模式 nopreempt ，即高优先级主机恢复后，并不会抢占低优先级主机的master角色

非抢占模块下,如果原主机down机, VIP迁移至的新主机, 后续也发生down时,仍会将VIP迁移回原主机

注意：要关闭 VIP抢占，必须将各 keepalived 服务器state配置为BACKUP

即将所有ka服务器的虚拟路由器状态都改成BACKUP

以及添加nopreempt

非抢占模式

KA1

KA2

现在当KA1关闭后，vip移动给KA2后，KA1再重启也不会抢回vip

抢占模式

即有一个是master并且优先级最高

设置为抢占模式，当10重启就会直接抢夺vip

KA1

KA2

抢占延迟模式 preempt_delay

抢占延迟模式，即优先级高的主机恢复后，不会立即抢回VIP，而是延迟一段时间（默认300s）再抢回 VIP

preempt_delay

注意：需要各keepalived服务器state为BACKUP,并且不要启用 vrrp_strict

此处设置5s是为了方便查看结果

KA1和KA2都要设置这一项

1.3.5开启KA的日志功能

编辑日志配置文件并重启

1.3.6独立子配置文件

格式：

include /path/file

注释掉虚拟路由器

创建配置文件

写入注释掉的配置内容

然后重启服务

发现vip仍然存在

1.3.7 VIP单播配置

默认keepalived主机之间利用多播相互通告消息，会造成网络拥塞，可以替换成单播，减少网络流量

注意：启用 vrrp_strict 时，不能启用单播

格式

unicast_src_ip <IPADDR>  #指定发送单播的源IP
unicast_peer {
   <IPADDR>     #指定接收单播的对方目标主机IP
   ......
}

KA1

KA2

抓包查看

tcpdump -i eth0 -nn src host 172.25.250.20 and dst 172.25.250.10

要测20的要把10的keealive服务关掉

tcpdump -i eth0 -nn src host 172.25.250.20 and dst 172.25.250.10

1.3.8邮件服务器

keepalived配置文件 vim /etc/keepalived/keepalived.conf 

 KA1和KA2上面这global_def部分是一样的，注意都要写

我们利用qq邮箱来实现

进入qq优先点击右上角的账号与安全

在安全设置里面

找到下面的授权码

然后编写配置文件

/etc/mail.rc

编写邮件

看自己的邮箱能否收到邮件

然后KA2主机也这样配置

编写脚本

KA1配置

重启服务

两边都要写脚本

然后给脚本权限

chmod +x mail.sh

1.3.9keepalived双主架构

master/slave的单主架构，同一时间只有一个Keepalived对外提供服务，此主机繁忙，而另一台主机却 很空闲，利用率低下，可以使用master/master的双主架构，解决此问题。

master/master 的双主架构： 即将两个或以上VIP分别运行在不同的keepalived服务器，以实现服务器并行提供web访问的目的，提高 服务器资源利用率

两个vip对接一个服务

10上

额外设置一个vi_2虚拟路由

20上

20本来是backup 添加的虚拟路由v2就要设置成master

重启服务

记得优先级要进行改变，master的优先级都一样，backup的优先级也要一样

1.3.10实现IPVS的高可用性

110和120加

这个是vip的ip

然后禁止arp的响应，只进不出

然后120scp命令把文件复制过来再重启服务

KA1

ka2也这样做

、

KA1

vim /etc/keepalived/keepalived.conf 

KA2

重启服务

查看是否成功写入策略

在20上也能查看到策略只是没有生效，因为没有vip

另外开一台虚拟机进行测试

模拟故障，关闭110后

1.3.11Haproxy高可用

10 20下载haproxy

启用内核参数，两台都要做

这个作用是让本地没有写入的ip也能启用

编写haproxy配置文件

重启haproxy服务

110 120要删掉之前添加的环回ip以及打开arp响应

要注释掉keep的virt-server，也就是刚才ipvs中写的

编写脚本，杀死haproxy服务

ka1中

vim /etc/keepalived/keepalived.conf 
 

ka2

在测试机执行死循环

然后关闭一台KA的keepalived服务和haproxy服务，发现死循环还在执行