1.keepalived 简介
vrrp 协议的软件实现,原生设计目的为了高可用 ipvs服务 官网: http://keepalived.org/
功能: 基于vrrp协议完成地址流动 为vip地址所在的节点生成ipvs规则(在配置文件中预先定义) 为ipvs集群的各RS做健康状态检测 基于脚本调用接口完成脚本中定义的功能,进而影响集群事务,以此支持nginx、haproxy等服务
2.架构
用户空间核心组件:
vrrp stack:VIP消息通告
checkers:监测real server
system call:实现 vrrp 协议状态转换时调用脚本的功能
SMTP:邮件组件
IPVS wrapper:生成IPVS规则
Netlink Reflector:网络接口
WatchDog:监控进程
控制组件:提供keepalived.conf 的解析器,完成Keepalived配置
IO复用器:针对网络目的而优化的自己的线程抽象
内存管理组件:为某些通用的内存管理功能(例如分配,重新分配,发布等)提供访问权限
3.Keepalived 环境准备
各节点时间必须同步:ntp, chrony
关闭防火墙及SELinux
各节点之间可通过主机名互相通信:非必须
建议使用/etc/hosts文件实现:非必须
各节点之间的root用户可以基于密钥认证的ssh服务完成互相通信:非必须
4.Keepalived 相关文件
软件包名:keepalived
主程序文件:/usr/sbin/keepalived
主配置文件:/etc/keepalived/keepalived.conf
配置文件示例:/usr/share/doc/keepalived/
Unit File:/lib/systemd/system/keepalived.service
Unit File的环境配置文件:/etc/sysconfig/keepalived
5.Keepalived 安装
[root@KA1 ~]# dnf install keepalived -y
[root@KA1 ~]# systemctl start keepalived
[root@KA1 ~]# ps axf | grep keepalived
6.配置文件组成部分
配置文件:/etc/keepalived/keepalived.conf
全局配置
配置虚拟路由器
master端
slave端
测试成功
启用keepalived日志功能(vim /etc/sysconfig/keepalived)
添加
之后进入vim /etc/rsyslog.conf添加
执行tail -f /var/log/keepalived.log
实现独立子配置文件
当生产环境复杂时, /etc/keepalived/keepalived.conf 文件中内容过多,不易管理 将不同集群的配置,比如:不同集群的VIP配置放在独立的子配置文件中利用include 指令可以实现包含 子配置文件;;;;;;创建一个子配置文件目录
mkdir /etc/keepalived/conf.d
之后进入/etc/keepalived/keepalived.conf,添加如下
之后在vim /etc/keepalived/conf.d/172.25.254.100.conf中
之后重启
ifconfig查看地址
实现master/slave的 Keepalived 单主架构
1 MASTER配置
在10中,vim /etc/keepalived/keepalived.conf
20中
抓包观察
2.抢占模式和非抢占模式
1>非抢占模式
默认为抢占模式preempt,即当高优先级的主机恢复在线后,会抢占低先级的主机的master角色, 这样会使vip在KA主机中来回漂移,造成网络抖动, 建议设置为非抢占模式 nopreempt ,即高优先级主机恢复后,并不会抢占低优先级主机的master角色 非抢占模块下,如果原主机down机, VIP迁移至的新主机, 后续也发生down时,仍会将VIP迁移回原主机
注意:要关闭 VIP抢占,必须将各 keepalived 服务器state配置为BACKUP
10配置
20配置
100在优先级高的那边
2> 抢占延迟模式 preempt_delay
抢占延迟模式,即优先级高的主机恢复后,不会立即抢回VIP,而是延迟一段时间(默认5s)再抢回 VIP
10配置
20配置
之后停止10的keepalived服务,100地址不在
跑到20这边
之后开启10的keepalived服务,5s后100重新回来
3 >VIP单播配置
默认keepalived主机之间利用多播相互通告消息,会造成网络拥塞,可以替换成单播,减少网络流量
#在所有节点vrrp_instance语句块中设置对方主机的IP,建议设置为专用于对应心跳线网络的地址,而非使 用业务网络 unicast_src_ip #指定发送单播的源IP unicast_peer { #指定接收单播的对方目标主机
10配置
20配置
单播成功
4 >Keepalived 邮件
在10和20装邮件
yum install mailx -y
进入qq邮箱找到安全设置
然后点击开启服务
生成一个码然后在10配置
vim /etc/mail.rc
之后发送邮件
收件箱里显示收到
两台主机配置好之后写脚本
vim /etc/keepalived/mail.sh
给脚本权限
之后编辑主配置文件kee....
重启k1之后收到邮件
重启k2
·5 >实现 master/master 的 Keepalived 双主架构
master/slave的单主架构,同一时间只有一个Keepalived对外提供服务,此主机繁忙,而另一台主机却 很空闲,利用率低下,可以使用master/master的双主架构,解决此问题。 master/master 的双主架构: 即将两个或以上VIP分别运行在不同的keepalived服务器,以实现服务器并行提供web访问的目的,提高 服务器资源利用率
#ka1主机配置
100在10上
#ka2主机配置
200在20上
6> 实现IPVS的高可用性
(6.1) IPVS相关配置
6.1.2
virtual server (虚拟服务器)的定义格式 virtual_server IP port #定义虚拟主机IP地址及其端口 virtual_server fwmark int #ipvs的防火墙打标,实现基于防火墙的负载均衡集群
virtual_server group string #使用虚拟服务器
实战
先给110和120添加
之后配置vim /etc//sysctl.d/arp.conf
之后查看,两台主机都有
之后在10和20安装ipvsadm
在20的keep里面
10的
之后20
10
......实现其它应用的高可用性 VRRP Script
keepalived利用 VRRP Script 技术,可以调用外部的辅助脚本进行资源监控,并根据监控的结果实现优先 动态调整,从而实现其它应用的高可用性功能
分两步实现:
定义脚本 vrrp_script:
自定义资源监控脚本,vrrp实例根据脚本返回值,公共定义,可被多个实例调用,定 义在vrrp实例之外的独立配置块,一般放在global_defs设置块之后。 通常此脚本用于监控指定应用的状态。一旦发现应用的状态异常,则触发对MASTER节点的权重减至 低于SLAVE节点,从而实现 VIP 切换到 SLAVE 节点
调用脚本 track_script:
调用vrrp_script定义的脚本去监控资源,定义在VRRP实例之内,调用事先定义的 vrrp_script 3.7.1.1 定义 VRRP script vrrp_script { script | #此脚本返回值为非0时,会触发下面OPTIONS执行 OPTIONS } track_script { SCRIPT_NAME_1 SCRIPT_NAME_2 }
写脚本 vim /etc/keepalived/test.sh
执行之后返回值为非0
添加可执行权限
进入ka1 的kee......去定义(在vi1上面添加这个模块)
在vip下面添加(check lee与上面一致)
之后重启kee
ifconfig查看vip
实现HAProxy高可用
在两个ka1和ka2先实现haproxy的配置
vim /etc/haproxy/haproxy.cfg
#在两个ka1和ka2两个节点启用内核参数
vim /etc/sysctl.conf
#在ka1中编写检测脚本
vim /etc/keepalived/scripts/haproxy.sh
之后停止haproxy
ifconfig后
vip跑到20上