Keepalived高可用群集

---

前言

Keepalived

• 支持故障自动切换（Failover）
• 支持节点健康状态检查（Health Checking）
• 判断LVS负载调度器、节点服务器的可用性，当master主机出现故障及时切换到backup节点保证业务正常，当 master
  故障主机恢复后将其重新加入群集并且业务重新切换回 master 节点（优先级）。

Keepalived实现原理剖析

keepalived采用VRRP热备份协议实现Linux 服务器的多机热备功能

VRRP（虚拟路由冗余协议）

1. 是针对路由器的一种备份解决方案。
2. 由多台路由器组成一个热备份组，通过共用的虚拟IP地址对外提供服务
3. 每个热备组内同时只有一台主路由器提供服务，其他路由器处于冗余状态
4. 若当前在线的路由器失效，则其他路由器会根据设置的优先级自动接替虚拟IP地址，继续提供服务

snmp 通过网络管理服务器、交换机、路由器等设备的一种协议

在keepalived SNMP管理的是健康检查(状态)

PS: 在监控中也会通过snmp 监控、获取被监控服务器的数据

Keepalived 配置文件

Keepalived可实现多机热备,每个热备组可有多台服务器
双机热备的故障切换是由 虚拟IP （Vip）地址的漂移来实现,适用于各种应用服务器
Keepalived配置目录位于/etc/keepalived/

LVS-DR-Keepalived配置实验

keepallived master服务器

keepallived.conf是主配置文件
global_defs {...}     区段            指定全局参数
vrrp_instance   实例名称  {...}  区段  指定VRRP热备参数

常用的选项配置
router_id   Lvs_01：       #本路由器(服务器)的名称、主备名称要不一样
vrrp_instance vi_1：       #定义VRRP热备实例
state MASTER：             #热备状态,MASTER表示主服务器
interface ens33：          #承载VIP地址的物理接口
virtual_router_id 51 ：    #虚拟路由器的ID号,每个热备组保持一致
priority 100：             #优先级,数值越大优先级越高
advert_int 1：             #通告间隔秒数(心跳频率)
auth_type PASS：           #认证类型
auth_pass 123456：         #密码字串
virtual_ipaddress { vip}： #指定漂移地址(VIP),可以有多个

Keepalived backup服务器

在配置时要注意和master服务器的配置不同：
router_id:设为自有名称
state:设为BACKUP
priority:值低于主服务器
其他的都一样

LVS+Keepalived 高可用群集的搭建

配置负载调度器

############################ 配置Keepalived master服务器 #################################
 
1. #关闭防火墙
systemctl stop firewalld
systemctl disable firewalld
setenforce 0
 
2. #安装服务
yum -y install ipvsadm keepalived
 
3. #修改配置文件keeplived.conf
cd /etc/keepalived/
cp keepalived.conf  keepalived.conf.bak
vim keepalived.conf
 
global_defs {                            #定义全局参数
      router_id lvs_01
}
vrrp_instance vi_1 {                    #定义VRRP热备实例参数 
      state MASTER                      #指定热备状态，主为MASTER，备为BACKUP
      interface ens33                   #指定承载vip地址的物理接口
      virtual_router_id 51              #指定虚拟路由器的ID号，每个热备组保持一致
      priority 110                      #指定优先级，数值越大优先级越高
      advert_int 1                      #通告间隔秒数(心跳频率)
      authentication {                  #定义认证信息,每个热备组保持一致
           auth_type PASS               #认证类型
           auth_pass laohuyyds          #指定验证密码，主备服务器保持一致
 }
virtual_ipaddress {                     #指定群集vip地址
      192.168.202.10
}
}
virtual_server 192.168.202.10 80 {       #指定虚拟服务器地址(VIP)、端口，定义虚拟服务器和Web服务器池参数
      delay_loop 6					    #健康检查的间隔时间(秒)
      lb_algo rr                        #指定调度算法，轮询(rr)
      lb_kind DR                        #指定群集工作模式，直接路由(DR)
      persistence_timeout 6             #连接保持时间(秒)
      protocol TCP                      #应用服务采用的是 TCP协议
real_server 192.168.202.10 80 {          #指定第一个Web节点的地址、端口
      weight 1                          #节点的权重
      TCP_CHECK {                       #添加以下健康检查方式
          connect_port 80               #添加检查的目标端口
          connect_timeout 3             #添加连接超时(秒)
          nb_get_retry 3                #添加重试次数
          delay_before_retry 3          #添加重试间隔
   }
}
real_server 192.168.202.10 80 {
      weight 1
      TCP_CHECK {
          connect_port 80
          connect_timeout 3
          nb_get_retry 3
          delay_before_retry 3
   }
}
}

 
4. #启动服务、查看虚拟网卡vip
systemctl start keepalived
ip addr show dev ens33	
 
5. #调整proce响应参数，关闭Linux内核的重定向参数响应
vim /etc/sysctl.conf
net.ipv4.ip_forward = 1
net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0
 
6. #刷新一下
sysctl -p
 
############################# 配置ipvsadm #################################
 
7. #配置负载分配策略，并启动服务
ipvsadm-save >/etc/sysconfig/ipvsadm
systemctl start ipvsadm.service
 
8. 
#清空ipvsadm，并做策略
ipvsadm -C
ipvsadm -A -t 192.168.202.10:80 -s rr
ipvsadm -a -t 192.168.202.10:80 -r 192.168.202.31:80 -g
ipvsadm -a -t 192.168.202.10:80 -r 192.168.202.32:80 -g
 
9. #保存设置
ipvsadm
ipvsadm -ln
ipvsadm-save >/etc/sysconfig/ipvsadm

配置负载调度器

############################ 配置Keepalived master服务器 #################################

1. #关闭防火墙
systemctl stop firewalld
systemctl disable firewalld
setenforce 0

2. #安装服务
yum -y install ipvsadm keepalived

3. #修改配置文件keeplived.conf
cd /etc/keepalived/
cp keepalived.conf keepalived.conf.bak
   vim keepalived.conf

global_defs {
     router_id lvs_02
}
vrrp_instance vi_2 {
     state BACKUP
     interface ens33
     virtual_router_id 51
     priority 100
     advert_int 1
     authentication {
          auth_type PASS
          auth_pass laohuyyds
}
virtual_ipaddress {
     192.168.202.20
}
}
virtual_server 192.168.202.20 80 {
     lb_algo rr
     lb_kind DR
     persistence_timeout 6
     protocol TCP
real_server 192.168.202.31 80 {
     weight 1
     TCP_CHECK {
         connect_port 80
         connect_timeout 3
         nb_get_retry 3
         delay_before_retry 3
  }
}
real_server 192.168.202.32 80 {
     weight 1
     TCP_CHECK {
         connect_port 80
         connect_timeout 3
         nb_get_retry 3
         delay_before_retry 3
  }
}
}
                                            


4. #启动服务、查看虚拟网卡vip
systemctl start keepalived
ip addr show dev ens33	

5. #调整proce响应参数，关闭Linux内核的重定向参数响应
vim /etc/sysctl.conf
net.ipv4.ip_forward = 1
net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0

6. #刷新一下
sysctl -p

############################# 配置ipvsadm #################################

7. #配置负载分配策略，并启动服务
ipvsadm-save >/etc/sysconfig/ipvsadm
systemctl start ipvsadm.service

8. 
#清空ipvsadm，并做策略
ipvsadm -C
ipvsadm -A -t 192.168.202.20:80 -s rr
ipvsadm -a -t 192.168.202.20:80 -r 192.168.202.31:80 -g
ipvsadm -a -t 192.168.202.20:80 -r 192.168.202.42:80 -g

9. #保存设置
ipvsadm
ipvsadm -ln
ipvsadm-save >/etc/sysconfig/ipvsadm

配置节点服务器-1

1. #关闭防火墙
systemctl stop firewalld
systemctl disable firewalld
setenforce 0

2. #安装并开启httpd服务
yum -y install httpd
systemctl start httpd

3. #配置站点文件
vim /var/www/html/index.html
this is 00 30 00

4. #配置虚拟vip
vim /etc/sysconfig/network-scripts/ifcfg-lo:0
DEVICE=lo:0
ONBOOT=yes
IPADDR=192.168.202.10
NETMASK=255.255.255.255

5. #重启网络服务，开启虚拟网卡
systemctl restart network
ifup lo:0
ifconfig lo:0

6. #设置路由
route add -host 192.168.202.10 dev lo:0
route -n

7. #调整 proc 响应参数
#添加系统只响应目的IP为本地IP的ARP请求
#系统不使用原地址来设置ARP请求的源地址，而是物理mac地址上的IP
vim /etc/sysctl.conf
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2

8. #刷新proc参数
sysctl -p

配置节点服务器-2
(同上，测试记得改网页)

1. #关闭防火墙
systemctl stop firewalld
systemctl disable firewalld
setenforce 0
 
2. #安装并开启httpd服务
yum -y install httpd
systemctl start httpd
 
3. #配置站点文件
vim /var/www/html/index.html
this is 00 40 00
 
4. #配置虚拟vip
vim /etc/sysconfig/network-scripts/ifcfg-lo:0
DEVICE=lo:0
ONBOOT=yes
IPADDR=192.168.24.48
NETMASK=255.255.255.255
 
5. #重启网络服务，开启虚拟网卡
systemctl restart network
ifup lo:0
ifconfig lo:0
 
6. #设置路由
route add -host 192.168.24.48 dev lo:0
route -n
 
7. #调整 proc 响应参数
#添加系统只响应目的IP为本地IP的ARP请求
#系统不使用原地址来设置ARP请求的源地址，而是物理mac地址上的IP
vim /etc/sysctl.conf
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
 
8. #刷新proc参数
sysctl -p