keepalived高可用，LVS+keepalived的实现

概述：

keepalived是集群高可用的一个技术，它是一个软件，与网络技术中VRRP协议的实现相类似，都是在若干个服务集群后虚拟出的一个对外提供服务的VIP(Virtual IP)，即虚拟IP，当某一台服务器发生故障时，该技术能够实现备用服务器顶上，达到正常提供服务的效果。他与VRRP一样，有主也有备。依靠配置决定，MASTER，BACKUP，优先级。

功能：

基于vrrp协议完成地址流动

为vip地址所在的节点生成ipvs规则(在配置文件中预先定义)

为ipvs集群的各RS做健康状态检测(RS：真实服务器)

基于脚本调用接口完成脚本中定义的功能，进而影响集群事务，以此支持nginx、haproxy等服务

配置文件：

安装keepalived可以yum安装:yum install -y keepalived，可也以编译安装。

yum安装的配置文件在/etc/keepalived/下有一个配置文件为keepalived.conf

配置文件解释：

全局配置
global_defs {
    ...
}
虚拟服务器配置
vrrp_instance VI_1 {
    ...
}
lvs设置(调度器和真实服务器)
virtual_server 192.168.114.188 80 {
    ...
}

全局配置：

global_defs {
   notification_email {    #邮箱，没什么用
     acassen@firewall.loc
     failover@firewall.loc
     sysadmin@firewall.loc
   }
   notification_email_from Alexandre.Cassen@firewall.loc
   smtp_server 12.0.0.1
   smtp_connect_timeout 30
   router_id LVS_DEVEL   #主机的唯一标识，一个组的名字
   vrrp_skip_check_adv_addr    #如果收到上一个报告是同一个路由器，则跳过检查，默认值为全检查
   vrrp_strict    #会严格遵守VRRP协议，启动此项后需要调整严格的VRRP协议
   vrrp_garp_interval 0
   vrrp_gna_interval 0
}

虚拟路由配置：

vrrp_instance VI_1 {
    state MASTER            #指明次服务器为主
    interface ens33            #监听的网卡是ens33
    virtual_router_id 51    #虚拟路由器组的标识，主从要一致
    priority 100            #优先级，主高 从低
    advert_int 1            #心跳报文，1秒发一次
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.200.16        #虚拟IP地址，可以多个，一般对应的virtual_server块就有多个
    }
}

lvs设置(调度器和真实服务器)：

virtual_server 192.168.200.16 80 {
    delay_loop 6            #检查后端服务器，每隔6秒检查一次
    lb_algo rr                #调度算法轮询
    lb_kind NAT                #LVS设置为NAT模式
    persistence_timeout 50    #连接保持时间改为0，否则，无法体现效果
    protocol TCP            #采用TCP协议
    #真实服务器
    real_server 192.168.201.100 80 {
        weight 1                    #节点权重
        TCP_CHECK {
            #connect_port 80   检查目标端口
            connect_timeout 3        #连接超时
            retry 3                    #重试次数
            delay_before_retry 3    #重试间隔时间
        }
    }
}

LVS+keepalived的实现

图解：

7-3和7-4作为web服务端

7-1和7-2作为调度服务器

7-5作为客户端

web服务端的配置：

7-3和7-4作为web服务器
7-3:192.168.114.30

#使用httpd作为web服务
[root@Node3 ~]#:yum install -y httpd

#主页面
[root@Node3 ~]#:echo "7-3" > /var/www/html/index.html

#启动
[root@Node3 ~]#:systemctl start httpd

#调优
[root@Node3 ~]#:vim /etc/sysctl.conf
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
[root@Node3 ~]#:sysctl -p

#临时添加一个虚拟网卡，不要重启网络，否则消失
[root@Node3 ~]#:ifconfig ens33:0 192.168.114.188/24

#7-4同理

7-4:192.168.114.40
yum install -y httpd
echo "7-4" > /var/www/html/index.html
systemctl start httpd
[root@Node4 ~]#:vim /etc/sysctl.conf
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
[root@Node4 ~]#:sysctl -p
[root@Node4 ~]#:ifconfig ens33:0 192.168.114.188/24

7-1和7-2上LVS+keepalived的配置：

#两台主机的LVS调度服务器，下载启动配置，上一节有讲

[root@Node1 ~]#:yum install ipvsadm.x86_64 -y
[root@Node1 ~]#:ipvsadm-save > /etc/sysconfig/ipvsadm
[root@Node1 ~]#:systemctl start ipvsadm
[root@Node2 ~]#:yum install ipvsadm.x86_64 -y
[root@Node2 ~]#:ipvsadm-save > /etc/sysconfig/ipvsadm
[root@Node2 ~]#:systemctl start ipvsadm
#7-1的keepalived的配置：

[root@Node1 ~]#:yum install -y keepalived
[root@Node2 ~]#:yum install -y keepalived        #7-2上也安装keepalived

#主配置文件
[root@Node1 ~]#:cd /etc/keepalived

#做个拷贝，做错了，还能还原
[root@Node1 keepalived]#:cp keepalived.conf keepalived.conf.bak
[root@Node1 keepalived]#:vim keepalived.conf
global_defs {        修改的地方，其余配置不在这里写出，并没有删除！
   smtp_server 127.0.0.1        #邮箱服务器地址
   router_id LVS_01                #服务器标识
   #vrrp_strict                          #如果开启会严格遵守VRRP的规则，这里注释掉
}
vrrp_instance VI_1 {
    state MASTER            #主
    interface ens33            #修改网卡
    priority 100            #优先级
    virtual_ipaddress {
        192.168.114.188        #虚拟IP地址
    }
}

virtual_server 192.168.114.188 80 {
    lb_kind DR                        #：LVS的DR模式
    persistence_timeout 0            #连接保持时间改为0，否则无法体现效果
    protocol TCP                    #协议TCP
    real_server 192.168.114.30 80 { #后端的真实web1服务器
        weight 1                    #节点权重
        TCP_CHECK {                #修改为TCP_CHECK
            connect_port 80            #目标端口
            connect_timeout 3        #连接超时，如果3秒没连上就认为超时
            nb_get_retry 3            #重试次数，重连3次
            delay_before_retry 3    #重试间隔时间
        }
    }
    real_server 192.168.114.40 80 {        #后端的真实web2服务器
        weight 1
        TCP_CHECK {
            connect_port 80
            connect_timeout 3
            nb_get_retry 3
        }
    }
}

#启动服务

[root@Node1 keepalived]#:systemctl start keepalived

#查看IP地址，发现添加了一个VIP地址
[root@Node1 keepalived]#:ip a
    inet 192.168.114.188/32 scope global ens33
[root@Node1 keepalived]#:ipvsadm -Ln            #自动生成的规则，不需要手写规则了
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.114.188:80 rr
  -> 192.168.114.30:80            Route   1      0          0         
  -> 192.168.114.40:80            Route   1      0          0 
#7-1通过远程拷贝到7-2服务器上就可以了，稍微修改一下
[root@Node1 keepalived]#:scp keepalived.conf 192.168.114.20:/etc/keepalived/

7-2的配置文件的修改：

由于7-2的配置文件是由7-1远程拷贝过来的，需要修改以下几个地方：

global_defs {
   router_id LVS_02        #全局配置中的服务器的唯一标识，主从不一致
}

vrrp_instance VI_1 {
    state BACKUP            #备
    priority 80                #优先级
}

#启动

[root@Node2 keepalived]#:systemctl start keepalived
[root@Node2 keepalived]#:ipvsadm -Ln            #自动生成的规则，不需要手写规则了
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.114.188:80 rr
  -> 192.168.114.30:80            Route   1      0          0         
  -> 192.168.114.40:80            Route   1      0          0 

7-5作为客户端，访问虚拟IP时，能够实现两个服务端共同提供服务：

7-5测试
[root@Node5 ~]#:curl 192.168.114.188
7-4
[root@Node5 ~]#:curl 192.168.114.188
7-3
[root@Node5 ~]#:curl 192.168.114.188
7-4
[root@Node5 ~]#:curl 192.168.114.188
7-3

配置成功了

----end----