LVS+keepalived高性能集群应用实战

最新推荐文章于 2023-02-04 17:23:05 发布
最新推荐文章于 2023-02-04 17:23:05 发布
阅读量589 收藏
点赞数
文章标签： 网络 操作系统 运维
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ccc82284/article/details/54142481
版权 
[root@example ~]# yum install ipvsadm -y  安装ip_vs管理工具

理论部分我们在上篇文章中详细介绍了，这次进入实操阶段
[root@example ~]#  modprobe ip_vs    加载ip_vs模块
[root@example ~]#  modprobe ip_vs_rr
[root@example ~]# lsmod | grep ip_vs
ip_vs_rr                1420  0 
ip_vs                 126534  2 ip_vs_rr
libcrc32c               1246  1 ip_vs
ipv6                  335589  271 ip_vs

[root@example ~]# ip addr add /24 dev eth0 label eth0:1 手动加vip地址
[root@example ~]# ip addr
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet /8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:5a:e1:a3 brd ff:ff:ff:ff:ff:ff
    inet /24 brd  scope global eth0
    inet /24 scope global secondary eth0:1
    inet6 fe80::20c:29ff:fe5a:e1a3/64 scope link 
       valid_lft forever preferred_lft forever

本次环境规划如下 操作系统 

[root@example ~]# curl                                    
web01_
[root@example ~]# curl                                    
web02_

手工执行配置lvs服务器并添加两台rs服务
查看相关的帮助命令
[root@example ~]# ipvsadm --help
ipvsadm  2008/5/15 (compiled with popt and IPVS )
Usage:
  ipvsadm -A|E -t|u|f service-address [-s scheduler] [-p [timeout]] [-M netmask] [--pe persistence_engine]
  ipvsadm -D -t|u|f service-address
  ipvsadm -C
  ipvsadm -R
  ipvsadm -S [-n]
  ipvsadm -a|e -t|u|f service-address -r server-address [options]
  ipvsadm -d -t|u|f service-address -r server-address
  ipvsadm -L|l [options]
  ipvsadm -Z [-t|u|f service-address]
  ipvsadm --set tcp tcpfin udp
  ipvsadm --start-daemon state [--mcast-interface interface] [--syncid sid]
  ipvsadm --stop-daemon state
  ipvsadm -h

Commands:
Either long or short options are allowed.
  --add-service     -A        add virtual service with options
  --edit-service    -E        edit virtual service with options
  --delete-service  -D        delete virtual service
  --clear           -C        clear the whole table
  --restore         -R        restore rules from stdin
  --save            -S        save rules to stdout
  --add-server      -a        add real server with options
  --edit-server     -e        edit real server with options
  --delete-server   -d        delete real server
  --list            -L|-l     list the table
  --zero            -Z        zero counters in a service or all services
  --set tcp tcpfin udp        set connection timeout values
  --start-daemon              start connection sync daemon
  --stop-daemon               stop connection sync daemon
  --help            -h        display this help message

[root@example ~]# ipvsadm -C   清空全部配置
[root@example ~]# ipvsadm -A -t :80 -s wrr 指定vip并设定调度算法
[root@example ~]# ipvsadm -a -t :80 -r  :80 -g -w 1  添加rs
[root@example ~]# ipvsadm -a -t :80 -r  :80 -g -w 3 

[root@example ~]#  ipvsadm -Ln
IP Virtual Server version  (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  :80 wrr
  -> :80           Route   1      0          0         
  -> :80           Route   3      0          0
手工在rs服务器上面绑定操作
第一台
[root@example ~]# ifconfig lo:132  netmask  up
[root@example ~]# route add -host  dev lo
[root@example ~]# ip addr
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet /8 scope host lo
    inet /32 brd  scope global lo:132
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:66:66:33 brd ff:ff:ff:ff:ff:ff
    inet /24 brd  scope global eth0
    inet6 fe80::20c:29ff:fe66:6633/64 scope link 
       valid_lft forever preferred_lft forever
       
第二台
[root@example ~]# ip addr add /32 dev lo label lo:133
[root@example ~]# route add -host  dev lo
[root@example ~]# ip addr 
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet /8 scope host lo
    inet /32 scope global lo:133
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:6c:a9:25 brd ff:ff:ff:ff:ff:ff
    inet /24 brd  scope global eth0
    inet6 fe80::20c:29ff:fe6c:a925/64 scope link 
       valid_lft forever preferred_lft forever
       

手工在rs端抑制arp响应
第一台
[root@example ~]# echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
[root@example ~]# echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
[root@example ~]# echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
[root@example ~]# echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce

第二台
[root@example ~]# echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
[root@example ~]# echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
[root@example ~]# echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
[root@example ~]# echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce



测试访问，不停的刷新，同时打开web服务器的log观察

web01_132日志
[root@example ~]# tail -f /var/log/httpd/access_log 
 - - [13/Aug/2016:14:34:21 +0800] "GET / HTTP/" 200 22 "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:34:24 +0800] "GET / HTTP/" 200 22 "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:34:25 +0800] "GET / HTTP/" 200 22 "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"

web01_133日志
[root@example ~]# tail -f /var/log/httpd/access_log 
 - - [13/Aug/2016:14:33:54 +0800] "GET / HTTP/" 200 22 "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:33:54 +0800] "GET / HTTP/" 404 290 "/" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:34:05 +0800] "GET / HTTP/" 304 - "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:34:17 +0800] "GET / HTTP/" 304 - "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:34:20 +0800] "GET / HTTP/" 304 - "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:34:22 +0800] "GET / HTTP/" 200 22 "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:34:23 +0800] "GET / HTTP/" 304 - "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:34:23 +0800] "GET / HTTP/" 304 - "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:34:24 +0800] "GET / HTTP/" 200 22 "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:34:25 +0800] "GET / HTTP/" 304 - "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:34:25 +0800] "GET / HTTP/" 304 - "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:34:26 +0800] "GET / HTTP/" 200 22 "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
 - - [13/Aug/2016:14:34:26 +0800] "GET / HTTP/" 304 - "-" "Mozilla/ (Windows NT ; WOW64) AppleWebKit/ (KHTML, like Gecko) Chrome/ Safari/"
[root@example ~]#  ipvsadm -Ln --stats  可以看到基本符合我们设定的权重1:3
IP Virtual Server version  (size=4096)
Prot LocalAddress:Port               Conns   InPkts  OutPkts  InBytes OutBytes
  -> RemoteAddress:Port
TCP  :80                 66      335        0    44474        0
  -> :80                 16       82        0    10978        0
  -> :80                 50      253        0    33496        0

上面日志可能不够直观，最好再开一个客户端去执行for循环测试，这里就不在演示

以上手工创建只是为了让我更好的理解lvs的过程，好了下面开始我们的keepalived部分

安装keepalived
[root@example ~]#yum install keepalived -y
配置keepalived
主节点上面

[root@example ~]# cat /etc/keepalived/
global_defs {
   notification_email {
        1335120568@
   }
   notification_email_from @
   smtp_server 
   smtp_connect_timeout 30
   router_id LVS_01
}

vrrp_instance web {
    state MASTER
    interface eth0
    virtual_router_id 51
    priority 150
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        /24
    }
}

virtual_server  80 {
    delay_loop 6          
    lb_algo wrr                
    lb_kind DR                
    nat_mask 
    persistence_timeout 50     
    protocol TCP                

    real_server  80 {
        weight 1              
        TCP_CHECK {
        connect_timeout 8       
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
    }

    real_server  80 {
        weight 1              
        TCP_CHECK {
        connect_timeout 8       
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
    }
}


备用节点上面keepalived配置
[root@example ~]# cat /etc/keepalived/ 
global_defs {
   notification_email {
        1335120568@
   }
   notification_email_from @
   smtp_server 
   smtp_connect_timeout 30
   router_id LVS_02
}

vrrp_instance web {
    state BACKUP
    interface eth0
    virtual_router_id 51
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        /24
    }
}


virtual_server  80 {
    delay_loop 6
    lb_algo wrr
    lb_kind DR
    nat_mask 
    persistence_timeout 50     
    protocol TCP

    real_server  80 {
        weight 1
        TCP_CHECK {
        connect_timeout 8
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
    }

    real_server  80 {
        weight 1
        TCP_CHECK {
        connect_timeout 8
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
    }
}
启动主备keepalived的观察log  
[root@example ~]# /etc//keepalived start
Starting keepalived:                                       [  OK  ]
主节点上面
[root@example keepalived]# tail -f /var/log/messages 
Aug 13 15:11:10 example Keepalived[45366]: Starting Keepalived  (03/19,2015)
Aug 13 15:11:10 example Keepalived[45367]: Starting Healthcheck child process, pid=45369
Aug 13 15:11:10 example Keepalived[45367]: Starting VRRP child process, pid=45370
Aug 13 15:11:10 example Keepalived_healthcheckers[45369]: Netlink reflector reports IP  added
Aug 13 15:11:10 example Keepalived_vrrp[45370]: Netlink reflector reports IP  added
Aug 13 15:11:10 example Keepalived_vrrp[45370]: Netlink reflector reports IP  added
Aug 13 15:11:10 example Keepalived_vrrp[45370]: Netlink reflector reports IP fe80::20c:29ff:fe5a:e1a3 added
Aug 13 15:11:10 example Keepalived_vrrp[45370]: Registering Kernel netlink reflector
Aug 13 15:11:10 example Keepalived_vrrp[45370]: Registering Kernel netlink command channel
Aug 13 15:11:10 example Keepalived_vrrp[45370]: Registering gratuitous ARP shared channel
Aug 13 15:11:10 example Keepalived_healthcheckers[45369]: Netlink reflector reports IP  added
Aug 13 15:11:10 example Keepalived_healthcheckers[45369]: Netlink reflector reports IP fe80::20c:29ff:fe5a:e1a3 added
Aug 13 15:11:10 example Keepalived_healthcheckers[45369]: Registering Kernel netlink reflector
Aug 13 15:11:10 example Keepalived_healthcheckers[45369]: Registering Kernel netlink command channel
Aug 13 15:11:10 example Keepalived_vrrp[45370]: Opening file '/etc/keepalived/'.
Aug 13 15:11:10 example Keepalived_vrrp[45370]: Configuration is using : 63278 Bytes
Aug 13 15:11:10 example Keepalived_vrrp[45370]: Using LinkWatch kernel netlink reflector...
Aug 13 15:11:10 example Keepalived_healthcheckers[45369]: Opening file '/etc/keepalived/'.
Aug 13 15:11:10 example Keepalived_healthcheckers[45369]: Configuration is using : 14742 Bytes
Aug 13 15:11:10 example Keepalived_vrrp[45370]: VRRP sockpool: [ifindex(2), proto(112), unicast(0), fd(10,11)]
Aug 13 15:11:10 example Keepalived_healthcheckers[45369]: Using LinkWatch kernel netlink reflector...
Aug 13 15:11:10 example Keepalived_healthcheckers[45369]: Activating healthchecker for service []:80
Aug 13 15:11:10 example Keepalived_healthcheckers[45369]: Activating healthchecker for service []:80
Aug 13 15:11:11 example Keepalived_vrrp[45370]: VRRP_Instance(web) Transition to MASTER STATE
Aug 13 15:11:11 example Keepalived_vrrp[45370]: VRRP_Instance(web) Received lower prio advert, forcing new election
Aug 13 15:11:12 example Keepalived_vrrp[45370]: VRRP_Instance(web) Entering MASTER STATE
Aug 13 15:11:12 example Keepalived_vrrp[45370]: VRRP_Instance(web) setting protocol VIPs.
Aug 13 15:11:12 example Keepalived_vrrp[45370]: VRRP_Instance(web) Sending gratuitous ARPs on eth0 for 
Aug 13 15:11:17 example Keepalived_vrrp[45370]: VRRP_Instance(web) Sending gratuitous ARPs on eth0 for 
Aug 13 15:13:36 example dhclient[1239]: DHCPREQUEST on eth0 to  port 67 (xid=0x3b1957c6)
Aug 13 15:13:36 example dhclient[1239]: DHCPACK from  (xid=0x3b1957c6)
Aug 13 15:13:38 example dhclient[1239]: bound to  -- renewal in 678 seconds.


备用节点上面
[root@example keepalived]# tail -f /var/log/messages 
Aug 13 15:11:03 example Keepalived[1937]: Starting Keepalived  (03/19,2015)
Aug 13 15:11:03 example Keepalived[1938]: Starting Healthcheck child process, pid=1940
Aug 13 15:11:03 example Keepalived[1938]: Starting VRRP child process, pid=1941
Aug 13 15:11:03 example Keepalived_vrrp[1941]: Netlink reflector reports IP  added
Aug 13 15:11:03 example Keepalived_healthcheckers[1940]: Netlink reflector reports IP  added
Aug 13 15:11:03 example Keepalived_healthcheckers[1940]: Netlink reflector reports IP fe80::20c:29ff:feea:4c15 added
Aug 13 15:11:03 example Keepalived_healthcheckers[1940]: Registering Kernel netlink reflector
Aug 13 15:11:03 example Keepalived_healthcheckers[1940]: Registering Kernel netlink command channel
Aug 13 15:11:03 example Keepalived_vrrp[1941]: Netlink reflector reports IP fe80::20c:29ff:feea:4c15 added
Aug 13 15:11:03 example Keepalived_vrrp[1941]: Registering Kernel netlink reflector
Aug 13 15:11:03 example Keepalived_vrrp[1941]: Registering Kernel netlink command channel
Aug 13 15:11:03 example Keepalived_vrrp[1941]: Registering gratuitous ARP shared channel
Aug 13 15:11:03 example Keepalived_vrrp[1941]: Opening file '/etc/keepalived/'.
Aug 13 15:11:03 example Keepalived_vrrp[1941]: Configuration is using : 63278 Bytes
Aug 13 15:11:03 example Keepalived_vrrp[1941]: Using LinkWatch kernel netlink reflector...
Aug 13 15:11:03 example Keepalived_vrrp[1941]: VRRP_Instance(web) Entering BACKUP STATE
Aug 13 15:11:03 example Keepalived_vrrp[1941]: VRRP sockpool: [ifindex(2), proto(112), unicast(0), fd(10,11)]
Aug 13 15:11:03 example Keepalived_healthcheckers[1940]: Opening file '/etc/keepalived/'.
Aug 13 15:11:03 example Keepalived_healthcheckers[1940]: Configuration is using : 14742 Bytes
Aug 13 15:11:04 example Keepalived_healthcheckers[1940]: Using LinkWatch kernel netlink reflector...
Aug 13 15:11:04 example Keepalived_healthcheckers[1940]: Activating healthchecker for service []:80
Aug 13 15:11:04 example Keepalived_healthcheckers[1940]: Activating healthchecker for service []:80
Aug 13 15:11:04 example kernel: IPVS: [wrr] scheduler registered.
Aug 13 15:11:07 example Keepalived_vrrp[1941]: VRRP_Instance(web) Transition to MASTER STATE
Aug 13 15:11:08 example Keepalived_vrrp[1941]: VRRP_Instance(web) Entering MASTER STATE
Aug 13 15:11:08 example Keepalived_vrrp[1941]: VRRP_Instance(web) setting protocol VIPs.
Aug 13 15:11:08 example Keepalived_vrrp[1941]: VRRP_Instance(web) Sending gratuitous ARPs on eth0 for 
Aug 13 15:11:08 example Keepalived_healthcheckers[1940]: Netlink reflector reports IP  added
Aug 13 15:11:10 example ntpd[1525]: Listen normally on 6 eth0  UDP 123
Aug 13 15:11:11 example Keepalived_vrrp[1941]: VRRP_Instance(web) Received higher prio advert
Aug 13 15:11:11 example Keepalived_vrrp[1941]: VRRP_Instance(web) Entering BACKUP STATE
Aug 13 15:11:11 example Keepalived_vrrp[1941]: VRRP_Instance(web) removing protocol VIPs.
Aug 13 15:11:11 example Keepalived_healthcheckers[1940]: Netlink reflector reports IP  removed
Aug 13 15:11:13 example ntpd[1525]: Deleting interface #6 eth0, #123, interface stats: received=0, sent=0, dropped=0, active_time=3 secs


主节点vip地址情况
[root@example ~]# ip addr
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet /8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:5a:e1:a3 brd ff:ff:ff:ff:ff:ff
    inet /24 brd  scope global eth0
    inet /24 scope global secondary eth0:1
    inet6 fe80::20c:29ff:fe5a:e1a3/64 scope link 
       valid_lft forever preferred_lft forever
       
备用节点vip地址情况
[root@example ~]# ip addr
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN 
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet /8 scope host lo
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:ea:4c:15 brd ff:ff:ff:ff:ff:ff
    inet /24 brd  scope global eth0
    inet6 fe80::20c:29ff:feea:4c15/64 scope link 
       valid_lft forever preferred_lft forever



rs服务器配置（两台都需要做） 

[root@example ~]# echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore

[root@example ~]# echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce

[root@example ~]# echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore

[root@example ~]# echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce

[root@example ~]# ip addr

1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN 

    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00

    inet /8 scope host lo

    inet /32 scope global lo:1

    inet6 ::1/128 scope host 

       valid_lft forever preferred_lft forever

2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000

    link/ether 00:0c:29:66:66:33 brd ff:ff:ff:ff:ff:ff

    inet /24 brd scope global eth0

    inet6 fe80::20c:29ff:fe66:6633/64 scope link 

       valid_lft forever preferred_lft forever

      



高可用性功能测试
高可用性是通过LVS的两个Director Server完成的，为了模拟故障，先将主Director Server
上面的Keepalived服务停止，然后观察备用Director Server上Keepalived的运行日志，信息如下：

[root@example ~]# /etc//keepalived stop   主节点
Stopping keepalived:                                       [  OK  ]


主节点日志


Aug 13 15:18:53 example Keepalived[45367]: Stopping Keepalived  (03/19,2015)
Aug 13 15:18:53 example Keepalived_vrrp[45370]: VRRP_Instance(web) sending 0 priority
Aug 13 15:18:53 example Keepalived_vrrp[45370]: VRRP_Instance(web) removing protocol VIPs.
Aug 13 15:18:53 example Keepalived_healthcheckers[45369]: Netlink reflector reports IP  removed
Aug 13 15:18:53 example Keepalived_healthcheckers[45369]: Removing service []:80 from VS []:80
Aug 13 15:18:53 example Keepalived_healthcheckers[45369]: Removing service []:80 from VS []:80
Aug 13 15:18:53 example kernel: IPVS: __ip_vs_del_service: enter
Aug 13 15:18:54 example ntpd[1525]: Deleting interface #6 eth0:1, #123, interface stats: received=0, sent=0, dropped=0, active_time=5131 secs


备用节点日志

Aug 13 15:18:53 example Keepalived_vrrp[1941]: VRRP_Instance(web) Transition to MASTER STATE
Aug 13 15:18:54 example Keepalived_vrrp[1941]: VRRP_Instance(web) Entering MASTER STATE
Aug 13 15:18:54 example Keepalived_vrrp[1941]: VRRP_Instance(web) setting protocol VIPs.
Aug 13 15:18:54 example Keepalived_vrrp[1941]: VRRP_Instance(web) Sending gratuitous ARPs on eth0 for 
Aug 13 15:18:54 example Keepalived_healthcheckers[1940]: Netlink reflector reports IP  added
Aug 13 15:18:56 example ntpd[1525]: Listen normally on 7 eth0  UDP 123
Aug 13 15:18:59 example Keepalived_vrrp[1941]: VRRP_Instance(web) Sending gratuitous ARPs on eth0 for 

主节点keepalived恢复观察日志情况
[root@example ~]# /etc//keepalived stop
Stopping keepalived:                                       [  OK  ]

主节点日志
Aug 13 15:22:04 example Keepalived[45420]: Starting Keepalived  (03/19,2015)
Aug 13 15:22:04 example Keepalived[45421]: Starting Healthcheck child process, pid=45423
Aug 13 15:22:04 example Keepalived[45421]: Starting VRRP child process, pid=45424
Aug 13 15:22:04 example Keepalived_vrrp[45424]: Netlink reflector reports IP  added
Aug 13 15:22:04 example Keepalived_vrrp[45424]: Netlink reflector reports IP fe80::20c:29ff:fe5a:e1a3 added
Aug 13 15:22:04 example Keepalived_vrrp[45424]: Registering Kernel netlink reflector
Aug 13 15:22:04 example Keepalived_vrrp[45424]: Registering Kernel netlink command channel
Aug 13 15:22:04 example Keepalived_vrrp[45424]: Registering gratuitous ARP shared channel
Aug 13 15:22:04 example Keepalived_healthcheckers[45423]: Netlink reflector reports IP  added
Aug 13 15:22:04 example Keepalived_healthcheckers[45423]: Netlink reflector reports IP fe80::20c:29ff:fe5a:e1a3 added
Aug 13 15:22:04 example Keepalived_healthcheckers[45423]: Registering Kernel netlink reflector
Aug 13 15:22:04 example Keepalived_healthcheckers[45423]: Registering Kernel netlink command channel
Aug 13 15:22:05 example Keepalived_vrrp[45424]: Opening file '/etc/keepalived/'.
Aug 13 15:22:05 example Keepalived_vrrp[45424]: Configuration is using : 63278 Bytes
Aug 13 15:22:05 example Keepalived_vrrp[45424]: Using LinkWatch kernel netlink reflector...
Aug 13 15:22:05 example Keepalived_vrrp[45424]: VRRP sockpool: [ifindex(2), proto(112), unicast(0), fd(10,11)]
Aug 13 15:22:05 example Keepalived_healthcheckers[45423]: Opening file '/etc/keepalived/'.
Aug 13 15:22:05 example Keepalived_healthcheckers[45423]: Configuration is using : 14742 Bytes
Aug 13 15:22:05 example Keepalived_healthcheckers[45423]: Using LinkWatch kernel netlink reflector...
Aug 13 15:22:05 example Keepalived_healthcheckers[45423]: Activating healthchecker for service []:80
Aug 13 15:22:05 example Keepalived_healthcheckers[45423]: Activating healthchecker for service []:80
Aug 13 15:22:05 example Keepalived_vrrp[45424]: VRRP_Instance(web) Transition to MASTER STATE
Aug 13 15:22:05 example Keepalived_vrrp[45424]: VRRP_Instance(web) Received lower prio advert, forcing new election
Aug 13 15:22:06 example Keepalived_vrrp[45424]: VRRP_Instance(web) Entering MASTER STATE
Aug 13 15:22:06 example Keepalived_vrrp[45424]: VRRP_Instance(web) setting protocol VIPs.
Aug 13 15:22:06 example Keepalived_vrrp[45424]: VRRP_Instance(web) Sending gratuitous ARPs on eth0 for 
Aug 13 15:22:06 example Keepalived_healthcheckers[45423]: Netlink reflector reports IP  added
Aug 13 15:22:07 example ntpd[1525]: Listen normally on 7 eth0  UDP 123
Aug 13 15:22:11 example Keepalived_vrrp[45424]: VRRP_Instance(web) Sending gratuitous ARPs on eth0 for 


备用节点
Aug 13 15:22:05 example Keepalived_vrrp[1941]: VRRP_Instance(web) Received higher prio advert
Aug 13 15:22:05 example Keepalived_vrrp[1941]: VRRP_Instance(web) Entering BACKUP STATE
Aug 13 15:22:05 example Keepalived_vrrp[1941]: VRRP_Instance(web) removing protocol VIPs.
Aug 13 15:22:05 example Keepalived_healthcheckers[1940]: Netlink reflector reports IP  removed
Aug 13 15:22:07 example ntpd[1525]: Deleting interface #7 eth0, #123, interface stats: received=0, sent=0, dropped=0, active_time=191 secs
Aug 13 15:22:54 example dhclient[1239]: DHCPREQUEST on eth0 to  port 67 (xid=0x6d287b9)
Aug 13 15:22:54 example dhclient[1239]: DHCPACK from  (xid=0x6d287b9)
Aug 13 15:22:56 example dhclient[1239]: bound to  -- renewal in 680 seconds.


可以看到备用节点的vip地址被移除了，一切都符合预期


负载均衡测试，打开浏览器测试访问lvs的vip地址



故障切换测试

故障切换是测试在某个节点出现故障后，Keepalived监控模块是否能及时发现，然后屏蔽故障节点，同时将服务转移到正常节点上执行。

这里将real server 1节点服务停掉，假定这个节点出现故障，然后查看主、备机日志信息，相关日志如下：


[root@example ~]# /etc//httpd stop

Stopping httpd:                                            [  OK  ]

观察主节点keepalived  日志情况

Aug 13 15:30:05 example Keepalived_healthcheckers[45423]: TCP connection to []:80 failed !!!
Aug 13 15:30:05 example Keepalived_healthcheckers[45423]: Removing service []:80 from VS []:80
Aug 13 15:30:05 example Keepalived_healthcheckers[45423]: Remote SMTP server []:25 connected.
Aug 13 15:30:35 example Keepalived_healthcheckers[45423]: Timeout reading data to remote SMTP server []:25.

观察备用节点keepalived 日志情况

Aug 13 15:30:04 example Keepalived_healthcheckers[1940]: TCP connection to []:80 failed !!!
Aug 13 15:30:04 example Keepalived_healthcheckers[1940]: Removing service []:80 from VS []:80
Aug 13 15:30:04 example Keepalived_healthcheckers[1940]: Remote SMTP server []:25 connected.
Aug 13 15:30:34 example Keepalived_healthcheckers[1940]: Timeout reading data to remote SMTP server []:25.

通过日志可以看出，Keepalived监控模块检测到这台主机出现故障后，将此节点从集群系统中剔除掉了。

此时访问这个地址，应该只能看到“web02_”了，
这是因为节点1出现故障，而Keepalived监控模块将节点1从集群系统中剔除了

再次重启web01服务观察主备keepalived 日志情况
主节点keepalived 日志情况

Aug 13 15:33:47 example Keepalived_healthcheckers[45423]: TCP connection to []:80 success.
Aug 13 15:33:47 example Keepalived_healthcheckers[45423]: Adding service []:80 to VS []:80
Aug 13 15:33:47 example Keepalived_healthcheckers[45423]: Remote SMTP server []:25 connected.
Aug 13 15:34:17 example Keepalived_healthcheckers[45423]: Timeout reading data to remote SMTP server []:25.

备用节点keepalived 日志情况
Aug 13 15:33:46 example Keepalived_healthcheckers[1940]: TCP connection to []:80 success.
Aug 13 15:33:46 example Keepalived_healthcheckers[1940]: Adding service []:80 to VS []:80
Aug 13 15:33:46 example Keepalived_healthcheckers[1940]: Remote SMTP server []:25 connected.
Aug 13 15:34:16 example dhclient[1239]: DHCPREQUEST on eth0 to  port 67 (xid=0x6d287b9)
Aug 13 15:34:16 example dhclient[1239]: DHCPACK from  (xid=0x6d287b9)
Aug 13 15:34:16 example Keepalived_healthcheckers[1940]: Timeout reading data to remote SMTP server []:25.
Aug 13 15:34:18 example dhclient[1239]: bound to  -- renewal in 778 seconds.




从日志可知，Keepalived监控模块检测到这台主机恢复正常后，又将此节点加入到集群系统中。

此时再次访问这个地址，然后不断刷新此页面，应该又能分别看到“web01_”和

“web01_”页面了，这说明在web1节点恢复正常后，Keepalived监控模块将此节点加入到集群系统中。


ccc82284
关注
Nginx+Keepalived+LVS集群实战
悦分享
09-09 1578
集群的常见分类负载均衡集群（load balancing clusters)，简称LBC或者LB。高可用性集群（High-availiability（HA) clusters)，简称HAC。高性能计算集群（High-performance(HPC) clusters)，简称HPC。网格计算（Grid computing)。提示：负载均衡集群和高可用性集群是互联网行业常用的集群架构模式。
LVS+KeepAlived快速入门
赵广陆
04-19 456
目录1 构建高可用集群1.1 什么是高可用集群1.2 高可用衡量标准1.3 高可用保障1.3.1 负载均衡1.3.2 健康监测和自动切换1.4 高可用拓扑图2 软件负载均衡技术LVS2.1 LVS简介2.1.1 什么是lvs2.1.2 lvs官方资料链接2.2 lvs拓扑2.2.1 lvs术语2.2.2 工作原理和拓扑图2.3 lvs的四种工作模式2.3.1 TUN模式2.3.2 NAT模式2.3.3 DR模式2.3.4 FULLNAT模式2.4 LVS调度算法2.4.1 静态调度算法2.4.2 动态调度算
lvs+keepalived项目实战
m0_46543351的博客
07-07 414
本文2个实验（centos7） 1：lvsNAT实验 所用机器：client+lvs+web1+web2 2：lvsDR+keepalived实验 所用机器：client+lvs+lvs1+web1+web2LVS 是 Linux Virtual Server 的简写，意即 Linux虚拟服务器 ，是一个虚拟的服务器集群系统。 lvs工作模式有 NAT：网络地址转换 DR：路由模式 TUN：隧道模式 调度算法：支持的有10种，常见的4种 轮询rr：Real Server轮流提供服务 加权轮询wrr：Real
LVS+Keepalived效率最高的群集（实战）
石头城云计算的博客
11-28 374
环境准备： DR1 主：192.168.100.101---->CentOS 7-2 DR2 备：192.168.100.102---->CentOS 7-3 web1：192.168.100.111---->CentOS 7-4 web1：192.168.100.112---->CentOS 7-5 vip：192.168.100.10 客户机：192.168.100....
LVS+Keepalived高可用实战
飞翔的荷兰人
01-06 432
一．前言 关于LVS的介绍可参考 LVS介绍及原理详解: http://blog.csdn.net/qq_30256711/article/details/78986510 LVS的应用架构详解: http://blog.csdn.net/qq_30256711/article/details/78986841    Keepalived 是一个基于VRRP协议来实现的LVS服务高可用
运维企业实战——LVS+Keepalived实现高可用负载均衡
weixin_44321029的博客
04-19 205
lvs+keepalived LVS提供负载均衡，keepalived提供健康检查， 故障转移，提高系统的可用性！ 采用这样的架构以后，很容易对现有系统进行扩展， 只要在后端添加或者减少realserver， 更改lvs的 配置文件，就能实现无缝配置变更！ 搭建步骤： server1：master负载均衡器 server4：backup负载均衡器 server2：后端web服务器 server...
MySQL+lvs+keepalived+mha架构配置实战演练
05-18
MySQL+lvs+keepalived+mha架构是一种高可用性、负载均衡的数据库集群解决方案，用于构建强大且可靠的数据库服务。这种架构充分利用了各组件的优势，确保数据的安全性和系统的稳定性。 MySQL是世界上最流行的开源...
PHP高级工程师必知必会Nginx+keepalived+MongoDB+haproxy+Sphinx实现分布式集群部署实战视频
10-25
### PHP高级工程师必知必会：Nginx + keepalived + MongoDB + haproxy + Sphinx 实现分布式集群部署实战 #### 一、引言 随着互联网应用的不断发展，单体应用已经无法满足大规模高并发场景的需求。分布式系统通过将...
lvs+keepalived实现
那些年匆匆
05-23 648
系统版本：centos7.x测试环境：lvs1 192.168.60.151lvs2 192.168.60.152rs1 192.168.60.161rs2 192.168.60.162目的：测试lvs负载均衡功能，DR模式。DR模式原理简介：dr模式中，负载调度器只负责调试请求，而真实服务器响应请求并将响应直接返回给客户，不再经由负载调度器。dr模式中要求调度器和服务器必须在物理上有一个网卡...
[内存泄漏]keepalived进程内存泄漏定位
08-28 921
缘起 公司部分项目在部署上通过keepalived实现了了双机热备，通过荣誉和接管，实现高可用性。 最近其中一个项目出现了内存耗尽问题，使用<内存问题快速定位工具>定位提示是keepalived进程的rarp socket收报队列挤压了太多数据包导致。 该工具可以快速定位大多数内存问题，详细介绍文档见《内存泄漏定位思路和方法》，在此不再赘述。 分析 keepalived我们用的是v2.0.10版本，...
MySQL 5.6通过Keepalived+互为主从实现高可用架构
weixin_33699914的博客
11-15 165
本文将介绍两台Mysql如何实现高可用架构。通常我们会配置主从同步，但这样若主的Mysql挂掉，还需要手动干预，例如把指向主库的IP地址修改为指向从库的IP，为了实现自动切换到从数据库，我们可以使用Keepalived配置一个浮动的VIP出来供前端访问，主的Mysql故障了VIP会立即自动切换到从的Mysql，省去了人工干预的时间，但要想故障的那台Mysql起来后也能作为从M...
linux 日志报警,linux日志报警怎么解决
weixin_33328213的博客
05-01 980
服务器：一台X3650 OS：Red Hat Enterprise Linux Server release 5.4 现象：log日志报警###查看日志隔几分钟就会产生这个日志。和另外一台服务器做的cluster，前几天重启过一次，就开始报警###cluster状态正常 报警的是node2[root@AMC-S-X3650-2 ~]# clustatCluster Status for a...显...
DHCP的实现方法linux,Linux DHCP协议实现过程
weixin_35689877的博客
05-13 266
我特别喜欢Linux启动的时候屏幕上一行一行的提示。它把系统正在干的所有事情都告诉了我们，不像Windows，自检完了就给个进度条，背后干啥都不让我们知道。DHCP协议部分实现过程如下①：DHCP 服务器被动打开 UDP 端口 67，等待客户端发来的报文。②：DHCP 客户从 UDP 端口 68发送 DHCP 发现报文。③：凡收到 DHCP 发现报文的 DHCP 服务器都发出 DHCP 提供报文，...
解决 keepalived vip 不可用故障
热门推荐
qianggezhishen的专栏
06-27 1万+
这里演示一个 keepalived vip 有时可用，有时不可用的情况。 背景： 集群中有两个 vip，一个用于 apiserver，一个用于 ingress。 现象： 刚部署的时候，apiserver vip 和 ingress vip都跑通了，即可以 ping 通，过了几天发现其中一个不通了。 -[root@k8s-node-1 appuser]# ping 10.130...
lvs+keepalived+nginx实现高性能负载均衡集群【转】
weixin_34092455的博客
04-21 178
转自 lvs+keepalived+nginx实现高性能负载均衡集群 - 青衫lys - 博客园http://www.cnblogs.com/liuyisai/p/5990645.html   一、为什么要使用负载均衡技术？ 1、系统高可用性 2、  系统可扩展性 3、  负载均衡能力 LVS+keepalived能很好的实现以上的要求，LVS提供负载均衡，keepalived提供健...
开源项目
坚持梦想的博客
09-05 5292
1、BeautifulRefreshLayout-漂亮的美食下拉刷新https://github.com/android-cjj/BeautifulRefreshLayout/tree/BeautifulRefreshForFood 2、Material Design-动画风格的选项卡tab切换功能https://github.com/neokree/MaterialTabs 3、Twinkli
2023 全新团队个人引导页网站HTML源码
最新发布
02-04 1160
带有音乐视频MV, 源码比较小只有七兆，只不过就是因为有个mv占了十几兆。 源码也是很好看的，就是有一点不好的地方无手机自适应，只有PC端浏览器能正常显示，手机端是无法完整显示的。如果有需要的就下载吧。
openresty 高可用部署
weixin_43931625的博客
08-03 1597
openresty 高可用部署
构建lvs+keepalived+mfs集群及nagios监控实战
"搭建lvs keepalived mfs 集群nagios监控" 本文主要介绍了如何构建一个包括负载均衡、高可用性、分布式文件系统以及监控在内的复杂IT架构。作者通过四大部分来详细阐述整个过程： (I) 前端部分 这一部分主要涉及...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值