CLUSTER 03

Top

  1. 配置HAProxy负载平衡集群

  2. Keepalived高可用服务器

  3. Keepalived+LVS服务器

1 配置HAProxy负载平衡集群

1.1 问题

准备三台Linux服务器，两台做Web服务器，一台安装HAProxy，实现如下功能：

  • 客户端访问HAProxy，HAProxy分发请求到后端Real Server

  • 要求HAProxy可以根据Cookie为客户端分配固定后端服务器

  • 开启HAProxy监控页面，及时查看调度器状态

  • 设置HAProxy为开机启动

1.2 方案

使用3台虚拟机，1台作为HAProxy调度器、2台作为Real Server、物理机作为客户端，拓扑结构如图-1所示。

p_w_picpath001.png

图-1

1.3 步骤

实现此案例需要按照如下步骤进行。

步骤一：配置后端Web服务器

1）配置两台Web服务器网络参数

copytextpop-up

  1. [root@web1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0

  2. DEVICE=eth0

  3. ONBOOT=yes

  4. BOOTPROTO=static

  5. IPADDR=192.168.0.1

  6. NETMASK=255.255.255.0

  7. GATEWAY=192.168.0.254

  8. DNS1=202.106.0.10

  9. [root@web1 ~]# service network restart

  10. [root@web1 ~]# iptables -F

  11. [root@web1 ~]# service iptables save

  12. [root@web2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0

  13. DEVICE=eth0

  14. ONBOOT=yes

  15. BOOTPROTO=static

  16. IPADDR=192.168.0.2

  17. NETMASK=255.255.255.0

  18. GATEWAY=192.168.0.254

  19. DNS1=202.106.0.10

  20. [root@web2 ~]# service network restart

  21. [root@web2 ~]# iptables -F

  22. [root@web2 ~]# service iptables save

[root@web1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=static
IPADDR=192.168.0.1
NETMASK=255.255.255.0
GATEWAY=192.168.0.254
DNS1=202.106.0.10
[root@web1 ~]# service network restart
[root@web1 ~]# iptables -F
[root@web1 ~]# service iptables save
[root@web2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=static
IPADDR=192.168.0.2
NETMASK=255.255.255.0
GATEWAY=192.168.0.254
DNS1=202.106.0.10
[root@web2 ~]# service network restart
[root@web2 ~]# iptables -F
[root@web2 ~]# service iptables save

2）设置后端Web服务

copytextpop-up

  1. [root@web1 ~]# yum -y install httpd

  2. [root@web1 ~]# service httpd start

  3. [root@web1 ~]# echo “192.168.0.1” > /var/www/html/index.html

  4. [root@web2 ~]# yum -y install httpd

  5. [root@web2 ~]# service httpd start

  6. [root@web2 ~]# echo “192.168.0.2” > /var/www/html/index.html

[root@web1 ~]# yum -y install httpd
[root@web1 ~]# service httpd start
[root@web1 ~]# echo “192.168.0.1” > /var/www/html/index.html
[root@web2 ~]# yum -y install httpd
[root@web2 ~]# service httpd start
[root@web2 ~]# echo “192.168.0.2” > /var/www/html/index.html

 

步骤二：部署HAProxy服务器

1）配置网络，安装软件

copytextpop-up

  1. [root@haproxy ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0

  2. DEVICE=eth0

  3. ONBOOT=yes

  4. BOOTPROTO=static

  5. IPADDR=202.114.106.20

  6. [root@haproxy ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth1

  7. DEVICE=eth0

  8. ONBOOT=yes

  9. BOOTPROTO=static

  10. IPADDR=192.168.0.254

  11. NETMASK=255.255.255.0

  12. DNS1=202.106.0.20

  13. [root@haproxy ~]# service network restart

  14. [root@haproxy ~]# sed -i '/ip_forward/s/0/1/' sysctl.conf //开启路由转发

  15. [root@haproxy ~]# sysctl -p

  16. [root@haproxy ~]# yum -y install pcre pcre-devel

  17. [root@haproxy ~]# tar xvzf haproxy-1.4.24.tar.gz

  18. [root@haproxy ~]# cd haproxy-1.4.24

  19. [root@haproxy haproxy-1.4.24]# uname -r

  20. [root@haproxy haproxy-1.4.24]# make TARGET=linux2628 \

  21. > USE_PCRE=1 PREFIX=/usr/local/haproxy install

  22. [root@haproxy haproxy-1.4.24]# ln -s /usr/local/haproxy/sbin/haproxy \

  23. > /usr/local/sbin/

  24. [root@haproxy haproxy-1.4.24]# cp examples/haproxy.cfg /etc/haproxy/haproxy.cfg

  25. [root@haproxy haproxy-1.4.24]# cp examples/haproxy.init /etc/init.d/haproxy

  26. [root@haproxy haproxy-1.4.24]# chmod +x /etc/init.d/haproxy

[root@haproxy ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=static
IPADDR=202.114.106.20
[root@haproxy ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth1
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=static
IPADDR=192.168.0.254
NETMASK=255.255.255.0
DNS1=202.106.0.20
[root@haproxy ~]# service network restart
[root@haproxy ~]# sed -i '/ip_forward/s/0/1/'  sysctl.conf  //开启路由转发
[root@haproxy ~]# sysctl -p
[root@haproxy ~]# yum -y install pcre pcre-devel
[root@haproxy ~]# tar xvzf haproxy-1.4.24.tar.gz
[root@haproxy ~]# cd haproxy-1.4.24
[root@haproxy haproxy-1.4.24]# uname -r
[root@haproxy haproxy-1.4.24]# make TARGET=linux2628 \ 
> USE_PCRE=1  PREFIX=/usr/local/haproxy install
[root@haproxy haproxy-1.4.24]# ln -s /usr/local/haproxy/sbin/haproxy \
> /usr/local/sbin/
[root@haproxy haproxy-1.4.24]# cp examples/haproxy.cfg /etc/haproxy/haproxy.cfg
[root@haproxy haproxy-1.4.24]# cp examples/haproxy.init /etc/init.d/haproxy
[root@haproxy haproxy-1.4.24]# chmod +x /etc/init.d/haproxy

2）修改配置文件

copytextpop-up

  1. [root@haproxy ~]# vim /etc/haproxy/haproxy.cfg

  2. global                             //全局设置

  3. log 127.0.0.1 local0               //日志输出配置

  4. maxconn 4096                       //最大连接数

  5. chroot /usr/local/haproxy

  6. uid 99                             //所属运行的用户uid

  7. gid 99             //所属运行的用户组

  8. daemon                  //以后台形式运行

  9. nbproc 2              //启动2个haproxy实例

  10. pidfile /var/run/haproxy.pid

  11. defaults                         //默认设置

  12. log    global

  13. mode    http                     //默认采用http模式

  14. option  httplog                  //日志类别

  15. retries 3                        //3次连接失败认为服务器不可用

  16. option  redispatch               //当serverid对应的服务器挂掉后，

  17. //强制定向到其他健康服务器

  18. stats   uri     /haproxy-admin   //设置监控

  19. contimeout 5000          //连接超时时间

  20. clitimeout 50000         //客户端连接超时时间

  21. srvtimeout 50000         //服务器端连接超时时间

  22. listen websrv-rewrite 0.0.0.0:80

  23. cookie SERVERID rewrite

  24. balance roundrobin

  25. server app1_1 192.168.0.1:80 cookie app1inst1 check inter 2000 rise 2 fall 5

  26. server app1_2 192.168.0.2:80 cookie app1inst2 check inter 2000 rise 2 fall 5

[root@haproxy ~]# vim /etc/haproxy/haproxy.cfg
global   						  //全局设置
           log 127.0.0.1   local0    		  //日志输出配置
           maxconn 4096 				  //最大连接数
           chroot /usr/local/haproxy
           uid 99 					  //所属运行的用户uid
           gid 99                 	        //所属运行的用户组
           daemon               			  //以后台形式运行
           nbproc 2              			  //启动2个haproxy实例
           pidfile /var/run/haproxy.pid
defaults              			        //默认设置
         log    global
         mode    http    			//默认采用http模式
         option  httplog    		//日志类别
         retries 3  			 	//3次连接失败认为服务器不可用
         option  redispatch   		//当serverid对应的服务器挂掉后，
                                    		//强制定向到其他健康服务器
         stats   uri     /haproxy-admin  //设置监控
         contimeout      5000    		//连接超时时间
        clitimeout      50000     	//客户端连接超时时间
        srvtimeout      50000    		//服务器端连接超时时间
listen  websrv-rewrite 0.0.0.0:80
  cookie  SERVERID rewrite
  balance roundrobin
  server  app1_1 192.168.0.1:80 cookie app1inst1 check inter 2000 rise 2 fall 5
  server  app1_2 192.168.0.2:80 cookie app1inst2 check inter 2000 rise 2 fall 5

3）启动服务器并设置开机启动

copytextpop-up

  1. [root@haproxy ~]# haproxy -f /etc/haproxy/haproxy.cfg

  2. [root@haproxy ~]# chkconfig --add haproxy

  3. [root@haproxy ~]# chkconfig haproxy on

[root@haproxy ~]# haproxy -f  /etc/haproxy/haproxy.cfg
[root@haproxy ~]# chkconfig --add haproxy
[root@haproxy ~]# chkconfig haproxy on

步骤三：客户端验证

客户端配置与HAProxy相同网络的IP地址，并使用火狐浏览器访问http://202.114.106.20，测试调度器是否正常工作，客户端访问http://202.114.106.20/haproxy-admin测试状态监控页面是否正常。

 

2 Keepalived高可用服务器

2.1 问题

准备三台Linux服务器，两台做Web服务器，并部署Keepalived高可用软件，一台作为客户端主机，实现如下功能：

  • 使用Keepalived实现web服务器的高可用

  • Web服务器IP地址分别为172.16.0.10和172.16.0.20

  • Web服务器的漂移VIP地址为172.16.0.1

  • 客户端通过访问VIP地址访问Web页面

2.2 方案

使用3台虚拟机，2台作为Web服务器，并部署Keepalived、1台作为客户端，拓扑结构如图-2所示。

p_w_picpath002.png

图-2

2.3 步骤

实现此案例需要按照如下步骤进行。

步骤一：配置网络环境

1）设置Web服务器网络参数

copytextpop-up

  1. [root@web1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0

  2. DEVICE=eth0

  3. ONBOOT=yes

  4. BOOTPROTO=static

  5. IPADDR=172.16.0.10

  6. NETMASK=255.255.255.0

  7. GATEWAY=192.168.0.254

  8. DNS1=202.106.0.20

  9. [root@web1 ~]# service NetworkManager stop

  10. [root@web1 ~]# chkconfig NetworkManager off

  11. [root@web1 ~]# service network restart

  12. [root@web1 ~]# iptables -F;service iptables save

  13. [root@web2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0

  14. DEVICE=eth0

  15. ONBOOT=yes

  16. BOOTPROTO=static

  17. IPADDR=172.16.0.20

  18. NETMASK=255.255.255.0

  19. GATEWAY=192.168.0.254

  20. DNS1=202.106.0.20

  21. [root@web2 ~]# service NetworkManager stop

  22. [root@web2 ~]# chkconfig NetworkManager off

  23. [root@web2 ~]# service network restart

  24. [root@web2 ~]# iptables -F;service iptables save

[root@web1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=static
IPADDR=172.16.0.10
NETMASK=255.255.255.0
GATEWAY=192.168.0.254
DNS1=202.106.0.20
[root@web1 ~]# service NetworkManager stop
[root@web1 ~]# chkconfig NetworkManager off
[root@web1 ~]# service network restart
[root@web1 ~]# iptables -F;service iptables save
[root@web2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=static
IPADDR=172.16.0.20
NETMASK=255.255.255.0
GATEWAY=192.168.0.254
DNS1=202.106.0.20
[root@web2 ~]# service NetworkManager stop
[root@web2 ~]# chkconfig NetworkManager off
[root@web2 ~]# service network restart
[root@web2 ~]# iptables -F;service iptables save

2）自定义Web页面

copytextpop-up

  1. [root@web1 ~]# echo “172.16.0.10” > /var/www/html/index.html

  2. [root@web2 ~]# echo “172.16.0.20” > /var/www/html/index.html

[root@web1 ~]# echo “172.16.0.10” > /var/www/html/index.html
[root@web2 ~]# echo “172.16.0.20” > /var/www/html/index.html

3）启动Web服务器软件

copytextpop-up

  1. [root@web1 ~]# service httpd start

  2. [root@web2 ~]# service httpd start

[root@web1 ~]# service httpd start
[root@web2 ~]# service httpd start

 

步骤二：安装Keepalived软件

注意：两台Web服务器做相同的操作。

copytextpop-up

  1. [root@web1 ~]# yum install -y gcc kernel-devel openssl-devel popt-devel

  2. [root@web1 ~]# tar -xzf keepalived-1.2.7.tar.gz

  3. [root@web1 ~]# cd keepalived-1.2.7

  4. [root@web1 keepalived-1.2.7]# ./configure --sysconf=/etc

  5. [root@web1 keepalived-1.2.7]# make && make install

  6. [root@web1 keepalived-1.2.7]# ln -s /usr/local/sbin/keepalived /sbin/

  7. [root@web1 keepalived-1.2.7]# chkconfig keepalived on

  8. [root@web2 ~]# yum install -y gcc kernel-devel openssl-devel popt-devel

  9. [root@web2 ~]# tar -xzf keepalived-1.2.7.tar.gz

  10. [root@web2 ~]# cd keepalived-1.2.7

  11. [root@web2 keepalived-1.2.7]# ./configure --sysconf=/etc

  12. [root@web2 keepalived-1.2.7]# make && make install

  13. [root@web2 keepalived-1.2.7]# ln -s /usr/local/sbin/keepalived /sbin/

  14. [root@web2 keepalived-1.2.7]# chkconfig keepalived on

[root@web1 ~]# yum install -y gcc kernel-devel openssl-devel popt-devel
[root@web1 ~]# tar -xzf keepalived-1.2.7.tar.gz
[root@web1 ~]# cd keepalived-1.2.7
[root@web1 keepalived-1.2.7]# ./configure --sysconf=/etc
[root@web1 keepalived-1.2.7]# make && make install
[root@web1 keepalived-1.2.7]# ln -s /usr/local/sbin/keepalived /sbin/
[root@web1 keepalived-1.2.7]# chkconfig keepalived on
[root@web2 ~]# yum install -y gcc kernel-devel openssl-devel popt-devel
[root@web2 ~]# tar -xzf keepalived-1.2.7.tar.gz
[root@web2 ~]# cd keepalived-1.2.7
[root@web2 keepalived-1.2.7]# ./configure --sysconf=/etc
[root@web2 keepalived-1.2.7]# make && make install
[root@web2 keepalived-1.2.7]# ln -s /usr/local/sbin/keepalived /sbin/
[root@web2 keepalived-1.2.7]# chkconfig keepalived on

 

步骤三：部署Keepalived服务

1）修改web1服务器Keepalived配置文件

copytextpop-up

  1. [root@web1 ~]# vim /etc/keepalived/keepalived.conf

  2. global_defs {

  3. notification_email {

  4. admin@tarena.com.cn                //设置报警收件人邮箱

  5. }

  6. notification_email_from ka@localhost    //设置发件人

  7. smtp_server 127.0.0.1                //定义邮件服务器

  8. smtp_connect_timeout 30

  9. router_id web1                        //设置路由ID号

  10. }

  11. vrrp_instance VI_1 {

  12. state MASTER                          //主服务器为MASTER

  13. interface eth0                        //定义网络接口

  14. virtual_router_id 50                 //主辅VRID号必须一致

  15. priority 100                     //服务器优先级

  16. advert_int 1

  17. authentication {

  18. auth_type pass

  19. auth_pass forlvs                  //主辅服务器密码必须一致

  20. }

  21. virtual_ipaddress { 172.16.0.1 }

  22. }

[root@web1 ~]# vim /etc/keepalived/keepalived.conf
global_defs {
  notification_email {    设置报警收件人邮箱
  }
  notification_email_from ka@localhost	//设置发件人
  smtp_server 127.0.0.1			//定义邮件服务器
  smtp_connect_timeout 30
  router_id  web1				//设置路由ID号
}
vrrp_instance VI_1 {
  state MASTER    		 			//主服务器为MASTER
  interface eth0					//定义网络接口
  virtual_router_id 50				//主辅VRID号必须一致
  priority 100     					//服务器优先级
  advert_int 1
  authentication {
    auth_type pass
    auth_pass forlvs  	 			//主辅服务器密码必须一致
  }
  virtual_ipaddress {  172.16.0.1  }
}

2）修改web2服务器Keepalived配置文件

copytextpop-up

  1. [root@web1 ~]# vim /etc/keepalived/keepalived.conf

  2. global_defs {

  3. notification_email {

  4. admin@tarena.com.cn                    //设置报警收件人邮箱

  5. }

  6. notification_email_from ka@localhost    //设置发件人

  7. smtp_server 127.0.0.1                 //定义邮件服务器

  8. smtp_connect_timeout 30

  9. router_id web2                        //设置路由ID号

  10. }

  11. vrrp_instance VI_1 {

  12. state SLAVE                          //从服务器为SLAVE

  13. interface eth0                       //定义网络接口

  14. virtual_router_id 50                 //主辅VRID号必须一致

  15. priority 50                         //服务器优先级

  16. advert_int 1

  17. authentication {

  18. auth_type pass

  19. auth_pass forlvs                      //主辅服务器密码必须一致

  20. }

  21. virtual_ipaddress { 172.16.0.1 }

  22. }

[root@web1 ~]# vim /etc/keepalived/keepalived.conf
global_defs {
  notification_email {    设置报警收件人邮箱
  }
  notification_email_from ka@localhost	//设置发件人
  smtp_server 127.0.0.1			//定义邮件服务器
  smtp_connect_timeout 30
  router_id  web2				//设置路由ID号
}
vrrp_instance VI_1 {
  state SLAVE    		 		//从服务器为SLAVE
  interface eth0				//定义网络接口
  virtual_router_id 50			//主辅VRID号必须一致
  priority 50     				//服务器优先级
  advert_int 1
  authentication {
    auth_type pass
    auth_pass forlvs  	 		//主辅服务器密码必须一致
  }
  virtual_ipaddress {  172.16.0.1  }
}

3）启动服务

copytextpop-up

  1. [root@web1 ~]# service keepalived start

  2. [root@web2 ~]# service keepalived start

[root@web1 ~]# service keepalived start
[root@web2 ~]# service keepalived start

步骤四：测试

1）登录两台Web服务器查看VIP信息

copytextpop-up

  1. [root@web1 ~]# ip addr show

  2. [root@web2 ~]# ip addr show

[root@web1 ~]# ip addr show
[root@web2 ~]# ip addr show

2) 客户端访问

客户端使用curl命令连接http://172.16.0.1，查看Web页面；关闭Web1服务器的网卡，客户端再次访问http://172.16.0.1，验证是否可以正常访问服务。

 

3 Keepalived+LVS服务器

3.1 问题

使用Keepalived为LVS调度器提供高可用功能，防止调度器单点故障，为用户提供Web服务：

  • 路由器对外公网IP地址为202.114.106.20

  • 路由器内网IP地址为192.168.0.254

  • 路由是需要设置SNAT及DNAT功能

  • LVS1调度器真实IP地址为192.168.0.10

  • LVS2调度器真实IP地址为192.168.0.20

  • 服务器VIP地址设置为192.168.0.253

  • 真实Web服务器地址分别为192.168.0.1、192.168.0.2

  • 使用加权轮询调度算法，真实服务器权重与其IP地址末尾数一致

3.2 方案

使用5台虚拟机，1台作为Linux路由器、2台作为LVS调度器、2台作为Real Server、物理机作为客户端，拓扑结构如图-2所示。

p_w_picpath003.png

图-3

3.3 步骤

实现此案例需要按照如下步骤进行。

步骤一：配置网络环境

1）设置Web服务器网络参数

copytextpop-up

  1. [root@web1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0

  2. DEVICE=eth0

  3. ONBOOT=yes

  4. BOOTPROTO=static

  5. IPADDR=192.168.0.1

  6. NETMASK=255.255.255.0

  7. GATEWAY=192.168.0.254

  8. DNS1=202.106.0.20

  9. [root@web1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-lo:0

  10. DEVICE=lo:0

  11. ONBOOT=yes

  12. BOOTPROTO=static

  13. IPADDR=192.168.0.253

  14. NETMASK=255.255.255.255

  15. [root@web1 ~]# vim /etc/sysctl.conf

  16. .. ..

  17. net.ipv4.conf.all.arp_ignore = 1

  18. net.ipv4.conf.lo.arp_ignore = 1

  19. net.ipv4.conf.lo.arp_announce = 2

  20. net.ipv4.conf.all.arp_announce = 2

  21. [root@web1 ~]# sysctl -p

  22. [root@web1 ~]# service NetworkManager stop

  23. [root@web1 ~]# chkconfig NetworkManager off

  24. [root@web1 ~]# service network restart

  25. [root@web1 ~]# iptables -F;service iptables save

  26. [root@web2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0

  27. DEVICE=eth0

  28. ONBOOT=yes

  29. BOOTPROTO=static

  30. IPADDR=192.168.0.2

  31. NETMASK=255.255.255.0

  32. GATEWAY=192.168.0.254

  33. DNS1=202.106.0.20

  34. [root@web2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-lo:0

  35. DEVICE=lo:0

  36. ONBOOT=yes

  37. BOOTPROTO=static

  38. IPADDR=192.168.0.253

  39. NETMASK=255.255.255.255

  40. [root@web2 ~]# vim /etc/sysctl.conf

  41. .. ..

  42. net.ipv4.conf.all.arp_ignore = 1

  43. net.ipv4.conf.lo.arp_ignore = 1

  44. net.ipv4.conf.lo.arp_announce = 2

  45. net.ipv4.conf.all.arp_announce = 2

  46. [root@web2 ~]# sysctl -p

  47. [root@web2 ~]# service NetworkManager stop

  48. [root@web2 ~]# chkconfig NetworkManager off

  49. [root@web2 ~]# service network restart

  50. [root@web2 ~]# iptables -F;service iptables save

[root@web1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=static
IPADDR=192.168.0.1
NETMASK=255.255.255.0
GATEWAY=192.168.0.254
DNS1=202.106.0.20
[root@web1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-lo:0
DEVICE=lo:0
ONBOOT=yes
BOOTPROTO=static
IPADDR=192.168.0.253
NETMASK=255.255.255.255
[root@web1 ~]# vim /etc/sysctl.conf
.. ..
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
net.ipv4.conf.all.arp_announce = 2
[root@web1 ~]# sysctl -p
[root@web1 ~]# service NetworkManager stop
[root@web1 ~]# chkconfig NetworkManager off
[root@web1 ~]# service network restart
[root@web1 ~]# iptables -F;service iptables save
[root@web2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=static
IPADDR=192.168.0.2
NETMASK=255.255.255.0
GATEWAY=192.168.0.254
DNS1=202.106.0.20
[root@web2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-lo:0
DEVICE=lo:0
ONBOOT=yes
BOOTPROTO=static
IPADDR=192.168.0.253
NETMASK=255.255.255.255
[root@web2 ~]# vim /etc/sysctl.conf
.. ..
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
net.ipv4.conf.all.arp_announce = 2
[root@web2 ~]# sysctl -p
[root@web2 ~]# service NetworkManager stop
[root@web2 ~]# chkconfig NetworkManager off
[root@web2 ~]# service network restart
[root@web2 ~]# iptables -F;service iptables save

2）自定义Web页面

copytextpop-up

  1. [root@web1 ~]# echo “192.168.0.1” > /var/www/html/index.html

  2. [root@web2 ~]# echo “192.168.0.2” > /var/www/html/index.html

[root@web1 ~]# echo “192.168.0.1” > /var/www/html/index.html
[root@web2 ~]# echo “192.168.0.2” > /var/www/html/index.html

 

3）启动Web服务器软件

copytextpop-up

  1. [root@web1 ~]# service httpd start;chkconfig httpd on

  2. [root@web2 ~]# service httpd start;chkconfig httpd on

[root@web1 ~]# service httpd start;chkconfig httpd on
[root@web2 ~]# service httpd start;chkconfig httpd on

4)设置LVS调度器网络参数

copytextpop-up

  1. [root@lvs1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0

  2. DEVICE=eth0

  3. ONBOOT=yes

  4. BOOTPROTO=static

  5. IPADDR=192.168.0.10

  6. NETMASK=255.255.255.0

  7. GATEWAY=192.168.0.254

  8. DNS1=202.106.0.20

  9. [root@lvs1 ~]# service NetworkManager stop

  10. [root@lvs1 ~]# chkconfig NetworkManager off

  11. [root@lvs1 ~]# service network restart

  12. [root@lvs1 ~]# iptables -F;service iptables save

  13. [root@lvs2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0

  14. DEVICE=eth0

  15. ONBOOT=yes

  16. BOOTPROTO=static

  17. IPADDR=192.168.0.20

  18. NETMASK=255.255.255.0

  19. GATEWAY=192.168.0.254

  20. DNS1=202.106.0.20

  21. [root@lvs2 ~]# service NetworkManager stop

  22. [root@lvs2 ~]# chkconfig NetworkManager off

  23. [root@lvs2 ~]# service network restart

  24. [root@lvs2 ~]# iptables -F;service iptables save

[root@lvs1 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=static
IPADDR=192.168.0.10
NETMASK=255.255.255.0
GATEWAY=192.168.0.254
DNS1=202.106.0.20
[root@lvs1 ~]# service NetworkManager stop
[root@lvs1 ~]# chkconfig NetworkManager off
[root@lvs1 ~]# service network restart
[root@lvs1 ~]# iptables -F;service iptables save
[root@lvs2 ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=static
IPADDR=192.168.0.20
NETMASK=255.255.255.0
GATEWAY=192.168.0.254
DNS1=202.106.0.20
[root@lvs2 ~]# service NetworkManager stop
[root@lvs2 ~]# chkconfig NetworkManager off
[root@lvs2 ~]# service network restart
[root@lvs2 ~]# iptables -F;service iptables save

5）设置Linux路由器网络参数

copytextpop-up

  1. [root@router ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0

  2. DEVICE=eth0

  3. ONBOOT=yes

  4. BOOTPROTO=static

  5. IPADDR=202.114.106.20

  6. DNS1=202.106.0.20

  7. [root@router ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth1

  8. DEVICE=eth0

  9. ONBOOT=yes

  10. BOOTPROTO=static

  11. IPADDR=192.168.0.254

  12. NETMASK=255.255.255.0

  13. DNS1=202.106.0.20

  14. [root@router ~]# service NetworkManager stop

  15. [root@router ~]# chkconfig NetworkManager off

  16. [root@router ~]# service network restart

  17. [root@router ~]# iptables -F;service iptables save

[root@router ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth0
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=static
IPADDR=202.114.106.20
DNS1=202.106.0.20
[root@router ~]# vim /etc/sysconfig/network-scripts/ifcfg-eth1
DEVICE=eth0
ONBOOT=yes
BOOTPROTO=static
IPADDR=192.168.0.254
NETMASK=255.255.255.0
DNS1=202.106.0.20
[root@router ~]# service NetworkManager stop
[root@router ~]# chkconfig NetworkManager off
[root@router ~]# service network restart
[root@router ~]# iptables -F;service iptables save

6）设置Linux路由器的SNAT、DNAT功能

copytextpop-up

  1. [root@router ~]# sed -i '/ip_forward/s/0/1/' sysctl.conf //开启路由转发

  2. [root@router ~]# sysctl -p

  3. [root@router ~]# iptables -t nat -A POSTROUTING -s 192.168.0.0/24 -p tcp –j SNAT --to-source 202.114.106.20

  4. [root@router ~]# iptables -t nat -A PREROUTING -d 202.114.106.20 -p tcp --dport 80 –j DNAT --to-destination 192.168.0.253:80

  5. [root@router ~]# service iptables save

[root@router ~]# sed -i '/ip_forward/s/0/1/'  sysctl.conf  //开启路由转发
[root@router ~]# sysctl -p
[root@router ~]# iptables -t nat -A POSTROUTING -s 192.168.0.0/24 -p tcp –j SNAT --to-source 202.114.106.20
[root@router ~]# iptables -t nat -A PREROUTING -d 202.114.106.20 -p tcp --dport 80 –j DNAT --to-destination 192.168.0.253:80
[root@router ~]# service iptables save

步骤二：调度器安装Keepalived与ipvsadm软件

注意：两台LVS调度器执行相同的操作。

安装软件

copytextpop-up

  1. [root@lvs1 ~]# yum install -y gcc kernel-devel openssl-devel popt-devel

  2. [root@lvs1 ~]# tar -xzf keepalived-1.2.7.tar.gz

  3. [root@lvs1 ~]# cd keepalived-1.2.7

  4. [root@lvs1 keepalived-1.2.7]# ./configure --sysconf=/etc

  5. [root@lvs1 keepalived-1.2.7]# make && make install

  6. [root@lvs1 keepalived-1.2.7]# ln -s /usr/local/sbin/keepalived /sbin/

  7. [root@lvs1 keepalived-1.2.7]# chkconfig keepalived on

  8. [root@lvs1 Pacages]# rpm –ihv ipvsadm-1.25-10.el6.x86_64.rpm

  9. [root@lvs2 ~]# yum install -y gcc kernel-devel openssl-devel popt-devel

  10. [root@lvs2 ~]# tar -xzf keepalived-1.2.7.tar.gz

  11. [root@lvs2 ~]# cd keepalived-1.2.7

  12. [root@lvs2 keepalived-1.2.7]# ./configure --sysconf=/etc

  13. [root@lvs2 keepalived-1.2.7]# make && make install

  14. [root@lvs2 keepalived-1.2.7]# ln -s /usr/local/sbin/keepalived /sbin/

  15. [root@lvs2 keepalived-1.2.7]# chkconfig keepalived on

  16. [root@lvs2 Pacages]# rpm –ihv ipvsadm-1.25-10.el6.x86_64.rpm

[root@lvs1 ~]# yum install -y gcc kernel-devel openssl-devel popt-devel
[root@lvs1 ~]# tar -xzf keepalived-1.2.7.tar.gz
[root@lvs1 ~]# cd keepalived-1.2.7
[root@lvs1 keepalived-1.2.7]# ./configure --sysconf=/etc
[root@lvs1 keepalived-1.2.7]# make && make install
[root@lvs1 keepalived-1.2.7]# ln -s /usr/local/sbin/keepalived /sbin/
[root@lvs1 keepalived-1.2.7]# chkconfig keepalived on
[root@lvs1 Pacages]# rpm –ihv ipvsadm-1.25-10.el6.x86_64.rpm
[root@lvs2 ~]# yum install -y gcc kernel-devel openssl-devel popt-devel
[root@lvs2 ~]# tar -xzf keepalived-1.2.7.tar.gz
[root@lvs2 ~]# cd keepalived-1.2.7
[root@lvs2 keepalived-1.2.7]# ./configure --sysconf=/etc
[root@lvs2 keepalived-1.2.7]# make && make install
[root@lvs2 keepalived-1.2.7]# ln -s /usr/local/sbin/keepalived /sbin/
[root@lvs2 keepalived-1.2.7]# chkconfig keepalived on
[root@lvs2 Pacages]# rpm –ihv ipvsadm-1.25-10.el6.x86_64.rpm

步骤三：部署Keepalived实现LVS-DR模式调度器的高可用

1）LVS1调度器设置Keepalived，并启动服务

copytextpop-up

  1. [root@lvs1 ~]# vim /etc/keepalived/keepalived.conf

  2. global_defs {

  3. notification_email {

  4. admin@tarena.com.cn                   //设置报警收件人邮箱

  5. }

  6. notification_email_from ka@localhost  //设置发件人

  7. smtp_server 127.0.0.1                

  8. //定义邮件服务器

  9. smtp_connect_timeout 30

  10. router_id lvs1                        //设置路由ID号

  11. }

  12. vrrp_instance VI_1 {

  13. state MASTER                          //主服务器为MASTER

  14. interface eth0                        //定义网络接口

  15. virtual_router_id 50                    //主辅VRID号必须一致

  16. priority 100                     //服务器优先级

  17. advert_int 1

  18. authentication {

  19. auth_type pass

  20. auth_pass forlvs                      //主辅服务器密码必须一致

  21. }

  22. virtual_ipaddress { 192.168.0.253 }

  23. }

  24. virtual_server 192.168.0.253 80 {      //设置VIP为192.168.0.253

  25. delay_loop 6

  26. lb_algo wrr                 //设置LVS调度算法为RR

  27. lb_kind DR                          //设置LVS的模式为DR

  28. persistence_timeout 1

  29. protocol TCP

  30. real_server 192.168.0.1 80 {

  31. weight 1                  //设置权重为1

  32. TCP_CHECK {

  33. connect_timeout 3

  34. nb_get_retry 3

  35. delay_before_retry 3

  36. }

  37. }

  38. real_server 192.168.0.2 80 {

  39. weight 2                  //设置权重为2

  40. TCP_CHECK {

  41. connect_timeout 3

  42. nb_get_retry 3

  43. delay_before_retry 3

  44. }

  45. }

  46. [root@lvs1 ~]# service keepalived start

  47. [root@lvs1 ~]# ipvsadm -Ln

[root@lvs1 ~]# vim /etc/keepalived/keepalived.conf
global_defs {
  notification_email {
    admin@tarena.com.cn				//设置报警收件人邮箱
  }
  notification_email_from     //设置发件人
  smtp_server 127.0.0.1				//定义邮件服务器
  smtp_connect_timeout 30
  router_id  lvs1					//设置路由ID号
}
vrrp_instance VI_1 {
  state MASTER    		 			//主服务器为MASTER
  interface eth0					//定义网络接口
  virtual_router_id 50				//主辅VRID号必须一致
  priority 100     					//服务器优先级
  advert_int 1
  authentication {
    auth_type pass
    auth_pass forlvs  	 			//主辅服务器密码必须一致
  }
  virtual_ipaddress {  192.168.0.253  }
}
virtual_server 192.168.0.253 80 {  	 //设置VIP为192.168.0.253
  delay_loop 6
  lb_algo wrr          				//设置LVS调度算法为RR
  lb_kind DR      				 	//设置LVS的模式为DR
  persistence_timeout 1
  protocol TCP
  real_server 192.168.0.1 80 {
    weight 1         				 //设置权重为1
    TCP_CHECK {
	connect_timeout 3
	nb_get_retry 3
	delay_before_retry 3
    }
  }
 real_server 192.168.0.2 80 {
    weight 2         				 //设置权重为2
    TCP_CHECK {
	connect_timeout 3
	nb_get_retry 3
	delay_before_retry 3
    }
  }
[root@lvs1 ~]# service keepalived start
[root@lvs1 ~]# ipvsadm -Ln

2）LVS2调度器设置Keepalived

copytextpop-up

  1. [root@lvs1 ~]# vim /etc/keepalived/keepalived.conf

  2. global_defs {

  3. notification_email {

  4. admin@tarena.com.cn                  //设置报警收件人邮箱

  5. }

  6. notification_email_from ka@localhost   //设置发件人

  7. smtp_server 127.0.0.1                //定义邮件服务器

  8. smtp_connect_timeout 30

  9. router_id lvs2                        //设置路由ID号

  10. }

  11. vrrp_instance VI_1 {

  12. state SLAVE                          //从服务器为SLAVE

  13. interface eth0                        //定义网络接口

  14. virtual_router_id 50                  //主辅VRID号必须一致

  15. priority 50                          //服务器优先级

  16. advert_int 1

  17. authentication {

  18. auth_type pass

  19. auth_pass forlvs                      //主辅服务器密码必须一致

  20. }

  21. virtual_ipaddress { 192.168.0.253 }

  22. }

  23. virtual_server 192.168.0.253 80 {     //设置VIP为192.168.0.253

  24. delay_loop 6

  25. lb_algo wrr                  //设置LVS调度算法为RR

  26. lb_kind DR                   //设置LVS的模式为DR

  27. persistence_timeout 1

  28. protocol TCP

  29. real_server 192.168.0.1 80 {

  30. weight 1                     //设置权重为1

  31. TCP_CHECK {

  32. connect_timeout 3

  33. nb_get_retry 3

  34. delay_before_retry 3

  35. }

  36. }

  37. real_server 192.168.0.2 80 {

  38. weight 2                     //设置权重为2

  39. TCP_CHECK {

  40. connect_timeout 3

  41. nb_get_retry 3

  42. delay_before_retry 3

  43. }

  44. }

  45. [root@lvs2 ~]# service keepalived start

  46. [root@lvs2 ~]# ipvsadm -Ln

[root@lvs1 ~]# vim /etc/keepalived/keepalived.conf
global_defs {
  notification_email {    设置报警收件人邮箱
  }
  notification_email_from ka@localhost	//设置发件人
  smtp_server 127.0.0.1			//定义邮件服务器
  smtp_connect_timeout 30
  router_id  lvs2				//设置路由ID号
}
vrrp_instance VI_1 {
  state SLAVE    		 		//从服务器为SLAVE
  interface eth0				//定义网络接口
  virtual_router_id 50			//主辅VRID号必须一致
  priority 50     				//服务器优先级
  advert_int 1
  authentication {
    auth_type pass
    auth_pass forlvs  	 		//主辅服务器密码必须一致
  }
  virtual_ipaddress {  192.168.0.253  }
}
virtual_server 192.168.0.253 80 {  	   //设置VIP为192.168.0.253
  delay_loop 6
  lb_algo wrr          			//设置LVS调度算法为RR
  lb_kind DR      				 //设置LVS的模式为DR
  persistence_timeout 1
  protocol TCP
  real_server 192.168.0.1 80 {
    weight 1         			//设置权重为1
    TCP_CHECK {
	connect_timeout 3
	nb_get_retry 3
	delay_before_retry 3
    }
  }
 real_server 192.168.0.2 80 {
    weight 2         			//设置权重为2
    TCP_CHECK {
	connect_timeout 3
	nb_get_retry 3
	delay_before_retry 3
    }
  }
[root@lvs2 ~]# service keepalived start
[root@lvs2 ~]# ipvsadm -Ln

步骤四：客户端测试

客户端使用curl命令反复连接http://202.114.106.20，查看访问的页面是否会轮询到不同的后端真实服务器。