Ubuntu上配置LVS DR模式 + Keepalived

在Linux下，LVS是一个比较有用的工具，配合keepalived软件，可以组建一个高性能高可靠的服务器群集，为用户提供稳定的服务，这篇文章将详细探讨LVS DR+keepalived的搭建方式。

首先，拓扑图如下：

如图所示，这个拓扑很简单，这里做一下简单介绍：

1. 一台Client，IP配置为172.16.2.7/24；

2. 一台路由器Router，2块网卡，外网IP配置为172.16.2.13/24，内网IP配置为192.168.11.2/24，路由器上开启了NAT功能，将外部的TCP 80端口映射到了内网的192.168.11.10:80上（这个后便会介绍）；

3. 一台交换机Switch，纯2层，所以可直接忽略；

4. 两台LVS director服务器（director1和director2），IP地址分别为192.168.11.11/24和192.168.11.12/24，这两台director将运行keepalived，虚拟出一个IP地址：192.168.11.10（这个IP地址正是NAT端口转发的目的地址）；

5. 两台www服务器（www1和www2），IP地址分别为192.168.11.21/24和192.168.11.22/24，均安装了nginx提供web服务。

6. 所有的服务器均安装Ubuntu 10.10 Server版。

【第一步，安装LVS和keepalived】

在两台director服务器上，分别安装LVS和keepalived软件，使用命令：

$sudo apt-get install ipvsadm安装keepalived，使用命令：

$sudo apt-get install keepalived【第二步，配置keepalived】

装完之后，在/etc/keepalived目录下建立keepalived.conf文件，写入配置文件如下：

# Global Configuration
global_defs {
	lvs_id  director1
}

# VRRP Configuration
vrrp_instance LVS {
	state MASTER
	interface eth0
	virtual_router_id 51
	priority 150
	advert_int 1
	authentication {
		auth_type PASS
		auth_pass 123456
	}

	virtual_ipaddress {
		192.168.11.10
	}
}

# Virtual Server Configuration - for WWW service
virtual_server 192.168.11.10 80 {
		delay_loop 1
		lb_algo rr
		lb_kind DR
		persistence_timeout 60
		protocol TCP

	# Real Server 1 configuration
	real_server 192.168.11.21 80 {
		weight 3
		TCP_CHECK {
			connection_timeout 10
			nb_get_retry 3	
			delay_before_retry 3
		}
	}

	real_server 192.168.11.22 80 {
		weight 1
		TCP_CHECK {
			connection_timeout 10
			nb_get_retry 3
			delay_before_retry 3

		}
	}

}

同样，在director2上也要做这个文件的配置，只是红色标记的部分需要注意，director1改为director2，MASTER要改为BACKUP，virtual_router_id，主从上边的ID都要保持相同（51），priority，director1上为150，director2上应保持比它小（一说要小50，未经证实过）。

 

第三步，配置LVS】

LVS在第一步的时候已经安装过了，现在只需要配置即可。

在两台director上使用如下命令：

$sudo ifconfig eth0:0 192.168.11.10 broadcast 192.168.11.10 netmask 255.255.255.255 up

$sudo route add -host 192.168.11.10 dev eth0:0

$sudo echo "1" > /proc/sys/net/ipv4/ip_forward

$sudo ipvsadm -C

$sudo ipvsadm -A -t 192.168.11.10:80 -s rr

$sudo ipvsadm -a -t 192.168.11.10:80 -r 192.168.11.21:80 -g

$sudo ipvsadm -a -t 192.168.11.10:80 -r 192.168.11.22:80 -g

$sudo ipvsadm

$sudo sysctl -p需要特别注意的是：在LVS的NAT模式中，ip_forward是关闭的，而在LVS的DR模式中，ip_forward是打开的。

这个命令可以做成启动脚本，写到/etc/rc.local中去，这样的话，就不用在每次开机之后都手工再输一遍。

【第四步，配置Real Server】

在两台www服务器上，分别配置如下命令：

$sudo ifconfig lo:0 192.168.11.10 broadcast 192.168.11.10 netmask 255.255.255.255 up

$sudo route add -host 192.168.11.10 dev lo:0

$sudo echo "1"> /proc/sys/net/ipv4/conf/lo/arp_ignore

$sudo echo "2"> /proc/sys/net/ipv4/conf/lo/arp_announce

$sudo echo "1" > /proc/sys/net/ipv4/conf/all/arp_ignore

$sudo echo "2" > /proc/sys/net/ipv4/conf/all/arp_announce

$sudo sysctl -p这一步骤中，配置ARP是必须的工作，可参考这个链接：http://www.linuxidc.com/Linux/2012-05/60950.htm

【第五步，验证】

在Client机器上，访问http://172.16.2.13，如果可以打开预先在nginx中定义好的网页，则配置成功，由于配置的是简单的轮询（rr），等上一段时间，等TCP连接关闭了之后，再次打开，就会发现访问到的是不同的www服务器。

关闭掉director1，www访问应该不受影响。

关闭掉www2，www访问也应该不受影响。