LVS DR模式搭建
准备工作
- 三台机器
分发器,也叫调度器(简写为dir)
需要把之前rs机器的网关改回来
85.132
rs1
85.129
rs2
85.128
vip
85.200
DR模式搭建
- dir上编写脚本 vim /usr/local/sbin/lvs_dr.sh
内容如下
#! /bin/bash
echo 1 > /proc/sys/net/ipv4/ip_forward
ipv=/usr/sbin/ipvsadm
vip=192.168.85.200
rs1=192.168.85.129
rs2=192.168.85.128
#注意这里的网卡名字
ifdown ens37 #内网网卡
ifup ens37
ifconfig ens37:2 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip dev ens37:2
$ipv -C
$ipv -A -t $vip:80 -s wrr
$ipv -a -t $vip:80 -r $rs1:80 -g -w 1
$ipv -a -t $vip:80 -r $rs2:80 -g -w 1
- 两台rs上也编写脚本 vim /usr/local/sbin/lvs_rs.sh
内容如下
#/bin/bash
vip=192.168.85.200
#把vip绑定在lo上,是为了实现rs直接把结果返回给客户端
ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip lo:0
#以下操作为更改arp内核参数,目的是为了让rs顺利发送mac地址给客户端
#参考文档www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce
分别在dir上和两个rs上执行这些脚本
- dir上的内网网卡ens37绑定了VIP192.168.85.200,rs两台上的lo绑定了VIP
通过浏览器访问VIP就可以跟NAT模式一样起到负载均衡的作用。
keepalived lvs
完整架构需要两台服务器(角色为dir)分别安装keepalived软件,目的是实现高可用,但keepalived本身也有负载均衡的功能,所以本次实验可以只安装一台keepalived
keepalived内置了ipvsadm的功能,所以不需要再安装ipvsadm包,也不用编写和执行那个lvs_dir的脚本
三台机器分别为:
dir(安装keepalived)85.132
rs1 85.129
rs2 85.128
vip 85.200编辑keepalived配置文件 vim /etc/keepalived/keepalived.conf
内容
vrrp_instance VI_1 {
#备用服务器上为 BACKUP
state MASTER
#绑定vip的网卡为ens37
interface ens37
virtual_router_id 51
#备用服务器上为90
priority 100
advert_int 1
authentication {
auth_type PASS
auth_pass aminglinux
}
virtual_ipaddress { #VIP的地址
192.168.85.200
}
}
virtual_server 192.168.85.200 80 { #VIP的地址
#(每隔10秒查询realserver状态)
delay_loop 10
#(lvs 算法)
lb_algo wlc
#(DR模式)
lb_kind DR
#(同一IP的连接60秒内被分配到同一台realserver)
persistence_timeout 60
#(用TCP协议检查realserver状态)
protocol TCP
real_server 192.168.85.129 80 { #rs的IP
#(权重)
weight 100
TCP_CHECK {
#(10秒无响应超时)
connect_timeout 10
nb_get_retry 3
delay_before_retry 3
connect_port 80
}
}
real_server 192.168.85.128 80 { #rs的IP
weight 100
TCP_CHECK {
connect_timeout 10
nb_get_retry 3
delay_before_retry 3
connect_port 80
}
}
}
执行ipvsadm -C 把之前的ipvsadm规则清空掉
systemctl restart network 可以把之前的vip清空掉
两台rs上,依然要执行/usr/local/sbin/lvs_rs.sh脚本
而dir上不需要执行脚本,但是需要执行转发路由的命令:
echo 1 > /proc/sys/net/ipv4/ip_forwardkeepalived有一个比较好的功能,可以在一台rs宕机时,不再把请求转发过去
测试
dir上启动keepalived,systemctl start keepalived
ipvsadm -ln 查看连接了哪些rs,如果有哪一台的Nginx关闭了,就会被剔除出去
扩展
haproxy+keepalived http://blog.csdn.net/xrt95050/article/details/40926255
nginx、lvs、haproxy比较 http://www.csdn.net/article/2014-07-24/2820837
keepalived中自定义脚本 vrrp_script http://my.oschina.net/hncscwc/blog/158746
lvs dr模式只使用一个公网ip的实现方法 http://storysky.blog.51cto.com/628458/338726