20191108LVS负载均衡集群

 

nat模式请求量不可以太大一般10台左右  除非配置千兆网卡万兆光纤提高效率

 

 LVS的调度算法

 

LVS NAT模式搭建(上）

准备工作

第一台机器调到器（简写dir）

添加多一个网卡设置为仅主机模式

查看网段                                                       

编辑网卡配置文件 

激活网卡

 检查是否连通                                    

将rs1、rs2的网关设置为dir的内网IP

关闭防火墙

 

 

 

配置

负载均衡集群介绍、LVS介绍、LVS的调度算法、LVS NAT模式搭建_weixin_33686714的博客-CSDN博客  https://blog.csdn.net/weixin_33686714/article/details/92602997

dir机器上安装•yum install -y ipvsdam

• 在dir上编写脚本，vim /usr/local/sbin/lvs_nat.sh//内容如下

#! /bin/bash
#! /bin/bash
# director 服务器上开启路由转发功能
echo 1 > /proc/sys/net/ipv4/ip_forward
# 关闭icmp的重定向（伪装操作）要不然不能把数据包成功的发送到rs上和回来
echo 0 > /proc/sys/net/ipv4/conf/all/send_redirects
echo 0 > /proc/sys/net/ipv4/conf/default/send_redirects
# 注意区分网卡名字，阿铭的两个网卡分别为ens33和ens37
echo 0 > /proc/sys/net/ipv4/conf/ens33/send_redirects
echo 0 > /proc/sys/net/ipv4/conf/ens37/send_redirects
# director 设置nat防火墙
iptables -t nat -F
iptables -t nat -X
iptables -t nat -A POSTROUTING -s 192.168.96.0/24? -j MASQUERADE
# director设置ipvsadm
IPVSADM='/usr/sbin/ipvsadm'
$IPVSADM -C
$IPVSADM -A -t 192.168.149.129:80 -s wlc -p 3
$IPVSADM -a -t 192.168.149.129:80 -r 192.168.96.136:80 -m -w 1
$IPVSADM -a -t 192.168.149.129:80 -r 192.168.96.138:80 -m -w 1

执行脚本没有输出即是没有错误

RS1RS2

查看ipvsadm规则

现在可以直接用浏览器直接进行访问公网IP

刷新几次发现没有改变可以能是缓存的关系

更改wlc为rr 并去掉-p选项

使用curl命令测试

 每个机器均匀负载，试验成功

 

DR模式

dir机器上编辑脚本

[root@linux-01 ~]# vim /usr/local/sbin/lvs_dr.sh

#! /bin/bash
echo 1 > /proc/sys/net/ipv4/ip_forward
ipv=/usr/sbin/ipvsadm
vip=192.168.96.110
rs1=192.168.96.136
rs2=192.168.96.138
#注意这里的网卡名字
ifdown ens33
ifup ens33
ifconfig ens33:2 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip dev ens33:2
$ipv -C
$ipv -A -t $vip:80 -s wrr
$ipv -a -t $vip:80 -r $rs1:80 -g -w 1
$ipv -a -t $vip:80 -r $rs2:80 -g -w 1

测试脚本

执行脚本提示正确

 

两台rs上也编写脚本 vim /usr/local/sbin/lvs_rs.sh//内容如下

#/bin/bash
vip=192.168.96.110
#把vip绑定在lo上，是为了实现rs直接把结果返回给客户端
ifdown lo
ifup lo
ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip lo:0
#以下操作为更改arp内核参数，目的是为了让rs顺利发送mac地址给客户端
#参考文档www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce

 

分别在dir上和两个rs上执行这些脚本

查看两天rs 是否绑定vipdir上ens33网卡也绑定了vip

 

• 测试

由于缓存或其他原因未能真正显示出想要的结果

ipvsdm规则有显示出变化

 

keepalived+lvs DR

• 完整架构需要两台服务器（角色为dir）分别安装keepalived软件，目的是实现高可用，但keepalived本身也有负载均衡的功能，所以本次实验可以只安装一台keepalived

• keepalived内置了ipvsadm的功能，所以不需要再安装ipvsadm包，也不用编写和执行那个lvs_dir的脚本

• 三台机器分别为：

• dir（安装keepalived）133.130

• rs1 133.132

• rs2 133.133

• vip 133.200

验证一个问题当一个rs关机时 lvs依然会请求转发过去

 

 

• 编辑keepalived配置文件 vim /etc/keepalived/keepalived.conf

  //内容请到https://coding.net/u/aminglinux/p/aminglinux-book/git/blob/master/D21Z/lvs_keepalived.conf 获取

• 需要更改里面的ip信息

vrrp_instance VI_1 {
    #备用服务器上为 BACKUP
    state MASTER
    #绑定vip的网卡为ens33，你的网卡和阿铭的可能不一样，这里需要你改一下
    interface ens33
    virtual_router_id 51
    #备用服务器上为90
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass aminglinux
    }
    virtual_ipaddress {
        192.168.96.200
    }
}
virtual_server 192.168.96.200 80 {
    #(每隔10秒查询realserver状态)
    delay_loop 10
    #(lvs 算法)
    lb_algo wlc
    #(DR模式)
    lb_kind DR
    #(同一IP的连接60秒内被分配到同一台realserver)
    persistence_timeout 0
    #(用TCP协议检查realserver状态)
    protocol TCP

    real_server 192.168.96.136 80 {
        #(权重)
        weight 100
        TCP_CHECK {
        #(10秒无响应超时)
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
    }
    real_server 192.168.96.138 80 {
        weight 100
        TCP_CHECK {
        connect_timeout 10
        nb_get_retry 3
        delay_before_retry 3
        connect_port 80
        }
     }
}

• 执行ipvsadm -C  把之前的ipvsadm规则清空掉

• systemctl restart network 可以把之前的vip清空掉

• 两台rs上，依然要执行/usr/local/sbin/lvs_rs.sh脚本

 vim /usr/local/sbin/lvs_rs.sh//内容如下

#/bin/bash
vip=192.168.96.110
#把vip绑定在lo上，是为了实现rs直接把结果返回给客户端
ifdown lo
ifup lo
ifconfig lo:0 $vip broadcast $vip netmask 255.255.255.255 up
route add -host $vip lo:0
#以下操作为更改arp内核参数，目的是为了让rs顺利发送mac地址给客户端
#参考文档www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce

 

分别在dir上和两个rs上执行这些脚本

查看两天rs 是否绑定vipdir上ens33网卡也绑定了vip

• 测试

 

• keepalived有一个比较好的功能，可以在一台rs宕机时，不再把请求转发过去