LVS之DR跨网段实战及高可用性

最新推荐文章于 2023-11-10 19:59:22 发布
最新推荐文章于 2023-11-10 19:59:22 发布
阅读量162 收藏 1
点赞数
文章标签： 网络 开发工具 运维
原文链接：http://www.cnblogs.com/JevonWei/p/7409828.html
版权

author：JevonWei
版权声明：原创作品

LVS-DR实现跨网段

网络拓扑
image
网络环境

RS1   
    RIP 192.168.198.138/24
    VIP 192.168.80.100/32
    GW  192.168.198.130
RS2 
    RIP 192.168.198.132/24
    VIP 192.168.80.100/32
    GW  192.168.198.130
VS
    DIP 192.168.198.128/24
    VIP 192.168.198.100/32
    GW  192.168.198.130
    
route 
    192.168.198.130/24
    192.168.80.130/8
    172.16.253.166/16
    GW  192.168.198.130
Client 
    172.16.254.150/16
    GW 172.16.253.166
RS1,RS2的网关指向192.168.198.130
route
ens38网卡添加第二个IP
[root@route network-scripts]# nmcli connection modify ens38 +ipv4.addresses 192.168.80.130/8
[root@route ~]# nmcli connection up ens38  \\启动ens38网卡
[root@route ~]# ip a
[root@route ~]# route add default gw 192.168.198.130
VS
编辑LVS_DR的配置脚本
[root@VS ~]# vim lvs_dr.sh 
#! /bin/bash
vip=192.168.80.100
server=$vip:80
rip1=192.168.198.138
rip2=192.168.198.132
sch=rr
dev=ens34:1
case $1 in
start)
    ifconfig $dev $vip/32 broadcast $vip
    ipvsadm -A -t $server -s $sch
    ipvsadm -a -t $server -r $rip1 -g -w 3
    ipvsadm -a -t $server -r $rip2 -g -w 1
    ;;
stop)
    ipvsadm -C
    ifconfig $dev down
    ;;
*)
    echo "Usage:$(basename $0) start|stop"
    exit 1
    ;;
esac

添加网关及默认路由
[root@VS ~]# route add default gw 192.168.198.130 
[root@VS ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.198.130 0.0.0.0         UG    0      0        0 ens34
192.168.122.0   0.0.0.0         255.255.255.0   U     0      0        0 virbr0
192.168.198.0   0.0.0.0         255.255.255.0   U     100    0        0 ens34
RS1和RS2配置vip IP
[root@RS1 ~]# vim dr_vip_rs.sh 
#!/bin/bash
#
vip=192.168.80.100
mask='255.255.255.255'
dev=lo:1
case $1 in
start)
   echo 1 > /proc/sys/net/ipv4/conf/all/arp_ignore
   echo 1 > /proc/sys/net/ipv4/conf/lo/arp_ignore
   echo 2 > /proc/sys/net/ipv4/conf/all/arp_announce
   echo 2 > /proc/sys/net/ipv4/conf/lo/arp_announce
   ifconfig $dev $vip netmask $mask broadcast $vip up
   # route add -host $vip dev $dev
   echo "VS server is Ready "
   ;;
stop)
   ifconfig $dev down
   echo 0 > /proc/sys/net/ipv4/conf/all/arp_ignore
   echo 0 > /proc/sys/net/ipv4/conf/lo/arp_ignore
   echo 0 > /proc/sys/net/ipv4/conf/all/arp_announce
   echo 0 > /proc/sys/net/ipv4/conf/lo/arp_announce
   echo "VS server is Cancel"
   ;;
*)
   echo "Usage $(basename $0) start|stop"
   exit 1
   ;;
esac

[root@RS1 ~]# bash dr_vip_rs.sh start
VS server is Ready 
[root@RS2 ~]#  bash dr_vip_rs.sh start
VS server is Ready 

路由信息
[root@RS2 ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.198.130 0.0.0.0         UG    100    0        0 ens34
192.168.198.0   0.0.0.0         255.255.255.0   U     100    0        0 ens34
[root@RS1 ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
192.168.198.0   0.0.0.0         255.255.255.0   U     0      0        0 eth1
0.0.0.0         192.168.198.130 0.0.0.0         UG    0      0        0 eth1
client
[root@client ~]# for i in {1..10};do curl 192.168.80.100 ;done
welcome to RS2
welcome to RS1
welcome to RS2
welcome to RS1
welcome to RS2
welcome to RS1
welcome to RS2
welcome to RS1
welcome to RS2
welcome to RS1

将http和https两个不同的服务打标签,从而使http和https做成一个集群服务

  • FireWall Mark技术

    VS

    [root@VS ~]# iptables -t mangle -A PREROUTING -d 192.168.80.100 -p tcp -m multiport --dports 80,443 -j MARK --set-mark 10
    [root@VS ~]# vim lvs_dr_vs_fwm.sh
    #! /bin/bash
    vip=192.168.80.100
    server=10
    rip1=192.168.198.138
    rip2=192.168.198.132
    sch=rr
    dev=ens34:1
    case $1 in
    start)
    ifconfig $dev $vip/32 broadcast $vip
    ipvsadm -A -f $server -s $sch
    ipvsadm -a -f $server -r $rip1 -g -w 3
    ipvsadm -a -f $server -r $rip2 -g -w 1
    ;;
    stop)
    ipvsadm -C
    ifconfig $dev down
    ;;
    *)
    echo "Usage:$(basename $0) start|stop"
    exit 1
    ;;
    esac

    [root@VS ~]# bash lvs_dr_vs_fwm.sh start
    [root@VS ~]# ipvsadm -Ln
    IP Virtual Server version 1.2.1 (size=4096)
    Prot LocalAddress:Port Scheduler Flags
    -> RemoteAddress:Port Forward Weight ActiveConn InActConn
    FWM 10 rr
    -> 192.168.198.132:0 Route 1 0 0
    -> 192.168.198.138:0 Route 3 0 0

    client

    [root@client ~]# curl 192.168.80.100；curl -k https://192.168.80.100

    实现DR持久连接

    PFWMC基于防火墙的持久连接

    VS

    [root@VS ~]# iptables -t mangle -A PREROUTING -d 192.168.80.100 -p tcp -m multiport --dports 80,443 -j MARK --set-mark 10
    [root@VS ~]# vim lvs_dr_vs_fwm.sh
    #! /bin/bash
    vip=192.168.80.100
    server=10
    rip1=192.168.198.138
    rip2=192.168.198.132
    sch=rr
    dev=ens34:1
    case $1 in
    start)
    ifconfig $dev $vip/32 broadcast $vip
    ipvsadm -A -f $server -s $sch -p 600 \-p 设置持久连接为600s
    ipvsadm -a -f $server -r $rip1 -g -w 3
    ipvsadm -a -f $server -r $rip2 -g -w 1
    ;;
    stop)
    ipvsadm -C
    ifconfig $dev down
    ;;
    *)
    echo "Usage:$(basename $0) start|stop"
    exit 1
    ;;
    esac

    [root@VS ~]# bash lvs_dr_vs_fwm.sh start
    [root@VS ~]# ipvsadm -Ln
    IP Virtual Server version 1.2.1 (size=4096)
    Prot LocalAddress:Port Scheduler Flags
    -> RemoteAddress:Port Forward Weight ActiveConn InActConn
    FWM 10 rr persistent 600 \持久连接为600s
    -> 192.168.198.132:0 Route 1 0 0
    -> 192.168.198.138:0 Route 3 0 0

    client

    [root@client ~]# curl 192.168.80.100
    welcome to RS2
    [root@client ~]# curl 192.168.80.100
    welcome to RS2
    [root@client ~]# curl 192.168.80.100
    welcome to RS2
    [root@client ~]# curl https://192.168.80.100
    welcome to RS2
    [root@client ~]# curl https://192.168.80.100
    welcome to RS2

PCC基于0端口的持久连接

VS
[root@VS ~]# iptables -t mangle -A PREROUTING -d 192.168.80.100 -p tcp -m multiport --dports 80,443 -j MARK --set-mark 10
[root@VS ~]# vim lvs_dr_vs_per.sh       
#! /bin/bash
vip=192.168.80.100
server=$vip:0
rip1=192.168.198.138
rip2=192.168.198.132
sch=rr
dev=ens34:1
case $1 in
start)
    ifconfig $dev $vip netmask 255.255.255.255 broadcast $vip
    ipvsadm -A -t $server -s $sch -p 600
    ipvsadm -a -t $server -r $rip1 -g -w 3
    ipvsadm -a -t $server -r $rip2 -g -w 1
    ;;
stop)
    ipvsadm -C
    ifconfig $dev down
    ;;
*)
    echo "Usage:$(basename $0) start|stop"
    exit 1
    ;;
esac

[root@VS ~]# bash lvs_dr_vs_per.sh start
[root@VS ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.80.100:0 rr persistent 600
  -> 192.168.198.132:0            Route   1      0          0         
  -> 192.168.198.138:0            Route   3      0          0

LVS高可用性

VS(编写脚本判断RS服务器是否故障)
[root@VS ~]# vim lvs_dr_vs.sh
#! /bin/bash
vip=192.168.80.100
server=$vip:80
rip1=192.168.198.138
rip2=192.168.198.132
sch=rr
dev=ens34:1
case $1 in
start)
    ifconfig $dev $vip/32 broadcast $vip
    ipvsadm -A -t $server -s $sch 
    ipvsadm -a -t $server -r $rip1 -g -w 3
    ipvsadm -a -t $server -r $rip2 -g -w 1
    ;;
stop)
    ipvsadm -C
    ifconfig $dev down
    ;;
*)
    echo "Usage:$(basename $0) start|stop"
    exit 1
    ;;
esac

[root@VS ~]# bash lvs_dr_vs.sh start

ldirectord实现LVS的高可用性

当RS服务端崩溃时，自动从LVS中删除

VS
[root@VS ~]# iptables -t mangle -A PREROUTING -d 192.168.80.100 -p tcp -m multiport --dports 80,443 -j MARK --set-mark 10

下载ldirectord软件包(pub/Source/7.x86/crmsh/)
[root@VS ~]# yum -y install ldirectord-3.9.6-0rc1.1.1.x86_64.rpm       \\需有完整yum源
[root@VS ~]# rpm -ql ldirectord
/etc/ha.d
/etc/ha.d/resource.d
/etc/ha.d/resource.d/ldirectord
/etc/logrotate.d/ldirectord
/usr/lib/ocf/resource.d/heartbeat/ldirectord
/usr/lib/systemd/system/ldirectord.service
/usr/sbin/ldirectord
/usr/share/doc/ldirectord-3.9.6
/usr/share/doc/ldirectord-3.9.6/COPYING
/usr/share/doc/ldirectord-3.9.6/ldirectord.cf
/usr/share/man/man8/ldirectord.8.gz
[root@VS ~]# cp /usr/share/doc/ldirectord-3.9.6/ldirectord.cf /etc/ha.d
[root@VS ~]# vim /etc/ha.d/ldirectord.cf
    checktimeout=3 \\超时时间
    checkinterval=1 \\检查间隔
    fallback=127.0.0.1:80 \\Sorry Server,错误的网页
    autoreload=yes \\自动加载配置文件
    logfile="/var/log/ldirectord.log" \\日志文件
    quiescent=no \\当RS宕机时是否将RS记录从ipvsadm记录中删除，no表示宕机即删除  
    virtual=192.168.80.100:80 \\VS服务端IP
    real=192.168.198.138:80 gate 2 \\RS服务端IP，gate表示dr类型
    real=192.168.198.132:80 gate 1 \\RS服务端IP，gate表示dr类型
    fallback=127.0.0.1:80 gate
    service=http
    scheduler=wrr \\调度算法
    protocol=tcp \\tcp协议
    checktype=negotiate  
    checkport=80 \\检查端口
    request="index.html" \\检查网页
    receive="danran" \\检查网页字符，若包含该字符，则表示RS服务端正常
[root@VS ~]# systemctl start ldirectord
[root@VS ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
  TCP  192.168.80.100:80 rr
  -> 192.168.198.132:80           Route   1      0          0         
  -> 192.168.198.138:80           Route   1      0          0
client
[root@client ~]# curl 192.168.80.100
welcome to RS2
[root@client ~]# curl 192.168.80.100
welcome to RS1
[root@client ~]# curl 192.168.80.100
welcome to RS2
[root@client ~]# curl 192.168.80.100
welcome to RS1

使用标签实现ldirectord将多个服务定义为一个集群服务

使用打标签时需删除protocol=tcp选项

[root@VS ~]# iptables -t mangle -A PREROUTING -d 192.168.80.100 -p tcp -m multiport --dports 80,443 -j MARK --set-mark 10 \\标签定义为10
[root@VS ~]# iptables -t mangle -nvL
Chain PREROUTING (policy ACCEPT 41 packets, 3944 bytes)
pkts bytes target     prot opt in     out     source               destination         
0     0 MARK       tcp  --  *      *       0.0.0.0/0            192.168.80.100       multiport dports 80,443 MARK set 0xa

[root@VS ~]# vim /etc/ha.d/ldirectord.cf
    checktimeout=3 \\超时时间
    checkinterval=1 \\检查间隔
    fallback=127.0.0.1:80 \\Sorry Server,错误的网页
    autoreload=yes \\自动加载配置文件
    logfile="/var/log/ldirectord.log" \\日志文件
    quiescent=no \\当RS宕机时是否将RS记录从ipvsadm记录中删除，no表示宕机即删除  
    virtual=10  \\VS标签为10
        real=192.168.198.138:80 gate 2 \\RS服务端IP，gate表示dr类型
        real=192.168.198.132:80 gate 1 \\RS服务端IP，gate表示dr类型
        fallback=127.0.0.1:80 gate
        service=http
        scheduler=wrr \\调度算法
        checktype=negotiate  
        checkport=80 \\检查端口
        request="index.html" \\检查网页
        receive="danran" \\检查网页字符，若包含该字符，则表示RS服务端正常
[root@VS ~]# systemctl start ldirectord
[root@VS ~]# ipvsadm -Ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
  FWM  10 rr
  -> 192.168.198.132:80           Route   1      0          0         
  -> 192.168.198.138:80           Route   1      0          0

转载于:https://www.cnblogs.com/JevonWei/p/7409828.html

weixin_30713953
关注
linux 实现lvs-dr在不同网段的负载均衡调度
纤手小白
11-10 3043
一、前言: 当一组服务器在高速的局域网或广域网中相互连接，其前端部署了一个负责负载调度的调度器（director）的服务系统，调度器能将网络请求无缝衔接调度到真实的服务器上（real server）上，客户访问集群系统提供的网络服务就像访问一台高性能，高可用的服务器一样，集群系统支持透明的增加或删除服务器节点，以此来灵活应对客户机的不同的访问量需求，从而灵活调度，来实现收益最大化的效果，而客户对...
部署LVS-DR+Keepalived
weixin_71429844的博客
09-11 1301
部署LVS-DR+Keepalived
LVS的跨网络DR实现
Q先生
11-03 756
LVS的跨网络DR实现1. 架构图2. 网络设置2.1 Client网络配置2.2 route网络配置2.3 LVS服务器网络配置2.4 Real server RS1/RS2网络配置3.配置LVS3.1 Real server RS1/RS2配置3.1.1 准备测试页面3.1.2 配置浮动IP3.2 LVS服务器3.2.1 LVS软件安装3.2.2 配置浮动IP3.2.3 配置LVS3.3 路由服务器配置4. 测试4.1 客户端ping Route的eth14.2 Route服务器通过LVS连接VIP4.
9.LVS的DR模型之跨网段的实现过程
weixin_45599881的博客
11-08 893
1.配置环境 环境：五台主机 一台：客户端 eth0:仅主机 192.168.0.6/24 GW:192.168.0.200 一台：ROUTER eth0 :NAT 10.0.0.200/24 eth0:1 172.16.0.200/24 eth1: 仅主机 192.168.0.200/24 启用 IP_FORWARD 一台：LVS eth0:NAT:DIP:10.0.0.8/24 GW:10.0.0.200 lo:VIP 172.16.0.100/32 两台RS： RS1：eth0:NAT.
LVS跨网段DR模型和FWM多服务绑定
枫叶斜阳的博客
08-26 386
LVS跨网段DR模型和FWM多服务绑定实验环境 实验环境 192.168.31.169 CIP 代表客户机 192.168.31.170 代表路由设备外网地址 192.168.160.136 代表路由设备内网地址 10.0.0.200 代表路由器在内网被VIP指向外网的地址 170和136用设备模拟路由器效果 192.168.160.140 RIP 代表http服务器 192.168.160.150 RIP 代表http服务器 192.168.160.160 DIP 代表lvs设备内网地址 10.0.0.1
LVS跨网段DR模型配置
syztoo
08-13 773
本次试验使用 5台 VMware 虚拟机搭建，Client 和 Router ens33网卡设置为桥接模式，其余网卡均为主机模式，各 ip 地址 规划如下： 一、各主机网络配置文件如下： 1.Client [root@Client ~]# cat /etc/sysconfig/network-scripts/ifcfg-ens33 TYPE=Ethernet BOOTPROTO=no...
部署 LVS-DR + keepalived 高可用群集
qq_28361541的博客
01-16 767
文章目录一、LVS-DR模式二、LVS-DR数据包的流向分析三、LVS-DR中的ARP问题四、LVS-DR的搭建4.1、两台LVS的配置4.2、Web服务器的搭建4.3、总结 一、LVS-DR模式 关于群集的负载调度技术，可以基于IP端口，内容等进行分发，其中IP负载均衡技术是效率最高的。 在基于IP的负载均衡模式中，常见的有地址转换，IP隧道、直接路由 这三种工作模式： 直接路由；简称DR模...
LVS/NAT与LVS/DR模式集群的概述与配置
10-11
**Linux Virtual Server (LVS)** 是一套开源软件，用于构建高性能和高可用性的服务器集群。它最初由张文嵩博士于国防科技大学期间创立。 - **目标**：LVS旨在利用Linux操作系统和LVS集群软件实现一个高可用、高性能...
LVS-DR模式+Keepalived高可用架构→实现双机热备
m0_50019871的博客
11-14 402
LVS-DR模式+Keepalived架构的介绍架构的流程图LVS的介绍LVS的工作模式LVS调度算法Keepalived介绍Keepalived脑裂Keepalived vip漂移原理与VRRP协议架构的实际操作安装KeepalivedLVS部署web端浏览器测试： 架构的介绍 Keepalived的设计目标是构建高可用的LVS负载均衡群集，可以调用ipvsadm工具来创建虚拟服务器、管理服务器池，而不仅仅是双机热备。优点：keepalived对lvs负载调度器实现热备切换，提高可用性，对服务器池中的节
LVS 负载均衡
热门推荐
高飞的博客
02-22 31万+
LVS是Linux Virtual Server的简写
2019/05/24 LVS的DR模型跨网段实现
qq_42227818的博客
09-29 177
实现DR模型的LVS中，ipforward功能启用了没，不需要启用 NAT模型中，LVS服务器的ipforward是必须启用的 DR模型中，是不需要启用的，因为只是修改了目标的mac地址把源mac和目标mac修改了 开始抓包 就访问一次 三次握手 syn包是三次握手的第一次握手 但是下面一个也是syn（请求包原本只有一个，现在有两个，就是修改了mac地址 源地址是CIP,目标地址是VI...
在centos7上如何实现lvs跨网段的负载均衡（fullnat模式-20231110记录）
最新发布
qq_18729059的博客
11-10 410
四、本次记录的fullnat模式，client-lvs-rs可在不同网段，lvs是一台centos 7虚机有一个网口eth1（10.145.28.1），两台rs是192.168.200.23和192.168.200.24。一、nginx可实现基于域名和目录的七层转发达到负载均衡目的，但转发过程涉及http_head/body/buffer/cache等参数配置，操作较为复杂，出问题不易排查。DR和NAT模式的lvs和后端rs需在同一网段（局限性），TUN模式的lvs需后端真实RS有ipip隧道解封装。
跨网段实现内网互通_除了双机热备，如何在不同设备之间自动选路，保障内网高可用？...
weixin_39716800的博客
12-16 1094
出于各种原因，我们会碰到一些设备闲置下来的情况。为了不长期搁置设备，常常会把设备用来分担一些业务。 因为厂址搬迁，当时临时办公的地方新增了一台防火墙，现在已经完全在新厂开业，旧厂的设备就闲置了。当时我把闲置的防火墙拿来单独承担服务器流量，但是后来，公网防火墙出现过两次因为设备负载太高而宕机的情况，因为我内网用户之间互访必须经过防火墙，导致整个内网瘫痪，有次是半夜2点多跑了40公里来重启。 于是就...
LVS + HAProxy实现跨网负载均衡
weixin_30474613的博客
11-29 209
转载于:https://www.cnblogs.com/zhouhaibing/p/7913474.html
LVS-DR模式单网段和多网段设置步骤
Lcongming的博客
06-08 807
关于LVS-DR模式单网段设置 如图 需要特别注意的是，在LVS上一定要提前安装ipvsadm 而RS1和RS2上 安装httpd； 整个操作过程，其实并没有很多难的点，唯一的坑就是没有提前安装这两个软件，导致更改网卡信息后无法进行安装，需要重新设置 而后面的实验，所有的操作，其实就是图中这些； 到最后，有让我get到了一个我之前不知道的知识点； 话不多说，先进入正题； 1.internet主机环境 设置网卡 [root@internet ~]#cd /etc/sysconfig/network-scri
LVS-DR模式多网段案例
aa896517050的博客
06-23 324
LVS-DR模式多网段案例
群集 之 LVS负载均衡（NAT模式）
段小宝的博客
06-16 442
目录前言一、企业群集应用概述1.1 群集的概念1.2 企业群集分类 前言 要理解群集（集群）的含义； 一、企业群集应用概述 1.1 群集的概念 群集的含义： Cluster，集群、群集 由多台主机构成，但对外只表现为一个整体，只提供一个访问入口（域名或IP地址），相当于一台大型计算机。 现阶段存在的问题： 互联网应用中，随着站点对硬件性能、响应速度、服务稳定性、数据可靠性等要求越来越高，单台服务器已经无法满足负载均衡及高可用的要求。 解决方法： 纵向扩展：提升服务器的硬件配置，提高CPU核数
LVS负载均衡和nat模式的实操
lv74134的博客
07-30 1208
LVS理论和实操一、企业群集应用概述1、群集的含义2、问题3、解决方法总结：二、集群的分类三、负载均衡群集架构四、LVS负载均衡群集工作模式分析1、负载均衡群集是目前企业用得最多的群集类型2、群集的负载调度技术有3种工作模式（1）地址转换（NAT模式）（2）IP隧道（TUN模式）（3）直接路由（DR模式）3、ip_ vs模块的版本信息4、LVS的负载调度算法4.1、轮询(Round Robin)4.2、加权轮询 (Weighted Round Robin)4.3、最少连接 (Least Connection
Linux LVS集群软件使用介绍及高可用解决方案
Linux Virtual Server（LVS）集群是一种用于构建高可用性、高扩展性的服务器集群的解决方案。LVS通过工作在IP层的负载均衡技术，可以有效地分配网络服务请求至多个服务器，从而实现网络服务的高可用性和负载均衡。 ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值