LVS负载均衡——DR模式

已于 2022-06-09 08:49:20 修改
阅读量5.9k 收藏 44
点赞数 9
文章标签： 负载均衡 网络 运维
于 2022-06-08 14:16:23 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_61744194/article/details/125164202
版权

LVS负载均衡 直接路由

一、 LVS-DR 工作原理

LVS-DR（Linux Virtual Server Director Server）工作模式 ，是生产环境中最常用的一 种工作模式。

  • LVS-DR 模式，Director Server 作为群集的访问入口，不作为网关使用
  • 节点 Director Server 与 Real Server 需要在同一个网络中，返回给客户端的数据不需要经过 Director
    Server。
  • 为了响应对整个群集的访问，Director Server 与 Real Server 都需要配置 VIP 地址。

在这里插入图片描述
客户机发起请求，经过调度服务器（lvs），经过算法调度，去访问真实服务器（RS）

由于不原路返回，客户机不知道，真实主机的ip地址，

所以只能通过调度服务器的外网ip（vip）去反回报文信息。

二、 数据包流向分析

在这里插入图片描述

（1） 客户端 发送请求到 Director Server,请求的数据报文（源 IP 是 CIP,目标 IP 是 VIP） 到达内核空间。
（2） Director Server 和 Real Server 在同一个网络中，数据通过二层数据链路层来传输。
（3） 内核空间判断数据包的目标 IP 是本机 VIP，此时 IPVS 比对数据包请求的服务是否是集群服务，是集群服务就重新封装数据包。修改源MAC 地址为 Director Server 的 MAC 地址，修改目标 MAC 地址为 Real Server 的 MAC 地址，源IP 地址与目标 IP 地址没有改 变，然后将数据包发送给 Real Server。
（4） 到达 Real Server 的请求报文的 MAC 地址是自身的 MAC 地址，就接收此报文。数 据包重新封装报文(源 IP 地址为VIP，目标 IP 为 CIP)，将响应报文通过 lo 接口传送给物理 网卡然后向外发出。
（5） Real Server 直接将响应报文传送到客户端。

三、LVS-DR 模式的特点

名称含义
DS（Director Server）前端负载均衡节点服务器
RS（Real SERVER）后端真实服务器
CIP（Client IP）客户端IP地址
VIP（Virtual IP）负载均衡对外提供访问的IP地址，一般负载均衡IP都会通过Viirtual IP实现高可用
RIP（RealServer IP）负载均衡后端的真实服务器IP地址
  • Director Server 和 Real Server 必须在同一个物理网络中。
  • Real Server 可以使用私有地址，也可以使用公网地址。如果使用公网地址，可以通过 互联网对 RIP 进行直接访问。
  • 所有的请求报文经由 Director Server，但回复响应报文不能经过 Director Server。
  • Real Server 的网关不允许指向 Director Server IP，即不允许数据包经过 Director S erver。
  • Real Server 上的 lo 接口配置 VIP 的 IP 地址。

四、ARP问题

4.1 问题一：IP 地址冲突

在LVS-DR负载均衡集群中，负载均衡器与节点服务器都要配置相同的VIP地址，在局域网中具有相同的IP地址。势必会造成各服务器ARP通信的紊乱

  • 当ARP广播发送到LVS-DR集群时，因为负载均衡器和节点服务器都是连接到相同的网络上，它们都会接收到ARP广播
  • 只有前端的负载均衡器进行响应，其他节点服务器不应该响应ARP广播

解决方法：

对节点服务器进行处理，使其不响应针对VIP的ARP请求

用虚接口lo:0承载VIP地址

设置内核参数arp_ ignore=1: 系统只响应目的IP为本地IP的ARP请求

路由器发送ARP请求（广播）
ARP---->广播去找ip地址解析成mac地址 默认使用调度服务器上的外网地址（vip地址）响应，
需要在真实服务器上修改内核参数
使真实服务器只对自己服务器上的真实IP地址响应ARP解析。

4.2 问题二：第二次再有访问请求

RealServer返回报文（源IP是VIP）经路由器转发，重新封装报文时，需要先获取路由器的MAC地址，发送ARP请求时，Linux默认使用IP包的源IP地址（即VIP）作为ARP请求包中的源IP地址，而不使用发送接口的IP地址，路由器收到ARP请求后，将更新ARP表项，原有的VIP对应Director的MAC地址会被更新为VIP对应RealServer的MAC地址。路由器根据ARP表项，会将新来的请求报文转发给RealServer，导致Director的VIP失效

解决方法：

对节点服务器进行处理，设置内核参数arp_announce=2：系统不使用IP包的源地址来设置ARP请求的源地址，而选择发送接口的IP地址

路由器上绑定了 真实服务器1的mac信息，
#请求到达真实服务器
在真实服务器上修改内核参数
只对所有服务器真实网卡上的地址进行反馈，解析

五、部署LVS-DR集群

主机IP地址
DR服务器192.168.61.44
web服务器192.168.61.22
web服务器192.168.61.33
vip（虚拟回环）192.168.61.45
客户端192.168.61.55

5.1配置负载调度器

192.168.61.44
虚拟vip:192.168.61.45

   1. #关闭防火墙
      systemctl stop firewalld.service
      setenforce 0
   2. #安装ipvsadm工具
      yum install ipvsadm.x86_64 -y
   3. #配置虚拟IP地址（VIP：192.168.61.44）
      cd /etc/sysconfig/network-scripts/
      cp ifcfg-ens33 ifcfg-ens33:0
      vim ifcfg-ens33:0
      #删除UUID，dns与网关，注意子网
      NAME=ens33:0
      DEVICE=ens33:0
      IPADDR=192.168.61.45
      NETMASK=255.255.255.255
   4. #重启网络服务、启动网卡
      systemctl restart network
      ifup ifcfg-ens33:0
   5. #调整/proc响应参数   
      #对于 DR 群集模式来说，由于 LVS 负载调度器和各节点需要共用 VIP 地址，应该关闭 Linux 内核的重定向参数响应服务器不是一台路由器，那么它不会发送重定向，所以可以关闭该功能
      vi /etc/sysctl.conf
      net.ipv4.ip_forward = 0
      net.ipv4.conf.all.send_redirects = 0
      net.ipv4.conf.default.send_redirects = 0
      net.ipv4.conf.ens33.send_redirects = 0
   6. #刷新配置
      sysctl -p
   7. #加载模块
      modprobe ip_vs
      cat /proc/net/ip_vs
   8. #配置负载分配策略，并启动服务
      ipvsadm-save >/etc/sysconfig/ipvsadm
      systemctl start ipvsadm.service
   9. #清空ipvsadm，并做策略
      ##添加真实服务器-a  指定VIP地址及TCP端口-t   指定RIP地址及TCP端口 -r 指定DR模式-g
      ipvsadm -C
      ipvsadm -A -t 192.168.61.45:80 -s rr
      ipvsadm -a -t 192.168.61.45:80 -r 192.168.61.22:80 -g
      ipvsadm -a -t 192.168.61.45:80 -r 192.168.61.33:80 -g
   10. #保存设置
       ipvsadm
       ipvsadm -ln
       ipvsadm-save >/etc/sysconfig/ipvsadm

关闭防火墙
在这里插入图片描述
安装ipvsadm工具
在这里插入图片描述
配置虚拟IP地址（VIP：192.168.61.45）
在这里插入图片描述

重启网络服务、启动网卡
在这里插入图片描述
调整/proc响应参数
在这里插入图片描述
刷新配置
在这里插入图片描述
加载模块
在这里插入图片描述
配置负载分配策略，并启动服务
在这里插入图片描述
清空ipvsadm，并做策略
在这里插入图片描述

保存设置
在这里插入图片描述

5.2 第一台Web节点服务器

192.168.61.22

1. #关闭防火墙
systemctl stop firewalld.service
setenforce 0
 
2. #安装httpd、开启服务
yum install httpd -y
systemctl start httpd
 
3. #创建一个站点文件
vim /var/www/html/index.html
this is 192.168.61.22
 
3. #添加回环网卡,修改回环网卡名，IP地址，子网掩码
cd /etc/sysconfig/network-scripts/
cp ifcfg-lo ifcfg-lo:0
vim ifcfg-lo:0
DEVICE=lo:0
IPADDR=192.168.61.45
NETMASK=255.255.255.255
NETWORK=127.0.0.0
 
systemctl restart network
 
 
4. #设置路由
route add -host 192.168.61.45 dev lo:0
route -n
 
5. #开机执行命令
vim /etc/rc.d/rc.local 
/usr/sbin/route add -host 192.168.61.45 dev lo:0
 
chmod +x /etc/rc.d/rc.local
 
6. #调整 proc 响应参数
#添加系统只响应目的IP为本地IP的ARP请求
#系统不使用原地址来设置ARP请求的源地址，而是物理mac地址上的IP
vim /etc/sysctl.conf
 
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
 
sysctl -p

关闭防火墙
在这里插入图片描述

安装httpd、开启服务
在这里插入图片描述
创建一个站点文件
在这里插入图片描述
添加回环网卡,修改回环网卡名，IP地址，子网掩码
在这里插入图片描述
设置路由
在这里插入图片描述

开机执行命令
在这里插入图片描述
在这里插入图片描述
调整 proc 响应参数
在这里插入图片描述

5.3 第二台Web节点服务器

192.168.61.33

1. #关闭防火墙
systemctl stop firewalld.service
setenforce 0
 
2. #安装httpd、开启服务
yum install httpd -y
systemctl start httpd
 
3. #创建一个站点文件
vim /var/www/html/index.html
this is 192.168.61.33
 
3. #添加回环网卡,修改回环网卡名，IP地址，子网掩码
cd /etc/sysconfig/network-scripts/
cp ifcfg-lo ifcfg-lo:0
vim ifcfg-lo:0
DEVICE=lo:0
IPADDR=192.168.61.45
NETMASK=255.255.255.255
NETWORK=127.0.0.0
 
systemctl restart network
 
 
4. #设置路由
route add -host 192.168.59.188 dev lo:0
route -n
 
5. #开机执行命令
vim /etc/rc.d/rc.local 
/usr/sbin/route add -host 192.168.59.188 dev lo:0
 
chmod +x /etc/rc.d/rc.local
 
6. #调整 proc 响应参数
#添加系统只响应目的IP为本地IP的ARP请求
#系统不使用原地址来设置ARP请求的源地址，而是物理mac地址上的IP
vim /etc/sysctl.conf
 
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
 
sysctl -p

关闭防火墙
在这里插入图片描述
安装httpd、开启服务
在这里插入图片描述
在这里插入图片描述

创建一个站点文件
在这里插入图片描述

添加回环网卡,修改回环网卡名，IP地址，子网掩码
在这里插入图片描述
在这里插入图片描述
设置路由
在这里插入图片描述

开机执行命令
在这里插入图片描述
调整 proc 响应参数
在这里插入图片描述

5.4 客户机测试（192.168.61.55）

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

【总结】

  1. arp_ignore=1
    防止网关路由发送ARP广播时调度调节器和节点服务器都进行响应，导致ARP缓存表紊乱，不对非本地物理网卡的ARP请求进行响应，因为vip时，承载lo:0
  2. arp_announce=2
    系统不使用响应数据的源IP地址（VIP）来作为本机进行ARP请求报文的源IP地址，而使用发送报文的物理网卡IP地址作为ARP请求报文的源IP地址，这样可以防止网关路由器接收到的源IP地址为VIP的ARP请求报文后又更新ARP缓存表，导致外网再发送请求时，数据包到达不了调度器
  3. ARP原理：
    在这里插入图片描述
Kiro君
关注
  • 9
    点赞
  • 踩
  • 44
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
lvs DR模式总结详细笔记文档
07-23
lvs DR模式总结详细笔记文档
LVS之DR模式（最常见的LVS负载方式，直接路由模式）
weixin_48145965的博客
10-23 1195
（1）暴露访问地址（2）调度器转发请求的标识（3）调度器和后端服务器之间通过VIP地址进行通信（4）高可用（基于DR模式）
Lvs DR 模式的配置与部属图文详解（通俗易懂，适合入门小白）
最新发布
weixin_66924350的博客
03-30 1799
大致过程：当cip向我们的负载均衡器发出请求时，此时的源iP是：cip，目标ip是vip，而由于我们的vip在lvs机器和后面两台real-server机器上面都有，但是我们并不能让请求发到后面两台real-server上面，否则负载均衡就毫无意义，因此要让real-server忽略arp响应，不允许收关于目标地址是vip的数据包，但是可以让real-server上的vip将数据包转发出去。上面的IP也就是我们配置的vip：192.168.23.147，广播地址和掩码也都是我们指定的。
LVS-DR模式
DoloresOOO的博客
08-23 591
LVS-DR模式 环境： OS hostname IP centos7 balancer 192.168.100.10VIP:192.168.100.11 centos7 server1 192.168.100.20 centos7 server2 192.168.100.30 通过直接路由实现虚拟服务器(VS/DR) VS/DR的体系结构如图所示：调度器和服务器组都...
LVS负载均衡集群--DR模式
weixin_69148277的博客
05-03 915
LVS负载均衡集群--DR模式
LVS 负载均衡-DR模式
m0_75067030的博客
03-13 1202
直接路由（Direct Routing）：简称 DR 模式，采用半开放式的网络结构，与 TUN 模式的结构类似，但各节点并不是分散在各地，而是与调度器位于同一个物理网络。负载调度器与各节点服务器通过本地，不需要建立专用的 IP 隧道。直接路由，默认模式,应用最广泛,通过请求报文重新封装一个MAC首部进行转发，源MAC是DIP所在的接口的MAC，目标MAC是某挑选出的RS的RIP所在接口的MAC地址；源IP/PORT，以及目标IP/PORT均保持不变。
LVS负载均衡模式的DR模式
qq_52825616的博客
05-17 1523
目录 一、DR模式的概念 1、DR模式的工作原理 2、DR模式中的名词解释 3、NAT模式和DR模式的区别 二、部署DR模式 1、环境配置 2、配置nfs服务器 3、配置web1服务器 4、配置web2服务器 5、配置负载调度器 6、测试效果 一、DR模式的概念 1、DR模式的工作原理 （1）客户端发送请求至调度器（VIP），请求报文源地址是CIP，目标地址为VIP； （2）LVS调度器接收到请求，报文在PREROUTING链检查，确定目的IP是本机，于是将报文发送至INPUT链
lvs之DR模式
哼哈国王
09-28 2170
介绍： lvs即是linux虚拟服务器，是一个虚拟的服务器集群系统 特点：很好的伸缩性，很好的可靠性，很好的可管理性四种模式： VS/NAT：通过网络地址转换将一组服务器构成一个高性能，高可用的虚拟服务器 VS/DR：通过直接路由实现虚拟服务 VS/TUN：通过ip隧道实现虚拟服务器 还有二度开发的第四种模式(FULL NAT) DR模式的简单原理： 客户端向目标vip发出请求,lvs...
LVS模式一：DR模式（ipvsadm）
hetoto的博客
05-25 953
负载均衡（Load Balance 简称LB）分为硬件负载均衡和软件负载均衡 硬件负载均衡：F5：太贵 软件负载均衡： lvs（4层）： haproxy nginx （七层） httpd(proxy balance) varnish lvs 基础知识 lvs指的是Linux虚拟服务器，是一个虚拟的服务器集群系统。其主要用于多服务器的负载均衡。 优点： 廉价，可把许多低性能的服务器组合在一起形...
负载均衡 ---- DR模式
longtiandao的博客
10-26 1907
负载均衡 ---- DR模式 负载均衡中的DR模式 直接路由（Direct Routing）简称 DR模式；采用半开放式的网络结构，与TUN模式的结构类似，但各节点并不是分散在各地，而是与调度器位于同一物理网络；负载调度器与各节点服务器通过本地网络连接，不需要建立专用的IP隧道。 LVS-DR中存在的ARP问题 在LVS-DR负载均衡集群中，负载均衡器与节点服务器都要配置相同的VIP地址 在局域网中具有相同的IP地址，势必会造成各服务器ARP通信的紊乱 当一个ARP广播发送到LVS-DR集群时，因为负载均
使用Lvs DR模式实现负载均衡
小武-php之家
09-17 1250
LVS是Linux Virtual Server的简写，意即Linux虚拟服务器，适应LVS可以构建高性能的负载均衡系统，LVS有三种模式即：LVS/NAT（网络地址转换）、LVS/TUN（IP隧道）、LVS/DR（直接路由），通常用的是DR模式，下面介绍一下DR模式的配置方式。     假设测试环境：使用虚拟IP192.168.1.243，调度机的IP地址是192.168.1.245，两台真实
LVS负载均衡DR模式安装调试介绍.pptx
10-20
**LVS负载均衡DR模式详解** LVS（Linux Virtual Server）是基于Linux内核的高性能负载均衡解决方案，它能够将网络请求分发到多个后端服务器，以实现高可用性和可扩展性。DR（Direct Routing）模式是LVS中的一种工作...
LVS负载均衡_NET模式.txt
06-14
真实服务器响应完请求后，查看默认路由（NAT模式下我们需要把RS的默认路由设置为LB服务器。）把响应后的数据包发送给LB,LB再接收到响应包后，把包的源地址改成虚拟地址（VIP）然后发送回给客户端。
Linux&&LVS负载均衡群集
01-09
Linux&&LVS负载均衡群集概念群集的类型负载均衡的分层结构负载均衡的工作模式环境部署（NAT模式）负载调度器部署启动ip_vs模块LVS的负载调度算法使用ipvsadm管理工具NFS共享存储服务使用NFS发布共享资源在客户机中...
lvs负载均衡集群实验.docx
03-18
lvs负载均衡集群实验 lvs负载均衡集群是基于Linux操作系统的高可用性集群解决方案，通过将多个Real Server集成到一个虚拟的IP地址（Virtual IP，VIP）上，来实现对外提供服务的目的。下面将对lvs负载均衡集群的实验...
第三讲LVS负载均衡DR模式安装调试介绍.pptx
08-23
第三讲LVS负载均衡DR模式安装调试介绍.pptx
手把手教你用LVS-DR模式搭建Nginx集群
zhiboqingyun的博客
09-04 1280
手把手教你用LVS-DR模式搭建Nginx集群
LVS负载均衡-DR模型服务器搭建
weixin_38110854的博客
07-13 633
一、业务场景 将192.168.255.170：80负载均衡到子服务器。 使用VMware创建3台centos7服务器。 注意： 1.我虚拟机路由的网关为：192.168.255.2，所以采用192.168.255.170做实践。根据自己实际情况修改就可以。 2.验证时候，注意关闭防火墙，负载均衡服务器和业务服务器都需要主要防火墙策略问题。云服务器，需要设置安全组。 二、配置流程 2.1 DR负载均衡服务器（简称nod...
LVS负载均衡的三种模式的特点和区别
06-09
LVS（Linux Virtual Server）是一种开源的高性能、高可用性的负载均衡解决方案。它支持三种负载均衡模式： 1. NAT 模式：客户端请求经过 LVS 负载均衡集群后，LVS 负载均衡器对请求进行转换，将客户端请求的源地址替换为 LVS 负载均衡器的 IP 地址，再将请求转发给后端的服务器。这种模式适合于需要保护后端服务器不被直接暴露在公网中的场景。 2. DR 模式：客户端请求经过 LVS 负载均衡集群后，LVS 负载均衡器仅对请求进行目的地址的转发，不对源地址进行修改，请求直接到达后端服务器。这种模式适合于后端服务器在同一子网内的场景。 3. TUN 模式：客户端请求经过 LVS 负载均衡集群后，LVS 负载均衡器对请求进行转换，将客户端请求的源地址和目的地址都进行修改，再将请求转发给后端的服务器。这种模式适合于后端服务器在不同子网内的场景。 总的来说，NAT 模式适用于需要保护后端服务器的场景；DR 模式适用于后端服务器在同一子网内的场景；TUN 模式适用于后端服务器在不同子网内的场景。同时，DR 模式和 TUN 模式相比，可以减少 LVS 负载均衡器的负载和网络开销，因此在高并发的场景中更加适用。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值