集群二---LVS负载均衡群集DR模式及部署

已于 2022-06-27 23:07:30 修改
阅读量180 收藏 1
点赞数
文章标签： 负载均衡 网络 网络协议
于 2022-06-20 01:14:33 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/fyr1018/article/details/124763744
版权

文章目录

1 数据包流向分析

  • 客户端发送请求到 Director Server（负载均衡器），请求的数据报文（源 IP 是 CIP，目标 IP 是VIP）到达内核空间。
  • Director Server 和 Real Server 在同一个网络中，数据通过二层数据链路层来传输。
  • 内核空间判断数据包的目标 IP 是本机 VIP，此时 IPVS（IP 虚拟服务器）比对数据包请求的服务是否是集群服务，是集群服务就重新封装数据包。
    修改源 MAC 地址为 Director Server 的 MAC 地址，修改目标 MAC 地址为 Real Server 的 MAC 地址，源 IP 地址与目标 IP 地址没有改变，然后将数据包发送给 Real Server。
  • 到达 Real Server 的请求报文的 MAC 地址是自 身的 MAC 地址，就接收此报文。数据包重新封装报文（源 IP 地址为 VIP，目标 IP 为 CIP），将响应报文通过 lo。接口传送给物理网卡然后向外发出。
  • Real Server 直接将响应报文传送到客户端。

在这里插入图片描述

2 DR 模式的特点

  • Director Server 和 Real Server 必须在同一个物理网络中。
  • Real Server 可以使用私有地址，也可以使用公网地址。如果使用公网地址，可以通过互联网对 RIP 进行直接访问。
  • Director Server 作为群集的访问入口，但不作为网关使用。
  • 所有的请求报文经由 Director Server，但回复响应报文不能经过 Director Server。
  • Real Server 的网关不允许指向 Director Server IP，即 Real Server 发送的数据包不允许经过 Director Server。
  • Real Server 上的 lo 接口配置 VIP 的 IP 地址。

3 LVS-DR 中的 ARP 问题

3.1 IP 地址冲突

在 LVS-DR 负载均衡集群中，负载均衡器与节点服务器都要配置相同的 VIP 地址，在局域网中具有相同的 IP 地址。在局域网中具有相同的地址，势必会造成各服务器 ARP 通信的紊乱

当 ARP 广播发送到 LVS-DR 集群时，因为负载均衡器和节点服务器都是连接到相同的网络上，它们都会接收到 ARP 广播
只有前端的负载均衡器器进行响应，其他节点服务器不应该响应 ARP 广播
解决办法
对节点服务器进行处理，使其不响应VIP的ARP请求

  • 使用虚接口 lo:0 承载 VIP 地址
  • 设置内核参数 arp_ ignore=1: 系统只响应目的 IP 为本地 IP 的 ARP 请求
    设置完后节点服务器则不会去响应 ARP 广播，而调度器则仍然会响应 ARP 所以只能解析到调度器的 MAC 地址

3.2 路由根据 ARP 表项，会将新来的请求报文转发给 RealServer，导致 Director 的VIP失效

默认情况下要发送返回的数据包时向网关发送 ARP 请求报文的源地址与发送的返回报文源地址是一样的 VIP
这种情况下会导致网关设备的ARP缓存表中的 VIP 与 MAC 地址的对应发生紊乱

RealServer 返回报文（源 IP 是 VIP）经路由器转发，重新封装报文时，需要先获取路由器的 MAC 地址，发送 ARP 请求时，Linux 默认使用 IP 包的源 IP 地址（即 VIP）作为 ARP 请求包中的源 IP 地址，而不使用发送接口的 IP 地址，
路由器收到 ARP 请求后，将更新 ARP 表项，原有的 VIP 对应 Director 的 MAC 地址会被更新为 VIP 对应 RealServer 的 MAC 地址。

路由器根据 ARP 表项，会将新来的请求报文转发给 RealServer，导致 Director 的 VIP 失效
解决方法
对节点服务器进行处理

  • 设置内核参数 arp_announce=2
  • 系统不使用 IP 包的源地址来设置 ARP 请求的源地址，而选择发送接口的 IP 地址

3.3 两个问题的设置方法

修改/etc/sysctl.conf文件

节点服务器在lo：0虚接口上承载VIP地址
net.ipv4.conf.lo.arp_ignore = 1		  #使本机系统只响应目的IP为本地物理网卡IP的ARP请求
net.ipv4.conf.lo.arp_announce = 2     #本机系统不使用返回数据包的源地址作为ARP请求报文的源地址，而采用发送接口的IP作为ARP请求报文源地址
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2

4 DR 模式 LVS 负载均衡群集部署

DR 负载调度服务器：192.168.16.16
NFS服务器：192.168.16.18
web1服务器192.168.16.20
web2服务器192.168.16.22
VIP：192.168.16.24
客户端：192.168.16.100

4.1 配置 DR 负载调度器（192.168.16.16）

#关闭防火墙与selinux，下载ipvsadm
systemctl stop firewalld
systemctl disable firewalld
setenforce 0

modprobe ip_vs
cat /proc/net/ip_vs
yum install ipvsadm -y

在这里插入图片描述

4.1.1 配置虚拟 VIP 地址

cd /etc/sysconfig/network-scripts
cp ifcfg-ens33 ifcfg-ens33:0   #若隧道模式，复制为ifcfg-tun10
vim ifcfg-ens33:0 
 
DEVICE=ens33:0
ONBOOT=yes
IPADDR=192.168.16.24
NETMASK=255.255.255.0
#GATEWAY=192.168.16.2
#DNS1=8.8.8.8

#重启网卡
ifup ifcfg-ens33:0

在这里插入图片描述

4.1.2 调整 proc 响应参数

#由于LVS负载调度器和各节点需要共用VIP地址，需要关闭icmp的重定向，不充当路由器。
vim /etc/sysctl.conf 
 
net.ipv4.ip_forward = 0
net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0

sysctl -p  #刷新配置

#加载模块
modprobe ip_vs
cat /proc/net/ip_vs

在这里插入图片描述

4.1.3 配置负载分配策略，启动服务

ipvsadm-save >/etc/sysconfig/ipvsadm
systemctl start ipvsadm

ipvsadm -C     #清空ipvsadm

#添加策略
ipvsadm -A -t 192.168.16.24:80 -s rr
ipvsadm -a -t 192.168.16.24:80 -r 192.168.16.20:80 -g
ipvsadm -a -t 192.168.16.24:80 -r 192.168.16.22:80 -g

ipvsadm   #查看配置
ipvsadm -ln     #查看节点状态，Route代表DR模式

在这里插入图片描述

4.2 部署共享存储（NFS 服务器：192.168.16.18）

systemctl stop firewalld
systemctl disable firewalld
setenforce 0

yum -y install nfs-utils rpcbind

mkdir /opt/kgc
mkdir /opt/roro

#设置权限
chmod 777 /opt/kgc
chmod 777 /opt/roro

vim /etc/exports   #设置共享策略
/opt/kgc 192.168.16.0/24(rw,sync,no_root_squash)
/opt/roro 192.168.16.0/24(rw,sync,no_root_squash)

# 开启服务发布共享
systemctl start rpcbind
systemctl start nfs
systemctl enable nfs
systemctl enable rpcbind
exportfs -rv   #发布共享

在这里插入图片描述

4.3 配置节点服务器（192.168.16.20、192.168.16.22）

#关闭防火墙
systemctl stop firewalld
systemctl disable firewalld
setenforce 0

showmount -e 192.168.16.18  #查看nfs服务器的共享目录列表

在这里插入图片描述

4.3.1 配置虚拟 VIP 地址

#此地址仅用作发送Web响应数据包的源地址，并不需要监听客户机的访问请求（改由调度器监听并分发）。
#因此使用虚接口lo:0来承载VIP地址，并为本机添加一条路由记录，将访问VIP的数据限制在本地，以避免通信紊乱。
cd /etc/sysconfig/network-scripts
cp ifcfg-lo ifcfg-lo:0
vim ifcfg-lo:0 
 
DEVICE=lo:0
ONBOOT=yes
IPADDR=192.168.16.24
NETMASK=255.255.255.255  #注意，子网掩码必须全为1
#GATEWAY=192.168.16.2
#DNS1=8.8.8.8

#重启网卡
ifup lo:0
ifconfig lo:0
route add -host 192.168.16.24 dev lo:0     #设置路由
route -n  

#开机执行命令
vim /etc/rc.d/rc.local 
 
/usr/sbin/route add -host 192.168.16.24 dev lo:0

chmod +x /etc/rc.d/rc.local

在这里插入图片描述

4.3.2 调整内核的 ARP 响应参数以阻止更新 VIP 的 MAC 地址，避免发生冲突

vim /etc/sysctl.conf
......
net.ipv4.conf.lo.arp_ignore = 1   #系统只响应目的IP为本地IP的ARP请求
net.ipv4.conf.lo.arp_announce = 2  #系统不使用IP包的源地址来设置ARP请求的源地址，而选择发送接口的IP地址
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2

sysctl -p
或者
echo "1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/lo/arp_announce
echo "1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo "2" >/proc/sys/net/ipv4/conf/all/arp_announce

sysctl -p

在这里插入图片描述

yum install nfs-utils rpcbind httpd -y  #安装服务

systemctl start rpcbind
systemctl start httpd

以上部分节点2和节点1相同
--192.168.16.20---
mount.nfs 192.168.16.18:/opt/kgc /var/www/html
echo 'this is kgc web!' > /var/www/html/index.html

--192.168.16.22--
mount.nfs 192.168.16.18:/opt/roro /var/www/html
echo 'this is roro web!' > /var/www/html/index.html

重启服务并输入IP地址查看
systemctl restart httpd

在这里插入图片描述
Web1服务器测试
在这里插入图片描述
Web2服务器测试
在这里插入图片描述

4.4 测试 LVS 群集

在客户端使用浏览器访问 http://192.168.16.24
在这里插入图片描述
在这里插入图片描述

FYR@
关注
LVS介绍与相应部署
m0_72898391的博客
09-28 1502
LVS介绍与部署
LVS几种模式的部署
sjc090132的博客
09-13 719
LVS几种集群
LVS负载均衡集群--DR模式部署
qq_44363920的博客
06-09 279
director分配请求到不同的real server，real server处理请求后直接回应给用户，这样director负载均衡器仅处理客户机与服务器的一半连接。避免了新的性能瓶颈，同样增加了系统的可伸缩性。Direct Routing由于采用物理层（修改MAC地址）技术，因此所有服务器都必须在一个网段中。......
LVS原理详解及实战部署
最新发布
mys050229的博客
08-12 1062
LVS(Linux Virtual Server)是一种基于Linux的高性能虚拟服务器集群系统，主要用于实现负载均衡。LVS通过Linux内核中的IPVS模块实现了基干!P负载均衡的功能，能够将来自网络的请求分配给后端的多个服务器，从而提供高可用性和伸缩性。这种技术在处理大规模网络请求时尤其有用，例如大型网站和在线服务，能够有效防止单点故障并提升服务的可靠性和性能。LVS的工作原理可以简要概括为“请求分发"和“响应返回”两个主要环节。
LVS负载均衡集群概念
m0_53432902的博客
04-25 183
LVS负载均衡集群概念 一、群集的含义 集群、群集 由多台主机构成，但对外，只表现为一个整体，只提供一个访问入口（域名或IP），相当于一台大型计算机。 1、群集存在的必要 互联网应用中，随着站点对硬件性能、响应速度、服务稳定性、数据可靠性等要求越来越高，单台服务器无法满足负载均衡及高可用的需求。 2、解决方法 1、使用价格昂贵的小型机、大型机。 2、使用多台相对廉价的普通服务器构建服务群集。 通过整合多台服务器，使用LVS来达到服务器高可用和负载均衡，并于同一个IP地址对外提供相同服务。 这就是企业中常用的
LVS-NAT模式部署
weixin_42508243的博客
08-23 222
部署LVS-NAT模式
构建 LVS 负载均衡群集--直接路由模式（LVS-DR）
Xucf1
01-21 733
文章目录一、LVS-DR 数据包流向分析二、LVS-DR 中的 ARP 问题三、LVS 负载均衡群集-DR模式1.数据包流量分析2.DR 模式的特点四、部署 LVS-DR 负载均衡集群1.概述2.环境3.配置负载调度器4.部署 NFS 共享挂载5.配置节点服务器6.测试 LVS 群集 一、LVS-DR 数据包流向分析 为方便进行原理分析，将 Client 与群集机器放在同一网络中，数据包流经的路线为 1-2-3-4 Client 向目标 VIP 发出请求，Director（负载均衡器）接收 此
LVS负载均衡集群--DR模式
weixin_67582338的博客
06-09 261
目录引言：一.LVS-DR工作原理二.数据流向2.1 数据流向2.2 ARP解析问题三.DR模式LVS负载均衡群集部署3.1部署共享存储（NFS服务器）3.2配置负载调度器（192.168.10.13）3.3 配置节点服务器（192.168.10.19、192.168.10.16）3.3.1 web1（192.168.10.19）3.3.2 web2 （192.168.10.16）3.4 测试 LVS 群集因为NAT模式在高并发时表现不好、TUN模式需要大量公网IP地址且需要IP隧道，所以在实际生产中我们常
LVS负载均衡群集DR模式
.銀河狙擊手的博客
01-19 144
文章目录LVS负载均衡群集DR模式一.LVS-DR集群介绍1.LVS-DR 工作原理2. 数据包流向分析3.LVS-DR 模式的特点4.LVS-DR中的ARP问题二.构建LVS-DR集群(1)构建LVS-DR集群的步骤（理论）(2)构建LVS-DR集群操作的具体步骤（实操） LVS负载均衡群集DR模式 一.LVS-DR集群介绍 LVS-DR（Linux Virtual Server Director Server）工作模式，是生产环境中最常用的一 种工作模式。 1.LVS-DR 工作原理 LVS-DR
如何部署LVS负载均衡集群（NAT模式）
Liu_Fang_Hong的博客
07-05 3691
集群是由多台主机沟工程，但是对外只表现为一个整体，只提供一个访问入口（域名或者IP地址）普通的服务器构建服务器集群通过整合多台服务器，使用LVS来达到服务器的高可用和负载均衡，并以同一个IP地址对外提供相同的服务，常用的一种群集技术LVS（Linux虚拟服务器，Linux Virtual Server）
第三十二章：Lvs负载均衡群集1
08-08
【第三十二章：Lvs负载均衡群集1】 在IT领域，LVS（Linux Virtual Server）是一种高效且稳定的负载均衡解决方案，由中国章文嵩博士在1998年开发。LVS默认集成在Linux内核中，以ip_vs内核模块的形式存在。它通过将...
Lvs_TUN模式的搭建部署
wangkana的博客
08-19 631
一、实验原理 二、实验部署 （1）实验环境 这里所有的主机都是rhel6.5，且selinux的状态为disabled，防火墙都是关闭状态； server4 分发器 server4: [root@server4 ~]# ipvsadm -A -t 172.25.45.100 -s rr [root@server4 ~]# ipvsadm -a -t 172.25.45.10...
lvs群集与部署LVS-NAT模式
qq_60654159的博客
11-23 2337
群集技术，就像冗余部件可以使你免于硬件故障一样，群集技术则可以使你免于整个系统的瘫痪以及操作系统和应用层次的故障。一台服务器集群包含多台拥有共享数据存储空间的服务器，各服务器之间通过内部局域网进行互相连接；当其中一台服务器发生故障时，它所运行的应用程序将被与之相连的服务器自动接管；在大多数情况下，集群中所有的计算机都拥有一个共同的名称，集群系统内任意一台服务器都可被所有的网络用户所使用。
Linux服务篇之远程访问及控制SSH
FYR1018的博客
03-25 3632
文章目录1 SSH远程管理1.1 ssh概念1.2 SSH优点1.3 常见的ssh协议1.4 ssh原理1.4.1 登录2. 配置OpenSSH服务端2.1 sshd服务支持登录验证方式2.1.1 密码验证2.1.2 密钥对验证2.2 密钥常用配置项2.3 使用SSH客户端程序2.3.1 SSH远程登录3 TCP Wrappers访问控制3.1 TCP Wrappers概述3.2 OTCP Wrappers访问策略 1 SSH远程管理1.1 ssh概念SSH（Secure Shell）是一种安全通道协
LVS负载均衡（三种工作模式，调度算法，NAT与DR模式配置）
m0_67758799的博客
08-15 1412
LVS负载均衡（三种工作模式，调度算法，NAT与DR模式配置）
Linux服务篇之DNS域名解析服务
FYR1018的博客
03-23 7186
1 域名系统---DNS1.1 DNS使用的协议及端口号1.2 DNS系统的分布式数据结构1.3 DNS系统的作用及类型1.4 域名解析查询过程1.5 两种查询方式2 BIND的安装和配置文件2.1 BIND的软件包2.2 BIND主配置文件---named.conf2.3 修改主要配置文件2.4 修改区域配置文件，添加正向区域配置2.5 配置正向区域数据文件2.6 启动服务，关闭防火墙2.7 在客户端的域名解析配置文件中添加DNS服务器地址2.8 测试DNS解析2.9 正向解
LVS DR模式原理及配置详解。
热门推荐
张必安的博客
05-02 1万+
LVS DR简单原理客户端向目标vip发出请求,lvs接收 ，LVS根据负载均衡算法选择一台活跃的的节点，将此节点的ip所在网卡的mac地址作为目标mac地址,发送到局域网里节点在局域网中收到这个帧,拆开后发现目标IP(VIP)与本地匹配,于是处理这个报文.随后重新封装报文,发送到局域网.此时IP包的目标ip是客户端，源ip是自己的vip地址。DR模式小结：1、通过在调度器LB上修改数据包的目的M...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值