部署LVS-DR群集

已于 2022-09-07 18:20:06 修改
阅读量129 收藏
点赞数
分类专栏： LVS 文章标签： lvs 负载均衡 数据库
于 2022-09-07 18:16:52 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_44239779/article/details/126744080
版权

引言

互联网应用中，随着站点对硬件性能、响应速度、服务稳定性、数据可靠性等要求越来越高，单台服务器已经无法满足负载均衡及高可用的要求，可添加多台服务器，使用多台服务器同时为用户提供服务，而这一种解决方法称为横向扩展或向外扩展。负载均衡群集应运而生。LVS-DR群集被大量企业部署使用。

目录

引言

一、LVS-DR 工作原理

1、LVS-DR原理

2、LVS-DR数据包流量分析

2.1数据包走向图

3、LVS-DR 模式的特点

二、ARP问题

1 、第一次访问完整（不考虑实际问题）

2、问题一：IP 地址冲突

3、问题二 第二次再有访问请求

 三、部署LVS-DR集群

 1、配置负载调度器

 （1）关闭防火墙

(2) 安装ipvsadm工具

 (3) 配置虚拟IP地址（VIP：192.168.154.19）

​编辑 (4)重启网络服务、启动网卡

(5)调整/proc响应参数   

(6) 刷新配置

(7)加载模块

 (8)配置负载分配策略，并启动服务

 (9)清空ipvsadm，并做策略

(10) 保存设置

2、第一台Web节点服务器

（1）关闭防火墙

 （2）安装httpd、开启服务

​编辑 （3）创建一个站点文件

 （4）添加回环网卡,修改回环网卡名，IP地址，子网掩码

（5）设置路由

 （6）开机执行命令

（7）调整 proc 响应参数

3、第二台web主机节点服务器

（1）关闭防火墙

 （2）安装httpd、开启服务

 （3）创建一个站点文件

 （4）添加回环网卡,修改回环网卡名，IP地址，子网掩码

（5）设置路由

（6）开机执行命令

​编辑

（7）调整 proc 响应参数

 4、部署共享存储

（1）关闭防火墙关闭增强功能

（2）安装软件包

 （3）创建共享目录并授权

（4）编辑NFS配置文件

（5）重启服务

5、在客户机测试（192.168.154.100）

（1）打开window机器配置为192.168.154.100打开命令控制符 

 （2）打开浏览器搜索192.168.154.19

一、LVS-DR 工作原理

LVS-DR（Linux Virtual Server Director Server）工作模式，是生产环境中最常用的一 种工作模式。

1、LVS-DR原理

1.1工作原理图

1.2工作原理 

(1)LVS-DR 模式，Director Server 作为群集的访问入口，不作为网关使用

(2)节点 Director Server 与 Real Server 需要在同一个网络中，返回给客户端的数据不需要经过 Director Server

(3)为了响应对整个群集的访问，Director Server 与 Real Server 都需要配置 VIP 地址。

(4)客户机发起请求，经过调度服务器（lvs），经过算法调度，去访问真实服务器（RS）

(5)由于不原路返回，客户机不知道，真实主机的ip地址，所以只能通过调度服务器的外网ip（vip）去反回报文信息

2、LVS-DR数据包流量分析

2.1数据包走向图

2.2 数据包流向分析 

(1)客户端发送请求到 Director Server(负载均衡器)，请求的数据报文(源IP是CIP,目标IP 是 VIP)到达内核空间。

(2)Director Server 和Real Server 在同一个网络中，数据通过二层数据链路层来传输。
内核空间判断数据包的目标IP是本机VIP，此时IPVS(IP虚拟服务器)比对数据包请求的服务是否是集群服务，是集群服务就重新封装数据包。修改源 MAC 地址为 Director Server的 MAC地址，修改目标 MAC 地址为Real Server的 MAC地址，源 IP 地址与目标 IP 地址没有改变，然后将数据包发送给 Real Server.

(3)到达Real Server的请求报文的 MAC 地址是自身的MAC 地址，接收此报文。数据包重新封装报文(源IP 地址为 VIP，目标IP为CIP)，将响应报文通过lo接口传送给物理网卡然后向外发出。 

(4)Real Server直接将响应报文传送到客户端。

3、LVS-DR 模式的特点

（1）Director Server 和 Real Server 必须在同一个物理网络中。

（2）Real Server 可以使用私有地址，也可以使用公网地址。如果使用公网地址，可以通过 互联           网对 RIP 进行直接访问。

（3）所有的请求报文经由 Director Server，但回复响应报文不能经过 Director Server。

（4）Real Server 的网关不允许指向 Director Server IP，即不允许数据包经过 Director S erver。

（5）Real Server 上的 lo 接口配置 VIP 的 IP 地址。

二、ARP问题

1 、第一次访问完整（不考虑实际问题）

客户端---->外网地址12.0.0.188      12.0.0.188---->客户端 
#12.0.0.18-----客户端   客户端会直接丢弃
对每台真实服务器配置外网地址 12.0.0.188
12.0.0.188------>客户端

2、问题一：IP 地址冲突

在LVS-DR负载均衡集群中，负载均衡器与节点服务器都要配置相同的VIP地址，在局域网中具有相同的IP地 址。势必会造成各服务器ARP通信的紊乱  

问题：    

当ARP广播发送到LVS-DR集群时，因为负载均衡器和节点服务器都是连接到相同的网络上，它们都会接收到ARP广播

只有前端的负载均衡器进行响应，其他节点服务器不应该响应ARP广播

解决方法：

对节点服务器进行处理，使其不响应针对VIP的ARP请求
 
用虚接口lo:0承载VIP地址
 
设置内核参数arp_ ignore=1: 系统只响应目的IP为本地IP的ARP请求
路由器发送ARP请求（广播）
ARP---->广播去找ip地址解析成mac地址
默认使用调度服务器上的外网地址（vip地址）响应，
需要在真实服务器上修改内核参数
使真实服务器只对自己服务器上的真实IP地址响应ARP解析。

3、问题二 第二次再有访问请求

问题：

RealServer返回报文（源IP是VIP）经路由器转发，重新封装报文时，
需要先获取路由器的MAC地址，发送ARP请求时，Linux默认使用IP包
的源IP地址（即VIP）作为ARP请求包中的源IP地址，而不使用发送接
口的IP地址，路由器收到ARP请求后，将更新ARP表项，原有的VIP对
应Director的MAC地址会被更新为VIP对应RealServer的MAC地址。
路由器根据ARP表项，会将新来的请求报文转发给RealServer，
导致Director的VIP失效

解决方法：

路由器上绑定了 真实服务器1的mac信息，
#请求到达真实服务器
在真实服务器上修改内核参数
只对所有服务器真实网卡上的地址进行反馈，解析

 三、部署LVS-DR集群

#环境简介
DR 服务器：192.168.154.16
web 服务器1：192.168.154.20
web 服务器2：192.168.154.21
vip（虚拟回环）：192.168.154.19
客户端：192.168.154.100

 1、配置负载调度器

1. #关闭防火墙
systemctl stop firewalld.service
setenforce 0
 
2. #安装ipvsadm工具
yum install ipvsadm.x86_64 -y
 
3. #配置虚拟IP地址（VIP：192.168.154.19）
cd /etc/sysconfig/network-scripts/
cp ifcfg-ens33 ifcfg-ens33:0
vim ifcfg-ens33:0
#删除UUID，dns与网关，注意子网
NAME=ens33:0
DEVICE=ens33:0
IPADDR=192.168.154.19
NETMASK=255.255.255.255
 
4. #重启网络服务、启动网卡
systemctl restart network
ifup ifcfg-ens33:0
 
5. #调整/proc响应参数   
   #对于 DR 群集模式来说，由于 LVS 负载调度器和各节点需要共用 VIP 地址，应该关闭 Linux 内核的重定向参数响应服务器不是一台路由器，那么它不会发送重定向，所以可以关闭该功能
vi /etc/sysctl.conf
net.ipv4.ip_forward = 0
net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0
 
6. #刷新配置
sysctl -p
 
7. #加载模块
modprobe ip_vs
cat /proc/net/ip_vs
 
8. #配置负载分配策略，并启动服务
ipvsadm-save >/etc/sysconfig/ipvsadm
systemctl start ipvsadm.service
 
9. #清空ipvsadm，并做策略
##添加真实服务器-a  指定VIP地址及TCP端口-t   指定RIP地址及TCP端口 -r 指定DR模式-g
ipvsadm -C
ipvsadm -A -t 192.168.154.19:80 -s rr
ipvsadm -a -t 192.168.154.19:80 -r 192.168.154.20:80 -g
ipvsadm -a -t 192.168.154.19:80 -r 192.168.154.21:80 -g
 
10. #保存设置
ipvsadm
ipvsadm -ln
ipvsadm-save >/etc/sysconfig/ipvsadm

 （1）关闭防火墙

(2) 安装ipvsadm工具

 (3) 配置虚拟IP地址（VIP：192.168.154.19）

 (4)重启网络服务、启动网卡

(5)调整/proc响应参数   

对于 DR 群集模式来说，由于 LVS 负载调度器和各节点需要共用 VIP 地址，应该关闭 Linux 内核的重定向参数响应服务器不是一台路由器，那么它不会发送重定向，所以可以关闭该功能

Vim /etc/sysctl.conf

(6) 刷新配置

(7)加载模块

 (8)配置负载分配策略，并启动服务

 (9)清空ipvsadm，并做策略

##添加真实服务器-a  指定VIP地址及TCP端口-t   指定RIP地址及TCP端口 -r 指定DR模式-g

(10) 保存设置

2、第一台Web节点服务器

1. #关闭防火墙
systemctl stop firewalld.service
setenforce 0
 
2. #安装httpd、开启服务
yum install httpd -y
systemctl start httpd
 
3. #创建一个站点文件
vim /var/www/html/index.html
this is web20
 
4. #添加回环网卡,修改回环网卡名，IP地址，子网掩码
cd /etc/sysconfig/network-scripts/
cp ifcfg-lo ifcfg-lo:0
vim ifcfg-lo:0
DEVICE=lo:0
IPADDR=192.168.154.19
NETMASK=255.255.255.255
NETWORK=127.0.0.0
 
systemctl restart network
 
 
5. #设置路由
route add -host 192.168.154.19 dev lo:0
route -n
 
6. #开机执行命令
vim /etc/rc.d/rc.local 
/usr/sbin/route add -host 192.168.154.19 dev lo:0
 
chmod +x /etc/rc.d/rc.local
 
7. #调整 proc 响应参数
#添加系统只响应目的IP为本地IP的ARP请求
#系统不使用原地址来设置ARP请求的源地址，而是物理mac地址上的IP
vim /etc/sysctl.conf
 
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
 
sysctl -p

（1）关闭防火墙

 （2）安装httpd、开启服务

 （3）创建一个站点文件

 （4）添加回环网卡,修改回环网卡名，IP地址，子网掩码

cd /etc/sysconfig/network-scripts/
cp ifcfg-lo ifcfg-lo:0
vim ifcfg-lo:0

 systemctl restart network 

（5）设置路由

 （6）开机执行命令

vim /etc/rc.d/rc.local 

chmod +x /etc/rc.d/rc.local

（7）调整 proc 响应参数

vim /etc/sysctl.conf

3、第二台web主机节点服务器

1. #关闭防火墙
systemctl stop firewalld.service
setenforce 0
 
2. #安装httpd、开启服务
yum install httpd -y
systemctl start httpd
 
3. #创建一个站点文件
vim /var/www/html/index.html
this is web21
 
4. #添加回环网卡,修改回环网卡名，IP地址，子网掩码
cd /etc/sysconfig/network-scripts/
cp ifcfg-lo ifcfg-lo:0
vim ifcfg-lo:0
DEVICE=lo:0
IPADDR=192.168.154.19
NETMASK=255.255.255.255
NETWORK=127.0.0.0
 
systemctl restart network
 
 
5. #设置路由
route add -host 192.168.154.19 dev lo:0
route -n
 
6. #开机执行命令
vim /etc/rc.d/rc.local 
/usr/sbin/route add -host 192.168.154.19 dev lo:0
 
chmod +x /etc/rc.d/rc.local
 
7. #调整 proc 响应参数
#添加系统只响应目的IP为本地IP的ARP请求
#系统不使用原地址来设置ARP请求的源地址，而是物理mac地址上的IP
vim /etc/sysctl.conf
 
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2
 
sysctl -p

（1）关闭防火墙

systemctl stop firewalld.service
setenforce 0

 （2）安装httpd、开启服务

 （3）创建一个站点文件

vim /var/www/html/index.html

 （4）添加回环网卡,修改回环网卡名，IP地址，子网掩码

cd /etc/sysconfig/network-scripts/
cp ifcfg-lo ifcfg-lo:0
vim ifcfg-lo:0
修改内容如下
DEVICE=lo:0
IPADDR=192.168.154.19
NETMASK=255.255.255.255
NETWORK=127.0.0.0
 
systemctl restart network

（5）设置路由

（6）开机执行命令

（7）调整 proc 响应参数

 4、部署共享存储

（1）关闭防火墙关闭增强功能

systemctl stop firewalld.service
setenforce 0

（2）安装软件包

yum -y install nfs-utils rpcbind

 （3）创建共享目录并授权

mkdir /opt/fbc /opt/zhu
chmod 777 /opt/fbc /opt/zhu

（4）编辑NFS配置文件

vim /etc/exports
/usr/share *(ro,sync)
/opt/fbc 192.168.154.0/24(rw,sync)
/opt/zhu 192.168.154.0/24(rw,sync)

（5）重启服务

systemctl start nfs.service
systemctl start rpcbind.service

5、在客户机测试（192.168.154.100）

（1）打开window机器配置为192.168.154.100打开命令控制符 

 （2）打开浏览器搜索192.168.154.19

watch -n 1 ipvsadm

可以看到已经有数据出来 

廿一11
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
LVS-DR群集的部署
weixin_55609814的博客
06-17 297
LVS-DR群集的部署LVS-DR■LVS-DR数据包流向分析★为方便进行原理分析，将Client与群集机器放在同一网络中，数据包流经的路线为1-2-3-4★1.Client向目标VIP发出请求，Director(负载均衡器)☆IP包头及数据帧头信息★2.Director根据负载均衡算法选择RealServer_1，不修改也不封装IP报文，而是将数据帧的MAC地址改为RealServer 1的MAC地址，然后在局域网上发送☆IP包头及数据帧头信息★3. RealServer_1收到这个帧，解封装后发现目标I
LVS-DR详述文档
08-08
LVS-DR模式详细叙述文档，根据安装好的服务抓包详述了LVS-DR的基本原理。 后附配置文档。
LB群集--lvs-nat模型
08-10
LVS通过不同的工作模式，包括VS/NAT、VS/TUN和VS/DR，实现了负载均衡功能，其中VS/NAT模型是其一种常见的工作方式。 **LVS-NAT模型原理** 在LVS-NAT模型中，LVS调度器（Director）通过修改IP包的源或目标IP地址，...
Linux&&LVS负载均衡群集
01-09
Linux&&LVS负载均衡群集概念群集的类型负载均衡的分层结构负载均衡的工作模式环境部署（NAT模式）负载调度器部署启动ip_vs模块LVS的负载调度算法使用ipvsadm管理工具NFS共享存储服务使用NFS发布共享资源在客户机中...
LVS+keepalived群集教程（原创）
06-06
【LVS+Keepalived群集教程】 LVS（Linux Virtual Server）是基于Linux操作系统的一套高性能、高可用的负载均衡技术，它能够将网络流量分发到多个服务器上，提高系统的并发处理能力和稳定性。Keepalived是一款用于...
第三十二章：Lvs负载均衡群集1
08-08
【第三十二章：Lvs负载均衡群集1】 在IT领域，LVS（Linux Virtual Server）是一种高效且稳定的负载均衡解决方案，由中国章文嵩博士在1998年开发。LVS默认集成在Linux内核中，以ip_vs内核模块的形式存在。它通过将...
负载均衡 lvs
07-18 1365
LVS的IP负载均衡技术是通过IPVS模块来实现的，IPVS是LVS集群系统的核心软件，它的主要作用是：安装在Director Server上，同时在Director Server上虚拟出一个IP地址，用户必须通过这个虚拟的IP地址访问服务。RS接收到包以后，处理完，返回响应时，源IP是RS IP，目标IP是客户端的IP，这时RS的包通过网关(LVS)中转，LVS会做源地址转换(SNAT)，将包的源地址改为VIP，对于客户端只知道是LVS直接返回给它的。概述：DS给数据包加上一层隧道,RS的LO做VIP。
亚信安慧AntDB-M负载均衡
weixin_44518445的博客
07-24 464
AntDB-M通过变量antdb_route_mode(session_variable)控制负载均衡暴露节点类型，使用show variables like “antdb_route_mode”查看当前暴露的节点，使用 set session antdb_route_mode=“DN”改变暴露的节点。MN会通过心跳维护集群内所有节点状态信息，负载均衡算法获取到多个符合条件的节点后，会根据各节点当前连接数状态，优先返回连接数最少的节点。以如下集群结构为例，搭建1个MN、1个CN、2个一主两备DN的集群。
多GPU并行处理[任务分配、进程调度、资源管理、负载均衡]
Ppandaer的博客
07-25 343
【代码】多GPU并行处理[任务分配、进程调度、资源管理、负载均衡]
Ribbon负载均衡与内核原理
weixin_53908842的博客
07-24 474
集中式负载均衡，在消费者和服务提供方中间使用独立的代理方式进行负载，有硬件的（比如F5），也有软件的（Nginx）客户端根据自己的请求做负载均衡，Ribbon就属于客户端自己做负载均衡。Spring Cloud Ribbon是基于Netflix Ribbon实现的一套客户端的负载均衡工具，Ribbon客户端组件提供一系列的完善的配置，如超时，重试等，通过Load Balancer获取到服务提供的所有机器实例，Ribbon会自动基于某种规则(轮询，随机)去调用这些服务。
图数据库查询与操作指南-以Nebula图数据库为例
DZSpace，专注于计算机科学与技术领域的技术博主，致力于分享实用知识与技巧，帮助读者快速掌握技术要点，共同探索计算机世界的无限可能。欢迎访问DZSpace的博客，一起学习进步！
07-26 303
图数据库查询与操作指南-以Nebula图数据库为例
ODBC连接达梦数据库
qq_55187735的博客
07-24 290
用户执行，因为环境变量配置在。
SQL基础入门：解锁数据库管理的钥匙
最新发布
WayneYalejk的博客
07-26 448
在数字化时代，数据已成为企业最宝贵的资产之一。为了高效地存储、查询和管理这些数据，SQL（Structured Query Language，结构化查询语言）应运而生。SQL不仅是数据库管理员的必备技能，也是数据分析师、开发人员等多个领域从业者的重要工具。本文将带您踏入SQL的世界，从基础概念到实际应用，一步步解锁数据库管理的钥匙。强调SQL在数据处理和分析中的重要性，鼓励读者通过实践不断深化对SQL的理解和应用。
sqlalchemy使用json_unquote函数的mysql like查询
ithongchou的博客
07-23 1378
为您自己的数据库连接信息，并根据实际表结构修改模型类。函数查询MySQL JSON字段可以通过使用。下面是一个示例，假设有一个名为。请确保替换示例代码中的数据库连接字符串(在SQLAlchemy中使用。的表，其中包含一个名为。
mysql的存储过程：
m0_71178834的博客
07-25 432
完成特点功能的sql语句的集合。把定义好的sql集合在一个特定的sql的函数当中每次执行调用函数即可，还可以实现传参的调用。
CTF-NSSCTF题单[GKCTF2020]
2302_78903258的博客
07-24 1251
在低于7.2.29的PHP版本7.2.x，低于7.3.16的7.3.x和低于7.4.4的7.4.x中，将get_headers（）与用户提供的URL一起使用时，如果URL包含零（\ 0）字符，则URL将被静默地截断。访问/eval的路由，会设置一个delay，和你传入的get参数的delay进行比较，取较大的那个，然后setTimeout是延时函数，delay秒后就会执行第一个参数，即next()，否则就会send出timeout。是假的，但是有线索，提示说真正的flag的在。
通过Docker安装KingbaseES V8并激活开发License
weimeilayer的博客
07-24 179
首先，我们可以去KingbaseES的官网（https://www.kingbase.com.cn/xzzx/index.htm ，在软件版本中，注意下载的镜像为x86版本）下载docker镜像，下载完成后导入即可。简单介绍一下在Docker中安装人大金仓（KingbaseES V9）的过程，以及如何更换默认的License为官方提供的365天有效期的开发License。下面的安装过程都是在WSL2中完成的。我们可以通过下面的命令从宿主来直接查看KingbaseES的版本。启动容器，可以直接下面的脚本。
Redis快速入门基础
2301_79693537的博客
07-23 763
llen使用实例，测列表长度。
使用keepalived构建高可用LVS-DR集群详解
"使用keepalived搭建高可用的LVS-DR集群" 本文将深入探讨如何利用keepalived来构建一个高可用的LVS-DR（负载均衡调度器-直接路由）集群，以确保web服务的稳定性和连续性。keepalived是一款强大的网络服务监控和故障...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值