高可用技术-Linux配置LVS实现负载均衡

已于 2023-09-09 11:50:44 修改
阅读量274 收藏
点赞数
分类专栏： linux 文章标签： linux lvs 负载均衡
于 2023-08-05 01:14:46 首次发布

文章目录

高可用技术-Linux配置LVS实现负载均衡

  • LVS (linux virtual server)
  • IPVS (ip virtual server)
  • DS (director server) 负载均衡服务器
  • VIP (virtul internet protocol)
  • RIP (real internet protocol ) 真实IP

一、前言

LVS（Linux Virtual Server）是章文嵩博士成立的自由软件项目。Linux将其作为内核的一部分，命名为IPVS（IP Virtual Server）。

二、配置简介

在一台负载均衡服务器DS( director server) 上配置 VIP，并配置IPVS，外部通过访问VIP来访问这台服务器。

IPVS 中配置映射多个处理请求的真实服务器（RS）的IP地址（RIP） , 指定合适的负载均衡算法（轮询，加权轮询），DS会根据算法规则将客户端的数据包转发到其中一台进行处理。

在这个调用链路中DS只负责转发数据包，网络连接实际上是建立在客户端和RS上的，只不过对于客户端来说RS是透明的，不知道它的存在，统一访问DS就可以了。

我们通过三台服务器来搭建一套负载均衡服务，使用三种模式（DR、NAT、TUN）中性能最好的直接路由模式（Direct Routing），响应结果由RS直接返回给客户端，VIP为192.168.252.100。

下面是三个服务器节点信息：

node1（DS）：IP为192.168.252.131
node2（RS）：IP为192.168.252.132
node3（RS）：IP为192.168.252.133

下图是在这套环境下，数据传输链路：
在这里插入图片描述

三、搭建步骤

这些步骤操作结果都是临时的，重启后会消失

3.1 查看网卡信息

查看服务器网卡信息，一般会有物理的网卡（如ens33或eth0）和虚拟回环网卡（lo，Local Loopback）

在这里插入图片描述

3.2 配置真实服务器

需要注意的是要先改ARP配置，不然可能在配置ARP之前暴露VIP地址

  • 修改内核地址解析协议（Address Resolution Protocol，ARP）内核参数映射文件让其他网卡不暴露VIP，保证VIP对内（本机）可见，对外隐藏
echo "给ens33网卡接口配置" > /dev/null
echo 1 > /proc/sys/net/ipv4/conf/ens33/arp_ignore 
echo 2 > /proc/sys/net/ipv4/conf/ens33/arp_announce 
​
echo "为了方便，给所有网卡接口配置" > /dev/null
echo 1 > /proc/sys/net/ipv4/conf/all/arp_ignore 
echo 2 > /proc/sys/net/ipv4/conf/all/arp_announce

arp_ignore 配置收到ARP请求的响应级别，我们设置为1，这样网卡只会响应跟自己接口匹配的地址，外界无法通过它们获得VIP的地址：

  • 【0】（默认）本机有相应配置就给予相应
  • 【1】向相匹配的网络通告本地所有与其相匹配的接口地址
  • 【2】向相匹配的网络通告自己的接口地址。

地址指的是 MAC地址，同一局域网内是通过MAC地址来访问的，本地ARP缓存中会记录IP对应的MAC地址

  • 我们对虚拟环回网卡配置子接口，绑定VIP，并设置掩码为255.255.255.255，让RS能处理请求并能直接返回
ifconfig lo:2 192.168.252.100 netmask 255.255.255.255

思考

  • 为什么RS也要绑定VIP？
    因为DS传过来的数据包的目标IP地址是VIP，想使RS让能处理这个数据包就得有IP相匹配的网卡接口，否则数据包会被丢弃。

  • 为什么绑定在虚拟环回网卡上而不是真实网卡？
    因为环回网卡是虚拟网卡，没有对外通信的通道，它本身不会将VIP对应的MAC地址广播给外界，外界也无法直接向它发送ARP请求来获得MAC地址，这样就保证了对外隐藏。不过还需要修改内核ARP配置，防止其他网卡将VIP暴露出去。
    最终目的是让外界不知道RS这个VIP的存在，让他们无法直接通过VIP来访问RS，否则就会和DS冲突。

  • 为什么掩码为255.255.255.255
    防止发出去的包当成接收到的包，最后成死循环。
    以node2服务器配置为例，下图是路由表信息，配置的接口为物理网卡ens33。往外发数据包的流程是拿数据包目的地IP地址与掩码做按位与运算，比如目的地IP为192.168.255.22，与255.255.255.0的运算结果为192.168.255.0，路由表有想匹配的规则发到网关0.0.0.0，最终数据包走0.0.0.0相匹配的网关192.168.252.2发出去。如果环回接口VIP也配置为255.255.255.0，会导致走环回接口也能这样出去，而且环回接口优先级高所以一定会走它，但环回接口是内核虚拟接口，发出去包会当成接收到的包，最后成死循环。如果配置成255.255.255.255，与运算结果为192.168.255.22，匹配不上网关转而交给其他网卡处理，这样就能正常发出去了。
    -在这里插入图片描述

3.3 配置负载均衡服务器（DS）

配置VIP，创建物理网卡的子网卡命名为ens33:2，绑定我们的VIP，指定掩码为255.255.255.0。

ifconfig ens33:2 192.168.252.100/24

安装ipvsadm来配置IPVS，命令ipvsadm -help可以看到各选项作用。

echo "安装ipvs管理工具" > /dev/null
yum install ipvsadm -y
​
echo "添加（-A）TCP（-t）虚拟服务，指定IP和端口号分别为VIP和80，指定负载均衡算法（-s）为轮询（rr）" > /dev/null
ipvsadm -A -t 192.168.252.100:80 -s rr
​
echo "为上面的虚拟服务添加真实服务地址（-r）,使用DR模式（-g）,并指定权重（-w）" > /dev/null
ipvsadm -a -t 192.168.252.100:80 -r 192.168.252.132 -g -w 1
ipvsadm -a -t 192.168.252.100:80 -r 192.168.252.133 -g -w 1
​
echo "查看IPVS配置" > /dev/null
ipvsadm -ln

在这里插入图片描述

四、测试

给RS安装httpd

安装启动httpd

echo "安装" > /dev/null
yum -y install httpd
​
echo "启动" > /dev/null
service httpd start

给两台RS（node2、node3）分别指定httpd主页内容，测试时好区分。

echo 'node2' > /var/www/html/index.html

通过浏览器验证

通过浏览器访问VIP（http://192.168.252.100/）可以看到结果在两个节点间切换。不过浏览器GET请求可能有缓存，导致多次请求实际只发了一次，如果没有切换就间隔几秒，等缓存过期。
在这里插入图片描述
在这里插入图片描述

查看IPVS连接记录

在DS上查看连接记录，可以看到请求轮询转发到了RS。

echo "列出（-l）当前IPVS连接记录（c），显示数值型的（n）目标服务（virtual）和真实服务（destination）地址" > /dev/null
ipvsadm -lcn

在这里插入图片描述

查看socker连接

查看各节点socket连接信息。可以发现TCP连接都建立在RS上，没有与DR建立连接。
https://www.runoob.com/linux/linux-comm-netstat.html

netstat -natp

在这里插入图片描述

在这里插入图片描述

五、重启规则不丢失

保存IPVS规则到文件

ipvsadm -S > ~/IPVS

在这里插入图片描述
清空IPVS规则

ipvsadm -C
```bash

加载文件中的IPVS规则
```bash
ipvsadm -R < ~/IPVS

RS修改内核地址解析协议（Address Resolution Protocol，ARP）让其他网卡不暴露VIP。修改/etc/sysctl.conf可以永久生效

echo "追加ARP配置到/etc/sysctl.conf" > /dev/null
echo '
net.ipv4.conf.ens33.arp_ignore=1
net.ipv4.conf.ens33.arp_announce=2
​
net.ipv4.conf.all.arp_ignore=1
net.ipv4.conf.all.arp_announce=2' >> /etc/sysctl.conf
​
echo "刷新配置"
sysctl -p

通过cat命令可以查看内核地址协议配置结果。

cat /proc/sys/net/ipv4/conf/ens33/arp_ignore 
cat /proc/sys/net/ipv4/conf/ens33/arp_announce 
cat /proc/sys/net/ipv4/conf/all/arp_ignore 
cat /proc/sys/net/ipv4/conf/all/arp_announce

关闭网卡

ifconfig lo:2 down

查看路由表条目

route -n

在这里插入图片描述
查看ARP缓存，从node1执行结果中可以看到node2和node3的IP地址对应的MAC地址，同一局域网内是通过MAC地址寻址的

arp -an

在这里插入图片描述

AllenIverrui
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
LVS负载均衡
高手兄
01-12 290
LVS负载均衡 LVS简介 1998年由我国章文崇博士创建，具备三种工作模式的负载均和服务 LVS工作模式 地址转换(NAT)：负载调度器作为所有服务节点的网关出口，也是入口 直链路由(DR)：与IP隧道类似，不过所有节点在同一局域网 IP隧道(TUN)：负载调度器作为服务节点的入口，出口则是各自独立的公网IP LVS调度算法 轮询(rr)：将收到的访问轮流发送给后端的服务节点 加权轮询(w...
lvs(linux虚拟服务器)
weixin_51769683的博客
07-16 233
文章目录一、lvs均衡访问1、在server1中进行在server2中3、在server3中结果二、lvs的高级访问server1中 一、lvs均衡访问 1、在server1中进行 yum install -y ipvsadm #用户层面 systemctl start ipvsadm ipvsadm -A -t 172.25.32.100:80 -s rr #-A为添加服务，rr为分配调度 ipvsadm -a -t 172.25.32.100:80 -r 172.25.32.2:80 -g #-g为直
Linux系统——LVS负载均衡群集
一坨小橙子的博客
03-05 1577
LVS集群概述、企业群集分类、LVS架构、LVS集群术语、LVS工作模式及命令、LVS调度算法、ipvsadm工具、NAT模式LVS负载均衡部署
一文学会LVS：概念、架构、原理、搭建过程、常用命令及实战案例
最新发布
CloudJourney的博客
06-26 1744
LVS（Linux Virtual Server）是一个基于Linux操作系统的虚拟服务器技术，用于实现负载均衡和高可用性。LVS通过将客户端的请求分发到多台后端服务器上，从而提高整体服务的处理能力和可靠性。LVS主要有两个组件：IPVS（IP Virtual Server）和LVS-NAT、LVS-DR、LVS-TUN三种工作模式。
【Linux】虚拟服务器之LVS
weixin_30381317的博客
06-20 101
写在前面 觉得甚是幸运，能够有机会参与到ITOO配置环境的工作中去。现在正在熟悉，在搭建环境的时候，有LVS安装配置教程，对这一块有些懵逼，这几天查了一些资料，写在这里，和大家分享一下 是什么 LVS是 Linux Virtual Server 的简称，也就是Linux虚拟服务器。这是一个由章文嵩博士发起的一个开源项目，它的官方网址是htt...
Linux服务器集群LVS
xuxingzhuang的博客
06-12 9540
本文主要介绍了Linux服务器集群系统–LVS（Linux Virtual Server）,并简单描述下LVS集群的基本应用的体系结构以及LVS的三种IP负载均衡模型（VS/NAT、VS/DR和VS/TUN）的工作原理，以及它们的优缺点和LVS集群的IP负载均衡软件IPVS在内核中实现的各种连接调度算法。 参考文献 http://www.LinuxVirtualServer.org/前言 LV
LVS (Linux Virtual Server)
多头注意力探索Now
07-11 1104
LINUX load balancing
基于linux-lvs实现业务负载均衡介绍.pdf
08-13
Linux LVS 作为一种开源的负载均衡解决方案，为那些希望在成本控制的前提下实现高性能、高可用性的系统提供了有力支持。通过对 LVS 的部署、配置和管理，可以有效提升系统的稳定性和响应能力，满足不同场景下的需求...
Keepalived-sery-lvs-cluster负载均衡及服务器集群（ lvs）.docx
11-07
负载均衡技术是互联网应用中不可或缺的一部分，它的主要目标是提升系统高可用性和可扩展性，同时实现负载的合理分配。通过负载均衡，即使部分设备或组件故障，服务依然能够正常运行，确保用户体验不受影响。随着用户...
linux搭建lvs虚拟vip实现nginx高可用
06-29
总结来说，"linux搭建lvs虚拟vip实现nginx高可用"是一个包含多个层次的技术架构，通过Linux系统、Nginx服务器、LVS负载均衡和Keepalived故障恢复工具的组合，可以构建出一个高效且可靠的7*24小时运行的Web服务环境。...
Linux系统高可用技术---LVS
02-04
Linux系统高可用技术---LVS（Linux Virtual Server）是一种在Linux操作系统中实现的网络负载均衡技术，它通过将多台服务器虚拟化为一个单一的高性能服务节点，来提高系统的可用性和扩展性。LVS主要应用于大型网站和...
Linux 运维：LVS服务
运维小何的博客
06-20 4696
一、LVS的DR模式 route（路由）-&amp;amp;amp;amp;amp;gt; F5 -&amp;amp;amp;amp;amp;gt; lvs(4) -&amp;amp;amp;amp;amp;gt; nginx(7) / haproxy -&amp;amp;amp;amp;amp;gt; web server1主机（VS：VirtualServer） 1、安装ipvsadm 注意：rhel6：需要对yum源配置；rhel7：不需要
Linux LVS集群
Andrew的博客
01-16 403
一.集群 随着互联网的发展，大量的客户请求蜂拥而至，同时服务器的负载也越来越大，然而单台服务器的负载又是有限的，这样就会导致服务器响应客户端请求的时间越长，甚至产生拒绝服务的情况。另外，目前的网站多数是7x24小时提供不间断网络服务，如果仅采用单点服务器对外提供网络服务，那么在出现单点故障时，将导致整个网络服务中断。这时我们需要部署集群架构，最终将成百上千台主机有机地结合在一起，以满足当前大数据...
Linux LVS 详解
lizhengyu891231的博客
03-15 247
Linux LVS 详解
Linux学习-LVS学习
丢爸
05-02 284
Cluster(集群) 一组通过网络连接的计算机，提供高可用性和伸缩性。 集群类型 LB(Load Balance)负载均衡：分摊到多个操作单元上进行执行，例如Web服务器、FTP服务器、企业关键应用服务器和其它关键任务服务器等，从而共同完成工作任务，减轻因负载过重造成单节点压力过大问题。 HA(High Avaliablility)高可用：指的是通过尽量缩短因日常维护操作（计划）和突发的系统崩溃（非计划）所导致的停机时间，以提高系统和应用的可用性。 系统扩展方式 scale up(向上扩展)：扩展一
linux——lvs介绍
weixin_43168096的博客
07-29 753
一、负载均衡LVS基本介绍 LB集群的架构和原理很简单，就是当用户的请求过来时，会直接分发到Director Server上，然后它把用户的请求根据设置好的调度算法，智能均衡地分发到后端真正服务器(real server)上。为了避免不同机器上用户请求得到的数据不一样，需要用到了共享存储，这样保证所有用户请求的数据是一样的。 LVS是 Linux Virtual Server 的简...
LVS （Linux Virtual server）集群介绍
wyq2070857323的博客
03-05 1187
Cluster：集群,为解决某个特定问题将多台计算机组合起来形成的单个系统服务等级协议（简称：SLA，全称：service level agreement）。是在一定开销下为保障服务的性能和可用性，服务提供商与用户间定义的一种双方认可的协定。通常这个开销是驱动提供服务质量的主要因素。在常规的领域中，总是设定所谓的三个9，四个9来进行表示，当没有达到这种水平的时候，就会有一些列的惩罚措施，而运维，最主要的目标就是达成这种服务水平。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值