LVS-负载均衡集群企业级应用实战

最新推荐文章于 2024-04-16 15:27:19 发布
最新推荐文章于 2024-04-16 15:27:19 发布
阅读量300 收藏 1
点赞数 1
分类专栏： lvs 文章标签： 运维 linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Forgetfanhua/article/details/105582845
版权

环境准备：

  • 准备 3 台纯净的虚拟机，一台 server 服务器，两台 web 服务器

  • LVS-server 安装lvs管理软件

[root@localhost ~]# yum -y install ipvsadm

程序包：ipvsadm（LVS管理工具）

主程序：/usr/sbin/ipvsadm

规则保存工具：/usr/sbin/ipvsadm-save > /path/to/file

配置文件：/etc/sysconfig/ipvsadm-config

#一、LVS/DR 模式
实验说明：

  1. 网络使用NAT模式
  2. DR模式要求Director DIP 和 所有RealServer RIP必须在同一个网段及广播域
  3. 所有节点网关均指定真实网关

###1. 准备工作（集群中所有主机）关闭 防火墙 和 selinux

[root@lvs-server ~]# cat /etc/hosts
127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6
192.168.181.141 lvs-server
192.168.181.128 real-server1
192.168.181.130 real-server2

###2、Director 分发器配置
#####2.1 配置VIP

[root@lvs-server ~]# ip addr add dev ens33 192.168.181.140/32     #设置VIP

[root@lvs-server ~]# yum -y install ipvsadm     #RHEL确保LoadBalancer仓库可用

[root@lvs-server ~]# service ipvsadm start     #启动
Redirecting to /bin/systemctl start ipvsadm.service
Job for ipvsadm.service failed because the control process exited with error code. See "systemctl status ipvsadm.service" and "journalctl -xe" for details.

注意:启动如果报错: /bin/bash: /etc/sysconfig/ipvsadm: 没有那个文件或目录
需要手动生成文件

[root@lvs-server ~]# ipvsadm --save > /etc/sysconfig/ipvsadm

[root@lvs-server ~]# service ipvsadm start
Redirecting to /bin/systemctl start ipvsadm.service

#####2.2 定义LVS分发策略

-A          #添加VIP
-t          #用的是tcp协议
-a          #添加的是lo的vip地址
-r          #转发到realserverip
-s          #算法
-L|-l –list           #显示内核虚拟服务器表
--numeric, -n          #以数字形式输出地址和端口号
-g --gatewaying      #指定LVS工作模式为直接路由器模式DR（也是LVS默认的模式）
-S -save           #保存虚拟服务器规则到标准输出，输出为-R 选项可读的格式
rr               #轮循

如果添加ip错了，删除命令如下:
[root@lvs-server ~]# ip addr del 192.168.181.193 dev ens33

[root@lvs-server ~]# ipvsadm -C     #清除内核虚拟服务器表中的所有记录。

[root@lvs-server ~]# ipvsadm -A -t 192.168.181.140:80 -s rr

[root@lvs-server ~]# ipvsadm -a -t 192.168.181.140:80 -r 192.168.181.128 -g

[root@lvs-server ~]# ipvsadm -a -t 192.168.181.140:80 -r 192.168.181.130 -g

[root@lvs-server ~]# service ipvsadm save     #保存方式一，使用下面的保存方式，版本7已经不支持了
The service command supports only basic LSB actions (start, stop, restart, try-restart, reload, force-reload, status). For other actions, please try to use systemctl.

[root@lvs-server ~]# ipvsadm -S > /etc/sysconfig/ipvsadm     #保存方式二，保存到一个文件中

[root@lvs-server ~]# ipvsadm -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.181.140:80 rr
  -> 192.168.181.128:80           Route   1      0          0         
  -> 192.168.181.130:80           Route   1      0          0

[root@lvs-server ~]# ipvsadm -ln --stats     #显示统计信息
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port               Conns   InPkts  OutPkts  InBytes OutBytes
  -> RemoteAddress:Port
TCP  192.168.181.140:80                  0        0        0        0        0
  -> 192.168.181.128:80                  0        0        0        0        0
  -> 192.168.181.130:80                  0        0        0        0        0

[root@lvs-server ~]# ipvsadm -ln --rate     #看速率
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port                 CPS    InPPS   OutPPS    InBPS   OutBPS
  -> RemoteAddress:Port
TCP  192.168.181.140:80                  0        0        0        0        0
  -> 192.168.181.128:80                  0        0        0        0        0
  -> 192.168.181.130:80                  0        0        0        0        0

###3. 所有RS配置
配置好网站服务器，测试所有RS #为了测试效果，提供不同的页面（以下两台real-server都操作）

#安装 nginx 并且使 real-server1 和 real-server2 访问地址显示的内容不同

[root@real-server1 ~]# ip addr add dev lo 192.168.181.140/32     #在lo接口上绑定VIP

[root@real-server2 ~]# ip addr add dev lo 192.168.181.140/32

[root@real-server1 ~]# echo 1 > /proc/sys/net/ipv4/conf/all/arp_ignore     #忽略arp广播
[root@real-server1 ~]# echo 2 > /proc/sys/net/ipv4/conf/all/arp_announce     #匹配精确ip地址回包

[root@real-server2 ~]# echo 1 > /proc/sys/net/ipv4/conf/all/arp_ignore
[root@real-server2 ~]# echo 2 > /proc/sys/net/ipv4/conf/all/arp_announce

[root@real-server1 ~]# systemctl start nginx     #启动nginx
[root@real-server2 ~]# systemctl start nginx


------------------------------------------------------------------------------
因为：realServer的vip有了，接着就是同一个网段中拥有两个vip, 客户端在网关发送arp广播需找vip时需要让realServer不接受响应.
解决：
echo 1 >/proc/sys/net/ipv4/conf/eth0/arp_ignore
arp_ignore 设置为1，意味着当别人的arp请求过来的时候，如果接收的设备没有这个ip，就不做出响应(这个ip在lo上，lo不是接收设备的进口)
echo 2 >/proc/sys/net/ipv4/conf/eth0/arp_announce
使用最好的ip来回应，什么是最好的ip？同一个网段内子网掩码最长的

###4. 测试（修改后端nginx服务器的长连接）

[root@real-server1 ~]# vim /etc/nginx/nginx.conf     #将长连接设置为0
    keepalive_timeout  0;
[root@real-server1 ~]# nginx -s reload     #重新加载nginx

[root@real-server2 ~]# vim /etc/nginx/nginx.conf
    keepalive_timeout  0;
[root@real-server2 ~]# nginx -s reload

访问http://192.168.181.140/测试

image.png

image.png

#二、LVS-NAT 模式
###1. 准备工作

  • 加载内核 centos7+ 无需改动
#查看linux已加载的内核模块
[root@sql-review ~]# lsmod

#加载与卸载内核模块
[root@sql-review ~]# modprobe ip_vs      #动态加载ip_vs 模块，这个命令只是临时生效，需要添加到开机启动项目里面
[root@sql-review ~]# lsmod | grep ip_vs     #过滤模块是否加载成功！
[root@sql-review ~]# modprobe -r ip_vs      #动态卸载ip_vs模块

#查看内核模块信息
[root@sql-review ~]# modinfo ip_vs

#设置开机启动项
[root@sql-review ~]# echo "modprobe ip_vs" >> /etc/rc.local
[root@sql-review ~]# chmod +x /etc/rc.local     切记添加执行权限
添加到开机启动项里面如果不需要这个模块的时候只需要将etc/rc.local里面对应的命令删除掉。但是这样需要重新启动服务器。 可以通过下面的命令立即生效。
[root@sql-review ~]# modprobe -r ip_vs      #动态卸载ip_vs模块
  • 集群中所有主机关闭 防火墙 和 selinux
# 配置解析（可选） 做的话每台都需要做
[root@lvs-server ~]# cat /etc/hosts
127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6
192.168.181.142 lvs-server
192.168.181.128 real-server1
192.168.181.130 real-server2
  • 两台 real-server 安装 nginx 并且使 real-server1 和 real-server2 访问地址显示的内容不同

###2. RS 配置
real-server 所有服务器的默认网关均指向 Directory 的 DIP

[root@real-server1 ~]# route add default gw 192.168.181.142 dev ens33
[root@real-server2 ~]# route add default gw 192.168.181.142 dev ens33

[root@real-server1 ~]# ip r     #查看是否添加
default via 192.168.181.142 dev ens33 
default via 192.168.181.2 dev ens33 
192.168.181.0/24 dev ens33 proto kernel scope link src 192.168.181.128 

[root@real-server1 ~]# route -n     #查看是否添加
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.181.142 0.0.0.0         UG    0      0        0 ens33
0.0.0.0         192.168.181.2   0.0.0.0         UG    0      0        0 ens33
192.168.181.0   0.0.0.0         255.255.255.0   U     0      0        0 ens33

###3. Director 分发器配置
#####3.1 先给LVS服务器新添加一块网卡网络模式设置为桥接模式。会自动生成一个ip，做为VIP。

image.png

# 可以看到自动生成了网卡 ens37  ip:为192.168.31.63/24
[root@lvs-server ~]# ip a 
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN qlen 1
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host 
       valid_lft forever preferred_lft forever
2: ens33: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:48:1a:fe brd ff:ff:ff:ff:ff:ff
    inet 192.168.181.142/24 brd 192.168.181.255 scope global dynamic ens33
       valid_lft 1243sec preferred_lft 1243sec
    inet6 fe80::9db3:1c86:27b7:1225/64 scope link 
       valid_lft forever preferred_lft forever
3: ens37: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
    link/ether 00:0c:29:48:1a:08 brd ff:ff:ff:ff:ff:ff
    inet 192.168.31.63/24 brd 192.168.31.255 scope global dynamic ens37
       valid_lft 43170sec preferred_lft 43170sec
    inet6 fe80::f91e:7d69:848c:c21e/64 scope link 
       valid_lft forever preferred_lft forever

# 如果没有ip根据自己的网段手动添加
[root@lvs-server ~]# ip addr add dev ens37 192.168.31.128/24

# 开启路由转发 添加如下行
[root@lvs-server ~]# vim /etc/sysctl.conf
net.ipv4.ip_forward = 1

# 开启转发功能
[root@lvs-server ~]# sysctl -p

#####3.2 定义LVS的分发策略

[root@lvs-server ~]# yum -y install ipvsadm     #RHEL确保LoadBalancer仓库可用

[root@lvs-server ~]# ipvsadm -S > /etc/sysconfig/ipvsadm

[root@lvs-server ~]# service ipvsadm start     #启动

[root@lvs-server ~]# ipvsadm -A -t 192.168.31.63:80 -s rr

[root@lvs-server ~]# ipvsadm -a -t 192.168.31.63:80 -r 192.168.181.128 -m

[root@lvs-server ~]# ipvsadm -a -t 192.168.31.63:80 -r 192.168.181.130 -m

[root@lvs-server ~]# ipvsadm -S > /etc/sysconfig/ipvsadm     #保存方式

[root@lvs-server ~]# ipvsadm -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.31.63:80 rr
  -> 192.168.181.128:80           Masq    1      0          0         
  -> 192.168.181.130:80           Masq    1      0          0


[root@lvs-server ~]# ipvsadm -L -n --stats			      # 显示统计信息
[root@lvs-server ~]# ipvsadm -L -n --rate				# 看速率

###4. 测试（注意修改后端服务器nginx的长连接）

访问http://192.168.31.63/测试

image.png

image.png

Forget丶繁华
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
LVS 负载均衡集群企业级应用实战
weixin_71474937的博客
06-10 240
2.1、yum -y install ipvsadm #安装ipvsadm2.2、ip addr add dev ens33 192.168.179.10/32(ip自定义) #添加设置vip 必须是32子网掩码2.3、ipvsadm --save > /etc/sysconfig/ipvsadm #保存到ipvsadm2.4、ipvsadm start ipvsadm
LVS负载均衡集群练习
m0_59520765的博客
10-26 390
原理： 把客户端发来的数据包的IP头的目的地址，在负载均衡器上换成其中一台RS的IP地址，并发至此RS来处理,RS处理完成后把数据交给经过负载均衡器（DNAT）,负载均衡器再把数据包的原IP地址改为自己的IP，将目的地址改为客户端IP地址即可（SNAT）。所以，减少了负载均衡器的大量数据流动，负载均衡器不再是系统的瓶颈，就能处理很巨大的请求量，这种方式，一台负载均衡器能够为很多RS进行分发。当服务器节点过多时，大量的数据包都交汇在负载均衡器那，速度就会变慢。指定真实服务器（Real Server）的地址。
LVS介绍
weixin_44006596的博客
11-22 9397
LVS介绍
lvs看这篇就够了
热门推荐
weixin_38738049的博客
07-13 1万+
1lvs 的由来 1公司的钱大部分都花在了获客，营销上，营销效果好就会带来新的流量，如果自身应用承接不住大的流量将会造成很大的经济损失。所以lvs负载均衡技术就此诞生了。当然不差钱也可以使用F5 等硬件 lvs 学名 Linux虚拟服务器 LVS是Linux Virtual Server的简写，意即Linux虚拟服务器，是一个虚拟的服务器集群系统。本项目在1998年5月由章文嵩博士成立，是中国国内最早出现的自由软件项目之一。 想要说明白lvs 需要一定的网络知识，我就先从一个案例说起吧 比如你要访问百度，访
负载均衡集群——LVS
最新发布
wzpny的博客
04-16 1129
LVS是的简称，也就是Linux虚拟服务器是一个由章文嵩博士发起的自由软件项 目，它的官方站点是。现在LVS已经是Linux标准内核的一部分，在 Linux2.4内核以前，使用LVS时必须要重新编译内核以支持LVS功能模块，但是从Linux2.4内核以后，已 经完全内置了LVS的各个功能模块，无需给内核打任何补丁，可以直接使用LVS提供的各种功能。使用LVS技术要达到的目标是：通过LVS提供的负载均衡技术和Linux。
LVS负载均衡（LVS简介、三种工作模式、十种调度算法）
meser88的博客
04-13 2806
LVS（Linux Virtual Server）即Linux虚拟服务器，是由章文嵩博士主导的开源负载均衡项目，目前LVS已经被集成到Linux内核模块中。
LVS负载均衡——DR模式
Kiro君的博客
06-08 6073
LVS DR模式（直接路由）
LVS详解
qq_36733838的博客
12-31 1355
其实企业中最常用的是DR实现方式，而NAT配置上比较简单和方便，TUN模式则是综合了DR和NAT的优点。
企业级调度器LVS实战详解
03-18
**企业级调度器LVS实战详解** Linux Virtual Server（LVS）是Linux内核中集成的一种负载均衡技术，由章文卓博士在1998年开发，旨在为大型网络服务提供高可用性和高性能的解决方案。LVS通过将流量分发到多个服务器，...
企业级调度器LVS原理与实战
12-04
总结来说，企业级调度器LVS通过集群和分布式系统的设计理念，提供了强大的负载均衡功能，支持多种工作模式和调度算法，以适应不同规模和类型的网络服务需求。正确理解和运用LVS，可以有效提升系统的稳定性和性能。在...
Linux-服务器集群技术.ppt
09-18
Linux服务器集群技术是一种提高系统可用性、性能和可伸缩性的解决方案，广泛应用于大型网站、数据中心和企业级应用。在本讲座中，我们将探讨集群概述、服务器集群系统、特别是Linux Virtual Server (LVS)以及实战...
LVS负载均衡
weixin_45936641的博客
11-26 1029
LVS（Linux virtual server） 它是一个负载均衡、高可用性集群，主要针对大业务量的网络应用（比如新闻。电子商务、网上银行…） LVS是建立在一个主控服务器（双机）及若干个真实服务器组成。真实服务器负责提供服务，主控服务器会根据指定的调度算法对真实的服务器进行控制。LVS集群结构对用户来说是透明的，客户端只与单个IP（虚拟IP）进行通信。客户端向lvs发出服务请求，主控服务器会通过特定的算法来指定某个真实服务器来应答，而客户端只与负载均衡的IP进行通信 lvs常见算法： 轮询调度RR： 将
LVS三种工作模式及原理详解
qq_59369367的博客
05-24 7087
什么是 LVS？ LVS 是 Linux Virtual Server 的简写，也就是 Linux 虚拟服务器，是一个虚拟的服务器集群系统，本项目在 1998 年 5 月由章文嵩博士成立，是中国国内最早出现的自由软件项目之一。 官方网站：http://www.linuxvirtualserver.org，LVS 实际上相当于基于 IP 地址的虚拟化应用，为基于 IP 地址和内容请求分发的负载均衡提出了高效的解决方法，现在 LVS 已经是 Linux 内核标准的一部分。 使用 LVS 可以达到的技术目标
LVS原理简介
傅红雪的专栏
01-25 4341
LVS是Linux virtual server的缩写，为linux虚拟服务器，是一个虚拟的服务器集群系统。LVS简单工作原理为用户请求LVS VIP，LVS根据转发方式和算法，将请求转发给后端服务器，后端服务器接收到请求，返回给用户。对于用户来说，看不到Web后端具体的应用。 1. LVS负载均衡简介 可伸缩网络服务有很多结构，但都有一个共同点：它们都需要一个前端的负载调度器。而实现虚拟网络服务的主要技术指出IP负载均衡技术是在负载调度器的实现技术里面效率最高的一个。 在已有的IP负载均衡技术中，主要
[高可用系列|LVS]LVS详解
qq_43714097的博客
09-07 3277
LVS,高可用，负载均衡
Piranha安装快速搭建LVS负载均衡集群.pptx
10-20
"该资源是一份关于使用Piranha快速搭建LVS负载均衡集群的培训材料，主要针对CentOS环境。内容包括初始化CentOS虚拟机、设置SSHD服务自动启动、关闭图形界面、管理网络接口以及VMware的相关使用技巧。案例中展示了LVS...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值