LVS+Keepalived——高可用群集

最新推荐文章于 2024-04-18 02:03:36 发布
最新推荐文章于 2024-04-18 02:03:36 发布
阅读量791 收藏 1
点赞数
分类专栏： 运维 文章标签： nginx 运维 apache
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_48404074/article/details/121456147
版权

目录

Keepalived概述

        Keepalived功能

        Keepalived架构 

        keepalived的热备方式

        VRRP相关技术

                vrrp相关术语

 Keepalived相关文件

        配置组成

具体实现

                主备keepalived 

                 节点配置

        非抢占式

        延迟抢占

 ​

脑裂现象

  

      keepalived 起初是专门针对LVS设计的一款强大的辅助工具，主要用来提供故障切换（Failover）和健康检查（Health Checking）功能——判断LVS负载调度器、节点服务器的可用性，及时隔离并替换为新的服务器，当故障主机恢复后将其重新加入群集。

Keepalived概述

        Keepalived功能

  • 基于vrrp协议完成地址流动

  • 为vip地址所在的节点生成ipvs规则(在配置文件中预先定义)

  • 为ipvs集群的各RS做健康状态检测

  • 基于脚本调用接口完成脚本中定义的功能，进而影响集群事务，以此支持nginx、haproxy等服务

        Keepalived架构 

官方网址：Keepalived for Linux

  • 用户空间核心组件：

  1. vrrp stack：VIP消息通告

  2. checkers：监测real server（简单来说 就是监控后端真实服务器的服务）

  3. system call：实现 vrrp 协议状态转换时调用脚本的功能

  4. SMTP：邮件组件（报警邮件）

  5. IPVS wrapper：生成IPVS规则（直接生成ipvsadm）

  6. Netlink Reflector：网络接口（将虚拟地址ip（vip）地址飘动）

WatchDog：监控进程（整个架构是否有问题）

  • 控制组件：提供keepalived.conf 的解析器，完成Keepalived配置

  • IO复用器：针对网络目的而优化的自己的线程抽象

  • 内存管理组件：为某些通用的内存管理功能（例如分配，重新分配，发布等）提供访问权限

 keeplive可以配合ngnix等软件，反向代理

        keepalived的热备方式

       keepalived采用VRRP(虚拟路由冗余协议)热备份协议，以软件的方式实现Linux服务器的多机热备功能。VRRP是针对路由器的一种备份解决方案——由多台路由器组成一个热备组，通过共用的虚拟IP地址对外提供服务：每个热备组内同一时刻只有一台主路由器提供服务，其他路由器处于冗余状态，若当前在线的路由器失效，则其他路由器会自动接替（优先级决定接替顺序）虚拟IP地址，以继续提供服务

         热备主内的每台路由器都可能成为主路由器，虚拟路由器的IP地址（VIP）可以在热备组内的路由器之间进行转移，所以也称为漂移IP地址。使用Keepalived时，漂移地址的实现不需要手动建立虚接口配置文件（如ens33：0），而是由Keepalived根据配置文件自动管理。

        VRRP相关技术

通告：心跳，优先级等；周期性

工作方式：抢占式，非抢占式，延迟抢占模式，

安全认证：

  • 无认证

  • 简单字符认证：预共享密钥

  • MD5

工作模式：

  • 主/备：单虚拟路径器

  • 主/主：主/备（虚拟路由器1），备/主（虚拟路由器2

#通告：
是宣告自己的主权，不要妄想抢班夺权，不停的向外

#抢占式：
主服务器宕机，过了一段时间修好了，再把主权抢过来

#非抢占式：
主服务器宕机，过了一段时间修好了，原来的主就作为备了

#抢占式好还是非抢占式好？

非抢占式好

#安全认证：
如没有安全认证，不在集群中的keeplive服务器设置超高的优先级，会造成事故

#主/主：主/备（虚拟路由器1），备/主（虚拟路由器2）见下图：
环境：
有两台服务器
虚拟出两台虚拟路由器
第一台虚拟路由器中服务器1为主，服务器2为备，那么虚拟IP1就飘在服务器1上，真正工作的只有服务器1
第二台虚拟路由器中服务器2为主，服务器1为备，那么虚拟IP2就飘在服务器2上，真正工作的只有服务器2
优点：
#提高了资源利用率：
这样主，备服务器同时干活，可以同时运行两个项目
#同样有备份功能：
如果服务器1坏了，服务器2 将同时拥有虚拟IP1和虚拟IP2


缺点：
虽然有备份冗余功能但是对机器的性能要求非常高，当其中一台出现故障，本来一台运行一个任务，现在所有的业务全部压在了一台上，有十分大的风险

                vrrp相关术语

  • 虚拟路由器：Virtual Router

  • 虚拟路由器标识：VRID(0-255)，唯一标识虚拟路由器

  • VIP：Virtual IP

  • VMAC：Virutal MAC (00-00-5e-00-01-VRID)

  • 物理路由器：

  • master：主设备

  • backup：备用设备

  • priority：优先级

 Keepalived相关文件

  • 软件包名：keepalived

  • 主程序文件：/usr/sbin/keepalived

  • 主配置文件：/etc/keepalived/keepalived.conf

  • 配置文件示例：/usr/share/doc/keepalived/

  • Unit File：/lib/systemd/system/keepalived.service

  • Unit File的环境配置文件：

  • /etc/sysconfig/keepalived CentOS

        配置组成

/etc/keepalived/keepalived.conf 配置组成

  • GLOBAL CONFIGURATION

Global definitions（全局配置）：定义邮件配置，route_id，vrrp配置，多播地址等

  • VRRP CONFIGURATION

VRRP instance(s)：定义vrrp协议中的每个vrrp虚拟路由器的规则，基本信息

  • LVS CONFIGURATION（lvs调度服务器的规则设置）

Virtual server group(s)

Virtual server(s)：LVS集群的VS和RS

具体实现

主keepalived：192.168.37.100
备keepalived：192.168.37.101
web1：192.168.37.103
web2：192.168.37.106
vip：192.168.37.11
客户机访问

                主备keepalived 

 主备keepalived，安装ipvsadm软件包和keepalived软件包

[root@localhost ~]# yum install ipvsadm.x86_64 keepalived.x86_64 -y

加载模块

[root@localhost ~]# modprobe ip_vs
[root@localhost ~]# cat /proc/net/ip_vs
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port Forward Weight ActiveConn InActConn

keepalived配置文件做一个备份

[root@localhost ~]# cd /etc/keepalived/
[root@localhost /etc/keepalived]# ls
keepalived.conf
[root@localhost /etc/keepalived]# cp keepalived.conf keepalived.conf.bak
[root@localhost /etc/keepalived]# ls
keepalived.conf  keepalived.conf.bak

编辑keepalived配置文件

[root@localhost /etc/keepalived]# vim keepalived.conf

 编辑/etc/systcl.conf文件

[root@localhost /etc/keepalived]# vim /etc/sysctl.conf 
[root@localhost /etc/keepalived]# sysctl -p
net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0

 重启

[root@localhost /etc/keepalived]# ipvsadm-save >/etc/sysconfig/ipvsadm #先保存
[root@localhost /etc/keepalived]# systemctl start keepalived.service 
[root@localhost /etc/keepalived]# systemctl start ipvsadm.service 
[root@localhost /etc/keepalived]# systemctl restart keepalived.service 
[root@localhost /etc/keepalived]# ipvsadm -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.37.11:80 rr
  -> 192.168.37.102:80            Route   1      0          0         
  -> 192.168.37.106:80            Route   1      0          0

远程拷贝到备keepalived中

[root@localhost /etc/keepalived]# scp keepalived.conf root@192.168.37.101:/etc/keepalived/
The authenticity of host '192.168.37.101 (192.168.37.101)' can't be established.
ECDSA key fingerprint is SHA256:ohmukbizYYyd0RUPHVaJOvHzidcQS1AvBegZAWJ13zQ.
ECDSA key fingerprint is MD5:26:7d:45:4f:47:02:d7:7b:47:b1:7e:29:3d:46:c8:cd.
Are you sure you want to continue connecting (yes/no)? yes
Warning: Permanently added '192.168.37.101' (ECDSA) to the list of known hosts.
root@192.168.37.101's password: 
keepalived.conf                                                  100% 1155     2.7MB/s   00:00    
[root@localhost /etc/keepalived]# scp /etc/sysctl.conf root@192.168.37.101:/etc/keepalived/
root@192.168.37.101's password: 
sysctl.conf

已经拷贝过来了 

 修改keepalived.conf文件

[root@localhost keepalived]#vim keepalived.conf

保存 

[root@localhost keepalived]#ipvsadm-save >/etc/sysconfig/ipvsadm
[root@localhost keepalived]#
[root@localhost keepalived]#systemctl start ipvsadm.service

编辑/etc/sysctl.conf文件

[root@localhost keepalived]#vim /etc/sysctl.conf

 net.ipv4.conf.all.send_redirects = 0
net.ipv4.conf.default.send_redirects = 0
net.ipv4.conf.ens33.send_redirects = 0

[root@localhost keepalived]#systemctl start keepalived.service 
[root@localhost keepalived]#
[root@localhost keepalived]#ipvsadm -ln
IP Virtual Server version 1.2.1 (size=4096)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.37.11:80 rr
  -> 192.168.37.102:80            Route   1      0          0         
  -> 192.168.37.106:80            Route   1      0          0

 假如把主keepalived关掉

[root@localhost /etc/keepalived]# systemctl stop keepalived.service

 此时会跑到备keepalived上

比如抓个包

[root@localhost ~]# tcpdump -i ens33 host 224.0.0.18

 现在是主keepalived关闭

开启后看看

又变回到100了！！！

                 节点配置

安装httpd服务

[root@localhost ~]#yum install httpd -y

设置虚拟网卡

[root@localhost ~]# ifconfig lo:0 192.168.37.11 netmask 255.255.255.255

修改/etc/sysctl.conf文件

[root@localhost /var/www/html]# vim /etc/sysctl.conf 
[root@localhost /var/www/html]# 
[root@localhost /var/www/html]# sysctl -p
net.ipv4.conf.all.arp_ignore = 1
net.ipv4.conf.all.arp_announce = 2
net.ipv4.conf.default.arp_ignore = 1
net.ipv4.conf.default.arp_announce = 2
net.ipv4.conf.lo.arp_ignore = 1
net.ipv4.conf.lo.arp_announce = 2

设置路由

[root@localhost /var/www/html]# route add -host 192.168.37.11 dev lo:0

第二台节点服务器和第一台配置一样，不多赘述

测试

在网页输入192.168.37.11

等待一会刷新

以上就是抢占式的keepalived，
默认模式 使用的 抢占式
主节点会抢占回来，会造成 两次网络动荡。 

        非抢占式

 主机一

主机二

 重启

[root@localhost /etc/keepalived]# systemctl restart keepalived.service

抓包

 关闭主机1

[root@localhost /etc/keepalived]# systemctl stop keepalived.service

还是可以访问

        延迟抢占

主机1

 

主机2

关闭主机一再重启

[root@localhost /etc/keepalived]# systemctl stop keepalived.service 
[root@localhost /etc/keepalived]# systemctl restart keepalived.service

抓包在13秒重启的从43秒开始变回100，

脑裂现象

什么是脑裂？
在高可用（HA）系统中，当联系2个节点的“心跳线”断开时，本来为一整体、动作协调的HA系统，
就分裂成为2个独立的个体。
由于相互失去了联系，都以为是对方出了故障。两个节点上的HA软件像“裂脑人”一样，争抢“共享
资源”、争起“应用服务”，就会发生严重后果。共享资源被瓜分、两边“服务”都起不来了；或者两边
“服务”都起来了，但同时读写“共享存储”，导致数据损坏


都有哪些原因导致脑裂？
高可用服务器对之间心跳线链路发生故障，导致无法正常通信。
因心跳线坏了（包括断了，老化）。
因网卡及相关驱动坏了，ip配置及冲突问题（网卡直连）
因心跳线间连接的设备故障（网卡及交换机）
因仲裁的机器出问题（采用仲裁的方案）
高可用服务器上开启了 iptables防火墙阻挡了心跳消息传输。
高可用服务器上心跳网卡地址等信息配置不正确，导致发送心跳失败
其他服务配置不当等原因，如心跳方式不同，心跳广插冲突、软件Bug等。


20. 如何解决keepalived脑裂问题？
在实际生产环境中，我们从以下方面防止脑裂：
#同时使用串行电缆和以太网电缆连接、同时使用两条心跳线路，这样一条线路断了，另外一条还是好的，依然能传送心跳消息
#当检查脑裂时强行关闭一个心跳节点（这个功能需要特殊设备支持，如stonith、fence）相当于备节点接收不到心跳消息，通过单独的线路发送关机命令关闭主节点的电源

#做好对脑裂的监控报警解决常见方案：
如果开启防火墙，一定要让心跳消息通过，一般通过允许IP段的形式解决
可以拉一条以太网网线或者串口线作为主被节点心跳线路的冗余
开发检测程序通过监控软件检测脑裂

小柏ぁ
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
lvs+Keepalived+nginx高可用负载均衡搭建部署方案
05-24
lvs+Keepalived+nginx高可用负载均衡搭建部署方案
Mysql双主热备+LVS+Keepalived高可用操作记录-精华版
01-06
本篇文档为Mysql双主热备+LVS+Keepalived高可用操作记录，可作为线上实操手册，有需要的朋友可以拿走，希望能帮助到有用到的人～
LVS+keepalived——高可用集群
m0_75209491的博客
10-24 340
keepalived的工作方式是基于VRRP协议：1、 确定主备2、 VIP地址只能有一个，会出现在主服务器上3、 通过VRRP组播地址：224.0.0.18 发送VRRP报文，检测主的心跳。4、 主备切换，主出现故障，vip地址会漂移到备服务器。5、 主服务器恢复，vip地址要回到主6、 脑裂：主备都有vip。软件层面：检查配置文件，重启。7、 keepalived不是只能和lvs集群搭配，也可以和其他服务配合，实现高可用。1、 什么叫脑裂？脑裂：主和备同时拥有vip地址。
高效多用的群集之部署LVS+Keepalived 高可用群集（DR模式）
m0_74848517的博客
03-24 103
判断LVS负载调度器、节点服务器的可用性，当master主机出现故障及时切换到backup节点保证业务正常，当 master 故障主机恢复后将其重新加入群集并且业务重新切换回 master 节点。补充：修改好主负载服务器上的配置文件后，感觉要改的好多，其实主备之间配置就三点不一样，这时候就可以远程复制一波啦。#12行修改，指定服务器（路由器）的名称，主备服务器名称须不同，主为LVS_01，备为LVS_02。#34行修改，指定虚拟服务器地址(VIP)、端口，定义虚拟服务器和Web服务器池参数。
LVS+Keepalive 实现负载均衡高可用集群_lvs+keepalived
最新发布
m0_57540655的博客
04-18 730
通过网络地址转换，调度器重写请求报文的目标地址，根据预设的调度算法，将请求分派给后端的真实服务器，真实服务器的响应报文处理之后，返回时必须通过调度器，经过调度器时报文的源地址被重写，再返回给客户，完成整个副在调度过程。LVS的DR和NAT模式要求RS和LVS在同一VLAN 中，导致部署成本过高，TUNNEL模式虽然可以跨vlan，但RealServer 上需要部署ipip隧道模块等，网络拓扑上需要连通外网，教为复杂，不易运维，2、在工作中，运维人员经常需要跟运营人员打交道，请问运营人员是做什么工作的?
LVS+Keepalived高可用群集（无论头上是怎样的天空，我准备着承受任何风暴）
qq_42327944的博客
05-17 365
Keepalived 是一个基于VRRP协议来实现的LVS服务高可用方案，可以解决静态路由出现的单点故障问题。 在一个LVS服务集群中通常有主服务器（MASTER）和备份服务器（BACKUP）两种角色的服务器，但是对外表现为一个浮动IP（VIP），主服务器会发送VRRP通告信息给备份服务器，当备份服务器收不到VRRP消息的时候，即主服务器异常的时候，备份服务器就会接管浮动IP，继续提供服务，从而保证了高可用性。
LVS+Keepalived高可用群集
TTSuzuka的博客
11-22 592
Keepalived 是一个基于VRRP协议来实现的LVS服务高可用方案，可以解决静态路由出现的单点故障问题。Keepalived是专为LVS和HA设计的一款健康检查工具：支持故障自动切换（Failover）支持节点健康状态检查（Health Checking）判断LVS负载调度器、节点服务器的可用性，当master主机出现故障及时切换到backup节点保证业务正常，当master故障主机恢复后将其重新加入群集并且业务重新切换回master节点。
LVS+Keepalived负载均衡高可用群集
云计算运维工程师的成长之路
10-17 789
Keepalived是一个基于VRRP协议来实现的LVS服务高可用方案，可以解决静态路由出现的单点故障问题。可参考VRRP详解与配置实例_Evens7xxX的博客-CSDN博客支持故障自动切换（Failover）和 节点健康状态检查（Health Checking）—— 判断LVS负载调度器、节点服务器的可用性，当master主机出现故障及时切换到backup节点保证业务正常，当master故障主机恢复后将其重新加入群集并且业务。
LVS+KeepAlived+Nginx高可用实现方案.pdf
09-13
"LVS+KeepAlived+Nginx高可用实现方案" LVS（Linux Virtual Server）是一种虚拟服务器集群系统，旨在提供高性能、高可用的服务器解决方案。其主要特点包括可伸缩性、可靠性和可管理性。LVS通过IP负载均衡技术实现...
LVS+Keepalived+MySQL半同步主主复制高可用方案.docx
07-15
LVS+Keepalived+MySQL半同步主主复制高可用方案
Mysql双主热备+LVS+Keepalived高可用操作记录（个人精华版）
08-31
本篇文章详细记录了Mysql双主热备+LVS+Keepalived高可用操作过程,可作为线上长期的实操手册.特此分享,希望能帮助到有用到的朋友.
LVS + DR + Keepalived 高可用群集构建
热门推荐
shenyuanhaojie的博客
10-20 3万+
文章目录一、Keepalived 概述1. 为什么需要 keepalived2. keepalived 是什么 一、Keepalived 概述 1. 为什么需要 keepalived   企业应用中，单台服务器承担应用存在单点故障的危险，单点故障一旦发生，企业服务将发生中断，造成极大的危害和损失。 2. keepalived 是什么   keepalived 软件起初是专为 LVS 负载均衡软件设计的，用来管理并监控 LVS 集群中各个服务节点的状态，后来又加入了可以实现高可用的 VRRP 功能。因此，k
LVS+Keepalived详解
Guo_youyou的博客
07-06 1190
Keepalived首先做初始化先检查state状态，master为主服务器，backup为备服务器。然后再对比所有服务器的priority，谁的优先级高谁是最终的主服务器。优先级高的服务器会通过ip命令为自己的电脑配置一个提前定义好的浮动IP地址。
LVS(三)lvs+keeplive
wzj_110的博客
06-22 630
一 场景引入1 我们知道LVS仅仅是做根据调度算法和策略来做负载均衡的，LVS本身只是调度后端服务器，并不管后端服务器的死活，想想这样一个场景：如果由于由于某种原因，后端服务器挂掉，而调度服务器却不知道，还一个劲头的给其发送请求，后端服务器此时不响应数据，而客户端会处于等待的状态(直到超时)，客户体验不好！ 说明：后续有时间了再模拟这个场景(后端某个服务关闭，观...
LVS+Keepalived
hahaxixi131的博客
01-03 845
文章目录KeepalivedKeepalived概述Keepalived运行原理Keepalived高可用服务器群问题：方案：步骤步骤一：配置网络环境步骤二：安装Keepalived软件步骤三：部署Keepalived服务Keepalived+LVS服务器问题方案：步骤：步骤一：配置网络环境步骤二：配置后台web服务步骤三：调度器安装Keepalived与ipvsadm软件步骤四：客户端测试 Keepalived Keepalived概述 调度器出现单点故障，如何解决 Keeoalived实现了高可用集群
lvs + keepalived
qq_51574973的博客
07-12 738
在一个LVS服务集群中通常有主服务器（MASTER）和备份服务器（BACKUP）两种角色的服务器，但是对外表现为一个虚拟IP，主服务器会发送VRRP通告信息给备份服务器，当备份服务器收不到VRRP消息的时候，即主服务器异常的时候，备份服务器就会接管虚拟IP，继续提供服务，从而保证了高可用性。---------------------LVS 部署---------------------------12行--修改，指定服务器（路由器）的名称，主备服务器名称须不同，主为LVS_01，备为LVS_02。
lvs负载均衡+keepalive高可用
weixin_51052054的博客
01-19 1584
一、实验环境： 母盘为redhat7.6的操作系统，快照出四台虚拟机 给真机和虚拟机都加上地址解析，如上图所示 通过真机的httpd服务给虚拟机搭建7.6的网络软件仓库 关闭防火墙，selinux状态设为disabled 二、lvs： LVS： LVS的基本专业术语： 项目 Value DS Director Server。指的是前端负载均衡器节点 RS Real Server。后端真实的工作服务器 VIP 向外部直接面向用户请求，作为用户请求的目标的IP地址 DIP Di
第三十三章：Lvs+Keepalived+Nginx+Tomcat高可用集群1
08-08
"本资源主要介绍了如何构建一个基于Lvs+Keepalived+Nginx+Tomcat的高可用集群，详细阐述了项目环境、实验思路、重点及实验步骤，旨在实现服务器集群的稳定性和高可用性。" 在这个高可用集群中，LVS（Linux Virtual ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

小柏ぁ

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值