Keepalived+LVS-DR 高可用集群

已于 2022-06-11 17:49:43 修改
阅读量410 收藏
点赞数 1
分类专栏： LVS-负载均衡 keepalived 文章标签： linux http
于 2022-06-11 10:07:16 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/JinLu_/article/details/125205353
版权

目录

一、.Keepalived

1.Keepalived介绍

2.VRRP协议

3.keepalived高可用是如何实现故障切换转移的

4. Keepalived工作原理

5.keepalived的功能和核心组件

1.keepalived服务的三个重要功能：

2.keepalived核心组件

6. keepalived官网

二、使用Keppalived构建LVS-DR模式

1.实验环境 

2.安装keepalived 

第一种安装方法：

第二中安装方法（源码安装）

了解keepalived的文件

配置Keepalived+LVS-DR模式

主节点ds02配置

配置文件详解

修改keepalived.conf配置文件

重启keepalived 服务

安装 ipvsadm

备用节点 ds01配置

修改 keepalived.conf配置文件

启动keepalived： 

安装ipvsadm 

测试主备切换 

keepalived脑裂现象

配置rs1

​编辑 安装httpd

测试VIP 

keepalivd常见的健康检查方式

TCP_CHECK检测：

HTTP_GET检测：

MISC_CHECK检测：

1.Keepalived介绍

keepalived用来管理并监控LVS集群系统中的各个服务器节点状态，主要用来提供故障切换和健康检查功能，还可以做为其他服务的高可用解决方案。如（nginx，mysql等应用）

keepailved软件通过 VRRP协议实现高可用功能，为了解决单点股故障问题

2.VRRP协议

解决网关单点故障的解决方案，VRRP是针对路由器的一种备份解决方案-----由多台路由器组成一个热备组，有master和多个backup（备份），master上面有一个对外提供服务的vip，通过vip地址对外提供服务，每台服务器同一时刻只有一台提供服务，其他服务器处理于冗余状态，当前的主服务器宕机，其他服务器会自动接替（优先级决定接替顺序），虚拟地址（VIP）会自动漂移到新的主

3.keepalived高可用是如何实现故障切换转移的

keepaliced高可用服务对（主备）之间故障切换，主master节点会不断的向备节点发送心跳消息，

告诉备backup 节点还活跃 ，当主节点发生故障vip会转移到新的主服务器上。

4. Keepalived工作原理

keepalived 有 3、4、5 层交换及健康检测功能，IP/TCP协议的 IP 层，TCP层，及应用层

Layer 3层检测：进行ICMP ping包检测，判断主机是否存活

Layer 4层检测：进行端口检测，主要以TCP端口的状态来绝对服务器工作是否正常

Layer 5层检测：做应用层检测，如http的返回状态码是否为200，确认主机是否正常

5.keepalived的功能和核心组件

1.keepalived服务的三个重要功能：

1）管理LVS

2）对LVS集群节点检查

3）作为其他网络服务的高可用功能

2.keepalived核心组件

keepalived也是模块化，不同模块负责不同的功能，主要有三个模块分别是 core、check、VRRP

core模块： 为keepalived核心组件，负责主进程的启动、维护以及全局配置文件加载和解析

check：负责健康检查

VRRP 模块：实现VRRP协议

system call 系统调用

watch dog 监控check和vrrp 进程的看管者

大致如下：

利用 vrrp 协议进行主备通信

利用vrrp协议进行主备竞选，产生VIP

利用 vrpp 协议主向备发送组播包，当备服务器接收不到主服务器的组播包，就会认为主出现故障，主动切换成组

当主恢复时，根据配置决定是否抢占备服务器资源（默认为抢占）

ipvs wrapper：为集群内的所有节点生成IPVS规则

keepalived和LVS是相互配合，各负其责

Keepalived启动后会有三个进程：

父进程：内存管理，子进程管理

子进程：vrrpd子进程

子进程：healthchecker子进程

6. keepalived官网

http://www.keepalived.org/

下载地址：http://www.keepalived.org/download.html

二、使用Keppalived构建LVS-DR模式

1.实验环境 

需要四台主机

vip（虚拟地址）：192.168.30.200

角色主机名IP接口
从调度器ds01192.168.30.11ens33
主调度器ds02192.168.30.10ens33
rs节点1rs01192.168.30.12ens33
rs节点2rs02192.168.30.13ens33

注：关闭防火墙和selinux

Keepalived构建高可用的LVS负载均衡群集，可以调用ipvsadm工具来创建虚拟服务器、管理服务器池，而不仅仅用来做双机热备。

Keepalived构建LVS群集更加简便易用，主要优势体现在：对LVS负载调度器实现热备切换，提高可用性；对服务器池中的节点进行健康检查，自动移除失效点节，恢复后再重新加入

2.安装keepalived 

第一种安装方法：

rpm安装

yum -y install keepalived

查看安装路径：

 rpm -ql keepalived-1.3.5-1.el7.x86_64

第二中安装方法（源码安装）

采用第二中方式安装

在主节点上安装keepalived

解决依赖

yum -y install gcc openssl-devel pcre-devel libnl-devel

tar zxf keepalived-2.0.18.tar.gz 

cd keepalived-2.0.18

 ./configure --prefix=/usr/local/keepalived

 make && make install

了解keepalived的文件

cd /usr/local/keepalived/

 etc下有配置文件etc/keepalived/keepalived.conf

配置Keepalived+LVS-DR模式

虚拟 IP 在某时刻只能属于某一个节点，另一个节点作为备用节点，当主节点不可用时，备用节点接管虚拟 IP，提供正常服务。

主节点ds02配置

keepalived配置文件keepalived.conf，主要包括以下几个配置区域：global_defs、vrrp_instance和virtual_server

global_defs：主要是配置故障发生时的通知对象以及机器标识

vrrp_instance：用来定义对外提供服务的VIP区域及其相关属性

virtual_server：虚拟服务器定义

配置文件详解

! Configuration File for keepalived   #！表示注释

global_defs {                                  #全局定义部分

   router_id ds02                           #表示运行keepalived服务器的一个标识名字可以随便取

}

vrrp_instance lvs-ds02 {
    state MASTER                                 #指定keepalived的角色，此服务为master
    interface ens33                                #指定监测网络的接口
    virtual_router_id 51                          #虚拟路由的标识
    priority 100                                       #定义优先级，数字越大优先级越高，1-255之间
    advert_int 1                                      #设置同步检查的时间间隔，单位是秒
    authentication {                                 #设置验证类型
        auth_type PASS                            #验证类型为PASS
        auth_pass 1111                             #验证的密码                      
    }
    virtual_ipaddress {                             
        192.168.30.200                             #设置虚拟IP
    }
}

virtual_server 192.168.30.200 80 {        #定义虚拟服务器，需指定虚拟ip和端口
    delay_loop 6
    lb_algo rr                                              #设置健康检查时间，单位为秒
    lb_kind DR                                            #设置负载调度算法
    persistence_timeout 50                        #设置会话持续时间
    protocol TCP                                         #设置转发协议的类型

    real_server 192.168.20.12 80 {             #定义realserver，需指定ip和端口
        weight 1                                              #指定权重  
        TCP_CHECK {                                #设置检测后端realserver的方式为获取tcp协议报文      
                 connect_timeout 3                #设置超时时间
                nb_get_retry 3                        #设置超时时候重试几次
                connect_port 80

                delay_before_retry  3               #在重试的时候的时间间隔
        }
    }
real_server 192.168.30.13 80  {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            connect_port 80

            delay_before_retry 3
        }
 }
}

修改keepalived.conf配置文件

ln -s /usr/local/keepalived/sbin/keepalived /usr/sbin/

mkdir /etc/keepalived

cp /usr/local/keepalived/etc/keepalived/keepalived.conf /etc/keepalived/

! Configuration File for keepalived

global_defs {
   router_id ds02
}

vrrp_instance lvs-ds02 {
    state MASTER
    interface ens33
    virtual_router_id 51
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.30.200
    }
}

virtual_server 192.168.30.200 80 {
    delay_loop 6
    lb_algo rr
    lb_kind DR
    #persistence_timeout 50
    protocol TCP

    real_server 192.168.20.12 80 {
        weight 1
        TCP_CHECK {
                 connect_timeout 3
                nb_get_retry 3
                connect_port 80
        }
    }
real_server 192.168.30.13 {
        weight 1
        TCP_CHECK {
            connect_timeout 3
            connect_port 80
        }
 }
}

重启keepalived 服务

systemctl restart keepalived

systemctl enable keepalived

systemctl status keepalived

安装 ipvsadm

安装完不需要做任何配置，启动方式由keepalived 控制

yum -y install ipvsadm

备用节点 ds01配置

安装keepalived 和主节点相同

修改 keepalived.conf配置文件

备用节点的keepalived.conf文件配置与主节点基本相同，只是router_id，state，priority三处不同

把主的配置文件复制到备上做修改： 

scp  /etc/keepalived/keepalived.conf root@192.168.30.11:/etc/keepalived/

修改以下内容： 

 vim /etc/keepalived/keepalived.conf 

router_id ds01   修改id 标识

state BACKUP  修改状态

priority 99  修改优先级

启动keepalived： 

systemctl enable keepalived

systemctl start keepalived

安装ipvsadm 

yum -y install ipvsadm 

测试主备切换 

1.查看主备情况

当主调度器宕掉时vip（虚拟IP） 会漂移到从调度器上

2.测试主备vip地址漂移

 模拟keepalived

systemctl stop keepalived

VIP不在了

查看从调度器情况：

 VIP自动切换到从了

 把停掉的主调度器服务起来：

VIP又漂移回ds02上了，因为这是 keepalived抢占模式，keepalived默认是抢占模式优先级高于从，当主重新加入集群就会抢占回来

keepalived脑裂现象

脑裂可能产生的原因：

        1.在高可用集群之间心跳链路发生故障

                心跳老化，断掉

                IP配置冲突，网卡及驱动坏了

                心跳间连接设备故障（网卡交换机）

2.高可用服务器s防火墙阻挡了心跳消息传输

3.高可用服务器上心跳网卡地址等信息配置不一致

4.其他服务配置不当等原因，如心跳方式不同，心跳广插冲突、软件Bug等

5.Keepalived配置里同一 VRRP实例如果 virtual_router_id两端参数配置不一致也会导致裂脑问题

配置rs1

1.关闭ARP转发（在两台RS上都需要同样的操作）

 vim /etc/sysctl.conf

在尾部添加以下内容

net.ipv4.conf.ens33.arp_ignore = 1

net.ipv4.conf.ens33.arp_announce = 2

使内核参数修改生效：

sysctl -p

2.配置虚拟ip地址（VIP）

生成回环口配置文件：

cd /etc/sysconfig/network-scripts/

cp ifcfg-lo ifcfg-lo:0

vim ifcfg-lo:0

DEVICE=lo:0
IPADDR=192.168.30.200
NETMASK=255.255.255.255
ONBOOT=yes
NAME=loopback

重启network服务：

systemctl restart network

 安装httpd

 yum install -y httpd

 systemctl start httpd

echo "192.168.30.200" > /var/www/html/index.html

（为了测试负载均衡，各个服务器的页面不同）

rs2配置与rs1操作一样

测试VIP 

在主节点 （ds01）查看 lvs 状态

 web访问 VIP 地址：

刷新页面：

注意：要把keepalived配置文件中 #persistence_timeout  连接保持注释掉，要不调度器就会给同一个 web池服务里的主机发请求

keepalivd常见的健康检查方式

TCP_CHECK ：tcp端口检测

HTTP_GET ：http接口检测

MISC_CHECK： 自定义脚本检测

TCP_CHECK检测：

 real_server 172.16.16.177 80 {
            weight 100
            TCP_CHECK {
                connect_port 80  #检测端口，利用80端口检查
                connect_timeout 3  #连接超时时间
                nb_get_retry 3  #重连次数
                delay_before_retry 3  #重连间隔
            }
        }

HTTP_GET检测：

基于状态码的检测

real_server 192.168.30.12 80 {
      weight 1
      HTTP_GET {
          url {
          path /index.html
          status_code 200 #http://192.168.30.12/index.html的返回状态码
            }
            connect_timeout 3
            nb_get_retry 3
            delay_before_retry 3
        }
}

MISC_CHECK检测：

自定义shell 脚本监控

real_server 192.168.30.12 80 {
 weight 100
MISC_CHECK { 
   misc_path "/opt/mytools/check_web.sh 192.168.30.12"  #脚本名，需全路径
   misc_timeout 30   #脚本执行的超时时间
   misc_dynamic          #如果设置了misc_dynamic，healthchecker程序的退出状态码会用来动态调整服务器的权重（weight）。
}
}

脚本来检测，脚本如果带有参数，需将脚本和参数放入双引号内。

脚本的返回值为：

                返回0：健康检查OK，权重不被修改

                返回1：健康检查失败，权重设为0

                返回2-255：健康检查OK，权重设置为：退出状态码 -2，比如返回255，那么weight=255 - 2=253

keepalived检测脚本内容/opt/mytools/check_web.sh，返回0代表检查正常，返回1代表检查异常

vim /opt/mytools/check_web.sh

#!/bin/sh
serverip=$1
curl -s -m 2 http://$serverip
if [ $? -eq 0 ];then
    exit 0
else
    exit 1
fi

 注：curl命令中的-s选项表示静音模式，不输出任何东西。-m选项表示设置数据传输的最大时间。传输的最大允许时间

蟹黄堡！
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
keepalived+LVS-DR集群
w1206507055的博客
06-11 614
Keepalived构建LVS-DR模式的高可用集群
Keepalived+LVS-DR模式配置高可用负载均衡集群
04-29
Keepalived+LVS-DR 模式配置高可用负载均衡集群需要经过多个步骤，包括安装 nginx、安装 ipvsadm、安装 keepalived、配置 LVS-RS、启动 nginx、启动 LVS-RS、启动 keepalived、测试 LVS 负载均衡等。只有通过这些...
Keepalived+LVS构建高可用集群
qq_64612585的博客
03-07 1278
Keepalive 是一种用于监视系统或服务是否处于活动状态的机制。在网络环境中，它通常指定一个周期性的信号或数据包，用于检测设备、服务或连接是否仍然处于活动状态。如果设备或服务停止响应，相应的监视器将触发警报或采取预定义的操作。VRRP 是一种用于提供冗余路由器功能的协议，通过允许多个路由器共享同一个虚拟 IP 地址来提供冗余。这样，即使其中一个路由器失效，网络流量仍然可以被另一个路由器接管，从而保证了网络的连通性和可用性。
Keepalived+LVS+nginx搭建nginx高可用集群
d234343zxdvgbh的博客
05-14 1354
nginx接收到的请求可以通过负载均衡策略分发到其下一级的应用服务器，这些服务器 一般是以集群方式部署的，因而在性能不足的情况下，应用服务器可以通过加机器的方式扩 展流量。此时，对于一些特大型的网站，性能的瓶颈就来自于nginx了，因为单机的nginx的 并发能力是有上限的，而nginx本身是不支持集群模式的，因而此时对nginx的横向扩展就显 得尤为重要。lvs是一款用于四层负载均衡的工具。
搭建Keepalived+LVS+Nginx高可用集群负载均衡
qq_44299529的博客
02-21 2284
原理图 本博客实现时的ip约定 1、为两台主备CentOs7服务器安装Keepalived和LVS 安装keepalived：Keepalived安装_p＆f°的博客-CSDN博客 安装LVS请看此博客第一点：搭建LVS-DR模式_p＆f°的博客-CSDN博客（一、配置LVS节点与ipvsadm） 2、 安装完keepalived后，进入配置目录，修改配置文件（151主节点和152备用节点都要修改，这里先说主节点） cd /etc/keepalived/ cp keepalive
keepalived+lvs实现nginx高可用集群
csdncjh的博客
06-11 489
# 关闭防火墙关闭selinux192.168.10.130 192.168.10.131# 安装ipvs sudo yum -y install ipvsadm#启动ipvs sudo ipvsadm#查看是否支持lvs： sudo lsmod |grep ip_vs 出现如下结果说明安装成功#配置虚拟ip我们需要配置虚拟ip，这是因为我们使用的lvs调度器是DR模式，前面我们讲到过，这种模式下，对客户端的响应是真实服务器直接返回给客户端的，而真实服务器需要将响应报文中的源ip修改为虚拟ip，这里配置的虚
Keepalived+LVS（DR模式）安装部署实战详细教程
少说，多做
03-16 5979
Keepalived 的设计目的是构建高可用的LVS负载均衡群集，可以调用ipvsadm工具来创建虚拟服务器，管理服务器池，而不仅仅用作双机热备。使用Keepalived 构建LVS群集更加简便易用，主要优势体现在：对LVS负载均衡调度器实现热备切换，提高可用性；对服务器池中的节点进行健康检查，自动移除失效节点，恢复后再重新加入。
部署 反向代理高可用(keepalived+LVS-DR)、web集群动静分离（nginx+tomcat）、MySQL集群(MHA高可用+一主两从+读写分离)、NFS共享文件 项目
搬着砖，敲着代码的博客
04-19 922
部署反向代理高可用(keepalived+LVS-DR)、web集群动静分离（nginx+tomcat）、MySQL集群(MHA高可用+一主两从)、NFS 项目
keepalived+LVS-DR集群搭建
菜鸟、上路
07-16 334
一、 keepalived概述 keepalived 是一个类似于 layer3, 4 & 5 交换机制的软件，也就是我们平时说的第 3 层、第 4 层和第 5层交换。 Keepalived 的作用是检测 web 服务器的状态，如果有一台 web 服务器死机，或工作出现故障，Keepalived 将检测到，并将有故障的 web 服务器从系统中剔除，当 web 服务器工作正常后...
RabbitMQ + Keepalived + lvs高可用镜像集群
weixin_61718665的博客
03-25 2027
如图所示： 前端采用keepalived+lvs实现高可用负载均衡， RabbitMQ HA 队列（镜像队列）进行消息队列结构复制。本方案中搭建两个节点，并且都是磁盘节点（所有节点状态保持一致，节点完全对等），只要有任何一个节点能够工作，RabbitMQ 集群对外就能提供服务。任务处理进程同时监控每一太RabbitMQ节点（每个节点都相应部署一份任务处理模块）。这样一来,每一份任务处理模块只需要处理自己所监听的rabbitMQ-server接受的任务即可,两份任务处理模块功能完全一致，但相互不影响；当其..
第三十三章：Lvs+Keepalived+Nginx+Tomcat高可用集群1
08-08
LVS+Keepalived+Nginx+Tomcat 高可用集群项目 本文主要讲述了如何构建一个高可用集群项目，使用 LVS、Keepalived、Nginx 和 Tomcat 实现高可用性和负载均衡。该项目的架构中，Keepalived 负责对 LVS 架构中的调度器...
Keepalived + LVS(DR) 高可用负载均衡集群
04-17
【标题】：“Keepalived + LVS(DR) 高可用负载均衡集群”是指通过结合Keepalived软件和LVS（Linux Virtual Server）的DR（Direct Routing）模式，构建一个高可靠性和负载均衡的服务器集群解决方案。这个组合使得在主...
使用keepalived搭建高可用的LVS-DR集群
04-25
keepalived 是一个类似于 layer3, 4 & 5 交换机制的软件，也就是我们平时说的第 3 层、第 4 层和第 5层交换。 Keepalived 的作用是检测 web 服务器的状态，如果有一台 web 服务器死机，或工作出现故障，Keepalived ...
LVS+KeepAlived+Nginx高可用实现方案.pdf
09-13
"LVS+KeepAlived+Nginx高可用实现方案" LVS（Linux Virtual Server）是一种虚拟服务器集群系统，旨在提供高性能、高可用的服务器解决方案。其主要特点包括可伸缩性、可靠性和可管理性。LVS通过IP负载均衡技术实现...
Windows 下的sqlserver数据拷贝到linux
cyw8998的专栏
07-25 277
2.在 >1 提示符下，输入以下 RESTORE DATABASE 命令，并在每行后按 Enter（无法同时复制和粘贴整个多行命令）。将出现的所有 gpdb 替换为数据库的名称。1.启动 sqlcmd。下面的示例以 SA 用户身份连接到本地 SQL Server。出现提示时输入密码，或使用 -P 参数指定密码。SSH打开linux终端。
Linux：进程信号（二.信号的保存与处理、递达、volatile关键字、SIGCHLD信号）
qq_74415153的博客
07-25 1192
1.信号保存 1.1递达、未决、阻塞等概念 1.2再次理解信号产生与保存 1.3信号集操作函数 sigset_t类型 sigprocmask系统调用 sigpending系统调用 2.信号的处理/递达 2.1信号处理时机与过程 2.2用户态和内核态 2.3再看进程地址空间 谁来运行OS 2.4信号的捕捉-sigaction()函数 3.补充知识 3.1可重入函数 3.2volatile关键字 3.3 SIGCHLD信号
【Linux】通过分配虚拟内存的方式来解决因内存不够而导致部署的项目自动挂掉
smile_sundays的博客
07-24 782
（6）这样配置，每次服务器重启，就没了，所以设置开机自动挂载 Swap 分区，编辑文件 /etc/fstab，在下面加入：/var/swap　　swap　　swap　　default　　0 0。第一种方法：进行JVM调优可以改善这种情况，但是项目太多，我们的个人服务器配置实在太低，仍然无法解决此问题，这里不做讨论了。（5）启动完项目后，执行： ps aux | grep java 查看所有服务，看看是否还会再挂，一般就不会了。（2）划分虚拟内存分区（大小为2G），执行命令会卡一小会无响应。
Linux初学基本命令
最新发布
yuan20010401的博客
07-25 621
1、rm 文件名称 删除多个文件多个目录需要用空格 删除根目录（rm -rf /*）1、touch 文件名字 用于linux创建文件 创建多个目录需要用空格隔开。2、mkdir 目录名称 用于创建文件夹 创建多个嵌套文件夹需要用/隔开。1、cp 当前文件 其他目录名称 拷贝文件夹需要在最后 -r。退出不保存时按Esc+:q!1、ls 查看当前目录下面的文件或者文件夹。2、more 文件名称 查看文件更多内容。1、mv 原文件路径 目标文件路径。退出保存时按Esc + :wq。
keepalived+lvs（DR）高可用集群的作用
05-30
Keepalived+lvs（DR）高可用集群的主要作用是提高服务的可用性和负载均衡能力。 在一个高可用集群中，如果Master节点出现故障，Keepalived会自动将Backup节点中的一台升级为Master节点，以保证服务的持续可用性。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

蟹黄堡！

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值