分布式专题-高性能的Web容器之Nginx03-Nginx高可用方案

最新推荐文章于 2024-05-04 21:01:28 发布
最新推荐文章于 2024-05-04 21:01:28 发布
阅读量495 收藏 5
点赞数
分类专栏： 分布式专题 文章标签： 分布式 nginx keepalived 高可用
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_34361283/article/details/105307954
版权

目录导航

前言

前面我们讲了Nginx的两节内容，主要是基本的使用，这一节，主要讲一下keepalived轻量级的高可用解决方案！

Nginx进程模型简介

Nginx采用的是多进程+多路复用的模型

首先正常启动Nginx，我们发现操作系统有如下进程：
在这里插入图片描述
实际上Nginx启动，会产生两种进程：

  • master进程（管理worker子进程）
  • worker进程（基于master进程fork出来的，可以有多个worker进程）
  1. 当Nginx收到请求后，会向发送一个信号，通过worker进程处理
    在这里插入图片描述
  2. 如果有多个worker进程， 则多个worker进程之间存在竞争，因此在整个模型里，我们认为是worker之间的关系是互斥的。每个进程之间存在增强，去获取处理进程的权力。
  3. 当worker获取权限成功后，此worker来处理当前请求，而处理请求的方式就是多路复用

nginx.conf
在这里插入图片描述
在上一节，我们主要测试了http的相关属性，现在我们看http字段上部的配置文件都是做什么用的？

# 指定用户
#user  nobody;
# 工作进程数，一般将数量设置为当前机器的cpu 总核心数
worker_processes  1;

#error_log  logs/error.log;
#error_log  logs/error.log  notice;
#error_log  logs/error.log  info;

#pid        logs/nginx.pid;


events {
    # io 模型（linux）
    use epoll ;	
    # 理论上 并发连接数为 ：processes* connections
    worker_connections  1024;
}

Nginx高可用方案

Nginx 作为反向代理服务器，所有的流量都会经过 Nginx，所以 Nginx 本身的可靠性是我们首先要考虑的问题

服务器架构演进过程

裸奔架构

  • 工作流程：客户端访问某某域名，如 www.baidu.com , 则会被 DNS 解析成实际的服务地址并告诉客户端，之后客户端带着服务地址去请求单点的服务器。
  • 架构缺陷：如果 Tomcat 挂掉，DNS 并不知情。
    在这里插入图片描述

集群模式

  • 工作流程：将服务器设置成集群模式，防止单点故障。同时 DNS 采取轮询策略告诉客户端都有哪些机器是你当前域名可以访问的。
  • 架构缺陷：多个客户端访问多个机器可能造成访问不均，导致服务崩溃。
    在这里插入图片描述

Nginx的引入

  • 工作流程：使用Nginx做负载均衡，不论是哪种策略，都可以有效的避免 QPS 问题。
  • 架构缺陷：单点 Nginx 布置，一旦 Nginx 挂掉，则失去负载均衡服务器的意义。
    在这里插入图片描述

Nginx的集群模式

  • 工作流程：通过 Keepalived 实现 Nginx 的高可用（此过程下面会有详细介绍）。
  • 架构缺陷：如果Nginx的吞吐量达到瓶颈怎么办？
    在这里插入图片描述

高性能负载

  • 工作流程：硬负载可以采用 F5 服务器，软负载可以采用 LVS负载均衡。
  • 架构缺陷：资金成本预算～实际上成熟的互联网架构多采用这样的方式。
    在这里插入图片描述

Keepalived

Keepalived 是 Linux 下一个轻量级别的高可用解决方案，Keepalived 软件起初是专为 LVS 负载均衡软件设计的，用来管理并监控 LVS 集群系统中各个服务节点的状态，后来又加入了可以实现高可用的 VRRP 功能。因此，Keepalived 除了能够管理 LVS 软件外，还可以作为其他服务（例如：Nginx、Haproxy、MySQL 等）的高可用解决方案软件

Keepalived 软件主要是通过 VRRP 协议实现高可用功能的。VRRP 是 Virtual Router RedundancyProtocol(虚拟路由器冗余协议）的缩写，VRRP 出现的目的就是为了解决静态路由单点故障问题的，它能够保证当个别节点宕机时，整个网络可以不间断地运行;(简单来说，vrrp 就是把两台或多态路由器设备虚拟成一个设备，实现主备高可用)

所以，Keepalived 一方面具有配置管理 LVS 的功能，同时还具有对 LVS 下面节点进行健康检查的功能，另一方面也可实现系统网络服务的高可用功能

LVS 是 Linux Virtual Server 的缩写，也就是 Linux 虚拟服务器，在 linux2.4 内核以后，已经完全内置了 LVS 的各个功能模块。

它是工作在四层的负载均衡，类似于 Haproxy, 主要用于实现对服务器集群的负载均衡。

关于四层负载，我们知道 osi 网络层次模型的 7 层模模型（应用层、表示层、会话层、传输层、网络层、数据链路层、物理层）；四层负载就是基于传输层，也就是ip+端口的负载；而七层负载就是需要基于 URL 等应用层的信息来做负载，同时还有二层负载（基于 MAC）、三层负载（IP）；
常见的四层负载有：LVS、F5； 七层负载有:Nginx、HAproxy; 在软件层面， Nginx/LVS/HAProxy 是使用得比较广泛的三种负载均衡软件

对于中小型的 Web 应用，可以使用 Nginx、大型网站或者重要的服务并且服务比较多的时候，可以考虑使用 LVS

轻量级的高可用解决方案

通过以上的介绍，现在我们通过keepalived搭建一个轻量级的高可用的负载均衡架构
在这里插入图片描述

粉色框框代表高可用

在实验之前，先了解一些名词

  • LVS 四层负载均衡软件（Linux virtual server）：监控 lvs 集群系统中的各个服务节点的状态

  • VRRP 协议（虚拟路由冗余协议）

linux2.4 以后，是内置在 linux 内核中的

lvs负载
4层HAproxy
4层Nginx

在这里插入图片描述

Keepalived离线安装

yum install -y keepalived 在线安装，这里跳过不说，哈哈。主要说一下Keepalived离线安装~

环境准备
linux2: 192.168.200.112(Tomcat、Nginx、Keepalived-master)
linux3: 192.168.200.113(Tomcat、Nginx、Keepalived-backup)
keepalived：keepalived-2.0.20.tar.gz

  1. 下载 keepalived 的安装包
    keepalived下载地址
    开源项目，国内网络无须加速，直接下载即可
    在这里插入图片描述

  2. 在/data/program/目录下创建一个 keepalived 的文件,同时解压keepalived
    在这里插入图片描述

  3. cd 到 keepalived-2.0.20 目录下，执行 ./configure – prefix=/data/program/keepalived --sysconf=/etc
    在这里插入图片描述

  4. 如果缺少依赖库，则 yum install gcc; yum install -y openssl-devel ; yum install -y libnl libnl-devel;yum install -y libnfnetlink-devel
    在这里插入图片描述
    yum安装软件
    在这里插入图片描述
    因为我这里本地之前安装成功过Nginx，所以gcc等依赖是不用安装的，读者可自行根据提示安装不足的软件即可。

    重新执行安装
    重新执行步骤4的安装命令 ./configure – prefix=/data/program/keepalived --sysconf=/etc
    在这里插入图片描述

  5. 安装结束不能报错（下面截图为安装末尾的输出日志）：在这里插入图片描述
    否则需要根据缺少的依赖自行安装

  6. 编译安装 make && make install
    在这里插入图片描述
    可能会出现警告，告诉你当前不再安装目录下，但是不要紧，看我们新建的keepalived下是否有文件输出
    在这里插入图片描述

  7. 进入安装后的路径 cd /data/program/keepalived, 创建软连接: ln -s sbin/keepalived /sbin
    在这里插入图片描述

cp /data/program/keepalived-2.0.20/keepalived/etc/init.d/keepalived /etc/init.d

在这里插入图片描述
分别输入命令：

chkconfig --add keepalived

chkconfig keepalived on

service keepalived start

在这里插入图片描述

图上的报错直接将运行文件放到/usr/sbin下

cp /data/program/keepalived-2.0.20/bin/keepalived /usr/sbin

  1. service keepalived status
    查看keepalived的状态，正在运行表示安装成功！
    在这里插入图片描述
keepalived的配置

keepalived 的默认配置文件地址：/etc/keepalived/keepalived.conf

master

在192.168.200.112这台机器上的keepalived作为master，修改配置文件为：

!Configuration File for keepalived 
global_defs {
     #运行keepalived 服务器的标识，在一个网络内应该是唯一的
     router_id LVS_DEVEL
}
#vrrp 实例定义部分
vrrp_instance VI_1 {	
	#设置 lvs 的状态，MASTER 和 BACKUP 两种，必须大写
    state MASTER	
	#设置对外服务的接口
	interface eth0
    #设置虚拟路由标示，这个标示是一个数字，同一个 vr rp 实例使用唯一标示
    virtual_router_id 51 
    #定义优先级，数字越大优先级越高，在一个 vrrp——instance 下， master 的优先级必须大于 backup
    priority 100 
	#设定 master 与 backup 负载均衡器之间同步检查的时间间隔，单位是秒
	advert_int 1 
    #设置验证类型和密码
	authentication {	
		auth_type PASS
	    #验证密码，同一个 vrrp_instance 下 MASTER 和 BACKUP密码必须相同
	    auth_pass 1111
    }
	virtual_ipaddress { 
   		#设置虚拟 ip 地址，可以设置多个，每行一个
        192.168.11.100
    }
}
#设置虚拟服务器，需要指定虚拟 ip 和服务端口
virtual_server 192.168.11.100 80 { 
   #健康检查时间间隔 
   delay_loop 6
   #负载均衡调度算法 
   lb_algo rr 
   #负载均衡转发规则
   lb_kind NAT 
   #设置会话保持时间 
   persistence_timeout 50
   #指定转发协议类型，有 TCP 和 UDP 两种
   protocol TCP 
   #配置服务器节点 1，需要指定 real serve r 的真实 IP 地址和端口
   real_server 192.168.200.112 80 {
   #设置权重，数字越大权重越高
   weight 1	
   		#realserver 的状态监测设置部分单位秒
   		TCP_CHECK { 
        	#超时时间 
            connect_timeout 3
            #重试间隔
            delay_before_retry 3
            #监测端口
            #connect_port 80
        }
    }
}

其中的interface的网卡配置，就看你本地机器的网卡名称即可：
在这里插入图片描述

backup

在192.168.200.113这台机器上的keepalived设置为backup，配置文件内容为：

!Configuration File for keepalived 
global_defs {
     router_id LVS_DEVEL
}
vrrp_instance VI_1 {	
    state BACKUP	
	interface eth0	
    virtual_router_id 51 
    priority 100 
	advert_int 1 
	authentication {	
		auth_type PASS
	    auth_pass 1111
    }
	virtual_ipaddress { 
        192.168.11.100
    }
}
virtual_server 192.168.11.100 80 { 
   delay_loop 6
   lb_algo rr 
   lb_kind NAT 
   persistence_timeout 50
   protocol TCP 
   real_server 192.168.200.113 80 {
   weight 1	
   		TCP_CHECK { 
            connect_timeout 3
            delay_before_retry 3
            connect_port 80
        }
    }
}

设置Nginx跳转Tomcat，即
linux2的nginx->linux2的Tomcat
linux3的nginx->linux3的Tomcat
在这里插入图片描述
linux2的nginx配置同理，不截图了

启动linux2与linux3的Tomcat与Nginx
启动Tomcat：
在这里插入图片描述
启动Nginx：
在这里插入图片描述
分别启动完linux2与linux3的tomcat与nginx后，我们分别测试一下：
在这里插入图片描述
这是很经典的Nginx做跳转，指向8080端口的tomcat（linux2机器这里不截图了）
启动Keepalived

service keepalived start

在这里插入图片描述
最终效果，如本节前面的流程图所示，通过keepalived配置的虚拟ip，转到nginx，再转到tomcat：
在这里插入图片描述

keepalived 日志文件配置
  1. 首先看一下/etc/sysconfig/keepalived 文件

vi /etc/sysconfig/keepalived KEEPALIVED_OPTIONS="-D -d -S 0"
“-D” 就是输出日志的选项,这里的“-S 0”表示 local0.* 具体的还需要看一下/etc/syslog.conf 文件

  1. 在/etc/rsyslog.conf 里添加:local0.* /var/log/keepalived.log

  2. 重新启动 keepalived 和 rsyslog 服务：

service rsyslog restart
service keepalived restart

通过脚本实现动态切换

当Nginx挂掉怎么办？keepalived也应该随时停止服务，否则可能会一直转发，我们说，keepalived是为解决Nginx的高可用而生，那么Nginx一旦挂掉，keepalived也就没有必要继续提供服务了。
这里我们就通过脚本来动态控制Keepalived和Nginx的服务状态！(即当Nginx挂掉后，触发脚本，以停止keepalived，脚本可以通过keepalived的配置设定)

  1. 在 master 和 slave 节点的 /data/program/nginx/sbin/nginx-ha-check.sh 目录下增加一个脚本
#! /bin/sh #是指此脚本使用/bin/sh 来执行

# –no-headers ：不打印头文件 
# Wc –l ：统计行数
A=`ps -C nginx --no-header |wc -l`

if [ $A -eq 0 ]

then
# nginx挂掉，则停止keepalived服务
echo 'nginx server is died'
service keepalived stop

fi
  1. 修改 /etc/keepalived/keepalived.conf 文件，增加如下配置
! Configuration File for keepalived

global_defs {
   router_id LVS_DEVEL
   # 安全策略
   enable_script_security
}
# 设置vrrp_script，名称为：chk_nginx_service 
vrrp_script chk_nginx_service {
  # 指定脚本路径
   script "/data/program/keepalived/nginx-ha-check.sh"
   # 检查频次
   interval 3
   # 主备的优先级顺序，必须指定
   weight -10
   # 设置用户执行权限
   user root
}

vrrp_instance VI_1 {
    state MASTER
    interface eth0
    virtual_router_id 51
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.11.100
    }
    # track_script: 执行监控的服务
    track_script {
     # chk_nginxs_ervice 引用 VRRP 脚本，即在 vrrp_script 部分指定的名字。定期运行它们来改变优先级，并最终引发主备切换。
      chk_nginx_service
    }
}

转载：keepalived 关于vrrp_script中的weight这个值的使用

  1. 测试

赋予脚本权限：

在这里插入图片描述
重启keepalived
在这里插入图片描述
执行脚本：
在这里插入图片描述
如果nginx挂掉，脚本会自动停止keepalived，如果nginx没有挂掉，则脚本不会生效。证明配置成功~

后记

更多架构知识，欢迎关注本套Java系列文章：Java架构师成长之路

✎ℳ๓₯㎕...雲淡風輕
关注
  • 0
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
nginx搭建高可用集群的实现方法_nginx
shengyin714959的博客
04-19 269
目录。
搭建Nginx高可用集群（keepalived+双机热备）
热门推荐
weixin_59566851的博客
05-25 1万+
一、Nginx高可用 首先了解一下什么是高可用，高可用是分布式系统架构中必须考虑的因素。 我们都知道，使用nginx的反向代理和负载均衡可以解决tomcat等web容器的单点故障以及高并发等问题。 反向代理是指以代理服务器来接收浏览器的请求，然后再将请求转发到内网的服务器，然后再将从服务器上得到的结果返回给客户端。负载均衡就是要解决一个web服务器压力过大的问题，此时可以通过多个web服务器根据不同的算法将并发过来的请求分配到多个服务器上，从而减轻单个服务器压力过大的问题。 这样的话，当一台web服
nginx 学习 ---＞＞＞ nginx 配置高可用集群
wowo
07-10 1451
7、配置示例 -> 高可用集群 1、什么是 nginx 的高可用 已知nginx是一台服务器，所以她会有宕机的风险，而为了预防这个情况就需要准备另一台 nginx 接替这个随时可能宕机的 nginx 的工作。但是nginx是通过监听ip地址端口号接收客户端请求并转发到指定服务器上的。而新的nginx它的系统ip跟宕机的系统ip不一样，所以就要引入一个虚拟ip【她本身不存在】，让 nginx 们都对外经营这一个ip，一个坏了就另一个接着经营【当主服务器宕机后，把虚拟ip就绑定到从服务器上】，这样就不会出
Nginx（搭建高可用集群）
最新发布
Sun的个人博客
05-04 1518
注意：这里由于tomcat1在主Nginx上，一旦主Nginx崩溃，则这个tomcat就不可用，所以才需要在从Nginx也搭建一份，如果部署在独立主机上就不需要，就像这个tomcat2。
Nginx的高可用集群
每天学习一点点
12-04 8958
只有一台nginx服务器时，如果nginx服务器宕机了，那么请求就无法访问。 要实现高可用，那就可以部署多台nginx服务器，下面以两台nginx服务器为例，示意图如下：要配置nginx集群，至少需要满足一下条件： （1）需要两台nginx服务器 （2）需要keepalived （3）需要虚拟ip 安装过程遇到了报错，解决方法参考：nginx+keepalived配置踩过的坑_steven在学习的博客-CSDN博客安装完成后查看版本信息： 安装之后，在etc里面生成目录 keepalived，有文件 ke
nginx学习(5)Nginx 配置高可用集群（主从配置）
weixin_47139678的博客
11-20 1916
1、使用 ip a 查看主服务器的虚拟IP，进行访问。http://172.31.0.152/，成功访问！1、使用 ip a 查看从服务器的虚拟IP，进行访问。1.2第一台用默认的配置80端口，第二台用81端口。接着重启nginx，启动keepalived。接着重启nginx，启动keepalived。在两台服务器安装keepalived。1.1在两台服务器安装 nginx。
nginx+tomcat高可用、高性能jsp集群
08-23
在现代互联网服务中，提供高可用性和高性能的Web应用是至关重要的。本文将详细介绍如何使用Nginx作为负载均衡器，与Tomcat配合，构建一个支持JSP的集群环境。这个组合可以有效地分发用户请求，提高系统的稳定性和...
构建高性能WEB站点(完整版)
10-08
《构建高性能WEB站点》是一本全面探讨Web系统优化的著作，涵盖了从客户端浏览器到服务器端的各个关键环节，旨在帮助开发者和运维人员提升网站的性能和用户体验。这本书深入剖析了Web系统的瓶颈，并提供了实用的解决...
开涛高可用高并发-亿级流量核心技术
03-22
18 使用OpenResty开发高性能Web应用 360 18.1 OpenResty简介 361 18.1.1 Nginx优点 361 18.1.2 Lua的优点 361 18.1.3 什么是ngx_lua 361 18.1.4 开发环境 362 18.1.5 OpenResty生态 362 18.1.6 场景 362 18.2 基于...
J2EE分布式框架--技术介绍文档.docx
11-26
- **Dubbo服务管控**：提供高性能的服务治理。 - **Zookeeper注册中心**：实现服务的发现和注册。 - **Redis分布式缓存**：加速数据访问。 - **FastDFS分布式文件系统**：处理大量文件存储需求。 - **ActiveMQ...
实战Nginx_取代Apache的高性能Web服务器
12-11
《实战Nginx：取代Apache的高性能Web服务器》是一本深度探讨Nginx技术的书籍，作者张宴通过丰富的实践经验和深入的技术解析，为读者揭示了Nginx的强大功能和高效性能。Nginx作为现代互联网架构中的重要一环，其轻量...
Nginx+keepalived双机热备（主从模式）高可用集群方案-完整部署记录（个人珍藏版）
08-29
本片详细记录了Nginx+keepalived双机热备（主从模式）高可用集群方案-完整部署过程，讲解十分到位，可作为线上实操手册。特在此分享，希望能帮助到有用到的朋友。
生产环境之Nginx高可用方案实现过程解析
01-11
准备工作： 192.168.16.128 192.168.16.129 两台虚拟机。安装好Nginx 安装Nginx 更新yum源文件： rpm -ivh http://nginx.org/packages/centos/7/noarch/RPMS/nginx-release-centos-7-0.el7.ngx.noarch.rpm wget -O /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo 安装Nginx: yum -y install nginx 操作命令： syste
生产环境nginx集群高可用方案
keyboard专栏
09-10 5836
搭建架构图 第一步：安装nginx 1、下载openssl主要用于ssl模块加密，支持htps wget https://www.openssl.org/source/openssl-1.0.2s.tar.gz 2、下载 pcre来实现地址重定向，地址重写功能和localtion指令以及正则表达式的支持 wget https://ftp.pcre.org/pub/pcre/pcre-8.43.tar.gz 3、下载zlib gzip压缩模块 wget https://zlib.net/zlib-1.2
5.Nginx高可用解决方案LVS+KeepAlived
weixin_43620238的博客
08-05 870
Nginx高可用解决方案LVS+KeepAlived；HaVIP结合keepalived实现主备双机高可用
Nginx集群的高可用-keepalived
爱玩的小张的博客
02-26 447
Keepalived 是一个用 C 语言编写的路由软件。这个项目的主要目标是为 Linux 系统和基于 Linux 的基础设施提供简单而强大的负载均衡和高可用性功能。 Keepalived 开源并且免费的软件。
nginx+keepalived实现nginx高可用集群
m0_38004228的博客
12-16 3566
nginx+keepalived实现nginx高可用集群
nginx调研文档
infi
12-06 1011
1  nginx是什么     nginx是一款轻量级的Web 服务器/反向代理服务器及电子邮件（IMAP/POP3）代理服务器。 基本功能： Web服务器 提供静态内容服务 反向代理 压缩和解压缩 Web内容缓存   2 nginx安装 见http://nginx.org/e
2022年优秀-高性能Web服务器Nginx及相关新技术的应用实践.ppt
11-20
该文档“2022年优秀-高性能Web服务器Nginx及相关新技术的应用实践.ppt”介绍了Nginx及其相关新技术在高性能Web服务器领域的应用实践。Nginx被定义为一个高性能的Web服务器，具有高并发连接能力、低内存消耗、简单...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值