Nginx笔记-05-负载均衡

于 2024-09-22 15:48:17 发布
阅读量1.1k 收藏 9
点赞数 28
分类专栏： Nginx 文章标签： nginx 笔记 负载均衡
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/LLLLLuuusa/article/details/142438195
版权

负载均衡

负载均衡方式

  • 用户手动选择

在这里插入图片描述

  • DNS轮询

在这里插入图片描述

  • 四/七层负载均衡

四/七层负载均衡是目前最主流的负载均衡方式

在这里插入图片描述

所谓四层负载均衡指的是OSI七层模型中的传输层，主要是基于IP+PORT的负载均衡

实现四层负载均衡的方式：
硬件：F5 BIG-IP、Radware等
软件：LVS、Nginx、Hayproxy等

所谓的七层负载均衡指的是在应用层，主要是基于虚拟的URL或主机IP的负载均衡

实现七层负载均衡的方式：
软件：Nginx、Hayproxy等

七层负载均衡

upstream指令

该指令是用来定义一组服务器，它们可以是监听不同端口的服务器，并且也可以是同时监听TCP和Unix socket的服务器。服务器可以指定不同的权重，默认为1。

语法upstream name {…}
默认值—
位置http
upstream 变量{
	server 192.168.200.146:9091;
	server 192.168.200.146:9092;
	server 192.168.200.146:9093;
}
server {
	listen 8083;
	server_name localhost;
	location /{
		proxy_pass http://变量;
	}
}
服务器状态设置

down:将该服务器标记为永久不可用，那么该代理服务器将不参与负载均衡。

backup:将该服务器标记为备份服务器，当主服务器不可用时，将用来传递请求。

max_conns=number:用来设置代理服务器同时活动链接的最大数量，默认为0，表示不限制，使用该配置可以根据后端服务器处理请求的并发量来进行设置，防止后端服务器被压垮。

max_fails=number:设置允许请求代理服务器失败的次数，默认为1。

fail_timeout=time:设置经过max_fails失败后，服务暂停的时间，默认是10秒。

upstream 变量{
	server 192.168.200.133:9001 down;
	server 192.168.200.133:9002 backup;
	server 192.168.200.133:9003 max_fails=3 fail_timeout=15;
}

负载均衡策略

轮询默认方式
weight权重方式
ip_hash依据ip分配方式
least_conn依据最少连接方式
url_hash依据URL分配方式
fair依据响应时间方式
轮询

是upstream模块负载均衡默认的策略。每个请求会按时间顺序逐个分配到不同的后端服务器。轮询不需要额外的配置。

upstream 变量{
	server 192.168.200.146:9001 weight=1;
	server 192.168.200.146:9002;
	server 192.168.200.146:9003;
}
weight加权[加权轮询]

weight=number:用来设置服务器的权重，默认为1，权重数据越大，被分配到请求的几率越大。

upstream 变量{
	server 192.168.200.146:9001 weight=10;
	server 192.168.200.146:9002 weight=5;
	server 192.168.200.146:9003 weight=3;
}
ip_hash

每个Ip只能连接对应的服务器

upstream 变量{
	ip_hash;
	server 192.168.200.146:9001;
	server 192.168.200.146:9002;
	server 192.168.200.146:9003;
}
least_conn

最少连接，把请求转发给连接数较少的后端服务器。

upstream 变量{
	least_conn;
	server 192.168.200.146:9001;
	server 192.168.200.146:9002;
	server 192.168.200.146:9003;
}
url_hash

每个url只能访问对应的服务器

upstream 变量{
	hash &request_uri;
	server 192.168.200.146:9001;
	server 192.168.200.146:9002;
	server 192.168.200.146:9003;
}
fair

fair采用的不是内建负载均衡使用的轮换的均衡算法，而是可以根据页面大小、加载时间长短智能的进行负载均衡。那么如何使用第三方模块的fair负载均衡策略。

upstream 变量{
	fair;
	server 192.168.200.146:9001;
	server 192.168.200.146:9002;
	server 192.168.200.146:9003;
}

因为fair属于第三方模块实现的负载均衡。需要添加nginx-upstream-fair:

  1. 下载nginx-upstream-fair模块
下载地址为:
	https://github.com/gnosek/nginx-upstream-fair
  1. 将下载的文件上传到服务器并进行解压缩
unzip nginx-upstream-fair-master.zip
  1. 重命名资源
mv nginx-upstream-fair-master fair
  1. 使用./configure命令将资源添加到Nginx模块中
./configure --add-module=/root/fair
  1. 在Nginx的源码中 src/http/ngx_http_upstream.h,找到ngx_http_upstream_srv_conf_s，在模块中添加添加default_port属性
in_port_t	   default_port
  1. 编译
make
  1. 将sbin目录下的nginx进行备份
mv /usr/local/nginx/sbin/nginx /usr/local/nginx/sbin/nginxold
  1. 将安装目录下的objs中的nginx拷贝到sbin目录
cd objs
cp nginx /usr/local/nginx/sbin
  1. 更新Nginx
cd ../
make upgrade

四层负载均衡

一般主要使用七层负载均衡,四层使用的较少

stream指令

该指令提供在其中指定流服务器指令的配置文件上下文。和http类似,但只能实现跳转和负载均衡。

语法stream { … }
默认值—
位置main
stream {
        upstream redisbackend {
                server 192.168.200.146:6379;
                server 192.168.200.146:6378;
        }
        upstream tomcatbackend {
        		server 192.168.200.146:8080;
        }
        server {
                listen  81;
                proxy_pass redisbackend;
        }
        server {
        		listen	82;
        		proxy_pass tomcatbackend;
        }
}

Keepalived

使用Keepalived来解决Nginx集群问题

在这里插入图片描述

环境搭建

环境准备

VIPIP主机名主/从
192.168.200.133keepalived1Master
192.168.200.222
192.168.200.122keepalived2Backup

keepalived的安装

步骤1:从官方网站下载keepalived,官网地址https://keepalived.org/
步骤2:将下载的资源上传到服务器
	keepalived-2.0.20.tar.gz
步骤3:创建keepalived目录，方便管理资源
	mkdir keepalived
步骤4:将压缩文件进行解压缩，解压缩到指定的目录
	tar -zxf keepalived-2.0.20.tar.gz -C keepalived/
步骤5:对keepalived进行配置，编译和安装
	cd keepalived/keepalived-2.0.20
	./configure --sysconf=/etc --prefix=/usr/local
	make && make install

安装完成后，有两个文件需要我们认识下，一个是 /etc/keepalived/keepalived.conf(keepalived的系统配置文件，我们主要操作的就是该文件)，一个是/usr/local/sbin目录下的keepalived,是系统配置脚本，用来启动和关闭keepalived

Keepalived配置文件介绍

打开keepalived.conf配置文件

这里面会分三部，第一部分是global全局配置、第二部分是vrrp相关配置、第三部分是LVS相关配置。
本次课程主要是使用keepalived实现高可用部署，没有用到LVS，所以我们重点关注的是前两部分

#global全局部分：
global_defs {
   #通知邮件，当keepalived发送切换时需要发email给具体的邮箱地址
   notification_email {
     tom@itcast.cn
     jerry@itcast.cn
   }
   #设置发件人的邮箱信息
   notification_email_from zhaomin@itcast.cn
   #指定smpt服务地址
   smtp_server 192.168.200.1
   #指定smpt服务连接超时时间
   smtp_connect_timeout 30
   #运行keepalived服务器的一个标识，可以用作发送邮件的主题信息
   router_id LVS_DEVEL
   
   #默认是不跳过检查。检查收到的VRRP通告中的所有地址可能会比较耗时，设置此命令的意思是，如果通告与接收的上一个通告来自相同的master路由器，则不执行检查(跳过检查)
   vrrp_skip_check_adv_addr
   #严格遵守VRRP协议。
   vrrp_strict
   #在一个接口发送的两个免费ARP之间的延迟。可以精确到毫秒级。默认是0
   vrrp_garp_interval 0
   #在一个网卡上每组na消息之间的延迟时间，默认为0
   vrrp_gna_interval 0
}

#VRRP部分，该部分可以包含以下四个子模块
#1. vrrp_script
#2. vrrp_sync_group
#3. garp_group
#4. vrrp_instance
#我们会用到第一个和第四个，
#设置keepalived实例的相关信息，VI_1为VRRP实例名称
vrrp_instance VI_1 {
    state MASTER  		#有两个值可选MASTER主 BACKUP备
    interface ens33		#vrrp实例绑定的接口，用于发送VRRP包[当前服务器使用的网卡名称]
    virtual_router_id 51#指定VRRP实例ID，范围是0-255
    priority 100		#指定优先级，优先级高的将成为MASTER
    advert_int 1		#指定发送VRRP通告的间隔，单位是秒
    authentication {	#vrrp之间通信的认证信息
        auth_type PASS	#指定认证方式。PASS简单密码认证(推荐)
        auth_pass 1111	#指定认证使用的密码，最多8位
    }
    virtual_ipaddress { #虚拟IP地址设置虚拟IP地址，供用户访问使用，可设置多个，一行一个
        192.168.200.222
    }
}

配置内容如下:

服务器1

global_defs {
	#发生切换时发送邮箱通知	
   	notification_email {
        tom@itcast.cn
        jerry@itcast.cn
   }
   notification_email_from zhaomin@itcast.cn #设置邮箱发送者
   smtp_server 192.168.200.1 #指定smpt服务地址
   smtp_connect_timeout 30 #定义邮件发送超时时间
   router_id keepalived1 #主机身份标识信息
   vrrp_skip_check_adv_addr #跳过相邻地址
   vrrp_strict #严格遵守VRRP协议
   vrrp_garp_interval 0 #接口延迟
   vrrp_gna_interval 0 #网卡延迟
}

vrrp_instance VI_1 {
    state MASTER #keepalived角色描述信息
    interface ens33 #将虚拟ip用于那块网卡
    virtual_router_id 51 #实例ID
    priority 100 #优先级
    advert_int 1 #主服务器组播包发送间隔时间
    authentication {
        auth_type PASS #采用明文认证机制
        auth_pass 1111 #明文密码
    }
    virtual_ipaddress {
        192.168.200.222 #设置虚拟ip地址信息
    }
}

服务器2

! Configuration File for keepalived

global_defs {
	#发生切换时发送邮箱通知
   	notification_email {
        tom@itcast.cn
        jerry@itcast.cn
   }
   notification_email_from zhaomin@itcast.cn #设置邮箱发送者
   smtp_server 192.168.200.1 #指定smpt服务地址
   smtp_connect_timeout 30 #定义邮件发送超时时间
   router_id keepalived2 #主机身份标识信息
   vrrp_skip_check_adv_addr #跳过相邻地址
   vrrp_strict #严格遵守VRRP协议
   vrrp_garp_interval 0 #接口延迟
   vrrp_gna_interval 0 #网卡延迟
}

vrrp_instance VI_1 {
    state BACKUPR #keepalived角色描述信息
    interface ens33 #将虚拟ip用于那块网卡
    virtual_router_id 51 #实例ID
    priority 90 #优先级
    advert_int 1 #主服务器组播包发送间隔时间
    authentication {
        auth_type PASS #采用明文认证机制
        auth_pass 1111 #明文密码
    }
    virtual_ipaddress {
        192.168.200.222 #设置虚拟ip地址信息
    }
}

keepalived脚本

keepalived只能做到对网络故障和keepalived本身的监控，即当出现网络故障或者keepalived本身出现问题时，进行切换。但是这些还不够，我们还需要监控keepalived所在服务器上的其他业务，比如Nginx,如果Nginx出现异常了，仅仅keepalived保持正常，是无法完成系统的正常工作的，因此需要根据业务进程的运行状态决定是否需要进行主备切换，这个时候，我们可以通过编写脚本对业务进程进行检测监控。

实现步骤:

  1. 在keepalived配置文件中添加对应的配置像
vrrp_script 脚本名称
{
    script "脚本位置"
    interval 3 #执行时间间隔
    weight -20 #动态调整vrrp_instance的优先级
}
  1. 编写脚本

ck_nginx.sh

#!/bin/bash
num=`ps -C nginx --no-header | wc -l`
if [ $num -eq 0 ];then
 /usr/local/nginx/sbin/nginx
 sleep 2
 if [ `ps -C nginx --no-header | wc -l` -eq 0 ]; then
  killall keepalived
 fi
fi

Linux ps命令用于显示当前进程 (process) 的状态。

-C(command) :指定命令的所有进程

–no-header 排除标题

  1. 为脚本文件设置权限
chmod 755 ck_nginx.sh
  1. 将脚本添加到
vrrp_script ck_nginx {
   script "/etc/keepalived/ck_nginx.sh" #执行脚本的位置
   interval 2		#执行脚本的周期，秒为单位
   weight -20		#权重的计算方式
}
vrrp_instance VI_1 {
    state MASTER
    interface ens33
    virtual_router_id 10
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.200.111
    }
    track_script {
      ck_nginx
    }
}
  1. 如果效果没有出来，可以使用 tail -f /var/log/messages查看日志信息，找对应的错误信息。
  2. 测试
Java培训：高性能web平台openrestry简介
Blue92120的博客
09-25 394
OpenResty® 是一个基于Nginx与Lua的高性能Web平台，其内部集成了大量精良的Lua库、第三方模块以及大多数的依赖项。用于方便地搭建能够处理超高并发、扩展性极高的动态 Web 应用、Web 服务和动态网关。OpenResty® 通过汇聚各种设计精良的 [Nginx] 模块(主要由 OpenResty 团队自主开发)，从而将Nginx有效地变成一个强大的通用Web应用平台。
【笔记】nginx - 下：负载均衡、高可用（keepalived）、下载点、用户认证、集成lua
LawssssCat的博客
01-19 786
# 需求 主页菜单列表改为动态呈现方式 （不同用户登录，看到的菜单是不一样的！） # 实现 服务端设计 step01：设计 VO 对象 （ SysUserMenuVo ） @ 需要的资源：id、name、url --- 基于此对象，封装用户菜单信息(用户访问权限的菜单) public class SysUserMenuVo implements 序列化接口{ UID......
Nginx学习笔记（下载、安装、反向代理、负载均衡、高可用集群配置、原理）
JavaSupeMan的博客
03-17 3671
一、nginx基本概念 （1）nginx是什么，做什么事情 Nginx是一个高性能的HTTP和反向代理服务器 特点：1.占用内存少，并发能力强，有报告声明最高达5万个连接数 2.具有很高的稳定性，其他的HTTP服务器遇到访问的峰值时，可能会导致服务器物理内存耗尽频繁切换，失去响应，只能重启服务器，但是Nginx采用了分阶段资源分配技术，使得它的CPU和内存占用率非常低，所以类似DOS这样的攻击对nginx来说基本上毫无用处。 3.无缓存的反向代理加速，简单的负载均衡和容错 4.模块化的架构 5.支持热部署，
Nginx笔记-汇总篇
LLLLLuuusa的博客
01-16 356
通过本文章读者可系统学习Nginx的原理及其配置
OpenResty 介绍与实战讲解（nginx&lua）
最新发布
匠人精神，持之以恒！
02-18 2962
OpenResty是一个基于 Nginx与Lua的高性能Web平台，其内部集成了大量精良的Lua库、第三方模块以及大多数的依赖项。用于方便地搭建能够处理超高并发、扩展性极高的动态Web应用、Web服务和动态网关。简单地说OpenResty的目标是让你的Web服务直接跑在 Nginx 服务内部，充分利用 Nginx 的非阻塞 I/O 模型，不仅仅对 HTTP 客户端请求,甚至于对远程后端诸如 MySQL、PostgreSQL、Memcached 以及 Redis 等都进行一致的高性能响应。Nginx。
OpenRestry实战六：openrestry基本语法
Sang
09-26 1992
openrestry基本语法 日志输出： ngx.log(log_level, ...) 有关 Nginx 的日志级别，请看下表： ngx.STDERR -- 标准输出 ngx.EMERG -- 紧急报错 ngx.ALERT -- 报警 ngx.CRIT -- 严重，系统故障，触发运维告警系统 ngx.ERR -- 错误，业务不可恢复性错误 ...
使用nginx-haproxy实现七层负载均衡笔记
05-04
Nginx和HAProxy都是高性能的负载均衡器，常用于七层负载均衡场景中。所谓七层负载均衡，指的是负载均衡器能够处理应用层的请求，基于HTTP等协议的内容进行分发，而不仅仅像四层负载均衡那样基于IP和端口进行转发。 ...
lua-nginx-module-0.10.9rc7
01-04
通过结合Nginx的高性能反向代理和负载均衡能力，以及Lua的轻量级和灵活性，我们可以构建出高效且可扩展的Web服务架构。 在使用Lua-Nginx-Module时，务必注意与Nginx及另一个关键模块ngx_devel_kit的兼容性。ngx_...
73-Spring Cloud客户端负载均衡Ribbon笔记1
08-08
在传统的服务端负载均衡中，像Nginx这样的代理服务器会接收请求并根据预设的算法（如轮询、权重轮询、随机等）转发到后端服务。而在客户端负载均衡模式下，服务节点列表存储在每个客户端，客户端自行决定如何选择...
记录nginx-haproxy七层负载均衡实践笔记
# 1. 理解七层负载均衡的概念 ## 1.1 什么是七层负载均衡？ 在计算机网络中，七层负载均衡是指在OSI模型中...## 1.3 nginx和haproxy在七层负载均衡中的作用 - Nginx: Nginx是一种高性能的Web服务器和反向代理服务器
OpenResty使用-安装及开发环境
jcj_2012的专栏
07-21 765
 原创地址：http://jinnianshilongnian.iteye.com/blog/2190344   常用命令： # vi /usr/local/nginx/conf/nginx.conf # vi /usr/server/example/example.conf # /usr/local/nginx/sbin/nginx  -s reload &  tail -...
SYN Flood 是什么？
Ecloud的博客
10-21 2279
SYN Flood 又称 SYN 洪水攻击，也是拒绝服务攻击的一种，是一种曾经很经典的攻击方式。攻击者利用TCP协议的安全缺陷，不断发送一系列的SYN请求到目标系统，消耗服务器系统的资源，从而导致目标服务器不响应合法流量请求。 一次正常的网络请求流程 在谈SYN flood 之前，我们先了解一下一次正常的网络请求都有哪些步骤，从而更清晰的了解SYN Flood的攻击方式。 一般一次正常的网络请求分以下几个步骤： 域名解析 TCP握手建立链接 客户端发起请求 服务器响应请求 客户端解析并且..
OpenRestry使用场景一
热门推荐
David的专栏
08-18 1万+
OpenResty 通过lua脚本扩展nginx功能，可提供负载均衡、请求路由、安全认证、服务鉴权、流量控制与日志监控等服务。很多大厂比如京东、360都在生产环境是用了这个应用程序。2015年底老罗营销锤子的时候顺便让这个程序在程序员圈中火了一把。         OpenResty 处理请求大致分为四个阶段，可在不同阶段使用lua脚本来定制不同行为： 初始化阶段（Initializati...
OpenResty高并发最佳实践--mysql操作
一行Java的博客
01-10 6713
文章目录前言准备代码走着测试 前言 OpenResty虽然为了提高性能更多的是使用的内存数据库(OpenResty操作redis可参考:OpenResty高并发最佳实践–Redis操作)，但是特殊的时候也会存在需要操作数据库的时候，下面介绍如何通过OpenResty操作mysql 准备 不了解OpenResty的可以参考以下文章 OpenResty(Nginx+Lua)高并发最佳实践 Window...
nginx 打开压缩gzip on有什么用
hanfsu的博客
05-15 3980
nginx的gzip打开有什么用在nginx中设置打开压缩打开静态页面看到的差别用wireshark看到的压缩数据HTTP POST请求 在nginx中设置打开压缩 gzip on; gzip_buffers 32 8K; --设置系统获取几个单位的缓存用于存储gzip的压缩结果数据流 gzip_comp_level 6; --数字越小，压缩比越高，需要更多资源 gzip_min_length 2k; gzip_types application/json application/text appl
Nginx、OpenResty和Kong的基本概念与使用方法
lgxzzz的博客
12-02 3187
说明Nginx Nginx配置文件，指令与变量Nginx作为TCP/UDP负载均衡器Nginx模块OpenResty OpenResty安装Kong Kong编译安装启动Kong部署Kong DashboardKong的使用 注册API：添加服务、配置路由插件启用方法Kong的插件Kong与Kubernetes的集成遇到的问题 ERROR: module ‘socket’ not found:No LuaRocks m...
【Linux】OpenResty安装与应用
qq_38377525的博客
06-20 1905
【Linux】OpenResty安装与应用
庆贺添加Nginx板块
技术资料库
04-08 1870
庆贺添加Nginx板块 Nginx 是一个高性能的 Web 和反向代理服务器, 它具有有很多非常优越的特性: 作为 Web 服务器：相比 Apache，Nginx 使用更少的资源，支持更多的并发连接，体现更高的效率，这点使 Nginx 尤其受到虚拟主机提供商的欢迎。能够支持高达 50,000 个并发连接数的响应，感谢 Nginx 为我们选择了 epoll and
Nginx/OpenResty详解，Nginx Lua编程，重定向与内部子请求
公众号：该用户快成仙了
08-26 2118
重定向与内部子请求 Nginx的rewrite指令不仅可以在Nginx内部的server、location之间进行跳转，还可以进行外部链接的重定向。通过ngx_lua模块的Lua函数除了能实现Nginx的rewrite指令的功能之外，还能顺利完成内部子请求、并发子请求等复杂功能。 实战案例运行准备：本节涉及的配置文件为源码工程的nginxlua-demo.conf文件。在运行本节实例前需要修改启动脚本openrestystart.bat（或openresty-start.sh）中的PROJECT_CON
Nginx配置Tomcat集群实现负载均衡教程
这种配置的目标是创建一个Tomcat集群，通过Nginx进行负载均衡，从而提高系统的可用性和性能。 在Nginx的配置中，关键部分是定义上游服务器（即Tomcat实例）和负载均衡策略。例如，可以使用轮询（round-robin）策略...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值