【负载均衡知识点及nginx应用】

已于 2024-07-03 19:48:59 修改
阅读量841 收藏 28
点赞数 9
文章标签： 负载均衡 nginx 运维
于 2024-07-03 19:47:55 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44353557/article/details/140044115
版权

目录

一、核心目的

单体架构的问题：
（1）随着用户量的增加，请求量也会增加，软件的性能逐步下降，访问延迟增加
（2）单体架构容易出现单体故障
负载均衡的核心目的：
让客户端的请求合理的、均匀的分发到多台服务器上，由于请求被多个节点分发，使得服务器端的性能得到有效的提升

二、实现方法

（1）基于DNS实现负载均衡

方式：通过域名去访问某个网站的时候，会先通过DNS服务器进行域名解析得到一个IP地址，DNS服务器可以随机的选择IP进行访问，实现目标集群的请求分发。DNS服务器支持就近访问原则，缩短网络通信的距离，提升整个网站的请求效率。
优点：配置简单，实现成本低，不需要额外开发成本
缺点：DNS服务器有多级缓存特性，当去修改IP配置时可能由于缓存导致IP变更不及时影响负载均衡效果。
基于DNS实现负载均衡

（2）基于硬件实现负载均衡

硬件负载设备可以简单的理解为一个网络设备，类似于网络交换机，每秒钟可处理百万级请求，同时可以支持多种负载均衡算法，可以非常灵活的配置不同的负载策略，还具有防火墙等安全功能，硬件负载是专业的商业设备，企业不用花专门的经历去维护。

（3）基于软件实现负载均衡

常用的软件负载技术：nginx、LVS、HAProxy等，目前互联网企业绝大部分采用的是软件负载均衡
优点：免费、开源、灵活性比较高

三、作用范围

（1）二层负载

基于MAC地址实现的请求分发，采用虚拟MAC地址实现，服务器收到请求之后，通过动态分配后端服务器的实际MAC地址来响应，实现负载均衡

（2）三层负载

基于IP层实现的请求分发，外部请求访问通过访问虚拟IP，服务器收到请求之后根据后端的实际IP地址实现负载均衡

（3）四层负载

基于请求报文中的目标地址和端口来进行负载的。nginx、F5、LVS都可以实现四层负载
在这里插入图片描述

（4）七层负载

基于应用层的负载，服务器端可以根据http协议中请求的报文信息，来决定请求分发到哪个服务器上。比如可以根据cookie、消息体、ResquestHeader等信息去做分发
在这里插入图片描述

四、常用负载均衡算法

1.解释

决定当前请求匹配到目标服务器的具体哪个节点的算法

2.方式

（1）轮询：多台服务器按照顺序轮询方式，每个服务器可以获得相同的请求次数
（2）随机：根据随机算法，每一台服务器获得的请求次数随机
（3）一致性HASH：对于有相同HASH码的请求，永远发到同一台服务器上
（4）最小连接数：根据目标服务器的服务数量决定分发数

五、Nginx

（一）基本概念

（1）一个高性能的HTTP和反向代理web服务器
（2）同时也提供了IMAP/POP3/SMTP服务
（3）特点：占用内存少，并发能力强
（4）Nginx提供的负载均衡策略：内置策略（轮询、加权轮询、Ip hash）和扩展策略
（5）动静分离：在软件开发中，有一些请求是不需要经过后台处理的（CSS\HTML\JPG\JS等文件），这些不需要经过后台处理的文件称之为静态文件。让动态网站里的动态网页根据一定规则把不变的资源和经常变的资源区分开来，动静资源做了拆分以后，就可以根据静态资源的特点将其做缓存操作，提高资源响应的速度。

（二）常用命令

在这里插入图片描述

（三）实践

全局配置、events、http三个大模块

配置解释：监听80端口，当请求根目录时，会根据location中的反向代理proxy_pass配置 http://自定义名称A，代理到8080和8081，因为两个端口的权重 weight=1是一样的，则会按序轮询。

#负载均衡
upstream 自定义名称A{
#服务器资源
server 127.0.0.1:8080 weight=1;
server 127.0.0.1:8081 weight =1;
}
server{
listen 80;
server_name localhost;
#charset koi8-r;
#access_log logs/host.access.log main;
location / {
root html;
index index.html index.htm;
#反向代理
proxy_pass http://自定义名称A
}
}

扩展：代理概念

1、正向代理

（1） 定义

正向代理是一种位于客户端和目标服务器之间的服务器。客户端通过正向代理服务器发送请求，代理服务器再将请求转发给目标服务器。目标服务器的响应同样通过代理服务器返回给客户端。

（2）工作流程

（1） 客户端向正向代理服务器发送请求。
（2）正向代理服务器将请求转发给目标服务器。
（3） 目标服务器处理请求并将响应返回给正向代理服务器。
（4） 正向代理服务器将响应返回给客户端。

（3）用途

（1）访问控制：可以通过正向代理限制客户端访问某些网站或资源。
（2）缓存：代理服务器可以缓存常用资源，减少重复请求，提高访问速度。
（3）匿名访问：隐藏客户端的真实IP地址，从而实现匿名访问。
（4）内容过滤：可以过滤不良内容或广告。

在这里插入图片描述

2 反向代理

（1） 定义

反向代理是一种位于目标服务器和客户端之间的服务器。客户端直接向反向代理服务器发送请求，反向代理服务器将请求转发给内部的目标服务器，并将目标服务器的响应返回给客户端。

（2）工作流程

（1） 客户端向反向代理服务器发送请求。
（2）反向代理服务器将请求转发给内部的目标服务器。
（3） 目标服务器处理请求并将响应返回给反向代理服务器。
（4） 反向代理服务器将响应返回给客户端。

（3）用途

（1）负载均衡：将请求分发到多台服务器上，均衡负载，提升性能。
（2）安全性：隐藏内部服务器的真实IP地址，保护内部服务器，防止直接攻击。
（3）SSL终端：反向代理服务器可以处理SSL加密，减轻内部服务器的负担。
SSL相关知识: link
（4）缓存：缓存静态内容，提高访问速度。
在这里插入图片描述

3 正向代理和反向代理的区别

正向代理：代理服务器为客户端服务，客户端知道代理服务器的存在，主要用于客户端访问外部资源。
反向代理：代理服务器为服务器端服务，客户端不知道代理服务器的存在，主要用于保护和优化服务器端资源。用户无感知！

六、 Nginx常见面试题

关键词：高并发、反向代理、负载均衡、事件驱动

Nginx如何实现高并发

（1）事件驱动模型：Nginx使用事件驱动的架构，主要使用epoll或kqueue等事件模型，使得nginx能够在单个线程内有效的处理大量并发连接，而不需要为每个连接创建一个新的线程或进程
（2）异步非阻塞机制：一个线程可以在等待I/O的同时继续处理其他请求，而不会被阻塞
（3）复用连接：Nginx能够在单个连接上同时处理多个请求，这种特性被称为keeplive，通过保持TCP连接的开放状态，多个请求可以在同一连接复用
（4）高效的内存管理：Nginx通过预分配一块内存池，然后按需从中分配内存 ，避免了频繁的内存分配和释放，减少了内存碎片
（5）精简的代码和模块化设计
（6）高效的反向代理和负载均衡
（7）静态缓存文件和压缩：支持静态文件的缓存和压缩，减少了对后端服务器的访问和请求，提高了静态资源的访问速度

Nginx的使用场景

（1）web服务器：作为静态文件的web服务器
（2）反向代理服务器：接受客户端请求并将请求分发给后端服务器
（3）负载均衡器
（4）HTTP缓存代理：缓存静态文件和动态内容，可以加速对重复请求的响应，通过缓存机制，可以减少后端服务器负担
（5）SSL/TLS终结：可以终结SSL/TLS连接，负责加密和解密通信
（6）容器化应用代理：通过反向代理和负载均衡处理容器之间的通信，提供服务发现和动态配置
（7）静态文件服务器
（8）API网关
（9）反爬虫和安全防护
（10）动态web应用的代理

Nginx如何处理静态内容和动态内容

nginx本身非常擅长处理静态内容，可以直接将静态文件（如HTML/CSS等）直接作为HTTP响应返回给客户端。对于动态内容，nginx通常会配置为反向代理，将请求转发给后端应用服务器（Tomcat/Apache）等，由后端服务器处理动态请求并生成内容。

解释Nginx中的location指令

location指令用于定义nginx如何响应特定的请求URL。location指令可以匹配请求的URL，并根据不同的匹配结果，应用不同的配置，如代理设置、重写规则或返回不同的内容。

Nginx配置文件的结构是什么样的

nginx的配置文件通常以nginx.conf为主配置文件，它的结构包括events块、http块以及可选的mail块。events块配置与连接处理相关的参数；http块配置与HTTP服务相关的参数，包括服务器列表、负载均衡配置、MIME类型定义、日志定义等；mail块用于邮件代理服务器。

如何在Nginx中启用HTTPS?

在nginx中启用HTTPS需要配置SSL证书和私钥，并在server块中设置监听443端口并启用SSL。需要指定ssl_certificate和ssl_certificate_key指令来指定证书文件和私钥文件的路径。举例说明：
（1）第一个server监听80端口（HTTP），并将所有请求重定向到HTTPS(443端口)，

  • 301 表示这是一个永久重定向。在HTTP协议中，301状态码代表“永久重定向”（Moved Permanently）。当一个客户端（如浏览器）收到301状态码时，它会理解请求的资源已经被永久移动到了新的URL，并且将自动重定向到这个新的URL。
  • 指定了重定向的目标URL，其中 $ host 是请求的主机名，$ request_uri 是请求的URI（包括查询字符串）。

（2）第二个server监听443端口，并启用SSL

  • ssl_certificate 指令指定SSL证书文件的路径。
  • ssl_certificate_key 指令指定SSL证书私钥文件的路径。

（3）可选的SSL配置

  • ssl_protocols指定允许的SSL/TLS协议版本：TLSv1.2 TLSv1.3
  • ssl_ciphers：指定允许的加密算法
  • ssl_prefer_server_ciphers on; 强制服务器优先选择其配置的加密算法。
server {
    listen 80;
    server_name example.com www.example.com;
    # Redirect all HTTP requests to HTTPS
    return 301 https://$host$request_uri;
}

server {
    listen 443 ssl;
    server_name example.com www.example.com;
    ssl_certificate /etc/nginx/ssl/example.com.crt;
    ssl_certificate_key /etc/nginx/ssl/example.com.key;
    ssl_protocols TLSv1.2 TLSv1.3;
    ssl_ciphers 'ECDHE-ECDSA-AES256-GCM-SHA384:ECDHE-RSA-AES256-GCM-SHA384:ECDHE-ECDSA-CHACHA20-POLY1305:ECDHE-RSA-CHACHA20-POLY1305:ECDHE-ECDSA-AES128-GCM-SHA256:ECDHE-RSA-AES128-GCM-SHA256';
    ssl_prefer_server_ciphers on;

    # Root directory and index file
    root /var/www/html;
    index index.html index.htm;

    # Location block to handle requests
    location / {
        try_files $uri $uri/ =404;
    }

    # Optional: Logging
    access_log /var/log/nginx/example.com.access.log;
    error_log /var/log/nginx/example.com.error.log;
}

Nginx如何处理请求

Nginx基于事件驱动模型和非阻塞的方式来处理请求。客户端的请求先由master接收，然后master进程根据配置分配给一个或者多个worker进程。worker进程监听端口并接收新的请求，处理请求，并将结果返回给客户端。

如何在Nginx中实现IP黑名单

在Nginx中实现IP黑名单可以通过配置allow和deny指令来完成，在需要限制的location或者server块中，使用deny指定不允许访问的IP，allow指定允许访问的IP。

扩展：如何实现IP黑名单

（1）linux防火墙：sudo iptables -A INPUT -s <IP_ADDRESS> -j DROP
（2）Windows防火墙 ：直接设置
（3）Apache配置：Apache配置文件（如.htaccess或httpd.conf）中添加以下内容：

<RequireAll>
    Require all granted
    Require not ip <IP_ADDRESS>
</RequireAll>

（4）Nginx配置：Nginx会按序检查

server {
    listen 80;
    server_name yourdomain.com;

    location / {
        deny <IP_ADDRESS>;
        allow all;
    }
}

（5）代码实现
（6）数据库存储

Nginx 如何实现防止 DDOS 攻击

Nginx 可以通过配置限制来抵抗 DDOS 攻击，例如：

  • 限制连接速率（limit_req 模块）
  • 限制并发连接数（limit_conn 模块）
  • 配置防火墙规则来拦截异常流量
  • 使用第三方模块如 ngx_http_limit_req_module 来限制请求频率
  • 启用 fail2ban 等工具来动态地添加攻击源 IP 到防火墙黑名单

Nginx 与 Apache 相比有什么优势和劣势

Nginx 的优势在于处理静态文件、高并发连接时性能较好，内存消耗低，配置灵活，并且适合作为负载均衡器和反向代理。Apache 的优势在于模块众多，社区支持强，文档齐全，而且对 .htaccess 文件的支持使得在不具有服务器配置文件写权限的环境下进行配置变得容易。Nginx 的劣势是模块相对较少，而且对动态内容的处理通常需要与后端服务器结合。Apache 的劣势是在高并发环境下性能可能不如 Nginx，并且内存消耗相对较大。

源圈圈�
关注
nginx5种负载策略的设置方法
m0_61330806的博客
04-11 585
如果你也是看准了Python，想自学Python，在这里为大家准备了丰厚的免费。
Nginx——负载均衡策略
zhouhengzhe的博客
03-09 3585
1、Nginx 负载均衡策略 1.1、轮询（默认） 每个请求按时间顺序逐一分配到不同的后端服务器，如果后端服务器 down 掉，能自动剔除。 upstream backend { # no load balancing method is specified for Round Robin server backend1.example.com; server backend2.example.com; } 1.2、指定权重 指定轮询几率，weight 和访问比率成正比，用于后端服务器性
Nginx负载配置
kfashfasf的博客
07-08 1506
Nginx 是一个高性能的 HTTP 和反向代理服务器，也是一个 IMAP/POP3/SMTP 代理服务器。Nginx 以其高性能、稳定性、丰富的功能集、简单的配置文件以及低系统资源消耗而闻名。负载均衡是一种将工作负载分摊到多个服务器上的技术，以提高网站、应用或数据库的性能和可靠性。负载均衡器可以在不同的网络层级实现，最常见的是第 4 层（传输层）和第 7 层（应用层）负载均衡。
nginx负载均衡-5种策略
学无止境
03-07 298
nginx的upstream目前支持4种方式的分配 1、轮询（默认） 每个请求按时间顺序逐一分配到不同的后端服务器，如果后端服务器down掉，能自动剔除。 2、weight 指定轮询几率，weight和访问比率成正比，用于后端服务器性能不均的情况。 例如： upstream bakend { server 192.168.0.14 weight=10; server 19
Nginx从入门到入土（四）：负载均衡策略
最新发布
rc1596919047的博客
09-19 656
Nginx负载均衡解决的是高并发的问题。定义：负载均衡（Load Balancing）是一种技术策略，它旨在将工作负载（如网络流量、计算任务等）均匀地分配到多个操作单元（如服务器、计算机、网络链接、磁盘驱动器或其他资源）上，以优化资源的使用效率、最大化吞吐量、最小化响应时间，并防止任何单个资源的过载。由上图可见，比如突然来了十个任务，全部交由一个服务节点来做可能会崩溃，如果摊开去做，就会变得轻松。负载均衡在带来诸多好处的同时也会引入一些与服务器集群相关的问题。
Nginx的6种负载均衡策略
qq_42810443的博客
11-08 5643
Nginx的6种负载均衡策略
Nginx入门到精通搭建高可用集群负载均衡
08-14
**Nginx 知识点详解** Nginx 是一款高性能的 HTTP 和反向代理服务器，因其稳定性、高效性能和低资源消耗而受到广泛应用。它最初由伊戈尔·赛索耶夫为 Rambler.ru 站点开发，自 2004 年发布以来，已经发展成为许多...
nginx负载均衡配置,宕机自动切换方式
09-29
在现今的IT架构中，负载均衡是一项关键技术，它确保了后端...在实际应用中，开发者需要根据具体的业务需求和服务器状况，综合考量并合理配置这些参数，以确保负载均衡器能够在各种异常情况下为用户提供稳定的服务。
Nginx负载均衡（架构之路）详解
09-30
Nginx作为一款高性能的HTTP和反向代理服务器，在负载均衡领域具有广泛的应用。Nginx能够将客户端的请求按照一定的算法分发到多台服务器上，从而实现负载均衡，提高系统的可用性和伸缩性。在大型网站和应用中，负载...
Nginx+Tomcat 负载均衡 3分钟搞定
01-04
本文将从以下几个方面详细介绍 Nginx+Tomcat 实现负载均衡的知识点： 一、负载均衡的概念和优势 负载均衡（Load Balancing）是指在多台服务器之间分配工作负载，以提高响应速度、可用性和可扩展性的一种技术。其...
nginx 负载均衡 多站点共享Session
09-30
在本知识点中，我们将详细讨论如何利用数据库来存储Session信息，以及相关的配置步骤，以便在多站点环境下的Nginx负载均衡架构中实现Session共享。 首先，我们来了解几种常见的多站点间Session共享的作法。最常见的...
nginx负载均衡的5种策略及原理
pure1232的博客
03-31 266
转载自
nginx的6种负载均衡策略
Morning Sunshine的IT技术博客
01-07 689
nginx的6种负载均衡策略 一、关于Nginx的负载均衡 在服务器集群中，Nginx起到一个代理服务器的角色（即反向代理），为了避免单独一个服务器压力过大，将来自用户的请求转发给不同的服务器。 二、Nginx负载均衡策略 目前Nginx服务器支持6种方式的分配： 轮询 默认方式 weight 权重方式 ip_hash 依据ip分配方式 least_conn 最少连接方式 ...
nginx学习笔记 +负载
gegephp的博客
08-20 147
一、首先就是nginx的安装 这里使用编译安装 在官网http://nginx.org找到需要的版本，因其依赖pcre库，先安装pcre库 命令 #yum install pcre pcre-devel #cd /user/local/src #weget http://nginx.org/download/nginx-1.16.1.tar.gz #tar zxvf nginx-1.16.1.ta...
Nginx 配置负载均衡
weixin_34367845的博客
08-01 171
ng 负载均衡   网站的访问量越来越大，服务器的服务模式也得进行相应的升级，如分离出数据库服务器、分离出文件或图片作为单独服务，这些是简单的数据的负载均衡，将压力分散到不同的机器上。有时候来自 web 前端的压力，也能让人十分头痛。怎样将同一个域名的访问分散到两台或更多的机器上呢？这其实就是另一种负载均衡了，nginx 自身就可以做到，只需要做个简单的配置就行。   nginx 不单可以作为强大...
关于配置flume-ng负载均衡
zju小新的博客
07-21 997
在实际项目中，为了减轻一次性向hdfs上写数据，往往采用分层写入的功能，以减少负载
Nginx-负载均衡详解
Wzill
06-24 750
Nginx 是一个高性能的开源 Web 服务器和反向代理服务器。它具有轻量级、高并发、低内存消耗等特点，被广泛用于搭建静态资源服务器、负载均衡、反向代理等场景。本文介绍nginx的反向代理，其他内容敬请期待！负载均衡，其含义就是指将负载（工作任务）进行平衡、分摊到多个操作单元上进行运行，例如FTP服务器、Web服务器、企业核心应用服务器和其它主要任务服务器等，从而协同完成工作任务。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值