2020/01/06 04-Nginx

最新推荐文章于 2024-07-21 18:52:18 发布
最新推荐文章于 2024-07-21 18:52:18 发布
阅读量399 收藏
点赞数
分类专栏： 42Python开发之负载均衡与反向代理技术
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_42227818/article/details/103860804
版权

在这里插入图片描述
nginx可以做：
web服务器
http反向代理服务器
邮件代理服务器
tcp反向代理服务器，类似调度器

lvs只能在传输层调度，无法理解http，tcp协议，lvs不看报文头部，只能识别ip，端口

作为代理服务器，就会从服务器得到的页面缓存下来，这样另外的人访问的时候，就可以直接取缓存，就不用再去互联网上请求了，这个叫正向代理服务器，为局域网提供服务的
在这里插入图片描述
反向代理服务器，把用户请求转发到后端的rs

lvs的nat模型，只是把数据报文从lvs转发出去了，对数据报文（传输层和应用层）没有任何修改，只是把ip地址改了
在这里插入图片描述
如果是代理服务器就不一样了，nginx可以做反向代理服务器，源地址到nginx的时候，替换了，替换成DIP了，（是拆封的数据报文）nginx是替你到后端服务器访问，后端服务器是以为nginx来访问的

反向代理是离着后端服务器更加接近的，把前端的请求代理到后端的RS
在这里插入图片描述
上午lvs的实验是看到的真实的客户端来源在这里插入图片描述
反向代理，来去都要经过nginx服务器
在这里插入图片描述

有时候会混合实验nginx和lvs，双层代理，前面lvs，后面nginx代理RS
在这里插入图片描述
一般公司会用F5硬件调度器，后面用nginx
在这里插入图片描述在这里插入图片描述正向代理离客户端近，反向代理离服务器近，nginx可以根据cookie调度，lvs只能根据ip地址，就显得粗犷
在这里插入图片描述早期的nginx的模块是静态编译，后面的是支持动态编译
不需要停机就可以升级，如果已经有人链接就用旧的服务进程提高服务，当旧的用户访问结束，逐步替换掉旧进程
event-driven 时间驱动，aio异步IO,mmap内存映射,sendfile(讲apache的时候讲过）
nginx是静态服务器，要想当php程序的服务器，做不了，要想运行php，就需要安装对应的软件，fastcgi，而且nginx不支持模块方式，只支持fastcgi，独立进程的方式运行

nginx进程要访问硬盘文件，就需要发指令给内核，内核从磁盘复制到内核空间，再复制到用户空间，这样效率偏低，因为访问文件系统，就需要查索引，文件系统目录，最终确定路径

在这里插入图片描述
为了方便可以在内存离开辟空间，让它和硬盘一一对应，硬盘文件10M ，内存里也是10M，相当于直接指针，这就是mmap
在这里插入图片描述
sendfile
在这里插入图片描述
是内核级别的功能
当客户端发起请求想访问某个资源，
服务器收到请求，正常是需要解封装，最终到达应用程序，Web服务应用程序httpd
这个程序收到请求后，进行请求报文的分析，发现发送的请求是get指令（应该跑到磁盘上去找文件）
httpd是以apache运行的，apache是个用户，用户是无法访问磁盘上的物理设备的，所以需要发送指令到内核去，
内核才有权限去访问磁盘空间，内核收到指令后 ，把磁盘上文件读出，读出来以后，放到内核的buffer缓冲区
缓冲区收到后再把这个复制到httpd的进程内存空间，httpd收到后，会把它封装成响应报文
要从网络中发出去，还得经过内核，内核收到以后，再从物理网卡发送出去
（这其中这个文件，走来走去还是回到内核，就白走了，sendfile就解决了这样的机制）

sendfile就少走了这段路，减少cpu从不敢内核空间切换用户空间的次数，提升性能
在这里插入图片描述在这里插入图片描述在这里插入图片描述也有master进程和worker进程（类似apache有MPM，三种工作模式prefork，event，worker，但是apache
prefork，一个master开若干个子进程，每个子进程去响应请求，
worke和eventr是三级结构，一个master开多个worker，worker里开多个线程，每个线程响应用户请求）
nginx是开若干个worker，但是worker不多，每个worker可以并发支持很多人，1个worker里面没有线程，用的是IO多路复用，可以并发支持多个用户请求，而且不是线程，看不到，可以并发响应上万的请求，在worker里也支持很多模块，每个模块都有特定的功能，
master负责管理这些worker进程，比如开启或者销毁一个worker，此外加载配置文件，平滑升级，都是master来管理的，
除了代理功能，其实还有缓存功能，用户发送请求给nginx，niginx不可能告诉用户自己拿，自己缓存一份，下次用户直接访问，省的去后端服务器上拿数据 了，缓存可以放在内存也可以放在磁盘里，存放在磁盘表现为hash的值在这里插入图片描述
nginx用的epoll系统调用
在这里插入图片描述
先把之前RS1上的httpd卸载 了在这里插入图片描述
nginx在epel源里在这里插入图片描述
安装nginx
在这里插入图片描述
查看安装的文件列表在这里插入图片描述主配置文件在这里插入图片描述
服务名和nginx主程序
在这里插入图片描述
语法检查的，vim的插件
在这里插入图片描述
nginx是个二进制程序，可以直接执行在这里插入图片描述在这里插入图片描述
可以自己做个网页，h1是字体标题
在这里插入图片描述在这里插入图片描述
可以这么停止在这里插入图片描述所以一般在生成环境测试的时候，都用nginx测试

用什么工具起，就用什么命令停
用systemctl起倒是可以用nginx停止
在这里插入图片描述

一个主进程带两个子进程，master带worker，没有线程
在这里插入图片描述
如果启动使用nginx
那么停止服务就不能用systemctl stop，是停止不了的在这里插入图片描述在这里插入图片描述
修改配置文件前，做下备份，fastcgi配合PHP，uwsgi是配合python程序
在这里插入图片描述在这里插入图片描述在这里插入图片描述auto，根据当前情况自动判断进程数量，之所以有两个worker，是因为有两个cpu内核
在这里插入图片描述
两颗CPU
在这里插入图片描述修改成4个
在这里插入图片描述在这里插入图片描述
现在就变成4个worker进程了，不要设置太多，一般cpu几个，worker几个就可以了
在这里插入图片描述
aux ，pid进程id。cmd进程名称，psr cpu
在这里插入图片描述
后面就是进程运行的cpu编号，cpu里有缓冲区在这里插入图片描述
123级缓存，每颗cpu自己有自己的缓冲区在这里插入图片描述
在这里插入图片描述
**决定worker进程数量，默认是auto，对应cpu内核个数，过多的worker可能涉及到一个上下文切换的问题，当用户访问nginx服务，如果有一个worker提供服务了，下次再访问的时候，可能访问的是另外一个worker进程，这样就有可能带来一个worker的上下文切换，进程之前可以共享资源但是无法共享数据的，比如session信息，利用IO多路复用，就可以一个worker为多个用户提供服务
**
绑定cpu，可以把一个worker，绑定在一个具体的cpu内核上去，这样就可以提高缓存命中率，因为cpu里面也有缓存，如果你的worker是始终和一颗cpu结合在一起，这样cpu里的缓存就可以让worker不断地去重复使用
跑来跑去，原来你worker的缓存就有可能失效，不绑定的话，由此大大提高性能
在这里插入图片描述worker进程能够打开的文件个数
在这里插入图片描述
默认是空可以调大
在这里插入图片描述

将来希望你的worker进程支持多少个用户并发在这里插入图片描述event实际上是驱动的意思在nginx用的是epoll模型，所以配置文件里有相关的，worker的链接数的限制
在这里插入图片描述
这个也是和打开的文件数相关的
这个1024数字有些偏小了，如果是两个worker就10000左右
在这里插入图片描述
默认用哪种方法，一般用epoll就可以了，没有必要去选一个select，因为nginx优势就在于epoll上面在这里插入图片描述
accept_mutex 接收，必须在event语句块，如果这项是启用的，worker进程间接收新的链接
是轮流（by turn）的，第一个请求第一个worker处理，第二个请求给第二个worker来处理
所有的进程将被通知，
如果设置成off，会通知所有worker进程，但是只由某一个worker进程来提供服务，这就是惊群
惊群，就是来一个请求就都唤醒，但是只是给一个worker来响应，这样就没有必要，影响服务器性能
在这里插入图片描述
用于调试定位的一些选项
在这里插入图片描述
守护进程就是前台执行还是后台执行在这里插入图片描述在这里插入图片描述
http语句块可以配置一个web服务或是多个web服务

root类似documentroot指定网站的家目录路径
nginx搭建网站是以server语句块来搭建的
在这里插入图片描述
可以做虚拟主机，先看下配置文件
在这里插入图片描述写server一定是放在http语句块里的
在这里插入图片描述
定义另外一个httpserver，可以放在server里也可以放在include里
default_server 因为nginx也支持虚拟主机，去访问的时候就是默认的
server_name 网站的名字
root 存放主页的路径

如果40多个主机放在一起，那这个文件就太啰唆了。可以放在.conf里*
在这里插入图片描述
也可以直接创建个文件夹，放在里面，每个网站建立一个conf文件
在这里插入图片描述在这里插入图片描述
可以直接加载服务即可
在这里插入图片描述
在lvs主机上做名词解析
在这里插入图片描述
就可以成功访问
在这里插入图片描述

、这就是一个物理服务器建立多个网站
在这里插入图片描述在这里插入图片描述在这里插入图片描述在这里插入图片描述location可以来定义某个位置，针对某个位置来单独地做处理。当访问某个url的时候，把请求到哪个目录下。
可以实现网站的页面和站点存放的路径可以不在同一个路径下在这里插入图片描述、在asite下建立目录
在这里插入图片描述
网站表面的目录可以和原始网站的不在同一个目录下
在这里插入图片描述
实现效果
在这里插入图片描述
还有缓存
在这里插入图片描述在这里插入图片描述
打开文件的时候也有缓存，浏览器去访问一个网站的时候，这个浏览器的页面，发请求到网站上，http网站进程收到请求以后会从磁盘上把文件读入到内核，内核读入到进程，进程才存放的时候，也可以作为缓存，缓存还可以存放
文件元数据，包括目录结构也可以存放，
但是并没有缓存真实的数据，因为这个缓存是放在内存里的
在这里插入图片描述
最多缓存多少个，写1000个，就最多缓存10000个文件的元数据，超过10000个就只能进行淘汰了LRU算法（最近最少使用算法，在进程管理的时候提到过）
在这里插入图片描述
比如10分钟这个信息没有人访问就把这个信息删除，10分钟访问三次以内才认为是可以缓存的内容
在这里插入图片描述
还有访问控制，限制谁访问在这里插入图片描述
定义/根，允许谁，拒绝谁，匹配了生效，后面的就不管了在这里插入图片描述在这里插入图片描述
对A网站下的某个目录进行控制，8.7的机器不能访问跟
在这里插入图片描述在这里插入图片描述
现在访问就不行了
在这里插入图片描述
放在后面等于白写，上面匹配不看下面在这里插入图片描述在这里插入图片描述
换一下顺序即可
在这里插入图片描述在这里插入图片描述
现在就可以了
在这里插入图片描述在这里插入图片描述在这里插入图片描述
状态页面可以显示nginx的状态信息在这里插入图片描述在这里插入图片描述
对应接收的几个，处理的几个，请求的几个在这里插入图片描述在这里插入图片描述
可以定义日志格式在这里插入图片描述在这里插入图片描述
access log是访问
在这里插入图片描述
在这里插入图片描述
爬虫一直怕，你可以监测哪个IP频繁访问，就可以屏蔽

apache的日志是专门放在/var/log/httpd/access.log
可以用log_format来定义一个日志格式

48N6E
关注
专栏目录
nginx连接域名超时，时好时坏。
weixin_44006105的博客
10-28 3336
记录一下服务器访问域名出去连接超时问题。 网络连接超时： 网络正常: 一开始从网上看设置nginx超时时间proxy_connect_timeout，原来是10s，改为30秒。 发现nginx日志显示依旧会在30秒后超时。 其中通过ping和telnet发现网络大部分时间正常（比nginx超时少），所以怀疑是外网网络开通问题。 因为是域名访问，所以必须要用到dns解析。 我这用的是114.114.114.114和119.29.29.29，查看外网防火墙发现有配置dns解...
基于nginx-rtmp-module模块实现的HTTP-FLV直播模块nginx-http-flv-module（三）
winshining的专栏
08-08 1万+
接上一篇《基于nginx-rtmp-module模块实现的HTTP-FLV直播模块nginx-http-flv-module（二）》内容。 项目地址：https://github.com/winshining/nginx-http-flv-module，欢迎大家下载测试，返回bug和提交PR。 2018-10-28：现在nginx-htt-flv-module还...
访问Nginx域名间接性无响应的解决方法
小猴子的博客
03-30 4587
目录 检查DNS服务器 降低Nginx的error级别并排除错误 修改Linux内核设置 近期有客户反馈，上线的系统在使用的过程中会出现间歇性卡顿的问题，每次持续几秒钟，然后又正常了，过一段时间又再次出现这种问题。 检查DNS服务器 因为客户反馈都集中在电信的网络上面，因此首先排查了DNS服务器，将客户方路由器的DNS服务器设置为公共DNS服务器：114.114.114.144和114.114.115.115。同时检查了域名的DNS解析，发现有一条记录的TTL设置的过小，将其修改成600。但客户
NGINX负载均衡
师哥在这儿呢
05-25 952
一.为什么要使用负载均衡?      先来简单了解一下什么是负载均衡,单从字面上的意思来理解就可以解释N台服务器平均分担负载,不会因为某台服务器负载高宕机而某台服务器闲置的情况. 那么负载均衡的前提就是要有多台服务器才能实现,也就是两台以上即可二.掌握负载均衡常用的几种算法[round-robin轮询,权重,ip_hash,fair(第三方),url_hash(第三方)]1,轮询(默认)a)ups...
nginx配置负载均衡后总是访问同一台服务器
Yuwen_forJava的博客
07-09 3229
1.问题 用nginx做一个简单的负载均衡，想着应该很简单。然后一顿操作。最后可以访问页面，不过页面显示的内容总是同一台服务器所提供的。这就不合常理了，明明配置好了负载，为什么没有起作用？配置如下： 返回的页面一直是这样，正常应该是轮流显示：8080、8081、8082 2.解决 无奈，只好打电话给伊戈尔·赛索耶夫老哥。最后一番调试后，发现是浏览器的缓存导致。 ...
Nginx负载均衡
qq_54658577的博客
10-16 777
1、负载均衡概念 负载均衡，英文名称为Load Balance，其含义就是指将负载（工作任务）进行平衡、分摊到多个操作单元上进行运行，例如FTP服务器、Web服务器、企业核心应用服务器和其它主要任务服务器等，从而协同完成工作任务。负载均衡构建在原有网络结构之上，它提供了一种透明且廉价有效的方法扩展服务器和网络设备的带宽、加强网络数据处理能力、增加吞吐量、提高网络的可用性和灵活性。 简单来说：负载均衡就是多个服务器分摊多个请求，而不再是一台服务器处理所有的请求了。 2...
高并发与负载均衡-nginx-session一致性
12-20 1413
[root@centos7-1 conf]# vi nginx.conf [root@centos7-1 conf]# cat nginx.conf #user nobody; worker_processes 1; #error_log logs/error.log; #error_log logs/error.log notice; #error_log logs/error....
SSL/TLS深度解析--在Nginx上配置证书链及多域名证书
weixin_33744141的博客
12-10 9801
生成私钥与自签根证书(这次使用aes256加密,密码是redhat) # 进行简单处理 [root@www ~]# cd /usr/local/openssl/ [root@www openssl]# mkdir root-CA sub-CA [root@www openssl]# cp -rf CA/* root-CA/ [root@www root-CA]# rm -rf root_cacer...
0009 -- Nginx
weixin_49908963的博客
10-15 365
Nginx源代码，下载地址：https://nginx.org/en/download.htmlyum自动安装，不支持自由扩展第三方功能源码编译安装Mainline version 主流版本Stable version 稳定版本Legacy versions 旧版本1. 创建nginx的目录，并设置755的权限2. 官网下载Nginx源代码 主流版本 1.23.1、稳定版本 1.22.03. 解压缩Nginx源代码总用量 2132。
Jumpserver堡垒机安装部署
qq_18275789的博客
04-01 1623
JumpServer umpServer 是全球首款完全开源的堡垒机, 使用 GNU GPL v2.0 开源协议, 是符合 4A 的专业运维审计系统。 JumpServer 使用 Python / Django 进行开发, 遵循 Web 2.0 规范, 配备了业界领先的 Web Terminal 解决方案, 交互界面美观、用户体验好。 JumpServer 采纳分布式架构, 支持多机房跨区域部署, 中心节点提供 API, 各机房部署登录节点, 可横向扩展、无并发访问限制。 JumpServer 现已支持管
Nginx处理负载均衡
ice_ice
10-09 295
Nginx是一款轻量级的Web 服务器/反向代理服务器及电子邮件（IMAP/POP3）代理服务器，在BSD-like 协议下发行。其特点是占有内存少，并发能力强，事实上nginx的并发能力确实在同类型的网页服务器中表现较好，中国大陆使用nginx网站用户有：百度、京东、新浪、网易、腾讯、淘宝等。 二、Nginx常见命令 验证配置是否正确: nginx -t 查看Nginx的详细的版本号：ng...
nginx搭建简易负载均衡服务
u011277123的博客
03-06 461
思梦PHP2019-03-06 08:27:49 什么是负载均衡 当一台服务器的性能达到极限时，我们可以使用服务器集群来提高网站的整体性能。那么，在服务器集群中，需要有一台服务器充当调度者的角色，用户的所有请求都会首先由它接收，调度者再根据每台服务器的负载情况将请求分配给某一台后端服务器去处理。 那么在这个过程中，调度者如何合理分配任务，保证所有后端服务器都将性能充分发挥，从而保持服务器集...
Nginx使用问题汇总
weixin_42073629的博客
05-10 872
1.nginx故障转移 故障转移：在nginx负载均衡配置里，如果转发到某台服务器的请求失败，nginx会自动转发到其它服务器上重试。故障转移与请求类型有关，GET请求会自动转发重试。POST、PUT等请求，如果已经发送到某台服务器并且处理异常，不会再转发；如果连接不上服务器，nginx会转发到其它服务器上处理。所以不要用GET请求做一下插入、更新业务，否则会出现问题。 http{ #应用集群负载均衡 upstream com.zhujn.hot { #两个tom.
nginx负载均衡配置正确但是访问不了
Lyuuku爱吃苹果
04-05 5347
今天在使用nginx配置负载均衡的时候出现了一个很奇怪的现象，配置文件绝对正确的情况下就是访问不了 upstream tomcatserver { server localhost:9090 weight=3; server localhost:8080 weight=1; } server { listen 80; server_na...
当 Nginx 出现连接超时问题，如何排查？
最新发布
发现生活，分享智慧，一起成长！
07-21 2584
Nginx 连接超时问题就像是网络世界中的一场“暴风雨”，会给我们的服务带来很大的影响。但只要我们掌握了正确的排查方法和解决策略，就能够像勇敢的水手一样，在风雨中驾驭好船只，让网络服务始终保持平稳运行。
Nginx访问间歇性卡顿的解决办法
lpping90的专栏
06-25 1万+
转载：https://www.javatang.com/archives/2020/08/11/22403140.html 降低Nginx的error级别并排除错误 然后打开nginx的error.log文件，发现没有特别的错误信息，打开nginx.conf文件，将error_log的级别设置为notice（默认是error），运行了一会儿发现出现下面的warn错误： an upstream response is buffered to a temporary file /tmp/xxx whi.
nginx配置反向代理、负载均衡后总是访问一台服务器
chengmo5404的博客
07-14 4391
根据个人需求，修改了一下hosts文件，设置本地DNS解析 服务器信息 服务器一 192.168.7.12 中为了偷懒既安装了nginx，又有tomcat 服务器二 192.168.7.13 中只有tomcat tomcat访问端口都为 8080 ngi...
解决Nginx响应超时问题：upstream timed out (110: Connection timed out) while reading response header from upst
热门推荐
小橙子的笔记屋
06-24 3万+
一、问题现象 通常当我们在进行web页面访问的时候，会出现报错504。页面无法显示出来 查看日志，发现如下： upstream timed out (110: Connection timed out) while reading response header from upstream, client: xxx.xxx.xxx.xxx, server: *, request: “POST /store/dsmgmt/signin HTTP/1.0”, upstream: “http://unix:/de
vue发布到nginx下访问资源404，或白屏问题
liulang1905的博客
06-15 2916
这里先说404问题，比较简单就是vue中路由mode的问题 如果不嫌弃地址有#号的话就改成默认hash或者直接将这个属性删了就行，删了直接使用默认 如果说不想地址有#的话配置下nginx即可 nginx配置 try_files $uri $uri/ /index.html; 如果以上已解决您的问题可以不在往下看了，下面只是记录自己的一个踩坑过程，避免以后再犯 我的路由一直是使用的是 history ，没有配置nginx所以有了很多问题 先描述以下错误症状， 一开始发布到nginx下能访问，但是访问一会
配置nginx 路径时，出现这个错误该怎么解决？[root@yfs01 nginx]# --error-log-path=/var/log/nginx/error.log --http-log-path=/var/log/nginx/access.log --with-http_gzip_static_module -bash: --error-log-path=/var/log/nginx/error.log: 没有那个文件或目录 [root@yfs01 nginx]# --http-client-body-temp-path=/var/temp/nginx/client --http-proxy-temp-path=/var/temp/nginx/proxy -bash: --http-client-body-temp-path=/var/temp/nginx/client: 没有那个文件或目录 [root@yfs01 nginx]# --http-fastcgi-temp-path=/var/temp/nginx/fastcgi --http-uwsgi-temp-path=/var/temp/nginx/uwsgi --http-scgi-temp-path=/var/temp/nginx/scgi --conf-path=/usr/local/nginx/nginx.conf
06-05
这个错误是因为您在命令行中输入了配置选项，但是缺少了nginx的可执行文件路径，您需要在命令行中添加nginx的可执行文件路径，例如： ``` /usr/local/nginx/sbin/nginx --error-log-path=/var/log/nginx/error.log --http-log-path=/var/log/nginx/access.log --with-http_gzip_static_module --http-client-body-temp-path=/var/temp/nginx/client --http-proxy-temp-path=/var/temp/nginx/proxy --http-fastcgi-temp-path=/var/temp/nginx/fastcgi --http-uwsgi-temp-path=/var/temp/nginx/uwsgi --http-scgi-temp-path=/var/temp/nginx/scgi --conf-path=/usr/local/nginx/nginx.conf ``` 请注意，上述命令中的`/usr/local/nginx/sbin/nginx`是您的nginx可执行文件路径。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值