上传文件被nginx全部缓存的问题

最新推荐文章于 2024-01-04 23:11:57 发布
最新推荐文章于 2024-01-04 23:11:57 发布
阅读量1.5k 收藏
点赞数
分类专栏： web后端 文章标签： nginx
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kongxh_1981/article/details/48998875
版权
使用nginx 1.5.6时，文件上传过程中nginx会将所有数据块缓存，导致上传时间延长。解决方案是升级到1.7.11以上版本，并添加`proxy_request_buffering off`指令，禁止请求缓冲，以即时转发文件数据给后端，减少上传延迟。
摘要由CSDN通过智能技术生成

nginx采用1.5.6。

后端采用nodejs+formidable的方式接受上传文件，本问题的对应与采用什么样的后端没太大关系，这里只是交代一下。

 

问题：

在前端页面上将文件上传，nginx没有将每一块收到的文件数据块转发给后端，而是全部缓存了下来，全部收取完成后再一块一块的转发给后端，显而易见的是上传时间就被延长了许多。

涉及问题的模块：ngx_http_core_module

最低0.47元/天 解锁文章
白色的海
关注
专栏目录
Nginx上传文件全部缓存解决方案
09-03
此外，解决Nginx上传文件缓存问题的方法不止这一种。例如，还可以调整Nginx的缓存设置，如增加缓存大小或改变缓存策略。或者，如果后端服务器支持，可以修改后端应用程序的处理逻辑，以适应Nginx的默认缓存行为。...
Nginx处理请求体那点事
爱琴孩的博客
05-04 4378
接收包体的两种方式 　　- 接收完全部包体再发送 　　- 一边接收包体一边发送 　　proxy_request_buffering # 如果开启了 nginx会在内存开辟一块空间来缓存客户发来的请求 　　　　语法：proxy_request_buffering on | off 　　　　默认值：proxy_request_buffering on 　　　　上下文：http、server、location 　　适用场景： 　　　　- 吞吐量要求高 　　　　- 上游服务并发处理能力低 　　.
nginx(六十二)proxy模块(三)接收用户请求的包体
wzj_110的博客
11-23 892
接收用户请求的包体
深入操作系统底层分析nginx网络请求及响应过程
u013905744的专栏
12-09 3273
三次握手建立连接阶段 操作系统内核阶段 三次握手内核中的处理 linux内核作为服务器端收到了syn，会插入到syn队列（半连接队列）中，同时发送syn+ack，处于半连接状态。 当收到ack，就会放入到accept队列中，通知nginx，这里有一个读请求事件，nginx就会从epoll.wait()中唤醒，执行accept方法，从accept队列中取出 在三次握手阶段，我家里的windows发送syn包，nginx所在的linux操作系统回复syn及ack包，实际上此时nginx是无感知的，连接处于半
nginx反向代理的流程
qq_26312651的博客
02-14 1726
nginx反向代理的流程如下： 1  proxy_request_buffering 指令：on表示nginx接收完完整的body后才和upstream建立连接，off则是先建立连接，然后发送请求的时，一遍从下游读取body，一遍往上游转发。默认情况下是on，即nginx先生成要发往上游的包体，然后才去和上游建立连接。这样做是为了不耽误时间，不占用较长时间连接。因为一边读一边转发的问题是，一...
nginx上传文件大小报错500的解决办法
01-20
nginx上传文件大小报错500的解决办法 采用nginx作反向代理，出现了一个诡异的问题，小文件可以提交，大文件会报500内部错误。这个是什么原因导致的呢？  查wiki可知，上传文件大小相关的有三个配置 client_body_...
nginx TOMCAT 文件下载 上传 进度条 缓存
08-11
标题 "nginx TOMCAT 文件下载 上传 进度条 缓存" 涉及到的是在Web服务器场景中，如何利用Nginx和Tomcat处理文件的下载、上传以及实现进度条显示和缓存优化的技术点。下面将详细介绍这些内容。 1. **Nginx与Tomcat的...
Nginx(十八) 性能调优
最新发布
ShenDaiSun的博客
01-04 1313
如果我们使用了proxy_pass进行反向代理，那么nginx和后端的upstream server之间默认是用HTTP/1.0协议通信的。如果我们使用了proxy_pass进行反向代理，那么nginx和后端的upstream server之间默认是用HTTP/1.0协议通信的。同时，我们后端的nginx上没有设置gzip_http_version为1.0，那么Cache的url将不会进行gzip压缩。Nginx三大优势，动静分离、反向代理、负载均衡。14、开启多线程下载、断点续传。
nginx：反向代理模块-proxy模块
error311的博客
06-26 4693
从客户端接受HTTP协议，转发给上游服务器也是HTTP协议
Nginx(十三) 配置文件详解 - 反向代理（超详细）
ShenDaiSun的博客
12-29 1694
默认设置是60秒，但并不是说非要等60秒后才反馈连接建立失败，因为Nginx与后端代理服务器建立连接时，也是通过TCP协议建立的连接，那么就会受内核参数net.ipv4.tcp_syn_retries的影响，如果我们把syn_retries的次数配置的较小（默认配置是5次，大约相当于180秒），Nginx重传SYN报文的次数达到上限并等待完成后，有可能总耗时都不到60秒，此时照样会反馈连接建立失败。设置是否开启代理缓存锁。临时文件的最大大小由 proxy_max_temp_file_size 指令设置。
《nginx》二、nginx反向代理
theScoreONE的博客
08-31 3848
nginx反向代理
Nginx(11)_Nginx反向代理
renzhongrui的博客
01-23 880
Nginx反向代理支持的协议 upstream模块 1、作用 upstream模块用于定义上游服务器的相关信息，如下图所示： upstream模块默认已被编译进nginx，禁用需要使用--without-http-upstream_module来编译nginx。 语法： upstream name { 指令 } 默认值：无 上下文：http 2、指令集 指令 含义 upst...
nginx反向代理的文件上传问题
wuqing2012mxd的博客
04-26 2835
nginx反向代理上传文件默认好像是会全部接受之后才开始传到代理服务器,这个对上传效率来说有很大影响. 具体见nginx官方文档描写: https://nginx.org/en/docs/http/ngx_http_proxy_module.html#proxy_request_buffering 解决方案:根据官方文档说的把proxy_request_buffering设置成o...
项目实践、nginx服务做反向代理配置说明
jiang0615csdn的博客
05-06 2245
本文章介绍了本人工作过程中使用的nginx服务作为反向代理的配置，并针对很多配置了相关的说明及解析的，重要信息是进行了过滤，可以给大家进行参考使用。 很多配置仅供参考的，不做实际的生产环境使用的！！！ 配置文件是nginx.conf，具体配置内容如下： user nginx nginx; #Nginx worker 进程运行的用户及用户组 语法：user username [groupname] 默认：user nobody nobody 作用及注意事项： user 用于设置 maste
Nginx缓存、静态文件缓存配置
HumorChen的博客
06-18 5118
Nginx静态Server基本配置。
【Nginx】设置文件上传、下载、缓存大小、临时文件存放路径
热门推荐
姜太小白的博客
05-28 1万+
配置参数： ​ 1）配置请求体缓存区大小 ​ client_body_buffer_size 10m; ​ 2）配置客户端上传限制最大值 ​ client_max_body_size 20m; 3）配置客户端下载限制最大值 proxy_max_temp_file_size 5000m; ​ 4）设置临时文件存放路径(可选配置) ​ client_body_temp_path /data/temp; ​ ps：设置临时文件存放路径。只有当上传的请求体超出缓存区大小时，才会写到临时文件 中,注意临
nginx——文件缓存机制
lmd1997130的博客
11-15 4051
1、nginx的文件缓存是基于http协议的文件缓存机制。2、浏览器第一次请求url在浏览器第一次请求url的时候，服务器端无缓存，大致过程如下： 浏览器——>无缓存——>请求web服务器——>请求响应——>呈现3、浏览器不是第一次请求url若浏览器不是第一次请求url的时候，服务端有缓存，大致过程如下： 浏览器——>有缓存——>校验过期——>呈现 既然着这里提到了校验过期，那么接下来我们就来
Nginx配置为缓存服务器及清除apk缓存教程
"本文主要介绍了如何使用Nginx作为缓存服务器来缓存Android APK文件，并提供了删除Nginx缓存文件的方法。配置文件中详细设置了Nginx的相关参数，包括用户、工作进程数、错误日志、事件模型、HTTP模块下的各种设置，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值