Nginx代理api出现response body内容被截断问题处理

最新推荐文章于 2023-04-18 13:04:23 发布
最新推荐文章于 2023-04-18 13:04:23 发布
阅读量2.2k 收藏 7
点赞数 3
分类专栏： nginx 文章标签： nginx
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zsn089074221/article/details/108775545
版权
前端遇到后端接口返回的字符串不完整，导致JSON解析错误。问题源于nginx在代理大容量数据时，因启动用户无proxy_temp目录写权限，只返回了部分数据。解决方案包括以root用户启动nginx或给予proxy_temp目录777权限。
摘要由CSDN通过智能技术生成

今天前端同事遇到个奇怪的问题，后端的接口返回数据被截断了，字符串不完整，导致JSON解析报错。。

错误信息显示，nginx向/usr/local/nginx/proxy_temp/目录下写入了临时数据，而执行nginx的用户没有该目录的写入权限。

经排查，是因为nginx的启动用户非root导致的。
原因：因为nginx对于返回值字符数小的请求直接使用内存作中转，对于数据量大的请求，使用文件系统来做中转。由于权限不够，返回时只返回了部分字符，导致出现此问题。

解决办法：
1、用root用户启动nginx

2、给与nginx临时目录nginx/proxy_temp/ 777权限

zsn089074221
关注
专栏目录
【nginx】记录response body和header到access.log
be5yond的博客
12-17 1万+
1 背景 netstub项目中，需要记录经过网关的请求信息到日志，供loki采集，以便后续的统计分析工作。 需要记录请求的request_body, request_header, response_body, response_header数据到access.log。 本文记录一下配置过程。 2 配置 2.1 记录请求url 配置nginx配置文件default.conf ，使用nginx内置变量 $host 和$request即可获得url数据 log_format main esca.
微服务架构之API网关：Spring Cloud Gateway
qq_35232663的博客
10-26 2045
API 网关是微服务架构重要组件之一，是服务唯一入口。API 网关封装内部系统架构，横向抽离通用功能，如：身份验证、监控、限流、熔断、负载均衡等。核心要点是，所有的客户端和消费端都通过统一的网关接入微服务，在网关层处理所有的非业务功能。 反向代理 VS 网关 在 web 1.0，2.0 时代，主要由web网站形式呈现。大多数都采用前置反向代理，主要作用是反向路由和负载均衡。典型的产品有 Nginx 和 HAproxy。一般采用静态配置方式，由运维团队配置。 如今来到了 web 3.0 微.
返回值过长时被nginx截断的解决办法
weixin_34347651的博客
11-17 1592
今天在写接口时碰到了这个问题，返回json格式的数据，但是被截断了经过排查，才发现是数据过大超出缓冲区最大容量，而将数据写入临时文件时又没有权限，所以再返回时，超出缓冲区的数据将丢失解决方法：给fastcgi_temp 目录赋读写权限​在nginx配置中的解释 Syntax: fastcgi_buffers number size;...
使用nginx发现接口获取到的数据被截取
zcl_23333
06-20 2519
接口数据被截取，使用nginx，接口数据过大的时候，nginx会将写入缓存查看nginx错误日志 出现如下错误信息，原来是权限问题 2017/06/20 14:36:28 [crit] 18223#0: *759884 open() "/usr/local/webserver/nginx/proxy_temp/2/36/0000001362" failed (13: Permission deni
nginx重定向导致post的body丢失
weixin_40502536的博客
03-22 3703
nginx重定向导致post的body丢失 http重定向https, 用rewrite导致post的body丢失, 换成return 3.7就可以了 server { listen 80; server_name www.aa.com; #rewrite ^(.*)$ https://$host$1 permanent; return 307 https://www.aa.com$request_uri; location / { index index.html index.
火狐浏览器提示响应已被截断（有效解决）
weixin_51666258的博客
02-06 4803
火狐浏览器提示响应已被截断
后台返回字符串过长被nginx截断
疯子也是猖狂
11-30 3079
前端用的vue后端用的java，本来没事，然后用着用着chrome就出现超时的异常，然后打开火狐，发现是返回的数据被阶段了，导致json解析失败。 这个被截断的原因也是出现在nginx上，因为返回数据过大，超出了nginx默认缓冲区，所以才会被截断。 在需要配置的路由下配置buffer location ^~/apiswr/ { proxy_pass http://ip:端口; client_max_body_size 100m; fastcgi_buffer_s
Nginx第三篇 功能扩展OpenResty简单使用
m0_55713857的博客
12-15 5470
OpenResty就是嵌入了LuaJIT VM的Nginx；LuaJIT即采用C语言写的Lua代码的解释器。通过 OpenResty，我们可以把 nginx 的各种功能进行自由拼接， 重要的是，开发门槛并不高，我们只需要熟悉简单灵巧的Lua 语言和nginx基础知识就可以上手开发简单功能了。
Nginx中使用安装lua支持
chuanguan1820的博客
06-19 1017
[TOC] Nginx中使用lua 主要是通过在编译NGINX时添加lua模块和lua的jit需要LuaJIT-2.0.4.tar.gz，ngx_devel_kit，lua-nginx-module 然后在NGINX中配置lua代码解析路径,使NGINX直接将请求转给lua 如下: ./con...
Nginx基础之错误页面配置/流量控制/访问控制/变量/监控/HTTPS配置/性能优化
热门推荐
weixin_43136091的博客
06-10 4万+
16、nginx 错误页面配置 nginx错误页面包括404 403 500 502 503 504等页面，只需要在server中增加以下配置即可： error_page 404 403 500 502 503 504 /404.html; location = /404.html { root /usr/local/nginx/html; } 注意： /usr/local/ng
JAVA 使用 jnetpcap 实现基础的抓取本机NGINX HTTP请求 抓包
最新发布
JavaeeGad的博客
04-18 636
JAVA 使用 jnetpcap 实现基础的抓取本机NGINX HTTP请求 抓包
php nginx 返回截断,PHP 返回数据被 nginx 截断问题的解决方法
weixin_28703451的博客
03-12 156
出现的问题现象：1 直接在命令行运行php脚本返回数据正常2 通过nginx访问返回数据被截断经过排查是fastcgi_temp目录的读写权限问题，Nginx的错误日志出现大量类似如下的错误：2016/06/0700:41:28[crit]32763#0:*5439open()"/Data/apps/nginx/fastcgi_temp/5/02/0000000025"failed...
返回xml过长时被nginx截断的解决办法
weixin_33965305的博客
01-21 515
返回xml过长时被nginx截断的解决办法 问题描述:通过网页获取数据，数据格式为xml。当xml比较短时，可以正常获取数据。但是xml长度过长时不能正常获取数据，通过观察返回数据的源代码，发现xml被截断了。 服务器环境：CentOS 6.5，Nginx 1.0.15，PHP 5.3.3 解决方法：对比发现，使用apache代替nginx的时候可以正常获取长的xml数据。确定问题出现在ng...
Nginx返回大长度的JSON数据被截断
weixin_30339969的博客
07-27 2640
1 添加Nginx参数，增加缓存字符串大小 head{ proxy_buffers 16 512k; //此处值代表nginx 设置 16个 512k 的块进行缓存，总共大小为16*512k proxy_buffer_size 512k; //磁珠值代表每块大小 } 　　 2 遇到权限问题，原因是大文件会先缓存到/proxy-temp文件夹下面...
客户端请求数据较大时，nginx返回数据被截断
weixin_42900170的博客
10-20 5073
【问题描述】：客户端使用curl命令向nginx请求数据，当返回数据量较大时，数据被截断，客户端无法获取完整的数据。 【问题原因】：nginx配置文件中包含了proxy_buffer_size、proxy_buffers两个配置字段，其中proxy_buffer_size用来接收后端服务器response的第一部分，proxy_buffers用来设置读取被代理服务器的缓冲区数目和大小，如果proxy_buffers关闭，nginx不会等到所有后端数据都被获取到之后才返回，而是尽快将接收到的数据传给客户端，
nginx收集request_body、response_body
赶路人儿
07-08 2万+
1、收集request_body： 对于get请求，request_body始终是空，对于post请求，request_body是参数信息。request_body的获取有两种方式： 使用nginx ngx_http_core模块的$request_body； openresty中使用lua脚本。 # 首先修改配置文件，我这里采集的日志只有request_body字段 vim /opt/nginx/conf/nginx.conf log_format main $request_body;
http-response返回数据被截断，返回不完全
weixin_42554373的博客
08-22 3273
response浏览器接收数据不全
获取nginx响应头、响应体
赶路人儿
07-08 8487
在原生nginx中无法获取响应相关信息。我们可以在openresty中借助lua来获取这些信息。 worker_processes 1; error_log logs/error.log; events { worker_connections 1024; } http { log_format log_req_resp '$remote_addr - $remote_user [$time_local] ' '"$request" $status $body_byte
【解决方案】客户端请求数据较大时，nginx返回数据被截断
weixin_30372371的博客
09-01 1822
【问题描述】：客户端使用curl命令向nginx请求数据，当返回数据量较大时，数据被截断，客户端无法获取完整的数据。 【问题原因】：nginx配置文件中包含了proxy_buffer_size、proxy_buffers两个配置字段，其中proxy_buffer_size用来接收后端服务器response的第一部分，proxy_buffers用来设置读取被代理服务器的缓冲区数目和大小，如果pro...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值