linux nginx 内存占用,nginx内存占用过高

nginx内存占用过高.md

现象

nginx运行一段时间后,内存占用非常高,超出系统最大内存后,开始使用SWAP,直至SWAP用尽,系统崩溃。内核参数vm.swappiness = 1。

如图:

43639f45d94eaed5f94079af4f6ca7d8.png

监控趋势图:

2623ff799c51eb1ec3d074f439fbfa95.png

分析和排查

因为之前使用的nginx版本为 1.11 ,出现内存泄露bug的可能性较小,并且网上没有相关反馈。

之后开始分析nginx的配置文件,首先发现的比较特殊的配置是防刷模块配置。

修改了防刷模块配置,观察一段时间,无效!

于是继续查找配置文件,发现client_header_buffer_size有点大,做了调整

client_header_buffer_size20000k;

#@修改为

client_header_buffer_size32k;

观察了几天,问题解决了,再也没出现内存占用过高的问题。汗,前人挖的大坑啊,访问量低了还看不出来。

分析

205d9adc-a496-4a46-be05-c28478cc7809.png

Sets buffer size for reading client request header. For most requests, a buffer of 1K bytes is enough. However, if a request includes long cookies, or comes from a WAP client, it may not fit into 1K. If a request line or a request header field does not fit into this buffer then larger buffers, configured by thelarge_client_header_buffers directive, are allocated.

Nginx 使用 client_header_buffer_size 缓存客户端的请求头,对于大部分请求,1K的默认值已经足够了。一旦请求头超过了1K,空间不够了,nginx就通过 large_client_header_buffers 按需扩容,这样做可以平衡资源和性能。

比如说大部分请求头的大小在 2K 以内,小部分的请求头在 10K 左右,此时理论上我们可以通过调整 client_header_buffer_size 到 10K 来解决问题,不过这样的话无疑浪费了宝贵的内存,更好的方法是调整 client_header_buffer_size 到 2K 满足大部分请求头的需求,至于小部分 10K 的请求头,则通过调整 large_client_header_buffers 来满足。

参考资料

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
根据引用\[1\]和引用\[2\]的内容,可以得出nginx内存占用高的可能原因是改写模块分配了过多的内存。在引用\[1\]中提到了使用工具systemtap排查分配TOP的函数栈,发现改写模块分配了138598400字节的内存。而引用\[2\]中提到nginx使用client_header_buffer_size缓存客户端的请求头,默认值为1K,当请求头超过1K时,nginx会通过large_client_header_buffers按需扩容。这样做可以平衡资源和性能。因此,如果请求头过大,可能会导致nginx内存占用增加。 此外,引用\[3\]中提到关闭subs_line_buffer_size配置后,访问2000次内存页错误减少了。这表明较大的内存分配更容易产生碎片问题,可能也会导致nginx内存占用高。 综上所述,nginx内存占用高的原因可能是改写模块分配了过多的内存,请求头过大导致扩容,以及较大的内存分配导致碎片问题。为了解决这个问题,可以考虑优化改写模块的内存分配,调整client_header_buffer_size和large_client_header_buffers的配置,以及处理较大内存分配的碎片问题。 #### 引用[.reference_title] - *1* *3* [nginx内存占用高---内存池使用思考](https://blog.csdn.net/qq_39015563/article/details/86288119)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control_2,239^v3^insert_chatgpt"}} ] [.reference_item] - *2* [linux nginx 内存占用,nginx内存占用过高](https://blog.csdn.net/weixin_34677764/article/details/116837891)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^control_2,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值