压力测试时候Linux系统参数的调优

在进行压力测试时,遇到nginx配置问题和过多的TIME_WAIT连接导致的错误。通过调整nginx配置如worker_processes和worker_connections,以及优化Linux内核参数如tcp_tw_reuse和tcp_tw_recycle来复用和回收连接,解决了TIME_WAIT问题。同时,针对dmesg中显示的nf_conntrack表满问题,增加net.nf_conntrack_max和调整nf_conntrack_tcp_timeout_established参数,确保系统能有效处理连接。
摘要由CSDN通过智能技术生成

有个站点,我用ab做压测,结果ab总是返回错误,我做了如下的一些调优,最后正常了。

nginx的配置

.conf:
worker_processes 32;
worker_connections 65536;

过多的TIME_WAIT

在压力中,通过netstat发现很多TIME_WAIT的连接描述符:

netstat -n | awk '/^tcp/ {++state[$NF]} END {for(key in state) print key,"\t",state[key]}'

ss -ant | awk 'NR>1 {++s[$1]} END {for(k in s) print k,s[k]}'

一个网络连接断开后,会有30秒的TIME_WAIT时间,如果并行过大会导致连接耗尽。
通过查看/proc/sys/net/ipv4/ip_local_port_range可以知道设置的Linux内核自动分配端口的端口范围:
shell> cat /proc/sys/net/ipv4/ip_local_port_range
1025 65535
解决:
/etc/sysctl.conf
net.ipv4.tcp_tw_reuse = 1
net.ipv4.tcp_tw_recycle = 1
然后执行 /sbin/sysctl -p 让参数生效,使得连接得到复用和回收。

dmesg错误

ab返回apr_socket_recv: Connection timed out (110)
原因:dmesg查看系统错误信息显示大量nf_conntrack: table full, dropping packet,所以需要修改这个模块的参数。
解决:
vi /etc/sysctl.conf
net.nf_conntrack_max = 655360
net.netfilter.nf_conntrack_tcp_timeout_established = 1200
sysctl -p /etc/sysctl.conf

TestBandwitdth脚本用于测试带宽; //***************************************************************************************** 用法: 1.将“TestBandwidth.tar.gz”脚本copy到服务器上解压后,进入目录; 2.编辑“TestURL.sh”:灌流量; 上行:wget http://*** 下行:post http://*** 3.如果修改了步骤2,执行此步,否则跳过: 修改 TestBandwidth.tar.gz 脚本中的倒数5-6行; kill -9 `ps -ef|grep wget|grep http|awk '{print $2}'` //修改kill关键字:grep wget rm zhuxian* //修改rm关键字:zhuxian* 4.修改“bandwidth.sh”:修改检测网卡: netcard=em1 5.使用后台运行命令执行:nohup ./bandwidth.sh (注:停止脚本 pkill -9 bandwidth.sh && pkill -9 wget) 6.查看结果:BandwitdthResult.txt //********************************************************* 测试流量:清空“TestURL.sh”文件时执行就是测试流量 //***************************************************************************************** 脚本说明: 1.用TestURL.sh脚本启动灌流量操作; 2.等待10s(防止刚开始下载时的流量冲高); 3.取当前网卡已接收的上行、下行数据流量; 4.等待5s; 5.取当前网卡已接收的上行、下行数据流量; 6.计算两次取值中间的差值,算平均值; 7.等待10s,开始下一次小循环(循环4次)(一次小循环70s); 8.清除下载进程,清除下载文件,清除下载日志; 9.等待3495s,开始下一次大循环(一次大循环1h);
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值