前段时间我在进行线上项目压力测试的时候,遇到了一个吞吐量的性能问题,当时我的Server和Client之间的通信协议采用了Json Over HTTP的方式(并且在同一个机器上面,其实应该是出现在Client的那个机器上),而且由于Client的实现原因,没有任何KeepAlive机制,同时必须有大量的请求,这样就造成一个问题,客户端的请求端口会迅速被使用完成,然后系统会有大量的TIME_WAIT,整个系统再也分配不出新的端口给任何程序(包括Client)使用,任何新创建连接时,都会报错,即:”Cannot assign requested address”,经过反复测试,可以采用以下的方式解决:
编辑 /etc/sysctl.conf 文件,增加以下内容
net.ipv4.tcp_fin_timeout = 5
net.ipv4.tcp_keepalive_time = 1200
net.ipv4.tcp_syncookies = 1
net.ipv4.tcp_tw_reuse = 0
net.ipv4.tcp_tw_recycle = 1
net.ipv4.tcp_timestamps = 1
net.ipv4.tcp_max_syn_backlog = 8192
net.ipv4.tcp_max_tw_buckets = 60000000
net.ipv4.netfilter.ip_conntrack_max = 268435456
net.ipv4.ip_local_port_range = 1024 65000
net.ipv4.netfilter.ip_conntrack_tcp_timeout_time_wait = 1
执行以下命令使之生效
1
|
/sbin/sysctl -p
|
重点备注:
net.ipv4.tcp_tw_reuse = 0
net.ipv4.tcp_tw_recycle = 1
1.reuse是表示是否允许重新应用处于TIME-WAIT状态的socket用于新的TCP连接,我这里是不重用,这样配合下面的参数可以让系统迅速回收,反而效果比设置为1要好很多;
2.recyse是加速TIME-WAIT sockets回收
以下参数说明来此网络: