服务器请求的优化和性能的监控

最近在搞服务器优化这一块，查了一些资料，总结一下。

查看服务器 curl 请求时间：

curl -o /dev/null -s -w %{time_namelookup}::%{time_connect}::%{time_starttransfer}::%{time_total}::%{speed_download}"\n" 'http://www.baidu.com'

返回结果字段解释：

o：把curl 返回的html、js 写到垃圾回收站[ /dev/null]

-s：去掉所有状态

-w：按照后面的格式写出rt

time_namelookup：DNS 解析域名的时间

time_commect：client和server端建立TCP 连接的时间

time_starttransfer：从client发出请求；到web的server 响应第一个字节的时间

time_total：client发出请求；到web的server发送会所有的相应数据的时间

speed_download：下周速度 单位 byte/s

查看连接端口的总数：

netstat -nat|grep -i "80"|wc -l

查看网络tcp 是否存在大量的wait:

netstat -n | awk '/^tcp/ {++S[$NF]} END {for(a in S) print a, S[a]}'

CLOSE_WAIT 5

ESTABLISHED 61

FIN_WAIT1 1

FIN_WAIT2 5

TIME_WAIT 2865

解决方法如下：

[plain]   view plain   copy

1. vi /etc/sysctl.conf  

添加配置信息

[plain]   view plain   copy

1. #对于一个新建连接，内核要发送多少个 SYN 连接请求才决定放弃,不应该大于255，默认值是5，对应于180秒左右时间  
2. net.ipv4.tcp_syn_retries=2  
3. #net.ipv4.tcp_synack_retries=2  
4.   
5.   
6. #表示当keepalive起用的时候，TCP发送keepalive消息的频度。缺省是2小时，改为300秒  
7. net.ipv4.tcp_keepalive_time=1200  
8. net.ipv4.tcp_orphan_retries=3  
9.   
10.   
11. #表示SYN队列的长度，默认为1024，加大队列长度为8192，可以容纳更多等待连接的网络连接数。  
12. net.ipv4.tcp_max_syn_backlog = 4096  
13.   
14.   
15. #表示开启SYN Cookies。当出现SYN等待队列溢出时，启用cookies来处理，可防范少量SYN攻击。默认为0，表示关闭  
16. net.ipv4.tcp_syncookies = 1  
17. #表示开启重用tcp连接。允许将TIME-WAIT sockets重新用于新的TCP连接。默认为0，表示关闭  
18. net.ipv4.tcp_tw_reuse = 1  
19. #表示开启TCP连接中TIME-WAIT sockets的快速回收。默认为0，表示关闭  
20. net.ipv4.tcp_tw_recycle = 1  
21. #表示如果套接字由本端要求关闭，这个参数决定了它保持在FIN-WAIT-2状态的时间  
22. net.ipv4.tcp_fin_timeout = 30  
23.   
24.   
25. ##减少超时前的探测次数  
26. net.ipv4.tcp_keepalive_probes=5  
27. ##优化网络设备接收队列  
28. net.core.netdev_max_backlog=3000  

让参数配置生效

[plain]   view plain   copy

1. /sbin/sysctl -p  

性能命令的介绍：

接着通过top命令，shift + M按内存排序后，观察系统中使用内存最大的进程情况，发现只占用了18GB内存，其他进程均很小，可忽略。

(1)top

Top命令不仅显示了当前内核服务的任务，还显示了许多关于主机状态的统计数据，默认情况下，它每隔5秒自动更新一次显示的数据(这个时间间隔是可以配置的)，通过top命令，我们可以得知几个结果，如：当前正常运行时间，系统负载，进程数量和内存使用率，此外，这个命令也显示了那些使用最多CPU时间的进程(包括每个进程的各种信息，如运行用户，执行的命令等)。

(2)vmstat

Vmstat命令提供当前CPU、IO、进程和内存使用率的快照，它和top命令类似，自动更新数据，如：

$ vmstat 10

(3)iostat

Iostat命令(在Ubuntu，Red Hat/Fedora上包含在sysstat软件包中)提供三个报告：CPU利用率、设备利用率和网络文件系统利用率，不加任何参数运行时，iostat将显示这三个报告，使用-c，-d和-h参数可以分别独立显示这三个报告。

(4)free

Free命令显示主内存和交换空间的内存统计数据，指定-t参数可以显示总内存数量，指定-b参数可以按字节为单位进行显示，使用-m则以兆为单位显示，默认情况下是以千字节为单位的。

Free命令也可以使用-s参数加一个延迟时间(单位：秒)连续运行，如：

$ free -s 5

前五行是 当前 系统 情况 整体的统计信息 区 。 下面我们看每一行信息的具体意义。

第一行，任务队列信息，同 uptime 命令的执行结果，具体参数说明情况如下：

14:06:23 — 当前系统时间

up 70 days, 16:44 — 系统已经运行了70天16小时44分钟（在这期间系统没有重启过的吆！）

2 users — 当前有2个用户登录系统

load average: 1.15, 1.42, 1.44 — load average后面的三个数分别是1分钟、5分钟、15分钟的负载情况。

load average数据是每隔5秒钟检查一次活跃的进程数，然后按特定算法计算出的数值。如果这个数除以逻辑CPU的数量，结果高于5的时候就表明系统在超负荷运转了。

第二行，Tasks — 任务（进程），具体信息说明如下：

系统现在共有206个进程，其中处于运行中的有1个，205个在休眠（sleep），stoped状态的有0个，zombie状态（僵尸）的有0个。

第三行，cpu状态信息，具体属性说明如下：

5.9%us — 用户空间占用CPU的百分比。

3.4% sy — 内核空间占用CPU的百分比。

0.0% ni — 改变过优先级的进程占用CPU的百分比

90.4% id — 空闲CPU百分比

0.0% wa — IO等待占用CPU的百分比

0.0% hi — 硬中断（Hardware IRQ）占用CPU的百分比

0.2% si — 软中断（Software Interrupts）占用CPU的百分比

备注：在这里CPU的使用比率和windows概念不同，需要理解linux系统用户空间和内核空间的相关知识！

第四行,内存状态，具体信息如下：

32949016k   total — 物理内存总量（32GB）

14411180k   used — 使用中的内存总量（14GB）

18537836k   free — 空闲内存总量（18GB）

169884k   buffers — 缓存的内存量 （169M）

第五行，swap交换分区信息，具体信息说明如下：

32764556k total — 交换区总量（32GB）

0k used — 使用的交换区总量（0K）

32764556k   free — 空闲交换区总量（32GB）

3612636k   cached — 缓冲的交换区总量（3.6GB）

备注：

第四行中使用中的内存总量（used）指的是现在系统内核控制的内存数，空闲内存总量（free）是内核还未纳入其管控范围的数量。纳入内核管理的内存不见得都在使用中，还包括过去使用过的现在可以被重复利用的内存，内核并不把这些可被重新使用的内存交还到free中去，因此在linux上free内存会越来越少，但不用为此担心。

如果出于习惯去计算可用内存数，这里有个近似的计算公式：第四行的free + 第四行的buffers + 第五行的cached，按这个公式此台服务器的可用内存：18537836k +169884k +3612636k = 22GB左右。

对于内存监控，在top里我们要时刻监控第五行swap交换分区的used，如果这个数值在不断的变化，说明内核在不断进行内存和swap的数据交换，这是真正的内存不够用了。