linux 内核 句柄 性能,linux服务器性能分析_TCP内存

linux 服务器性能分析

网络连接数

cat /proc/net/sockstat

或者ss 进行统计(比较慢)

系统dmesg提示 socket out of memory

首先查看系统socket使用了多少，参考1.

查看系统给tcp分配的内存大小限制

cat /proc/sys/net/ipv4/tcp_rmem #tcp read buffer bytes

4096 87380 629145

第一项是buffer最小4096字节，第二项是默认值87380字节，第三项是read buffer 最大限制629145 字节

cat /proc/sys/net/ipv4/tcp_wmem #tcp write buffer bytes

*write buffer与read buffer类似*

cat /proc/sys/net/ipv4/tcp_mem #tcp memory pages

>21498 28665 42996

第一个值是内存使用的下限；第二个值是内存压力模式开始对缓冲区使用应用压力的上限；第三个值是内存使用的上限。在这个层次上可以将报文丢弃，从而减少对内存的使用socket out of memory。可以结合sockstat里的统计数据分析tcp使用内存是否超过了限制，注意这里单位是页，查看页大小getconf PAGESIZE

另外可以查看tcp读写发送窗口默认值：

/proc/sys/net/core/rmem_default

/proc/sys/net/core/rmem_max

/proc/sys/net/core/wmem_default

/proc/sys/net/core/wmem_max

另外socket out of memory 也有可能是孤儿socket过多导致的。

内核配置最大的孤儿socket数：

cat /proc/sys/net/ipv4/max_orphans

4096

查看孤儿socket

cat /proc/net/sockstat

sockets: used 403

TCP: inuse 4 orphan 0 tw 0 alloc 10 mem 1

UDP: inuse 12 mem 7

UDPLITE: inuse 0

RAW: infuse 0

FRAG: inuse 0 memory 0

注意这里的orphan 往往会被内核x2 或者x4，所以有时候看到这里的orphan数比较小，但是却有out of socket memory的提示，有可能就是这个放大倍数导致的。

关于孤儿socket 可以参考：孤儿socket

一个tcp socket占用多大内存

首先socket包括本地ip、端口，对端ip、端口；发送、接收缓冲区等(跟配置有关)。

如果按照上面最小的读写缓冲区来算那么一个socket大概占用8K的内存。

如果单从一个socket占用的内存来看，一个8GB的内存，一般情况下可以承受100万得sock长连接，前提是系统文件句柄要调大

tcp内存最大也要进行调整。

tcp内核参数调优

tcp参数调优

查看系统总共使用了多少文件描述符

cat /proc/sys/fs/file-nr

4096 0 9000

第一项就是当前系统已经打开的文件句柄(包括socket )

cat /proc/sys/fs/file-max

系统最大的文件句柄数

0. dmesg or dmesg -T

查看内核的错误信息，比如tcp链接太多，句柄不够用，内存不足导致某些进程被kill掉

0. slabtop 内核内存分配

0. iostat -d 1 10 -x

0. vmstat -n 1 10

可以通过该命令动态观察swap内存是否在发生变化，如果一直在增长，那么可以初步断定系统内存不够用。

0. 当cache、buffer占用大量内存是可以通过调整内核参数释放改内存：

$sync (必须要先执行)

$ echo "3" > /proc/sys/vm/drop_caches (该值默认是0，不释放)