当大型的应用需要创建几十万的线程时,需要修改linux的系统值,以支持这样的应用,相关的参数调整为:
1.ulimit 的参数调整
ulimit -s
ulimit -u
ulimit -n
可以修改/etc/security/limits.conf文件,使其永久生效
2.调整句柄数
/proc/sys/kernel/pid_max
/proc/sys/kernel/threads-max
/proc/sys/vm/max_map_count
/proc/sys/fs/file-max
注:
max_map_count
max_map_count文件包含限制一个进程可以拥有的VMA(虚拟内存区域)的数量。虚拟内存区域是一个连续的虚拟地址空间区域。在进程的生命周期中,每当程序尝试在内存中映射文件,链接到共享内存段,或者分配堆空间的时候,这些区域将被创建。调优这个值将限制进程可拥有VMA的数量。限制一个进程拥有VMA的总数可能导致应用程序出错,因为当进程达到了VMA上线但又只能释放少量的内存给其他的内核进程使用时,操作系统会抛出内存不足的错误。如果你的操作系统在NORMAL区域仅占用少量的内存,那么调低这个值可以帮助释放内存给内核用。
这个值太小,创建线程过多,会出现错误:
fork: Cannot allocate memory
syctrl -a
修改/etc/sysctl.conf
sysctl -p
3.如果使用了tcp连接,需要修改端口范围
net.ipv4.ip_local_port_range
tcp协议的端口限制,一个进程最多建立6万多的连接。