集群安装前通过 SetSysEnv.py 脚本进行操作系统参数的配置优化。这里需要特别注意的是网络有关参数, 因多实例会造成服务器上承载更多的网络资源开销,在高并发场景下,就可能操作端口资源不够、连接数限制达到上限等问题。
ssh 连接数上限可适当增加,配置如下:
vi /etc/ssh/sshd_config
输入/MaxStartups 定位到如下并修改
1) #MaxStartups 10, #去掉,修改 10 为 1000, MaxStartups 1000
注:如果是 centos7,语法格式为: MaxStartups 10:30:100
表示从第 10 个开始,以 30%的概率后续新的 ssh 登录,直到 100 个连接
2) 重启 SSH 服务, /etc/rc.d/init.d/sshd restart
查看某端口连接数
netstat -nat|grep -i '22' |wc -l
集群参数优化
集群节点的资源是根据物理机分配的,没有参考实例数分配, 采用多实例部
署时,应对内存参数、并行度参数需进行手工的配置。避免位于同一个服务器上
的不同节点间产生严重的资源争抢。
如服务器内存为 256GB,按照 4 个 numa 节点分配 4 个 data 节点的三个内存
堆大小,分别为:
gbase_heap_data=24
#(256*6/16)/4
gbase_heap_temp=4G
#(256*1/16)/4
gbase_heap_large=12G
#(256*3/16)/4
如服务器的 CPU 共 128 核心,每个 NUMA 节点有 32 核