Nginx(5):进程绑定CPU:从nginx源码里给你刨功能出来

CPU的信息主要都在/proc/cupinfo中:

查看物理CPU个数

cat /proc/cpuinfo|grep “physical id”|sort -u|wc -l

查看每个物理CPU中core的个数(即核数)

cat /proc/cpuinfo|grep “cpu cores”|uniq

查看逻辑CPU的个数

cat /proc/cpuinfo|grep “processor”|wc -l

查看CPU的名称型号

cat /proc/cpuinfo|grep “name”|cut -f2 -d:|uniq

Linux查看某个进程运行在哪个逻辑CPU上

ps -eo pid,args,psr

#参数的含义:

pid - 进程ID

args - 该进程执行时传入的命令行参数

psr - 分配给进程的逻辑CPU

例子:

[~]# ps -eo pid,args,psr | grep nginx

9073 nginx: master process /usr/ 1

9074 nginx: worker process 0

9075 nginx: worker process 1

9076 nginx: worker process 2

9077 nginx: worker process 3

13857 grep nginx 3


为什么要绑定CPU?


在多核 CPU 结构中,每个核心有各自的L1、L2缓存,而L3缓存是共用的。如果一个进程在核心间来回切换,各个核心的缓存命中率就会受到影响。相反如果进程不管如何调度,都始终可以在一个核心上执行,那么其数据的L1、L2 缓存的命中率可以显著提高。

所以,将进程与 CPU 进行绑定可以提高 CPU 缓存的命中率,从而提高性能。而进程与 CPU 绑定被称为: CPU 亲和性 。

将关键服务或进程绑定到一个核心上,其他进程避开该核心,可以保证关键服务(比如配置下发服务进程、监控进程等)顺畅执行没有卡顿。

这里还要注意以下:进程绑定CPU != 进程独占CPU,要独占,可以去设置,或者你给服务器上每个进程都安排好核,只要你核够多,CPU就不会切换进程,因为没有进程给它切换。


Linux 关于CPU亲和性


Linux中针对cpu亲和性特性提供的API如表所示,表中cpu_set_t是一个掩码数组,一共有1024位,每一位对应系统中的一个逻辑处理器,最低位对应系统中的第一个逻辑处理器,而最高位则对应系统中最后一个逻辑处理器。如在一个四核的服务器上,0001表示第一个第一个逻辑处理器,0010表示第二个逻辑处理器,以此类推,在实际编程过程中不应该直接修改位掩码,而是使用系统提供的操作宏。

在这里插入图片描述

需要注意的是,当进程设置了CPU亲和性后,进程就被绑定了,只能在那些对应的位被设置的逻辑处理器上运行,如果进程没有显示对CPU亲和性进行设置,则默认所有的位均被置位。另外,CPU亲和性具有遗传性,即设置了CPU亲和性的进程会将这些CPU亲和性传递给从他们派生的子进程,当然,子进程可以调用系统提供的接口,重新对CPU亲和性进行设置。


Nginx CPU亲和性


配置示例:

worker_processes 4;

worker_cpu_affinity 0001 0010 0100 1000;

此配置的含义为共启动4个worker进程,第一个进程绑定到系统的第一个逻辑处理器,第二个进程绑定到系统的第二个逻辑处理器,以此类推。另外,也可以将一个进程绑定到多个CPU, 示例如下:

worker_processes 2;

worker_cpu_affinity 0101 1010;

此示例表示启动两个worker进程,其中第一个进程绑定到cpu0/cpu2,第二个进程绑定到cpu1/cpu3。


ngx_set_cpu_affinity


void

ngx_setaffinity(uint64_t cpu_affinity, ngx_log_t *log)

{

cpu_set_t mask;

ngx_uint_t i;

ngx_log_error(NGX_LOG_NOTICE, log, 0,

“sched_setaffinity(0x%08Xl)”, cpu_affinity);

CPU_ZERO(&mask);

i = 0;

do {

if (cpu_affinity & 1) {

CPU_SET(i, &mask);

}

i++;

cpu_affinity >>= 1;

} while (cpu_affinity);

if (sched_setaffinity(0, sizeof(cpu_set_t), &mask) == -1) {

ngx_log_error(NGX_LOG_ALERT, log, ngx_errno,

“sched_setaffinity() failed”);

}

}

函数的功能很简单,从地位到高位遍历cpu_affinity中的位值,如果某位为1,则将对应的CPU设置到CPU集mask中,最后调用sched_setaffinity设置本进程的CPU亲和性,同时,由于采用uint64_t存储转换后的结果,nginx最多只支持64 CPUs的CPU亲和性的配置。


我觉得吧,咱还是自己仿写一个吧,它这里面的参数是需要读配置文件的,咱没有剖析那个源代码。。。

尴尬。。。


仿写一份


将进程绑定到2号CPU上运行

#define _GNU_SOURCE

#include <sched.h>

#include <stdio.h>

#include <string.h>

#include <stdlib.h>

#include <unistd.h>

#include <errno.h>

int main(int argc, char **argv)

{

int cpus = 0;

int i = 0;

cpu_set_t mask;

cpu_set_t get;

cpus = sysconf(_SC_NPROCESSORS_ONLN);

printf(“cpus: %d\n”, cpus);

CPU_ZERO(&mask); /* 初始化set集,将set置为空*/

/将本进程绑定到CPU2上/

CPU_SET(2, &mask);

if (sched_setaffinity(0, sizeof(mask), &mask) == -1) {

printf(“Set CPU affinity failue, ERROR:%s\n”, strerror(errno));

return -1;

}

while(1)

{

}

return 0;

}

最后

自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。

深知大多数Java工程师,想要提升技能,往往是自己摸索成长,自己不成体系的自学效果低效漫长且无助。

因此收集整理了一份《2024年Java开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Java开发知识点,不论你是刚入门Java开发的新手,还是希望在技术上不断提升的资深开发者,这些资料都将为你打开新的学习之门!

如果你觉得这些内容对你有帮助,需要这份全套学习资料的朋友可以戳我获取!!

由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且会持续更新!
…(img-hqkN64uj-1715856741281)]

[外链图片转存中…(img-onpoXOlh-1715856741281)]

既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Java开发知识点,不论你是刚入门Java开发的新手,还是希望在技术上不断提升的资深开发者,这些资料都将为你打开新的学习之门!

如果你觉得这些内容对你有帮助,需要这份全套学习资料的朋友可以戳我获取!!

由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且会持续更新!

  • 4
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值