Linux内核子系统--进程管理剖析

Linux 是一个计算需求不断变化的非常动态的系统。 Linux 计算需求的表示以进程的公共抽象为中心,进程可以是短期的(从命令行执行的命令)或长期的(网络服务)。因此,进程的总体管理及其调度非常重要。

在用户空间中,进程由进程标识符 (PID) 表示。从用户的角度来看,PID 是唯一标识进程的数值。 PID 在进程的生命周期中不会改变,但 PID 可以在进程终止后重用,因此缓存它们并不总是理想的。

在用户空间中,您可以通过多种方式创建进程。您可以执行一个程序(这会导致创建一个新进程),或者在程序内,您可以调用 fork 或 exec 系统调用。 fork 调用导致创建子进程,而 exec 调用则用新程序替换当前进程上下文。我将讨论每种方法以了解它们的工作原理。

在这篇文章中,我首先展示进程的内核表示以及它们在内核中的管理方式,然后回顾在一个或多个处理器上创建和调度进程的各种方法,最后讨论如果它们死掉会发生什么,从而构建进程的描述。

进程表示

在 Linux 内核中,进程由一个称为 task_struct 的相当大的结构表示。该结构包含表示流程的所有必要数据,以及用于记账和维护与其他流程(父进程和子进程)关系的大量其他数据。对task_struct 的完整描述超出了本文的范围,但task_struct 的一部分如清单1 所示。此代码包含本文探讨的特定元素。请注意,task_struct 位于 ./linux/include/linux/sched.h 中。

/* task_struct部分代码 */
struct task_struct {
    volatile long state;
    void ∗stack;
    unsigned int flags;
    
    int prio, static_prio;
    struct list_head tasks;
    struct mm_struct ∗mm, ∗active_mm;

    pid_t pid;
    pid_t tgid;

    struct task_struct ∗real_parent;
    char comm[TASK_COMM_LEN];
    struct thread_struct thread;
    struct files_struct ∗files;
    ...
};

在上面代码片段中,你可以看到你期望的几个项目,例如执行状态、堆栈、一组标志、父进程、执行线程(可以有多个)和打开的文件。本文后面将探讨这些内容,这里简单介绍一些。状态变量是一组指示任务状态的位。最常见的状态表示进程正在运行或在运行队列中即将运行(TASK_RUNNING)、睡眠(TASK_INTERRUPTIBLE)、睡眠但无法唤醒(TASK_UNINTERRUPTIBLE)、停止(TASK_STOPPED)或其他一些状态。这些标志的完整列表可在 ./linux/include/linux/sched.h 中找到。

flags 字定义了大量的指示符,指示一切,从进程是否正在创建(PF_STARTING)或正在退出(PF_EXITING),甚至进程当前是否正在分配内存(PF_MEMALLOC)。可执行文件的名称(不包括路径)占据comm(命令)字段。

每个进程还被赋予了一个优先级(称为 static_prio),但进程的实际优先级是根据负载和其他因素动态确定的。优先级值越低,其实际优先级越高。

任务字段提供链表功能。它包含一个 prev 指针(指向上一个任务)和一个 next 指针(指向下一个任务)。

进程的地址空间由 mm 和 active_mm 字段表示。 mm 表示进程的内存描述符,而 active_mm 是前一个进程的内存描述符(改进上下文切换时间的优化)。

最后,thread_struct 标识了进程的存储状态。该元素取决于运行 Linux 的特定体系结构,你可以在 ./linux/include/asm-i386/processor.h 中查看相关示例。在此结构中,你将找到进程从执行上下文切换时的存储(硬件寄存器、程序计数器等)。

进程管理

现在,让我们探讨如何在 Linux 中管理进程。在大多数情况下,进程是动态创建的,并由动态分配的task_struct 表示。一个例外是 init 进程本身,它始终存在并由静态分配的 task_struct 表示。你可以在 ./linux/arch/i386/kernel/init_task.c 中看到这样的示例。

Linux 中的所有进程都以两种不同的方式收集。第一个是哈希表,通过PID值进行哈希;第二个是循环双向链表。循环链表非常适合迭代任务列表。由于链表是循环的,因此没有头或尾;但由于 init_task 始终存在,你可以将其用作锚点以进一步迭代。让我们看一个示例来演练当前的任务集。

任务列表无法从用户空间访问,但是你可以通过以模块的形式将代码插入内核来轻松解决该问题。下面的代码片段显示了一个非常简单的程序,它迭代任务列表并提供有关每个任务的少量信息(名称、pid 和父级名称)。请注意,该模块使用 printk 来输出内容。要查看输出,你需要使用 cat 实用程序查看 /var/log/messages 文件(或实时 tail -f /var/log/messages)。 next_task函数是sched.h中的一个宏,它简化了任务列表的迭代(返回下一个任务的task_struct引用)。

/* 用于发出任务信息的简单内核模块(procsview.c) */
#include <linux/kernel.h>
#include <linux/module.h>
#include <linux/sched.h>

int init_module( void )
{
  /∗ Set up the anchor point ∗/
  struct task_struct ∗task = &init_task;

  /∗ Walk through the task list, until we hit the init_task again ∗/
  do {
        printk( KERN_INFO "∗∗∗ %s [%d] parent %s\n",
        task‑>comm, task‑>pid, task‑>parent‑>comm );
  } while ( (task = next_task(task)) != &init_task );

  return 0;
}

void cleanup_module( void )
{
  return;
}

可以使用下来代码所示的 Makefile 来编译该模块。编译后,可以使用 insmod procsview.ko 命令插入内核对象,删除时可使用 rmmod procsview 命令。


obj‑m += procsview.o

KDIR := /lib/modules/$(shell uname ‑r)/build
PWD := $(shell pwd)

default:
    $(MAKE) ‑C $(KDIR) SUBDIRS=$(PWD) modules

进程创建

现在让我们来看看从用户空间创建一个进程的过程。用户空间任务和内核任务的底层机制是相同的,因为两者最终都依赖于一个名为 do_fork 的函数来创建新进程。在创建内核线程的情况下,内核调用一个名为 kernel_thread 的函数(参见 ./linux/arch/i386/kernel/process.c),该函数执行一些初始化,然后调用 do_fork。

用户空间进程的创建也会发生类似的操作。在用户空间中,程序调用 fork,这会导致对名为 sys_fork 的内核函数的系统调用(请参阅 ./linux/arch/i386/kernel/process.c)。函数关系如图 1 所示。

                                          图1 用于进程创建的函数层次结构

从图1中,可以看到do_fork提供了进程创建的基础。你可以在 ./linux/kernel/fork.c 中找到 do_fork 函数(以及伙伴函数 copy_process)。
do_fork 函数首先调用 alloc_pidmap,分配一个新的 PID。接下来,do_fork 检查调试器是否正在跟踪父进程。如果是,则在 clone_flags 中设置 CLONE_PTRACE 标志以准备分叉。然后 do_fork 函数继续调用 copy_process,传递标志、堆栈、寄存器、父进程和新分配的 PID。

copy_process 函数是新进程创建为父进程的副本的地方。该函数执行除启动进程之外的所有操作,该进程稍后处理。 copy_process 的第一步是验证 CLONE 标志以确保它们一致。如果不是,则返回 EINVAL 错误。接下来,咨询Linux安全模块(LSM)以查看当前任务是否可以创建新任务。要了解有关安全增强型 Linux (SELinux) 环境中 LSM 的更多信息,请查看资源部分。

接下来,调用 dup_task_struct 函数(位于 ./linux/kernel/fork.c 中),该函数分配一个新的 task_struct 并将当前进程的描述符复制到其中。在建立新的线程堆栈后,一些状态信息被初始化并且控制权返回到copy_process。回到 copy_process,除了其他一些限制和安全检查之外,还执行一些内务处理,包括对新 task_struct 的各种初始化。然后调用一系列复制函数来复制进程的各个方面,从复制打开的文件描述符 (copy_files)、复制信号信息(copy_sighand 和 copy_signal)、复制进程内存 (copy_mm) 到最后复制线程 (copy_thread)。

然后,新任务被分配给处理器,并根据允许执行进程的处理器 (cpus_allowed) 进行一些额外的检查。新进程的优先级继承父进程的优先级后,将执行少量额外的内务处理,并将控制权返回到 do_fork。此时,您的新进程已存在但尚未运行。 do_fork 函数通过调用wake_up_new_task 修复了这个问题。您可以在 ./linux/kernel/sched.c 中找到该函数,它初始化一些调度程序内务信息,将新进程放入运行队列中,然后唤醒它执行。最后,返回do_fork时,PID值返回给调用者,过程完成。

进程调度

虽然 Linux 中存在进程,但它可以通过 Linux 调度程序进行调度。虽然超出了本文的讨论范围,但 Linux 调度程序为每个优先级维护一组列表,其中包含 task_struct 引用。任务通过调度函数(在 ./linux/kernel/sched.c 中提供)调用,该函数根据加载和先前进程执行历史记录确定要运行的最佳进程。您可以在右侧的资源部分了解有关 Linux 版本 2.6 调度程序的更多信息。

进程销毁

进程销毁可以由多个事件驱动–正常进程终止、通过信号或通过调用退出函数。然而进程退出是被驱动的,进程通过调用内核函数 do_exit(在 ./linux/kernel/exit.c 中可用)结束。此过程如图 2 所示。
![图2
进程销毁的函数层次结构]Alt
do_exit 背后的目的是从操作系统中删除对当前进程的所有引用(对于所有未共享的资源)。销毁进程首先通过设置PF_EXITING标志来表明进程正在退出。内核的其他方面使用此指示来避免在删除该进程时对其进行操作。将进程与其在其生命周期中获得的各种资源分离的循环是通过一系列调用执行的,包括 exit_mm(用于删除内存页)到 exit_keys(用于处理每个线程会话和进程安全密钥)。 do_exit 函数执行进程处置的各种统计,然后通过调用 exit_notify 执行一系列通知(例如,向父进程发出子进程正在退出的信号)。最后进程状态变为PF_DEAD,并调用schedule函数选择新进程执行。请注意,如果需要向父级发送信号(或正在跟踪进程),则任务不会完全消失。如果不需要发出信号,则调用release_task实际上会回收进程使用的内存。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
目录 1 进程的组织 5 1.1 进程相关数据结构 5 1.1.1 进程的基本信息 6 1.1.2 进程状态 10 1.1.3 TASK_RUNNING状态的进程链表 11 1.1.4 进程间关系 12 1.2 Linux的线程——轻量级进程 15 1.3 进程的创建——do_fork()函数详解 19 1.4 执行进程间切换 33 1.4.1 进程切换之前的工作 33 1.4.2 进程切换实务 —— switch_to宏 37 1.4.3 __switch_to函数 39 1.5 fork与vfock系统调用的区别 42 1.6 内核线程 46 1.7 挂起状态进程的组织 49 1.7.1 等待队列头 49 1.7.2 等待队列的操作 50 1.7.3 进程资源限制 55 1.8 系统调用execve() 56 1.8.1 拷贝用户态参数 57 1.8.2 重要的数据结构 61 1.8.3 search_binary_handler函数 66 1.8.4 目标文件的装载和投入运行 69 1.8.5 库函数 92 2 中断控制 94 2.1 中断的分类 94 2.2 中断的硬件环境 95 2.2.1 外部中断请求IRQ 95 2.2.2 中断描述符表 96 2.2.3 中断和异常的硬件处理 97 2.3 中断描述符表 99 2.3.1 中断门、陷阱门及系统门 99 2.3.2 IDT的初步初始化 100 2.4 异常处理 101 2.5 中断处理 106 2.5.1 中断向量 107 2.5.2 IRQ数据结构 108 2.5.3 do_IRQ()函数 113 2.5.4 中断服务例程 115 2.5.5 IRQ线的动态分配 116 2.6 下半部分 117 2.6.1 软中断 118 2.6.2 tasklet 121 2.6.3 工作队列 122 2.7定时器中断 124 2.7.1 时钟与定时器 124 2.7.2 定时器中断相关的数据结构 127 2.7.3 定时器中断的上半部分 129 3 进程调度 138 3.1 进程调度的概念 138 3.2 进程调度的数据结构和优先级 141 3.2.1 进程的优先级 141 3.2.2 数据结构 145 3.3 调度程序所使用的函数 151 3.3.1 scheduler_tick函数 151 3.3.2 try_to_wake_up函数 156 3.3.3 recalc_task_prio函数 160 3.4 schedule()函数 163 3.4.1 直接调用 163 3.4.2 延迟调用 164 3.4.3 进程切换之前所做的工作 168 3.4.4 完成进程切换时所执行的操作 171 3.4.5 进程切换后所执行的操作 173 3.5 多处理器运行队列的平衡 175 3.5.1 调度域 176 3.5.2 rebalance_tick()函数 178 3.5.3 load_balance()函数 180 3.5.4 move_tasks()函数 183 3.6 进程退出 187 3.6.1 进程终止 187 3.6.2 进程删除 189 4 进程的并发性体现 191 4.1 内核抢占 193 4.1.1 内核抢占概念 193 4.1.2 同步技术总揽 196 4.2 每CPU变量 197 4.3 原子操作 199 4.4 优化屏障和内存壁垒 203 4.4.1 优化屏障 204 4.4.2 内存壁垒 204 4.5 自旋锁 206 4.6 读写自旋锁 211 4.6.1 为读获取和释放一个锁 213 4.6.2 为写获取或释放一个锁 214 4.7 顺序锁 215 4.8 RCU机制 217 4.9 信号量 219 4.9.1 获取和释放信号量 221 4.9.2 读/写信号量 224 4.9.3 补充信号量 225 4.10 禁止本地中断 226 4.10.1 禁止本地中断 227 4.10.2 禁止下半部(可延迟函数) 229 4.11 一些避免竞争条件的实例 231 4.11.1 引用计数器 231 4.11.2 大内核锁 231 4.11.3 内存描述符读/写信号量 232 4.11.4 slab高速缓存链表的信号量 233 4.11.5 索引节点的信号量 233 4.12 内核同步与互斥的总结 233

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值