进程和计划任务

程序

什么是程序？

• 是一组计算机能识别和执行的指令，运行于电子计算机上，满足人们某种需求的信息化工具
• 用于描述进程要完成的功能，是控制进程执行的指令集

进程

什么是进程

运行中的程序的一个副本，是被载入内存的一个指令集合，是资源分配的单位，

• 进程ID（Process ID，PID）号码被用来标记各个进程
• UID、GID语境决定对文件系统的存取和访问权限
• 通常从执行进程的用户来继承
• 存在生命周期
• 都由其父进程创建

进程创建：

• init：第一个进程，从 CentOS7 以后为systemd

• 进程：都由其父进程创建，fork()，父子关系，CoW：Copy On Write

进程具有的特征

• 动态性：进程是程序的一次执行过程，是临时的，有生命期的，是动态产生，动态消亡的；
• 并发性：任何进程都可以同其他进程一起并发执行；
• 独立性：进程是系统进行资源分配和调度的一个独立单位；
• 结构性：进程由程序、数据和进程控制块三部分组成。

进程，线程和协程

进程

进程是一个具有一定独立功能的程序在一个数据集上的一次动态执行的过程，是操作系统进行资源分配和调度

的一个独立单位，是应用程序运行的载体。进程是一种抽象的概念，从来没有统一的标准定义。
进程的组成

进程一般由程序、数据集合和进程控制块三部分组成。

程序用于描述进程要完成的功能，是控制进程执行的指令集；

数据集合是程序在执行时所需要的数据和工作区；

程序控制块(Program Control Block，简称PCB)，包含进程的描述信息和控制信息，是进程存在的唯一
标志。
进程具有的特征：
动态性：进程是程序的一次执行过程，是临时的，有生命期的，是动态产生，动态消亡的；

并发性：任何进程都可以同其他进程一起并发执行；

独立性：进程是系统进行资源分配和调度的一个独立单位；

结构性：进程由程序、数据和进程控制块三部分组成。

线程

在早期的操作系统中并没有线程的概念，进程是能拥有资源和独立运行的最小单位，也是程序执行的最小单

位。任务调度采用的是时间片轮转的抢占式调度方式，而进程是任务调度的最小单位，每个进程有各自独立的一块内存，使得各个进程之间内存地址相互隔离。

后来，随着计算机的发展，对CPU的要求越来越高，进程之间的切换开销较大，已经无法满足越来越复杂的程序的要求了。于是就发明了线程。
线程是程序执行中一个单一的顺序控制流程，是程序执行流的最小单元，是处理器调度和分派的基本单位。一个进程可以有一个或多个线程，各个线程之间共享程序的内存空间(也就是所在进程的内存空间)。一个标准的线程由线程ID、当前指令指针(PC)、寄存器和堆栈组成。而进程由内存空间(代码、数据、进程空间、打开的文件)和一个或多个线程组成。

协程

协程，英文Coroutines，是一种基于线程之上，但又比线程更加轻量级的存在，这种由程序员自己写程序来管理的轻量级线程叫做『用户空间线程』，具有对内核来说不可见的特性。
因为是自主开辟的异步任务，所以很多人也更喜欢叫它们纤程（Fiber），或者绿色线程
（GreenThread）。正如一个进程可以拥有多个线程一样，一个线程也可以拥有多个协程。
协程的目的在传统的J2EE系统中都是基于每个请求占用一个线程去完成完整的业务逻辑（包括事务）。所以系统的吞吐能力取决于每个线程的操作耗时。如果遇到很耗时的I/O行为，则整个系统的吞吐立刻下降，因为这个时候线程一直处于阻塞状态，如果线程很多的时候，会存在很多线程处于空闲状态（等待该线程执行完才能执行），造成了资源应用不彻底。

最常见的例子就是JDBC（它是同步阻塞的），这也是为什么很多人都说数据库是瓶颈的原因。这里的耗时其实是让CPU一直在等待I/O返回，说白了线程根本没有利用CPU去做运算，而是处于空转状态。而另外过多的线程，也会带来更多的ContextSwitch开销。
对于上述问题，现阶段行业里的比较流行的解决方案之一就是单线程加上异步回调。其代表派是node.js以及Java里的新秀Vert.x。

而协程的目的就是当出现长时间的I/O操作时，通过让出目前的协程调度，执行下一个任务的方式，来消除ContextSwitch上的开销。
协程的特点

线程的切换由操作系统负责调度，协程由用户自己进行调度，因此减少了上下文切换，提高了效率。
线程的默认Stack大小是1M，而协程更轻量，接近1K。因此可以在相同的内存中开启更多的协程。
由于在同一个线程上，因此可以避免竞争关系而使用锁。
适用于被阻塞的，且需要大量并发的场景。但不适用于大量计算的多线程，遇到此种情况，更好实用线程去解决。

协程的原理
当出现IO阻塞的时候，由协程的调度器进行调度，通过将数据流立刻yield掉（主动让出），并且记录当前栈上的数据，阻塞完后立刻再通过线程恢复栈，并把阻塞的结果放到这个线程上去跑，这样看上去好像跟写同步代码没有任何差别，这整个流程可以称为coroutine，而跑在由coroutine负责调度的线程称为Fiber。
比如Golang里的 go关键字其实就是负责开启一个Fiber，让func逻辑跑在上面。
由于协程的暂停完全由程序控制，发生在用户态上；而线程的阻塞状态是由操作系统内核来进行切换，发生在内核态上。
因此，协程的开销远远小于线程的开销，也就没有了ContextSwitch上的开销。

进程与线程的区别

线程是程序执行的最小单位，而进程是操作系统分配资源的最小单位；

一个进程由一个或多个线程组成，线程是一个进程中代码的不同执行路线；

进程之间相互独立，但同一进程下的各个线程之间共享程序的内存空间(包括代码段、数据集、堆等)及一些进程级的资源(如打开文件和信号)，某进程内的线程在其它进程不可见；

调度和切换：线程上下文切换比进程上下文切换要快得多。

进程使用内存的问题

内存泄漏：Memory Leak

指程序中用malloc或new申请了一块内存，但是没有用free或delete将内存释放，导致这块内存一直处于占用状态

内存溢出：Memory Overflow

指程序申请了10M的空间，但是在这个空间写入10M以上字节的数据，就是溢出,类似红杏出墙

内存不足：OOM
OOM 即 Out Of Memory，“内存用完了”,在情况在java程序中比较常见。系统会选一个进程将之杀死，在日志messages中看到类似下面的提示

Jul 10 10:20:30 kernel: Out of memory: Kill process 9527 (java) score 88 or sacrifice child

当JVM因为没有足够的内存来为对象分配空间并且垃圾回收器也已经没有空间可回收时，就会抛出这个error，因为这个问题已经严重到不足以被应用处理）。
原因：

给应用分配内存太少：比如虚拟机本身可使用的内存（一般通过启动时的VM参数指定）太少。

应用用的太多，并且用完没释放，浪费了。此时就会造成内存泄露或者内存溢出。

使用的解决办法：

1，限制java进程的max heap，并且降低java程序的worker数量，从而降低内存使用

2，给系统增加swap空间

进程状态

进程的基本状态

• 创建状态：进程在创建时需要申请一个空白PCB(process control block进程控制块)，向其中填写
• 控制和管理进程的信息，完成资源分配。如果创建工作无法完成，比如资源无法满足，就无法被调
• 度运行，把此时进程所处状态称为创建状态
• 就绪状态：进程已准备好，已分配到所需资源，只要分配到CPU就能够立即运行
• 执行状态：进程处于就绪状态被调度后，进程进入执行状态
• 阻塞状态：正在执行的进程由于某些事件（I/O请求，申请缓存区失败）而暂时无法运行，进程受
• 到阻塞。在满足请求时进入就绪状态等待系统调用
• 终止状态：进程结束，或出现错误，或被系统终止，进入终止状态。无法再执行

状态之间转换六种情况

运行——>就绪：1，主要是进程占用CPU的时间过长，而系统分配给该进程占用CPU的时间是有限的；

2，在采用抢先式优先级调度算法的系统中,当有更高优先级的进程要运行时，该进程就被迫让出CPU，

该进程便由执行状态转变为就绪状态

就绪——>运行：运行的进程的时间片用完，调度就转到就绪队列中选择合适的进程分配CPU

运行——>阻塞：正在执行的进程因发生某等待事件而无法执行，则进程由执行状态变为阻塞状态，如

发生了I/O请求

阻塞——>就绪:进程所等待的事件已经发生，就进入就绪队列

以下两种状态是不可能发生的：

阻塞——>运行：即使给阻塞进程分配CPU，也无法执行，操作系统在进行调度时不会从阻塞队列进行

挑选，而是从就绪队列中选取

就绪——>阻塞：就绪态根本就没有执行，谈不上进入阻塞态

进程更多的状态：

• 运行态：running
• 就绪态：ready
• 睡眠态：分为两种，可中断：interruptable，不可中断：uninterruptable
• 停止态：stopped，暂停于内存，但不会被调度，除非手动启动
• 僵死态：zombie，僵尸态，结束进程，父进程结束前，子进程不关闭，杀死父进程可以关闭僵死态 的子进程

进程结束 父进程 会回收子进程的硬件资源，

子进程如果出现意外关闭， 父进程无感知就不会收回资源，这个人为关闭父进程， 资源不会回收产生僵尸进程

进程间的通讯

同一主机：

pipe 管道,单向传输

socket 套接字文件,双工通信

Memory-maped file 文件映射,将文件中的一段数据映射到物理内存，多个进程共享这片内存

shm shared memory 共享内存

signal 信号

Lock 对资源上锁，如果资源已被某进程锁住，则其它进程想修改甚至读取这些资源，都将被阻塞，直到锁被打开

semaphore 信号量，一种计数器

不同主机：

RPC remote procedure call 远程调用

MQ 消息队列，生产者和消费者，如：Kafka，RabbitMQ，ActiveMQ

进程的优先级 os

进程优先级调整

• 静态优先级：100-139
• 进程默认启动时的nice值为0，优先级为120
• 只有根用户才能降低nice值（提高优先性）

进程分类

操作系统分类：

• 协作式多任务：早期 windows 系统使用，即一个任务得到了 CPU 时间，除非它自己放弃使用CPU ，否则将完全霸占 CPU ，所以任务之间需要协作——使用一段时间的 CPU ，主动放弃使用
• 抢占式多任务：Linux内核，CPU的总控制权在操作系统手中，操作系统会轮流询问每一个任务是否需要使用 CPU ，需要使用的话就让它用，不过在一定时间后，操作系统会剥夺当前任务的 CPU 使用权，把它排在询问队列的最后，再去询问下一个任务

进程类型：

• 守护进程: daemon,在系统引导过程中启动的进程，和终端无关进程
• 前台进程：跟终端相关，通过终端启动的进程

注意：两者可相互转化

按进程资源使用的分类：

• CPU-Bound：CPU 密集型，非交互
• IO-Bound：IO 密集型，交互

进程管理相关命令

进程的管理主要是指进程的关闭与重启。我们一般关闭或重启软件，都是关闭或重启它的程序，而不是直接操作进程的。比如，要重启 apache 服务，一般使用命令"service httpd restart"重启 apache的程序。systemctl httpd start

那么，可以通过直接管理进程来关闭或重启 apache 吗？答案是肯定的，这时就要依赖进程的信号（Signal）了。我们需要给予该进程 信号，告诉进程我们想要让它做什么。

系统中可以识别的信号较多，我们可以使用命令"kill -l"或"man 7 signal"来查询

号代号	信号名称	说 明
1	SIGHUP	该信号让进程立即关闭.然后重新读取配置文件之后重启
2	SIGINT	程序中止信号，用于中止前台进程。相当于输出 Ctrl+C 快捷键
3	SIGQUIT	退出
8	SIGFPE	在发生致命的算术运算错误时发出。不仅包括浮点运算错误，还包括溢出及除数为 0 等其他所有的算术运算错误
9	SIGKILL	用来立即结束程序的运行。本信号不能被阻塞、处理和忽略。般用于强制中止进程
14	SIGALRM	时钟定时信号，计算的是实际的时间或时钟时间。alarm 函数使用该信号
15	SIGTERM	正常结束进程的信号，kill 命令的默认信号。如果进程已经发生了问题，那么这 个信号是无法正常中止进程的，这时我们才会尝试 SIGKILL 信号，也就是信号 9
18	SIGCONT	该信号可以让暂停的进程恢复执行。本信号不能被阻断
19	SIGSTOP	该信号可以暂停前台进程，相当于输入 Ctrl+Z 快捷键。本信号不能被阻断

ps命令（用于静态查看进程信息）

ps 即 process state，可以查看进程当前状态的快照，默认显示当前终端中的进程，Linux系统各进程的相关信息均保存在/proc/数字 目录/status 下的各文件中

查看静态的进程统计信息

• “ps aux” 可以查看系统中所有的进程；

• “ps -le” 可以查看系统中所有的进程，而且还能看到进程的父进程的 PID 和进程优先级；

• “ps -l” 只能看到当前 Shell 产生的进程；

常用选项

• a：显示当前终端下的所有进程信息，包括其他用户的进程。与“x”选项结合时将示系统中所有的进程信息。
• u：使用以用户为主的格式输出进程信息。
• x：显示当前用户在所有终端下的进程信息。
• -e：显示系统内的所有进程信息。
• -l：使用长（Long）格式显示进程信息。
• -f：使用完整的（Full）格式显示进程信。
• k|–sort 属性 对属性排序,属性前加 - 表示倒序。
• o 属性… 选项显示定制的信息 pid、cmd、%cpu、%mem

表头	含义
USER	该进程是由哪个用户产生的。
PID	进程的 ID。
%CPU	该进程占用 CPU 资源的百分比，占用的百分比越高，进程越耗费资源。
%MEM	该进程占用物理内存的百分比，占用的百分比越高，进程越耗费资源。
VSZ	该进程占用虚拟内存的大小，单位为 KB。
RSS	该进程占用实际物理内存的大小，单位为 KB。
TTY	该进程是在哪个终端运行的。其中，tty1 ~ tty7 代表本地控制台终端（可以通过 Alt+F1 ~ F7 快捷键切换不同的终端），tty1~tty6 是本地的字符界面终端，tty7 是图形终端。pts/0 ~ 255 代表虚拟终端，一般是远程连接的终端，第一个远程连接占用 pts/0，第二个远程连接占用 pts/1，依次増长。
STAT	进程状态。常见的状态有以下几种： -D：不可被唤醒的睡眠状态，通常用于 I/O 情况。 -R：该进程正在运行。 -S：该进程处于睡眠状态，可被唤醒。 -T：停止状态，可能是在后台暂停或进程处于除错状态。 -W：内存交互状态（从 2.6 内核开始无效）。 -X：死掉的进程（应该不会出现）。 -Z：僵尸进程。进程已经中止，但是还是占用硬件资源。 -<：高优先级（以下状态在 BSD 格式中出现）。 -N：低优先级。 -L：被锁入内存。 -s：包含子进程。 -l：多线程（小写 L）。 -+：位于后台。
START	该进程的启动时间。
TIME	该进程占用 CPU 的运算时间，注意不是系统时间。
COMMAND	产生此进程的命令名。

ps aux

显示所有终端上面的所有用户的所有进程

ps -elf

ps -elf命令和ps aux命令一样是查询所有进程的信息的

top命令（动态实时查看进程）

top是我们Linux系统中默认的查看系统进程的工具，额外衍生的更好用的工具有iotop（查看读写） ，atop，iftop等工具。

top命令可以动态查看相关的进程信息，并且可以根据相关进程的使用情况进行一个排名。

命令：直接输入top进入界面：





查看cpu信息：

cat /proc/cpuinfo/（查看cpu的详细信息）

top后按1

平均负载值就是系统平均活跃的进程数。

如何判断cpu饱和：查看load average值是否大于等于我当前系统cpu数量的80%时，当前系统处于饱和状态；如果在我们工作的闲暇时间，我们的cpu一直处于饱和状态，要检查是否被攻击，变成肉机或者矿机，导致我们的负载值不正常一直处于高度饱和状态。

除了top命令，还有其他的命令可以查看系统负载值

w也可以查看load average

uptime可以查看load average

进程信息区各词解释

top 命令的第二部分输出，主要是系统进程信息，各个字段的含义如下：

• PID：进程的 ID。
• USER：该进程所属的用户。
• PR：优先级，数值越小优先级越高。
• NI：优先级，数值越小、优先级越高。
• VIRT：该进程使用的虚拟内存的大小，单位为 KB。
• RES：该进程使用的物理内存的大小，单位为 KB。
• SHR：共享内存大小，单位为 KB。
• S：进程状态。
• %CPU：该进程占用 CPU 的百分比。
• %MEM：该进程占用内存的百分比。
• TIME+：该进程共占用的 CPU 时间。
• COMMAND：进程的命令名。

top选项：

• -d 指定刷新时间间隔，默认为3秒
• -b 全部显示所有进程
• -n 刷新多少次后退出

pgrep命令（根据特定条件查询进程）

查看指定的进程

• -U 指定用户
• -l: 显示进程名
• -a: 显示完整格式的进程名
• -P pid: 显示指定进程的子进程

pgrep

如果我们不使用选项直接使用pgrep命令我们的所有进程信息只会显示PID，没有其他内容

pgrep -l（额外显示进程名称）

pgrep -U（显示特定用户执行的程序）

pgrep -t（可以指定终端进行查看相关进程信息）

pstree进程树命令

常用选项

• -a 显示启动每个进程对应的完整指令，包括启动进程的路径、参数等
• -p 显示PID
• -T 不显示线程thread,默认显示线程
• -u 显示用户切换
• -H pid 高亮显示指定进程及其前辈进程

pstree -a

显示启动每个进程对应的完整指令，包括启动进程的路径、参数等

pstree -U

显示用户切换

如何启动进程

手工启用

在手工启用种我们又分两种启动方式：

• 前台启动：用户直接输入命令，直接执行程序
• 后台启动：在命令行尾加入“&”符号，可以让需要占用前台的命令，进入后台执行，节省前台的资源

Ctrl+z 挂起进程

jobs 命令（查看后台被终止进程）

jobs -[l]命令（显示后台任务列表进程的名称，若不加该选项，后台任务仅会显示进程的PID号）

fg命令

fg命令用于将后台的进程恢复到前台运行，可指定任务的序号

Ctrl+C组合键

该组合键应用于中断正在执行的命令

kill、killall命令

kill 从字面来看，就是用来杀死进程的命令，但事实上，这个或多或少带有一定的误导性。从本质上讲，kill 命令只是用来向进程发送一个信号，至于这个信号是什么，是用户指定的。

也就是说，kill 命令的执行原理是这样的，kill 命令会向操作系统内核发送一个信号（多是终止信号）和目标进程的 PID，然后系统内核根据收到的信号类型，对指定进程进行相应的操作。

• kill用于终止指定PID号的进程
• killall用于终止指定名称相关的所有进程（停止进程更干净，有可能会误杀进程）
• -9选项用于强制终止

补充：kill与kill-9的区别：

kill在我们实际运用中其实默认为kill [-15]的选项内容，即系统发送一个信号（名为Sigterm）告诉进程需要关闭，让进程自行停止运行并退出，进程本身可以自行清理缓存退出，也可以直接拒绝继续运行。
而kill -9 代表的信号为Sigkill，是系统告诉进程要被终止，立即退出，此信号不能被捕获，也不能被进程忽略，从而强制杀死进程。

总结：kill -9尽量不要在工作中使用，属于高危操作，有些进程需要进行保存备份的操作，然后再退出，kill-9容易造成进程未保存备份数据，造成数据丢失的风险。

killall

killall 也是用于关闭进程的一个命令，但和 kill 不同的是，killall 命令不再依靠 PID 来杀死单个进程，而是通过程序的进程名来杀死一类进程，也正是由于这一点，该命令常与 ps、pstree 等命令配合使用

• -i：交互式，询问是否要杀死某个进程；
• -I：忽略进程名的大小写；

pkill

信号编号	信号名	含义
0	EXIT	程序退出时收到该信息。检查 进程是否有故障
1	HUP	挂掉电话线或终端连接的挂起信号，这个信号也会造成某些进程在没有终止的情况下重新初始化。
2	INT	表示结束进程，但并不是强制性的，常用的 “Ctrl+C” 组合键发出就是一个 kill -2 的信号。
3	QUIT	退出。
9	KILL	杀死进程，即强制结束进程。
11	SEGV	段错误。
15	TERM	正常结束进程，是 kill 命令的默认信号。

使用 killall 命令时，不知道大家发现没有，通过 killall 命令杀死 sshd 进程的方式来踢出用户，非常容易误杀死进程，要么会把 sshd 服务杀死，要么会把自己的登录终端杀死。

所以，不管是使用 kill 命令按照 PID 杀死登录进程，还是使用 killall 命令按照进程名杀死登录进程，都是非常容易误杀死进程的，而使用 pkill 命令则不会

计划任务

一次性计划任务（一次性调度任务）

格式：at [时间] [年月日]（不加年月日代表当天执行）

输入完命令行后，ctrl+d提交任务

可以查看未执行任务的列表：

删除未执行任务我们可以使用
atrm [序号] 的命令删除：

如何进行周期性计划任务？

像我们工作中，如果需要建立重复性的并且带有循环机制的任务，一条一条一次性调度任务，工作量很大，所以我们可以因此建立周期性的计划任务，让系统按照循环规则进行任务的执行

第一步：开启crond服务

我们建立周期性计划任务的设定时一定要开启crond服务（周期性任务的守护任务）

命令：systemctl enable crond（开启crond服务）

第二步：使用crontab命令

该命令的主要的配置文件有以下几种：

1. 全局配置文件，位于文件：/etc/crontab
2. 系统默认的设置，位于目录：/etc/cron.*/
3. 用户定义的设置，位于文件：/var/spool/cron/用户名

crontab任务配置的格式为：分 时 日 月 周 +命令/脚本

项目	含义	范围
第一个"*"	一小时当中的第几分钟（minute）	0~59
第二个"*"	一天当中的第几小时（hour）	0~23
第三个"*"	一个月当中的第几天（day）	1~31
第四个"*"	一年当中的第几个月（month）	1~12
第五个"*"	一周当中的星期几（week）	0~7（0和7都代表星期日）

第三步：编写计划性任务内容

crontab -e （编写执行内容）

我们设定每周一、三、五设定系统晚上22点重启

crontab -l（查询执行内容）

如何删除计划任务？

crontab -r （删除周期性任务）