Linux基础命令-进程与系统性能

进程与系统性能

一、进程相关概念

1.进程概念

(1)内核功用：进程管理、文件系统、网络功能、内存管理、驱动程序、安全功能等
(2)Process: 运行中的程序的一个副本，是被载入内存的一个指令集合
	进程ID（Process ID，PID）号码被用来标记各个进程
	UID、GID、和SELinux语境决定对文件系统的存取和访问权限
	通常从执行进程的用户来继承
	存在生命周期
(3)task struct：Linux内核存储进程信息的数据结构格式
(3)task list：多个任务的的task struct组成的链表
(4)进程创建：
	init：第一个进程(centos6)
	systemd:第一个进程(centos7)
	进程：都由其父进程创建，父子关系，CoW
		fork(), clone()
(5)Page Frame: 页框，用存储页面数据，存储Page 4k
(6)物理地址空间和线性地址空间
(7)MMU：Memory Management Unit 负责转换线性和物理地址
(8)TLB：Translation Lookaside Buffer 翻译后备缓冲器,用于保存虚拟地址和物理地址映射关系的缓存
(9)LRU：Least Recently Used 近期最少使用算法,释放内存

LRU算法

进程,线程和协程

用户和内核空间

2.进程的基本状态和转换

进程的基本状态和转换

进程的基本状态
(1)创建状态：进程在创建时需要申请一个空白PCB(process control block进程控制块)，向其中填写控制和管理进程的信息，
完成资源分配。如果创建工作无法完成，比如资源无法满足，就无法被调度运行，把此时进程所处状态称为创建状态
(2)就绪状态：进程已准备好，已分配到所需资源，只要分配到CPU就能够立即运行
(3)执行状态：进程处于就绪状态被调度后，进程进入执行状态
(4)阻塞状态：正在执行的进程由于某些事件（I/O请求，申请缓存区失败）而暂时无法运行，进程受到阻塞。
在满足请求时进入就绪状态等待系统调用
(5)终止状态：进程结束，或出现错误，或被系统终止，进入终止状态。无法再执行


状态之间转换六种情况
(1)运行——>就绪：1，主要是进程占用CPU的时间过长，而系统分配给该进程占用CPU的时间是有限的；
2，在采用抢先式优先级调度算法的系统中,当有更高优先级的进程要运行时，该进程就被迫让出CPU，该进程便由执行状态转变为就绪状态
(2)就绪——>运行：运行的进程的时间片用完，调度就转到就绪队列中选择合适的进程分配CPU
(3)运行——>阻塞：正在执行的进程因发生某等待事件而无法执行，则进程由执行状态变为阻塞状态，如发生了I/O请求
(4)阻塞——>就绪:进程所等待的事件已经发生，就进入就绪队列
(5)以下两种状态是不可能发生的：
	(5.1)阻塞——>运行：即使给阻塞进程分配CPU，也无法执行，操作系统在进行调度时不会从阻塞队列进行挑选，而是从就绪队列中选取
	(5.2)就绪——>阻塞：就绪态根本就没有执行，谈不上进入阻塞态

3.IPC进程间通信

IPC: Inter Process Communication
	同一主机：pipe 管道
		 socket 套接字文件
		 signal 信号
		 shm shared memory
		 semaphore 信号量，一种计数器
	不同主机：socket IP和端口号
		 RPC remote procedure call
		 MQ 消息队列，如：Kafka，RabbitMQ，ActiveMQ

4.进程优先级

进程优先级：
	系统优先级：数字越小，优先级越高
		0-139：各有140个运行队列和过期队列
	实时优先级: 99-0 值最大优先级最高
	nice值：-20到19，对应系统优先级100-139
Big O：时间复杂度，用时和规模的关系
	O(1), O(logn), O(n)线性, O(n^2)抛物线, O(2^n)

5.进程状态

Linux内核：抢占式多任务
进程类型：
	守护进程: daemon,在系统引导过程中启动的进程，和终端无关进程
	前台进程：跟终端相关，通过终端启动的进程
	注意：两者可相互转化
进程状态：
	运行态：running
	就绪态：ready
	睡眠态：
		可中断：interruptable
		不可中断：uninterruptable
	停止态：stopped,暂停于内存，但不会被调度，除非手动启动
	僵死态：zombie，结束进程，父进程结束前，子进程不关闭

二、进程与系统性能

1.系统管理工具

进程的分类：
	CPU-Bound：CPU密集型，非交互
	IO-Bound：IO密集型，交互
Linux系统状态的查看及管理工具：pstree, ps, pidof, pgrep, top, htop,glance,
	 pmap, vmstat, dstat, kill, pkill, job, bg, fg, nohup

2.进程管理

1.pstree命令

pstree命令
pstree [选项] [PID或用户名]
pstree 命令是以树形结构显示程序和进程之间的关系
	-a	显示启动每个进程对应的完整指令，包括启动进程的路径、参数等。
	-c	不使用精简法显示进程信息，即显示的进程中包含子进程和父进程。
	-n	根据进程 PID 号来排序输出，默认是以程序名排序输出的。
	-p	显示进程的 PID。
	-u	显示进程对应的用户名称。

2.ps命令

ps命令-->process state
ps report a snapshot of the current processes
Linux系统各进程的相关信息均保存在/proc/PID目录下的各文件中
ps [OPTION]...
	支持三种选项：
		UNIX选项 如-A -e
		BSD选项 如a
		GNU选项 如--help
UNIX选项:
	-C cmdlist 指定命令，多个命令用，分隔
	-L 显示线程
	-e: 显示所有进程，相当于-A
	-f: 显示完整格式程序信息
	-F: 显示更完整格式的进程信息
	-H: 以进程层级格式显示进程相关信息
	-u userlist 指定有效的用户ID或名称
	-U userlist 指定真正的用户ID或名称
	-g gid或groupname 指定有效的gid或组名称
	-G gid或groupname 指定真正的gid或组名称
	-p pid 显示指pid的进程
	--ppid pid 显示属于pid的子进程
	-M 显示SELinux信息，相当于Z
BSD选项:
	默认显示当前终端中的进程
	a 选项包括所有终端中的进程
	x 选项包括不链接终端的进程
	u 选项显示进程所有者的信息
	f 选项显示进程树,相当于 --forest
	k|--sort 属性 对属性排序,属性前加- 表示倒序
	o 属性… 选项显示定制的信息 pid、cmd、%cpu、%mem
	L 显示支持的属性列表

ps输出属性
VSZ: Virtual memory SiZe，虚拟内存集，线性内存
RSS: ReSident Size, 常驻内存集
STAT：进程状态
	R：running
	S: interruptable sleeping
	D: uninterruptable sleeping
	T: stopped
	Z: zombie
	+: 前台进程
	l: 多线程进程
	L：内存分页并带锁
	N：低优先级进程
	<: 高优先级进程
	s: session leader，会话（子进程）发起者
ni: nice值
pri: priority 优先级
psr: processor CPU编号
rtprio: 实时优先级
示例：
	ps axo pid,cmd,psr,ni,pri,rtprio
常用组合：
	aux
	-ef
	-eFH
	-eo pid,tid,class,rtprio,ni,pri,psr,pcpu,stat,comm
	axo stat,euid,ruid,tty,tpgid,sess,pgrp,ppid,pid,pcpu,comm

例子:
1)查询你拥有的所有进程
	ps -x
2)显示指定用户名(RUID)或用户ID的进程
	ps -fU apache
	ps -fU 48
3)显示指定用户名(EUID)或用户ID的进程
	ps -fu wang
	ps -fu 1000
4)查看以root用户权限（实际和有效ID）运行的每个进程
	ps -U root -u root
5)列出某个组拥有的所有进程（实际组ID：RGID或名称）
	ps -fG nginx
6)列出有效组名称（或会话）所拥有的所有进程
	ps -fg mysql
	ps -fg 27
7)显示指定的进程ID对应的进程
	ps -fp 1234
8)以父进程ID来显示其下所有的进程，如显示父进程为1234的所有进程
	ps -f --ppid 1234
9)显示指定PID的多个进程
	ps -fp 1204,1239,1263
10)要按tty显示所属进程
	ps -ft pts/0
11)以进程树显示系统中的进程如何相互链接
	ps -e --forest
12)以进程树显示指定的进程
	ps -f --forest -C sshd
	ps -ef --forest | grep -v grep | grep sshd
13)要显示一个进程的所有线程,将显示LWP（轻量级进程）以及NLWP（轻量级进程数）列
	ps -fL -C nginx
14)要列出所有格式说明符
	ps L
15)查看进程的PID，PPID，用户名和命令
	ps -eo pid,ppid,user,cmd
16)自定义格式显示文件系统组,ni值开始时间和进程的时间
	ps -p 1234 -o pid,ppid,fgroup,ni,lstart,etime
17)使用其PID查找进程名称：
	ps -p 1244 -o comm=
18)要以其名称选择特定进程，显示其所有子进程
	ps -C sshd,bash
19)查找指定进程名所有的所属PID，在编写需要从std输出或文件读取PID的脚本时这个参数很有用
	ps -C httpd,sshd -o pid=
20)检查一个进程的执行时间
	ps -eo comm,etime,user | grep nginx
21)查找占用最多内存和CPU的进程
	ps -eo pid,ppid,cmd,%mem,%cpu --sort=-%mem | head
	ps -eo pid,ppid,cmd,%mem,%cpu --sort=-%cpu | head
22)显示安全信息
	ps -eM
	ps --context
23)使用以下命令以用户定义的格式显示安全信息
	ps -eo euser,ruser,suser,fuser,f,comm,label
24)使用watch实用程序执行重复的输出以实现对就程进行实时的监视，如下面的命令显示每秒钟的监视
	watch -n 1 'ps -eo pid,ppid,cmd,%mem,%cpu --sort=-%mem | head'

搜索进程:
最灵活：ps 选项 | 其它命令

进程优先级调整:
	静态优先级：100-139
	进程默认启动时的nice值为0，优先级为120
	只有根用户才能降低nice值（提高优先性）
查看:
	ps axo pid,comm,ni

3.nice命令

nice命令
Linux nice命令以更改过的优先序来执行程序，如果未指定程序，则会印出目前的排程优先序，内定的 adjustment 为 10，范围为 -20（最高优先序）到 19（最低优先序）。
nice [OPTION] [COMMAND [ARG]...]
例子：
（1）实例
	1）后台运行vi
		vi &
	2）设置默认优先级
		nice vi &
	3）设置优先级为19
		nice -n 19 vi &
	4）设置优先级为 -20
		nice -n -20 vi &
	5）显示进程	
		ps -l
(2)将 ls 的优先序加 1 并执行
	nice -n 1 ls
(3)将 ls 的优先序加 10 并执行
	nice ls
	

4.renice命令

renice命令
Linux renice命令用于重新指定一个或多个行程（Process）的优先序（一个或多个将根据参数而定）。
注意：每一个行程（Process）都有一个唯一的（unique）id。
使用权限：所有使用者。
renice [-n] priority pid...
	-p pid 重新指定行程的 id 为 pid 的行程的优先序
	-g pgrp 重新指定行程群组(process group)的 id 为 pgrp 的行程 (一个或多个) 的优先序
	-u user 重新指定行程拥有者为 user 的行程的优先序
例子:
1)将行程 id 为 987 及 32 的行程与行程拥有者为 daemon 及 root 的优先序号码加 1
	renice +1 987 -u daemon root -p 32

5.pgrep命令

pgrep命令
经常要查看进程的信息，包括进程的是否已经消亡，通过pgrep来获得正在被调度的进程的相关信息。
pgrep通过匹配其程序名，找到匹配的进程。
pgrep [options] pattern
	-u uid: effective user，生效者
	-U uid: real user，真正发起运行命令者
	-t terminal: 与指定终端相关的进程
	-l: 显示进程名
	-a: 显示完整格式的进程名
	-P pid: 显示指定进程的子进程

6.pidof命令

pidof命令
pidof命令 用于查找指定名称的进程的进程号id号。
pidof [选项] [参数]
	-s：仅返回一个进程号；
	-c：仅显示具有相同“root”目录的进程；
	-x：显示由脚本开启的进程；
	-o：指定不显示的进程ID。

3.系统资源管理

1.uptime和w命令

(1)显示当前时间，系统已启动的时间、当前上线人数，系统平均负载（1、5、10分钟的平均负载，一般不会超过1）
(2)系统平均负载:指在特定时间间隔内运行队列中的平均进程数
(3)通常每个CPU内核的当前活动进程数不大于3，那么系统的性能良好。如果每个CPU内核的任务数大于5，那么此主机的性能有严重问题
(4)如果linux主机是1个双核CPU，当Load Average 为6的时候说明机器已经被充分使用

[root@centos7 ~]#uptime
 15:23:49 up 19 min,  2 users,  load average: 0.00