操作系统（三）

第三章 内存管理

3.1 内存管理的概念

3.1.1 内存管理基本原理

内存可存放数据。程序执行前需要先放到内存种才能被CPU处理——缓和CPU与硬盘之间的速度矛盾
内存地址从0开始，每个地址对应一个存储单元。
-如果计算机“按字节编址”，则每个存储单元大小为1字节，即1B，即8个二进制位
-如果字长位16的计算机“按字编址”，则每个存储单元大小位1个字，每个字的大小为16个二进制位

c语言程序经过编译连接处理后，生成装入模块，即可执行文件（一个个指令）；指令中指明的是逻辑地址（相对于进程的起始地址而言的），但变量的正确存放地址位物理地址**（绝对地址）**，因此若不一致，会造成将变量放在其他进程内存空间。所以要将逻辑地址转换为物理地址

策略：

• 绝对装入
• 可重定位装入（静态重定位）
• 动态运行时装入（动态重定位）

1.绝对装入： 在编译时，如果知道程序将放到内存中的哪个位置，编译程序将产生绝对地址的目标代码。装入程序按照装入模块中的地址，将程序和数据装入内存

2.静态重定位： 编译，链接后的装入模块的地址都是从0开始的，指令中使用的地址，数据存放的地址都是相对于起始地址而言的逻辑地址。可根据内存的当前情况，将装入模块装入到内存的适当位置。装入时对地址进行“重装入”，将逻辑地址转换为物理地址（地址变换是在装入时一次完成的）
特点： 一个作业装入内存时，必须分配其要求的全部内存空间，如果没有足够的内存，就不能装入该作业。作业一旦进入内存后，在运行期间就不能再移动了，也不能再申请内存空间。

3.动态重定位： 编译，链接后的装入模块的地址都是从0开始的。装入程序把装入模块装入内存后，并不会立即把逻辑地址转换为物理地址，而是把地址转换推迟到程序真正要执行时才进行，因此装入内存后所有的地址依然是逻辑地址。这种方式需要一个重定位寄存器的支持。
重定位寄存器： 存放装入模块存放的起始地址
特点：可将程序分配到不连续的存储区中，再程序运行前只需装入它的部分代码即可投入运行，然后再程序运行期间，根据需要动态申请分配内存；便于程序段的共享，可以向用户提供一个比存储空间大得多的地址空间；并允许程序在内存中发生移动。

链接的三种方式：
1.静态链接： 在程序运行之前，先将各目标模块及它们所需的库函数连接成一个完整的可执行文件（装入模块），之后不再拆开。
2.装入时动态链接： 将各目标模块装入内存时，边装入边链接的链接方式
3.运行时动态链接： 在程序执行中需要该目标模块时，才对它进行链接。其优点是便于修改与更新，便于实现对目标模块的共享。

内存管理的主要功能：
1.操作系统负责内存空间的分配与回收
2.操作系统提供某种技术从逻辑上对内存空间进行扩充
3.地址转换
4.内存保护

内存保护方法：
1.在CPU中设置一对上，下限寄存器，存放进程的上，下限地址。进程的指令要访问某个地址时，CPU检查是否越界。
2.采用重定位寄存器（基址寄存器）和界地址寄存器（限长寄存器）进行越界检查。重定位寄存器中存放的是进程的起始物理地址。界地址寄存器中存放的是进程的最大逻辑地址。

3.1.2 覆盖与交换

覆盖技术思想： 将程序分为多个段（多个模块）。常用的段常驻内存，不常用的端在需要时调入内存；内存中分为一个“固定区”和若干个“覆盖区”；需要常驻内存的段放在固定区中，调入后就不再调出。不常用的段放在覆盖区，需要用到时调入内存，用不到时调出内存；
——按照自身逻辑结构，让那些不可能同时被访问的程序段共享同一个覆盖区。
——必须由程序员声明覆盖结构，操作系统完成自动覆盖；
缺点： 对用户不透明，增加了用户编程负担。

交换技术设计思想： 内存空间紧张时，系统将内存中某些进程暂时患处外存，把外存中某些已具备运行条件的进程换入内存（进程在内存与磁盘间动态调度）

注意：PCB会常驻内存，不会被换出外存

3.1.3 连续分配管理方式

连续分配： 为用户进程分配的必须是一个连续的内存空间

1.单一连续分配：
在单一连续分配方式中，内存被分为系统区和用户区。系统区通常位于内存的低地址部分，用于存放操作系统相关数据；用户区用于存放用户进程相关数据；内存中只能有一道用户程序，用户程序独占整合用户区空间。

优点： 实现简单；无外部碎片；可以采用覆盖技术扩充内存；不一定需要采取内存保护
缺点：只能用于单用户，单任务的操作系统中
碎片：存储器利用率极低。

2.固定分区分配：

3.动态分区分配：
又称可变分区分配。这种分配方式不会预先划分内存分区，而是在进程装入内存时，根据进程的大小动态地建立分区，并使分区的大小正好适合进程的需要，因此系统分区的大小和数目是可变的。

动态分区分配算法：
1.首次适应算法： 每次从低地址开始查找，找到第一个能满足大小的空闲分区
实现： 空闲分区以地址递增的次序排序，每次分配内存时顺序查找空闲分区链（表），找到大小能满足要求的第一个空闲分区。

2.最佳适应算法： 由于动态分区分配是一种连续分配方式，为各进程分配的空间必须是连续的一整片区域，因此为了保证当“大进程”到来时能有连续的大片空间，可以尽可能多地留下大片的空闲区，优先使用更小的空闲区。
实现： 空闲分区按容量递增次序链接。每次分配内存时顺序查找空闲分区链，找到大小能满足要求的第一个空闲分区。
缺点： 产生很多的外部碎片

3.最坏适应算法： 为了解决最佳适应算法的问题，可以在每次分配时优先使用最大的连续空间区，这样分配后剩余的空闲区就不会太小，更方便使用。
实现： 空闲分区按容量递减次序链接。每次分配内存时顺序查找空闲分区链，找到大小能满足要求的第一个空闲分区。
缺点： 如果有大进程到达，就没有内存分区可用了

4.邻近适应算法： 首次适应算法每次都从链头开始查找的，可能导致低地址部分出现很多小的空闲区，而每次分配查找时，都要经过这些分区，也增加了查找的开销，如果每次都从上次查找结束的位置开始检索，就能解决上述问题
实现： 空闲分区以地址递增的顺序排序，每次分配内存时从上次查找结束的位置开始查找空闲分区链，找到大小能满足要求的第一个空闲分区。
缺点： 高低地址部分的空闲分区都有相同的概率被使用，导致高地址部分的大分区更可能被使用，划为小分区，最后导致无大分区可用。

3.1.4 基本分页存储管理

将内存空间分为一个个大小相等的分区，每个分区就是一个“页框”（页帧，内存块，物理块，物理页面）。每个页框有一个编号，即“页框号”，页框号从0开始。
将进程的逻辑地址空间也分为与页框大小相等的一个个部分，每个部分称为一个“页”或“页面”。每个页面也有一个编号，即“页号”，也好也是从0开始的;
操作系统以页框为单位为各个进程分配内存空间。进程的每个页面分别放入一个页框中。也就是说，进程的页面与内存的页框有一一对应的关系；
各个页面不必连续存放，可以放到不相邻的各个页框中

结论 ： 如果每个页面大小为2KB，用二进制数表示逻辑地址，则末尾k位即为页内偏移量，其余部分就是页号。

2.基本地址变换机构

基本地址变换机构可以借助进程的页表将逻辑地址转换为物理地址。
通常会在系统中设置一个页表寄存器（PTR），存放页表在内存中的起始地址F和页表长度M。进程未执行时，页表的起始地址和页表长度放在进程控制块（PCB）中，当进程被调度时，操作系统内核会把它们放到页表寄存器中。
注意：页面大小是2的整数幂
设页面大小为L，逻辑地址A到物理地址E的变换过程如下：

3.具有快表的地址变换机构

快表： 又称联想寄存器（TLB），是一种访问速度比内存快很多的高速缓存（TLB不是内存），用来存放最近访问的页表项的副本，可以加速地址变换的速度。与此对应，内存中的页表常称为慢表

能否将整个页表都放在TLB中？——不

引入快表后，地址的变换过程：
1.CPU给出逻辑地址，由某个硬件算得页号，页内偏移量，将页号与快表中的所有页号进行比较。
2.如果找到匹配的页号，说明要访问的页表项在快表中有副本，则直接从中取出该页对应的内存块号，再将内存块号与页内偏移量拼接形成物理地址，最后，访问该物理地址对应的内存单元。因此，若快表命中，则访问某个逻辑地址仅需一次访问即可。
3.如果没有找到匹配的页号，则需要访问内存中的页表，找到对应页表项，得到页面存放的内存块号，再将内存块号与页内偏移量拼接形成物理地址，最后，访问该物理地址对应的内存单元。因此，若快表未命中，则访问某个逻辑地址需要两次访存（找到页表项后，应同时将其存入快表，以便后面可能再次访问，但若快表存满，则需按照一定算法对旧的页表进行替换）

因为局部性原理，一般来说快表的命中率可以达到90%以上

局部性原理：
时间局部性： 如果执行了程序中的某条指令，那么不久后这条指令很有可能再次执行；如果某个数据被访问过，不久之后该数据很可能再次被访问。
空间局部性： 一旦程序访问了某个存储单元，在不久之后，其附近的存储单元也很有可能被访问

上述介绍的基本地址变换结构中，每次要访问一个逻辑地址，都需要查询内存中的页表。由于局部性原理，可能连续很多次查到都是同一个页表项。

4.两级页表

根据局部性原理可知，很多时候，进程在一段时间内只需要访问某几个页面就可以正常运行了，因此没有必要让整个页表都常驻内存；

问题一：页表必须连续存放，因此当页表很大时，需要占用很多个连续的页框
问题二：没有必要让整个页表常驻内存，因为进程在一段时间内可能只需要访问某几个特定的页面

对于问题一——
我们在解决进程在内存中必须连续存储的问题时，将进程地址空间分页，并为其建立一张页表，记录各页面的存放位置，同样的思路可以用于解决“页表必须连续存放”的问题。

可将长长的页表进行分组，使每个内存块刚好可以放入一个分组；另外，要为离散分配的页表在建立一张页表，称为页目录表，或称外层页表/顶层页表。

对于问题二——
可以在需要访问页面时才把页面调入内存（虚拟存储技术），可以在页表项中增加一个标志位，用于表示该页面是否已经调入内存。
若想访问的页面不再内存中，则产生缺页中断（内中断），然后将目标页面从外存调入内存。

注意的问题：
1.若采用多级页表机制，则各级页表的大小不能超过一个页面。

3.1.5 基本分段存储管理

与“分页”最大的区别就是：离散分配时所分配地址空间的基本单位不同

分段——
进程的地址空间：按照程序自身的逻辑关系划分为若干个段，每个段都有一个段命，每段从0开始编址。
内存分配规则：以段为单位进行分配，每个段在内存中占据连续空间，但各段之间可以不相邻。
由于是按逻辑功能模块划分，用户编程更方便，程序的可读性更高。

分段系统的逻辑地址结构由段号（段名）和段内地址（段内偏移量）所组成。
段号的位数决定了每个进程最多可以分为几个段；
段内地址位数决定了每个段的最大长度是多少；

例如：段号：31-16；段内地址：15-0

段表——
程序分为多个段，各段离散地装入内存，为了保证程序能正常运行，就必须能从物理内存中找到各个逻辑段的存放位置。为此，需为每个进程建立一张段映射表，简称“段表”

地址变换：

分段，分页管理的对比：
1.
页是信息的物理单位。分页的主要目的是为了实现离散分配，提高内存利用率。分页仅仅是系统管理上的需要，完全是系统行为，对用户是不可见的
段时信息的逻辑单位。分段的主要目的是更好地满足用户需求。一个段通常包含着一组属于一个逻辑模块的信息。分段对用户是可见的，用户编程时需要显式地给出段名。

页的大小固定且由系统决定。
段的长度却不固定，决定于用户编写的程序。

分页的用户进程地址空间是一维的，程序员只需给出一个记忆符即可表示一个地址。
分段的用户进程地址空间是二维的，程序员在标识一个地址时，即要给出段名，也要给出段内地址。

分段比分页更容易实现信息的共享和保护。不能被修改的代码称为纯代码或可重入代码（不输入临界资源），这样的代码是可以共享的。可修改的代码是不能共享的。

分页（单级页表）：第一次访存–查内存中的页表，第二次访存–访问目标内存单元。总共两次访存
分段：第一次访存–查内存中的段表，第二次访存–访问目标内存单元，总共两次访存。

3.1.6 段页式管理

3.2 虚拟内存管理

3.2.1 虚拟内存的基本概念

传统存储管理方式的特征，缺点： 很多暂时用不到的数据也会长期占用内存，导致内存利用率不高。
1.一次性：作业必须一次性全部装入内存后才能开始运行。这会造成两个问题：作业很大时，不能全部装入内存，导致大作业无法运行；当大量作业要求运行时，由于内存无法容纳所有作业，因此只有少量作业能运行，导致多道程序并发度下降。
2.驻留性：一旦作业被装入内存，就会一致驻留在内存中，直至作业运行结束。事实上，在一个时间段内，只需要访问作业的一小部分数据即可正常运行，这就导致了内存中会驻留大量的，暂时用不到的数据，浪费了宝贵的内存资源。

局部性原理：
时间局部性： 如果执行了程序中的某条指令，那么不久后这条指令很有可能再次执行；如果某个数据被访问过，不久之后该数据很可能再次被访问。
空间局部性： 一旦程序访问了某个存储单元，在不久之后，其附近的存储单元也很有可能被访问

虚拟内存： 基于局部性原理，在程序装入时，可以将程序中很快会用到的部分装入内存，暂时用不到的部分保留在外存，就可以让程序开始执行。在程序执行过程中，当所访问的信息不再内存时，由操作系统负责将所需信息从外存调入内存，然后继续执行程序。若内存空间不够，由操作系统负责将内存中暂时用不到的信息换出到外存。在操作系统的管理下，在用户看来似乎有一个比实际内存大得多的内存，这就是虚拟内存。

特征：

• 多次性：无需在作业运行时一次性全部装入内存，而是允许被分成多次调入内存。
• 对换性：在作业运行时无需一直常驻内存，而是允许在作业运行过程中，将作业换入，换出。
• 虚拟性：从逻辑上扩充了内存的容量，使用户看到的内存容量，远大于实际的容量。

虚拟内存技术，允许一个作业分多次调入内存。如果采用连续分配方式，会不方便实现。因此，虚拟内存的实现需要建立在离散分配的内存管理方式基础上。

• 请求分页存储管理
• 请求分段存储管理
• 请求段页式存储管理

主要区别：在程序执行过程中，当所访问的信息不在内存时，由操作系统负责将所需信息从外存调入内存，然后继续执行程序。若内存空间不够，由操作系统负责将内存中暂时用不到的信息换出到外存（操作系统要提供页面置换的功能）。

3.2.2 请求分页管理方式

请求分页存储管理与基本分页存储管理的主要区别：
在程序执行过程中，当所访问的信息不在内存中，由操作系统负责将所需信息从外存调入内存（操作系统要提供请求调页功能，将缺失页面从外存调入内存），然后继续执行程序。若内存空间不够，由操作系统负责将内存中暂时用不到的信息换出到外存（操作系统要提供页面置换的功能，将暂时用不到的页面换出外存）。

1.页表机制
与基本分页管理相比，请求分页管理中，为了实现“请求分页”，操作系统需要知道每个页面是否已经调入内存；如果还没调入，那么也需要知道该页面在外存中存放的位置
当内存空间不够时，要实现“页面置换”，操作系统需要通过某些指标来决定到底换出哪个页面；有的页面没有被修改过，就不用再浪费时间写回外存。有的页面修改过，就需要将外存中的旧数据覆盖，因此，操作系统也需要记录各个页面是否被修改的信息

2.缺页中断机构：
在请求分页系统中，每当要访问的页面不再内存时，便产生一个缺页中断，然后由操作系统的缺页中断处理程序处理中断；此时缺页的进程阻塞，放入阻塞队列，调页完成后再将其唤醒，放回就绪队列。如果内存中有空闲块，则为进程分配一个空闲块，将所缺页面装入该块，并修改页表中相应的页表项。如果内存中没有空闲块，则由页面置换算法选择一个页面淘汰，若该页面在内存期间被修改过，则要将其写回外存。未修改过的页面不用写回外存。

缺页中断是因为当前执行的指令想要访问的目标页面未调入内存而产生的，因此属于内中断；
一条指令在执行期间，可能产生多次缺页中断。

新增步骤1：请求调页（查到页表项时进行判断）
新增步骤2：页面置换（需要调入页面，但没有空闲内存块时进行）
新增步骤3：需要修改请求页表中新增的表项。

3.地址变换机构：

3.2.3 页面置换算法

页面的换入，换出需要磁盘I/O，会有较大的开销，因此好的页面置换算法应该追求更少的缺页率。

1.最佳置换算法（OPT）
每次选择淘汰的页面将是以后永不使用，或者在最长时间内不再被访问的页面，这样可以保证最低的缺页率。

最佳置换算法可以保证最低的缺页率，但实际上，只有在进程执行的过程中才能知道接下来会访问到的时哪个页面。操作系统无法提前预判页面访问序列。因此，最佳置换算法是无法实现的

2.先进先出置换算法（FIFO）
每次选择淘汰的页面是最早进入内存的页面
实现方法：把调入内存的页面根据调入的先后顺序排成一个队列，需要换出页面时选择队头页面即可。队列的最大长度取决于系统为进程分配了多少个内存块。

Belady异常： 当为进程分配的物理块数增大时，缺页次数不减反增的异常现象。
只有FIFO算法会产生Belady异常。另外，FIFO算法虽然实现简单，但是该算法与进程实际运行时的规律不适应，因为先进入的页面也有可能最经常被访问。因此，算法性能差。

3.最近最久未使用置换算法（LRU）
每次淘汰的页面时最近最久未使用的页面
实现方法：赋予每个页面对应的页表项，用访问字段记录该页面自上次被访问依赖所经历的时间t。当需要淘汰一个页面时，选择现有页面中t值最大的，即最近最久未使用的页面。

该算法的实现需要专门的硬件支持，虽然算法性能好，但是实现困难，开销大。

4.时钟置换算法（CLOCK）
OPT性能好，但无法实现；
FIFO实现简单，但算法性能差；
LRU算法性能好，是最接近OPT性能的，但需要硬件支持，算法开销大；

时钟置换算法是一种性能和开销较均衡的算法，又称CLOCK算法，或最近未用算法（NRU）。

3.2.4 页面分配策略

驻留集： 指请求分页存储管理中给进程分配的物理块的集合
采用虚拟存储技术的系统中，驻留集大小一般小于进程的总大小。

驻留集太小：导致缺页频繁，系统要花大量的时间来处理缺页，实际用于进程推进的时间很少。
驻留集太大：导致多道程序并发度下降，资源利用率降低。所以应该选择一个合适的驻留集大小。

固定分配： 操作系统为每个进程分配一个一组固定数目的物理块，在进程运行期间不再改变。即驻留集大小不变。
可变分配： 先为每个进程分配一定数目的物理块，在进程运行期间，可根据情况做适当的增加或减少，即驻留集大小可变。

局部置换： 发生缺页时只能选进程自己的物理块进行置换。
全局置换： 可以将操作系统保留的空闲物理块分配给缺页进程，也可以将别的进程持有的物理块换到外存，再分配给缺页进程。

3.2.5 内存映射文件