文章目录
内存管理
内存的基础知识
程序执行前放到内存中才能去cpu处理
编址方式 1字节 1B 8个二进制位
1个字 16位 32位等
程序中编译链接用的是逻辑地址,实际存储的位置是物理地址
装入的三种方式
绝对装入:在编译时,如果知道程序将放到内存中的哪个位置,编译程序将产生绝对地址的目标代码。 装入程序按照装入模块中的地址,将程序和数据装入内存。
静态重定位:又称可重定位装入。编译、链接后的装入模块的地址都是从0开始的,指令中使用的地 址、数据存放的地址都是相对于起始地址而言的逻辑地址。可根据内存的当前情况,将装入模块装入 到内存的适当位置。装入时对地址进行“重定位”,将逻辑地址变换为物理地址
动态重定位:又称动态运行时装入。编译、链接后的装入模块的地址都是从0开始的。装入程序把装 入模块装入内存后,并不会立即把逻辑地址转换为物理地址,而是把地址转换推迟到程序真正要执行 时才进行。因此装入内存后所有的地址依然是逻辑地址。这种方式需要一个重定位寄存器的支持。
优点:可将程序分配到不连续的 存储区中;在程序运行前只需 装入它的部分代码即可投入运 行,然后在程序运行期间,根 据需要动态申请分配内存;便 于程序段的共享,可以向用户 提供一个比存储空间大得多的 地址空间。
链接的三种方式
静态链接:在程序运行之前, 先将各目标模块及它们所需 的库函数连接成一个完整的 可执行文件(装入模块), 之后不再拆开
装入时动态链接:将各目标 模块装入内存时,边装入边 链接的链接方式。
运行时动态链接:在程序执 行中需要该目标模块时,才 对它进行链接。其优点是便 于修改和更新,便于实现对 目标模块的共享。
内存管理概念
-
操作系统负责内存空间的分配与回收
2.操作系统需要提供某种技术从逻辑上对内存空间进行扩充
-
操作系统需要提供地址转换功能,负责程序的逻辑地址与物理地址的转换
-
操作系统需要提供内存保护功能。保证各进程在各自存储空间内 运行,互不干扰
内存保护的方法
1.在CPU中设置一对上、下限寄存器,存放 进程的上、下限地址。进程的指令要访问某个地址 时,CPU检查是否越界。
2.采用重定位寄存器(又称基址寄存器)和界 地址寄存器(又称限长寄存器)进行越界检查。重定 位寄存器中存放的是进程的起始物理地址。界地址寄 存器中存放的是进程的最大逻辑地址。
覆盖与交换
覆盖技术:解决程序大小超过物理内存的问题
思想:将程序分为多个段(多个模块)。 常用的段常驻内存,不常用的段在需要时调入内存。内存中分为一个“固定区”和若干个“覆盖区”。
必须由程序员声明覆盖结构,操作系统完成自动覆盖。缺点:对用户不透明,增加了用户编程负担。 覆盖技术只用于早期的操作系统中,现在已成为历史。
交换技术:内存空间紧张时,系统将内存中某些进程暂时换出外存,把外存中 某些已具备运行条件的进程换入内存
暂时换出外存等待的进程状态为挂起状态(挂起态,suspend)
挂起态又可以进一步细分为就绪挂起、阻塞挂起两种状态
1. 应该在外存(磁盘)的什么位置保存被换出的进程?
具有对换功能的操作系统中,通常把磁盘空间分为文件区和对换区两部分。文件 区主要用于存放文件,主要追求存储空间的利用率,因此对文件区空间的管理采 用离散分配方式;对换区空间只占磁盘空间的小部分,被换出的进程数据就存放 在对换区。由于对换的速度直接影响到系统的整体速度,因此对换区空间的管理 主要追求换入换出速度,因此通常对换区采用连续分配方式
2. 什么时候应该交换?
交换通常在许多进程运行且内存吃紧时进行,而系统负荷降低就暂停。例如:在 发现许多进程运行时经常发生缺页,就说明内存紧张,此时可以换出一些进程; 如果缺页率明显下降,就可以暂停换出。
3. 应该换出哪些进程?
可优先换出阻塞进程;可换出优先级低的进程;为了防止优先级低的进程在被调 入内存后很快又被换出,有的系统还会考虑进程在内存的驻留时间
PCB 会常驻内存,不会被换出外存
连续分配管理方式:
指为用户进程分配的必须是一个连续的内存空间。
单一连续分配
内存被分为系统区和用户区。 系统区通常位于内存的低地址部分,用于存放操作系统 相关数据;用户区用于存放用户进程相关数据。 内存中只能有一道用户程序,用户程序独占整个用户区 空间。
优点:实现简单;无外部碎片;可以采用覆盖技术扩充 内存;不一定需要采取内存保护(eg:早期的 PC 操作 系统 MS-DOS)。
缺点:只能用于单用户、单任务的操作系统中;有内部 碎片;存储器利用率极低。
固定分区分配
为了能在内 存中装入多道程序,且这些程序之间又不会相互干扰, 于是将整个用户空间划分为若干个固定大小的分区,在 每个分区中只装入一道作业,这样就形成了最早的、最 简单的一种可运行多道程序的内存管理方式。
分区大小相等:缺乏灵活性,但是很适合用于用一台计 算机控制多个相同对象的场合(比如:钢铁厂有n个相 同的炼钢炉,就可把内存分为n个大小相等的区域存放 n个炼钢炉控制程序)
分区大小不等:增加了灵活性,可以满足不同大小的进 程需求。根据常在系统中运行的作业大小情况进行划分 (比如:划分多个小分区、适量中等分区、少量大分区)
分区说明表来实现各个分区的分配与回 收。每个表项对应一个分区,通常按分区大小排列。每个表项包括对应分区的 大小、起始地址、状态
优点:实现简单,无外部碎片。
缺点:a. 当用户程序太大时,可能所有的分区都不能满足需求,此时不得不采 用覆盖技术来解决,但这又会降低性能;b. 会产生内部碎片,内存利用率低。
动态分区分配
又称为可变分区分配。这种分配方式不会预先划分内存分区,而是在进程装入内存时, 根据进程的大小动态地建立分区,并使分区的大小正好适合进程的需要。因此系统分区的大小和数目是可变的。
系统要用什么样的数据结构记录内存的使用情况
空闲分区表:每 个空闲分区对应 一个表项。表项 中包含分区号、 分区大小、分区 起始地址等信息
空闲分区链:每个分区的起始部分和末尾部分分别设置前向指 针和后向指针。起始部分处还可记录分区大小等信息
当很多个空闲分区都能满足需求时,应该选择哪个分区进行分配?
下一节四种动态分区分配算法
如何进行分区的分配与回收操作? 假设系统采用的数据结构是“空闲分区表”… 如何分配?
对进程进行分配之后需要对分区表进行调整
进程回收之后同样也要调整相邻的空闲分区
动态分区分配没有内部碎片,但是有外部碎片。 内部碎片,
分配给某进程的内存区域中,如果有些部分没有用上。 外部碎片,是指内存中的某些空闲分区由于太小而难以利用。
如果内存中空闲空间的总和本来可以满足某进程的要求, 但由于进程需要的是一整块连续的内存空间,因此这些 “碎片”不能满足进程的需求。 可以通过紧凑(拼凑,Compaction)技术来解决外部碎片。
动态分区分配算法
首次适应算法
每次都从低地址开始查找,找到第一个能满足大小的空闲分区
最佳适应算法
由于动态分区分配是一种连续分配方式,为各进程分配的空间必须是连续的一整片区 域。因此为了保证当“大进程”到来时能有连续的大片空间,可以尽可能多地留下大片的空闲区, 即,优先使用更小的空闲区。
如何实现:空闲分区按容量递增次序链接。每次分配内存时顺序查找空闲分区链(或空闲分区 表),找到大小能满足要求的第一个空闲分区。
缺点:每次都选最大的分区进行分配,虽然可以让分配后留下的 空闲区更大,更可用,但是这种方式会导致较大的连续空闲区被 迅速用完。如果之后有“大进程”到达,就没有内存分区可用了。
最坏适应算法
优先使用最大的连续空闲区,这样分配后剩余的空闲区就不会太小,更方便使用。
如何实现:空闲分区按容量递减次序链接。每次分配内存时顺序查找空闲分区链(或空闲分区 表),找到大小能满足要求的第一个空闲分区
缺点:大进程到来之后没有更大的分区
邻近适应算法
每次都从上次查 找结束的位置开始检索,就能解决上述问题。
如何实现:空闲分区以地址递增的顺序排列(可排成一个循环链表)。每次分配内存时从上次查 找结束的位置开始查找空闲分区链(或空闲分区表),找到大小能满足要求的第一个空闲分区。
缺点:无论低地址还是高地址相同概率划分为小分区导致无大分区可用
非连续分配存储管理
分页存储
将内存空间分为一个个大小相等的分区(比如:每个分区 4KB),每个分区就是一个“页框”(页框=页帧=内存块=物理 块=物理页面)。每个页框有一个编号,即“页框号”(页框 号=页帧号=内存块号=物理块号=物理页号),页框号从0开始。
将进程的逻辑地址空间也分为与页框大小相等的一个个部分, 每个部分称为一个“页”或“页面” 。每个页面也有一个编号, 即**“页号”,**页号也是从0开始。
为了能知道进程的每个页面在内存中存放的位置,操作系统要为每个进程建立一张页表。 注:页表通常存在PCB(进程控制块)中
页表:记录页号和块号的映射关系
每个页表项多大?占几个字节?
假设某系统物理内存大小为 4GB,页面大小为 4KB,则 每个页表项至少应该为多少字节?
4gb/4kb=2 的20次方 需要20个bit表示 也就是3B
页号不需要占内存是隐含的假设有(n+1)页 页表就要3*(n+1)B
如何通过页表实现逻辑地址到物理 地址的转换?
如果要访问逻辑地址 A,则
①确定逻辑地址A 对应的“页号”P
②找到P号页面在内存中的起始地址(需要查页表)
③确定逻辑地址A 的“页内偏移量”W
逻辑地址A 对应的物理地址 = P号页面在内存中的起始地址+页内偏移量W
逻辑地址 4097,用二进制表示应该是 00000000000000000001000000000001
页号 = 4097/4096 = 1 = 00000000000000000001,页内偏移量 = 4097%4096 = 1 = 000000000001
页面大小 刚好是 2 的整数幂有什么好处
①逻辑地址的拆分更加迅速——如果每个页面大小为 2KB,用二进制数表示逻辑地址,则末尾 K 位 即为页内偏移量,其余部分就是页号。因此,如果让每个页面的大小为 2 的整数幂,计算机硬件就 可以很方便地得出一个逻辑地址对应的页号和页内偏移量,而无需进行除法运算,从而提升了运行 速度。
②物理地址的计算更加迅速——根据逻辑地址得到页号,根据页号查询页表从而找到页面存放的内 存块号,将二进制表示的内存块号和页内偏移量拼接起来,就可以得到最终的物理地址。
基本分页存储管理
设置页表寄存器(PTR)存放页表在内存中的起始地址F和页表长度M
设页面大小为L,逻辑地址A到物理地址E的变换过程如下:
①根据逻辑地址计算 出页号、页内偏移量 ②判断页号是否越界(页号0开始 页表长度1 P=M)
③查询页表,找 到页号对应的页 表项,确定页面 存放的内存块号(注意区分页表项长度、页表长度、页面大小的区别。页表长度指的是这个页 表中总共有几个页表项,即总共有几个页;页表项长度指的是每个页表项占多大的存储空间; 页面大小指的是一个页面占多大的存储空间)
④用内存块号和 页内偏移量得到 物理地址 ⑤访问目标 内存单元
计算 E = b * L + W,用得到的物理地址E 去访存。(如果内存块号、页面偏移量是用二进制表 示的,那么把二者拼接起来就是最终的物理地址了)
结论:理论上,页表项长度为 3B 即可表示内存块号的范围,但是,为了方便页表的查询, 常常会让一个页表项占更多的字节,使得每个页面恰好可以装得下整数个页表项。
具有快表的地址变化机构
快表,又称联想寄存器(TLB, translation lookaside buffer ),是一种访问速度比内存快很多的 高速缓存(TLB不是内存!),用来存放最近访问的页表项的副本,可以加速地址变换的速度。 与此对应,内存中的页表常称为慢表。
快表更加贵 因此只能存放部分页表
-
CPU给出逻辑地址,由某个硬件算得页号、页内偏移量,将页号与快表中的所有页号进行比较。
-
如果找到匹配的页号,说明要访问的页表项在快表中有副本,则直接从中取出该页对应的内存块 号,再将内存块号与页内偏移量拼接形成物理地址,最后,访问该物理地址对应的内存单元。因此, 若快表命中,则访问某个逻辑地址仅需一次访存即可。
-
如果没有找到匹配的页号,则需要访问内存中的页表,找到对应页表项,得到页面存放的内存块 号,再将内存块号与页内偏移量拼接形成物理地址,最后,访问该物理地址对应的内存单元。因此, 若快表未命中,则访问某个逻辑地址需要两次访存(注意:在找到页表项后,应同时将其存入快表, 以便后面可能的再次访问。但若快表已满,则必须按照一定的算法对旧的页表项进行替换) 由于查询快表的速度比查询页表的速度快很多,因此只要快表命中,就可以节省很多时间。 因为局部性原理,一般来说快表的命中率可以达到 90% 以上。
时间局部性:如果执行了程序中的某条指令,那么不久后这条指令很 有可能再次执行;如果某个数据被访问过,不久之后该数据很可能再 次被访问。(因为程序中存在大量的循环)
空间局部性:一旦程序访问了某个存储单元,在不久之后,其附近的 存储单元也很有可能被访问。(因为很多数据在内存中都是连续存放 的)
TLB 和 普通 Cache 的区别——TLB 中只有页表项的副本,而普通 Cache 中可能会有其他各种数据的副本
两级页表
单页表的问题
页表必须连续存放,因此当页表很大时,需要占用很多个连续的页框。
没有必要让整个页表常驻内存,因为进程在一段时间内可能只需要访问某几个特定的页面。
建立页目录表,外层页表,顶层页表
10位表示一级页号 10位二级页号 12 位 页内偏移量
基本分段式存储管理
按照程序自身的逻辑关系划分为若干个段,每个段都有一个段名(在低级语言 中,程序员使用段名来编程),每段从0开始编址
以段为单位进行分配,每个段在内存中占据连续空间,但各段之间可以不相邻。
逻辑地址=段号(决定每个进程可以分多少段)+段内地址(决定每个段最大长度)
段表
段页式管理方式
将进程按逻辑模块分段,再将各段分页(如每个页面4KB) 再将内存空间分为大小相同的内存块/页框/页帧/物理块 进程前将各页面分别装入各内存块中
段页式逻辑地址结构 段号+页号+页内偏移量
虚拟内存的基本概念
传统存储方案:
作业必须一次性装入内存(作业过大无法装入内存,很多大作业要并发运行,也无法装载并发度下降)
驻留性::一旦作业被装入内存,就会一直驻留在内存中,直至作业运行结束。事实上,在一个时间段内,只需要访问作业的一小部分数据即可正常运行,这就导致了内存中会驻留大量的、暂时用不到的 数据,浪费了宝贵的内存资源。
虚拟内存基于局部性原理: 时间局部性 空间局部性
可以将程序中很快 会用到的部分装入内存,暂时用不到的部分留在外存, 就可以让程序开始执行。 当所访问的信息不在内存时,由 操作系统负责将所需信息从外存调入内存,然后继续 执行程序。 若内存空间不够,由操作系统负责将内存中暂时用不 到的信息换出到外存。 在操作系统的管理下,在用户看来似乎有一个比实际 内存大得多的内存,这就是虚拟内存。
三大主要特征
多次性:无需在作业运行时一次性全部装入内存,而是允许被分成多次调入内存。
对换性:在作业运行时无需一直常驻内存,而是允许在作业运行过程中,将作业换 入、换出。
虚拟性:从逻辑上扩充了内存的容量,使用户看到的内存容量,远大于实际的容量。
三种实现方式:请求分页存储管理 请求分段存储管理 请求段页式存储管理
请求分页管理方式
请求分页存储管理页表
页号 内存块号 状态位 访问字段 修改位 外存地址
状态位:是否已经调入内存
访问字段:可记录最近被访问过几 次,或记录上次访问的 时间,供置换算法选择 换出页面时参考
修改位:页面调入内 存后是否被 修改过
外存地址:页面在外存 中的存放位置
缺页中断机构
每当要访问的页面不在内存时,便产生一个缺页中断,然 后由操作系统的缺页中断处理程序处理中断。
此时缺页的进程阻塞,放入阻塞队列,调页完成后再将其唤醒,放回就绪队列。
如果内存中有空闲块,则为进程分配一个空闲块,将所缺页面装入该块,并修 改页表中相应的页表项。
如果内存中没有空闲块,则由页面置换算法选择一个页面淘汰,若该页面在内 存期间被修改过,则要将其写回外存。未修改过的页面不用写回外存。
缺页中断是因为当前执行的指令想要访问的目标页面未调入内存而产生的,因此属于内中断
页面置换算法
最佳置换算法(opt)
每次选择淘汰的页面将是以后永不使用,或者在最长时间内不再被 访问的页面,这样可以保证最低的缺页率。
但实际上,只有在进程执行的过程中才能知道接下来会访问到 的是哪个页面。操作系统无法ᨀ前预判页面访问序列。因此,最佳置换算法是无法实现的。
先进先出置换算法(FIFO)
每次选择淘汰的页面是最早进入内存的页面
实现方法:把调入内存的页面根据调入的先后顺序排成一个队列,需要换出页面时选择队头页面即可。 队列的最大长度取决于系统为进程分配了多少个内存块。
belady异常:分配物理块增加缺页次数也增加发生异常
算法性能比较差
最近最久未使用置换算法(LRU)
每次淘汰的页面是最近最久未使用的页面
实现方法:赋予每个页面对应的页表项中,用访问字段记录该页面自上次被访问以来所经历的时间t。 当需要淘汰一个页面时,选择现有页面中 t 值最大的,即最近最久未使用的页面。
始终置换算法(CLOCK)
简单的CLOCK 算法实现方法:为每个页面设置一个访问位,再将内存中的页面都通过链接指针链接成 一个循环队列。当某页被访问时,其访问位置为1。当需要淘汰一个页面时,只需检查页的访问位。 如果是0,就选择该页换出;如果是1,则将它置为0,暂不换出,继续检查下一个页面,若第一轮扫 描中所有页面都是1,则将这些页面的访问位依次置为0后,再进行第二轮扫描(第二轮扫᧿中一定会 有访问位为0的页面,因此简单的CLOCK 算法选择一个淘汰页面最多会经过两轮扫描)
简单的时钟置换算法仅考虑到一个页面最近是否被访问过。事实上,如果被淘汰的页面没有被修改过, 就不需要执行I/O操作写回外存。只有被淘汰的页面被修改过时,才需要写回外存。 因此,除了考虑一个页面最近有没有被访问过之外,操作系统还应考虑页面有没有被修改过。在其他条件都相同时,应优先淘汰没有修改过的页面,避免I/O操作。这就是改进型的时钟置换算法的思想。 修改位=0,表示页面没有被修改过;修改位=1,表示页面被修改过。 为方便讨论,用(访问位,修改位)的形式表示各页面状态。如(1,1)表示一个页面近期被访问过, 且被修改过。
算法规则:将所有可能被置换的页面排成一个循环队列
第一轮:从当前位置开始扫描到第一个(0, 0)的帧用于替换。本轮扫描不修改任何标志位
第二轮:若第一轮扫描失败,则重新扫描,查找第一个(0, 1)的帧用于 替换。本轮将所有扫描过的帧访问位设为0
第三轮:若第二轮扫描失败,则重新扫描,查找第一个(0, 0)的帧用于 替换。本轮扫描不修改任何标志位
第四轮:若第三轮扫描失败,则重新扫描,查找第一个(0, 1)的帧用于 替换。 由于第二轮已将所有帧的访问位设为0,
因此经过第三轮、第四轮扫描一 定会有一个帧被选中,因此改进型CLOCK置换算法选择一个淘汰页面最多 会进行四轮扫描
页面分配策略
驻留级
请求分页存储管理中给进程分配的物理块集合。
在采用虚拟存储技术系统中驻留级大小一般小于进程总大小。
驻留级太小会导致缺页频繁系统会一直处理缺页
驻留级太大会导致多道程序并发度下降资源利用率下降
因此应该选择一个合适大小的驻留级 (固定分配和可变分配)
固定分配:为每个进程分配一组固定数目的物理块运行期间不变
可变分配:先分配一定数目物理块,在运行过程中进行调整
然后又提出局部置换和全局置换
局部置换:发生缺页时只能选择金橙子姐的物理块进行置换
全局置换:将操作系统保留的空闲物理块分配给缺页进程,也可以把别的进程持有的物理块置换到外存,再分配给缺页进程。
因此就产生了三种置换方式
固定分配局部置换
系统为每个进程分配一定数量的物理块,在整个运行期间都不改变。若进程在运 行中发生缺页,则只能从该进程在内存中的页面中选出一页换出,然后再调入需要的页面。
这种策略 的缺点是:很难在刚开始就确定应为每个进程分配多少个物理块才算合理。(采用这种策略的系统可 以根据进程大小、优先级、或是根据程序员给出的参数来确定为一个进程分配的内存块数)
可变分配全局置换
刚开始会为每个进程分配一定数量的物理块。操作系统会保持一个空闲物理块队 列。当某进程发生缺页时,从空闲物理块中取出一块分配给该进程;若已无空闲物理块,则可选择一 个未锁定的页面换出外存,再将该物理块分配给缺页的进程。采用这种策略时,只要某进程发生缺页, 都将获得新的物理块,仅当空闲物理块用完时,系统才选择一个未锁定的页面调出。被选择调出的页 可能是系统中任何一个进程中的页,因此这个被选中的进程拥有的物理块会减少,缺页率会增加。
可变分配局部置换:
刚开始会为每个进程分配一定数量的物理块。当某进程发生缺页时,只允许从该 进程自己的物理块中选出一个进行换出外存。如果进程在运行中频繁地缺页,系统会为该进程多分配 几个物理块,直至该进程缺页率趋势适当程度;反之,如果进程在运行中缺页率特别低,则可适当减 少分配给该进程的物理块。
何时调入页面
1.预调页策略:根据局部性原理,一次调入若干个相邻的页面可能比一次调入一个页面更高效。但如 果提前调入的页面中大多数都没被访问过,则又是低效的。因此可以预测不久之后可能访问到的页 面,将它们预先调入内存,但目前预测成功率只有50%左右。故这种策略主要用于进程的首次调入, 由程序员指出应该先调入哪些部分。
**2.请求调页策略:**进程在运行期间发现缺页时才将所缺页面调入内存。由这种策略调入的页面一定会 被访问到,但由于每次只能调入一页,而每次调页都要磁盘I/O操作,因此I/O开销较大。
何处调入页面
-
系统拥有足够的对换区空间:页面的调入、调 出都是在内存与对换区之间进行,这样可以保 证页面的调入、调出速度很快。在进程运行前, 需将进程相关的数据从文件区复制到对换区。
-
系统缺少足够的对换区空间:凡是不会被修改 的数据都直接从文件区调入,由于这些页面不 会被修改,因此换出时不必写回磁盘,下次需 要时再从文件区调入即可。对于可能被修改的 部分,换出时需写回磁盘对换区,下次需要时 再从对换区调入。
-
UNIX 方式:运行之前进程有关的数据全部放在 文件区,故未使用过的页面,都可从文件区调 入。若被使用过的页面需要换出,则写回对换 区,下次需要时从对换区调入。
抖动颠簸
刚刚换出的页面马上又要换入内存,刚刚换入的页面马上又要换出外存,这种频繁的页面调度行为称 为抖动,或颠簸。产生抖动的主要原因是进程频繁访问的页面数目高于可用的物理块数
提出了进程工作集
工作集:某段时间间隔内进程实际访问页面的集合