系统内存还有很多的情况下为何swap使用很高了

最新推荐文章于 2024-08-17 02:47:31 发布
最新推荐文章于 2024-08-17 02:47:31 发布
阅读量8.1k 收藏 26
点赞数 8
分类专栏： 运维之道 运维常用 文章标签： linux swap 内存 numa node
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/linxi7/article/details/108998512
版权

Swap是什么

  • Swap就是把一块磁盘空间或者一个本地文件，当成内存来使用。
  • 换出，就是把进程暂时不用的内存数据存储到磁盘中
  • 换入，就是在进程再次访问这些内存的时候，从磁盘中读取到内存
  • Swap其实是把系统的可用内存变大了，这样即使服务器的内存不足，也可以腾出空间来运行大内存的应用程序。
  • 既然Swap是为了回收内存，那么Linux会在什么时候需要回收内存呢？它又是怎么来衡量内存是不是紧张或者压力大呢？

内存回收是什么？

  • 内存回收是子系统释放掉可以回收的内存
  • 缓存和缓冲区，他们在内存管理中，叫做文件页
  • 大部分文件页可以直接回收，有需要的时候再从磁盘读取
  • 至于脏页，就得先写入磁盘，然后才能进行内存释放
  • 脏页的回收，可以在应用程序中，通过系统调用fsync，或者有系统内核现成pdflush负责刷新到磁盘
  • Swap，应用程序动态分配的堆内存，他们在内存管理中叫做匿名页

如何衡量内存是不是紧张了呢？
在这里插入图片描述

  • 定期回收内存的内核线程kwapd0，定义了三个内存阀值，然后根据内存剩余值的范围来进程对应内存操作
  • 页最小阀值，内存压力很大，无法进行正常分配
  • 页低阀值，内存有一定的压力，但是可以进行正常分配
  • 页高阀值，内存无压力
  • 如果剩余内存小于页低阀值，就会出发内存回收了
  • 页低阀值可以查看 /proc/sys/vm/min_free_kbytes
  • min_free_kbytes设置了页最小阀值，根据这个阀值可以计算另外两个数值
  • pages_low = pages_min*5/4
  • pages_high = pages_min*3/2

查看系统页低最小阀值
内存阀值参数

  • pages中的min、low、high，就是三个内存阀值
  • free就是剩余内存页数，它跟后面的nr_free_pages相同
  • nr_active_anon和nr_inactive_anon，分别是活跃和非活跃的匿名页数
  • nr_active_file和nr_inactive_file，分别是活跃和非活跃的文件页数
  • 那内存参数里面的Node0和Node1又是什么呢？

查看内存相关的信息
NUMA架构

  • 处理器的NUMA架构，在这种架构下，多个处理器被划分到不同的Node上，同时每个Node都拥有自己的本地内存空间
  • 当某个Node内存不足时，系统可以从本地内存中回收内存，也可以从其他Node寻找空闲内存。具体什么模式，可以通过zone_reclaim_mode参数来调整
  • 默认0，既可以本地回收内存，也可以从其他Node寻找空闲内存
  • 1、2、4都表示只回收本地内存，2表示可以回写脏数据回收内存，4表示可以用Swap方式回收内存

在这里插入图片描述

在这里插入图片描述

内存回收机制

  • 到这里，我们就可以理解内存回收机制了。这些回收的内存既包括了文件页，又包括了匿名页
  • 对文件页的回收，就是直接回收缓存，或者把脏页写回磁盘后再回收
  • 对匿名页的回收，其实就是通过Swap机制，把它们写入磁盘后再释放内存
  • 这两种不同的内存回收机制，在实际的内存回收过程中，到底应该先回收哪一种呢

swapiness

  • Linux提供了一个swapiness选项，用来调整使用swap的积极程度
  • 范围是0-100，数值越大，表示越积极使用Swap，也就是更倾向于回收匿名页数
  • 数值越小，越消极使用Swap，也就是更倾向于回收文件页
  • 默认的60是一个比较中和的值，系统会根据实际运行情况，选择合适的内存回收类型，比如回收不活跃的匿名页，或者不活跃的文件页

查看系统的swapiness
Swap被哪些应用占用

  • 可以使用以下命令来查看系统的Swap被哪些应用所占用

在这里插入图片描述

关掉Swap会发生什么

  • 当内存足够的时候，关掉Swap，Swap占用的空间大小会保存在内存当中去
  • 当内存不够的时候，没法强行关掉Swap

内存足够时关闭Swap
内存不够时关闭Swap

解答十个问题

  • 为什么系统在可用内存还有很多的情况下，会用到swap？ 答案：这个受numa架构参数值，swapiness参数值以及文件页和匿名页不同内存对象的影响。
  • swap到磁盘中的匿名页，当再次被换入到内存中，那磁盘中的匿名页会被释放掉吗？ 答案：会的。
  • 如果swap到磁盘中的匿名页一直没被使用，磁盘中如何进行释放？ 答案：会根据进程生命周期来进行释放。
  • 如果系统不开启Swap，那匿名页还怎么回收？ 答案：会一直保存在内存中。
  • 如果大量匿名页把Swap都写满了，这个时候怎么选择从swap里清理哪些匿名页？ 答案：大量匿名页把Swap都写满了，说明内存不够了，可能会出现OOM了。
  • 内核中swapness使用的默认值是60，如果配置为0还会使用swap吗？ 答案：会的。这个值只是一个倾向值，即使为0，在内存紧张的情况下，还是有可能会用到。
  • 当Swap升高时，系统性能会受到影响吗？ 答案：会的，Swap升高，说明系统中本来和内存打交道的一些操作会涉及到和磁盘打交道，IO性能会受到影响。
  • 如果没有swap，系统内存不够了怎么办？ 答案：OOM。
  • cache、buffer和swap回收的内存对象有什么不同？ 答案：cache和buffer回收的是文件页，Swap回收的是匿名页。
  • 哪些应用或者服务应该关闭swap？ 答案：对IO有很高要求的应用或者服务都应该关闭Swap，比如DB等。
乱弹世界
关注
专栏目录
linux物理内存没用完swap占用大,Linux占用swap分区过高，物理内存还有剩余
weixin_39879674的博客
05-02 1653
Linux占用swap分区过高，物理内存还有剩余问题分析Swap配置对性能的影响分配太多的Swap空间会浪费磁盘空间，而Swap空间太少，则系统会发生错误。如果系统的物理内存用光了，系统就会跑得很慢，但仍能运行；如果Swap空间用光了，那么系统就会发生错误。例如，Web服务器能根据不同的请求数量衍生出多个服务进程(或线程)，如果Swap空间用完，则服务进程无法启动，通常会出现“applicatio...
问题：Linux报swap空间占用过高，但物理内存还有空余
weixin_34372728的博客
02-18 3486
报错 收到报警，swap空间占用过高，登录到系统查看内存使用详情，看到物理内存还有很多未使用 问题分析 Swap配置对性能的影响分配太多的Swap空间会浪费磁盘空间，而Swap空间太少，则系统会发生错误。如果系统的物理内存用光了，系统就会跑得很慢，但仍能运行；如果Swap空间用光了，那么系统就会发生错误。例如，Web服务器能根据不同的请求数量衍生出多个服务进程（或线程），如果Swap...
Swap使用过高问题排查
zhaorongxi的博客
10-09 7179
随着中间件,服务部署的越来越多,内存使用也越来越多,swap也占用的越来越多,如何排查出占用swap过高的程序
Linux如何查看swap被进程占用情况
一只小白
04-29 708
for i in $(cd /proc;ls | grep "^[0-9]" | awk '$0>100'); do awk '/Swap:/{a=a+$2}END{print '"$i"',a/1024"M"}' /proc/$i/smaps;done| sort -k2nr | head
【swap】swap使用过高的处理方法
michaelwoshi的博客
01-15 2667
生产有一台主机Swap使用很高，一看内存使用率高，基本耗尽。 Linux内核为了提高读写效率与速度，会将文件在内存中进行缓存，这部分内存就是Cache Memory(缓存内存)。 即使你的程序运行结束后，Cache Memory也不会自动释放。 这就会导致你在Linux系统中程序频繁读写文件后，你会发现可用物理内存变少。 当系统的物理内存不够用的时候，就需要将物理内存中的一部分空间释放出来，以供当前运行的程序使用。 那些被释放的空间可能来自一些很长时间没有什么操作的程序，这些被释放的空间被临时保存
LINUX 查看进程占用swap
08-15
用于查看LINUX下进程占用SWAP大小
查看linux swap占用进程
汪灵骅的博客
12-27 1266
Ps -ef|grep 12625查看进程。小f 按p把swap加进选项里。#̲ 输出swap信息。#̲ 如果占用了swap。大F 排序选swap。
【swap】占用较多的进程查看
weixin_44683593的博客
11-24 976
在日常管理中，我们经常会遇到swap分区使用比较多，那么导致是那些进程使用的呢，其实我们可以通过/proc/pid/下的smaps来获得。在日常管理中，我们经常会遇到swap分区使用比较多，那么导致是那些进程使用的呢，其实我们可以通过/proc/pid/下的smaps来获得。获取到占用swap分区比较多的PID，然后就可以通过PID获取到进程的相关信息了。获取到占用swap分区比较多的PID，然后就可以通过PID获取到进程的相关信息了。Linux如何查看哪个进程占用的SWAP分区比较多？
Linux查看占用swap的进程,Linux 下查看哪一个进程占用swap空间
weixin_35486456的博客
04-29 1493
#!/bin/bashbashecho -e "PID\t\tSwap\t\tProc_Name"ide# 拿出/proc目录下全部以数字为名的目录(进程名是数字才是进程，其余如sys,net等存放的是其余信息)blogfor pid in `ls -l /proc | grep ^d | awk '{ print $9 }'| grep -v [^0-9]`排序do进程# 让进程释放swap的方...
linux内存分配与回收及swap使用观察
sinat_38723234的博客
02-15 954
1. 系统刚刚启动的时候free会比较大 2. 运行一段时间之后，free会减小到很少，cache会增加到尽量大。这会因为系统为了加速文件读写速度，减少磁盘使用次数尽量多的使用内存cache硬盘上的数据。虽然free比较少了，但是有新的内存请求的时候可以立即从cache里面回收物理内存，所以系统显示的可用内存变化不大（461M-465M）。 3.下面这个例子我用dd程序写一个1G的文件到硬盘，...
java swap空间_故障重现(内存篇2)，JAVA内存不足导致频繁回收和swap引起的性能问题...
weixin_34079693的博客
02-26 971
背景起因：记起以前的另一次也是关于内存的调优分享下有个系统平时运行非常稳定运行(没经历过大并发考验)，然而在一次活动后，人数并发一上来后，系统开始卡。我按经验开始调优，在每个关键步骤的加入如下代码耗时统计进行压测：long startTime = System.currentTimeMillis();callRpc(); //这里比如调用RPC伪代码，当然还在插入数据库，中间件地方都加入统计l...
查看占用swap进程
xiaoma19961101的博客
07-12 9759
linux查看占用swap内存进程 for i in $(ls /proc | grep “1” | awk ‘$0>100’); do awk ‘/Swap:/{a=a+KaTeX parse error: Expected 'EOF', got '}' at position 2: 2}̲END{print '"i"’,a/1024"M"}’ /proc/$i/smaps;done| sort -k2nr | head 0-9 ↩︎ ...
内存还剩余很多，却使用 swap 分区
heroacool的专栏
02-14 732
https://cloud.tencent.com/developer/article/1647178
Linux之swap分区使用进程查看及释放
随风飘雁
01-06 3881
Linux之swap分区使用进程查看及释放
linux查看哪些进程占用swap空间
weixin_34013044的博客
03-05 2489
linux查看占用swap空间最大的前10个进程 for i in $(ls /proc |grep "^[0-9]" |awk '$0>100'); do awk '/Swap:/{a=a+$2}END{print '"$i"',a/1024"M"}' /proc/$i/smaps; done |sort -k2nr |head -10 转载于:https://blog.51cto.com...
NUMA的取舍
weixin_33845881的博客
12-10 293
现在的机器上都是有多个CPU和多个内存块的。以前我们都是将内存块看成是一大块内存，所有CPU到这个共享内存的访问消息是一样的。这就是之前普遍使用的SMP模型。但是随着处理器的增加，共享内存可能会导致内存访问冲突越来越厉害，且如果内存访问达到瓶颈的时候，性能就不能随之增加。NUMA（Non-Uniform Memory Access）就是这样的环境下引入的一个模型。比如一台机器是有2个处理器，有4个...
SWAP分区使用很多，但是内存剩余空间还很多
eli的博客
04-08 1519
首先是交换分区的概念 交换空间是现代 Linux 系统中的第二种内存类型。交换空间的主要功能是当全部的 RAM 被占用并且需要更多内存时，用磁盘空间代替 RAM 内存。 例如，假设你有一个 8GB RAM 的计算机。如果你启动的程序没有填满 RAM，一切都好，不需要交换。假设你在处理电子表格，当添加更多的行时，你电子表格会增长，加上所有正在运行的程序，将会占用全部的 RAM 。如果这时没有可用的交换空间，你将不得不停止处理电子表格，直到关闭一些其他程序来释放一些 RAM 。 内核使...
Linux swap 占用分析脚本
cijinli4767的博客
06-23 121
脚本一 for i in `cd /proc;ls |grep "^[0-9]"|awk ' $0 >100'` ;do awk '/Swap:/{a=a+$2}END{print '"$i...
查看swap 分区被那个进程占用(top10)
最新发布
weixin_37046600的博客
08-17 33
for i in $( cd /proc;ls |grep "^[0-9]"|awk ' $0 >100') ;do awk '/Swap:/{a=a+$2}END{print '"$i"',a/1024"M"}' /proc/$i/smaps 2>/dev/null ; done | sort -k2nr |...
kswapd1 cpu 占用率很高
09-05
kswapd1 是 Linux 系统中的一个进程，它负责处理和管理内存中的页面交换（swapping）工作。当内存不足时，kswapd1 会将部分不常用的页面（页面是内存中分配的最小单元）调出到交换分区（swap partition）中，以释放更多的可用内存。 当 kswapd1 的 CPU 占用率很高时，主要有以下可能原因： 1. 内存压力：当系统内存不足，kswapd1 需要频繁进行页面交换操作，以释放可用内存。这会导致 kswapd1 占用较高的 CPU 资源。可以通过查看系统内存使用情况和交换分区使用情况来确认是否存在内存压力问题。 2. 内存泄漏：系统中某个进程可能存在内存泄漏的情况，导致内存不断增加，使得 kswapd1 不断进行页面交换。可以使用系统工具来监测进程的内存使用情况，找出是否存在内存泄漏的进程。 3. 磁盘 I/O 问题：当系统的交换分区位于较慢的磁盘上，或者磁盘本身存在故障，会导致 kswapd1 进程占用较高的 CPU 资源。可以通过检查磁盘状态以及磁盘 I/O 操作来确定是否存在此问题。 为解决 kswapd1 CPU 占用率高的问题，可以尝试以下解决方案： 1. 增加物理内存：如果系统内存不足，可以考虑增加物理内存，以减少对页面交换的需求。 2. 优化内存使用：检查系统中的进程，找出可能存在内存泄漏的进程，并进行相应的处理或调优。 3. 优化磁盘性能：如果磁盘 I/O 是导致 kswapd1 CPU 占用率高的原因，可以优化磁盘性能，例如更换较慢的磁盘，修复磁盘故障等。 总体而言，解决 kswapd1 CPU 占用率高的问题需要综合考虑内存状况、进程的内存使用情况以及磁盘性能等因素，找出问题的根本原因，并采取相应的解决方案。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值