Linux内核：内存——NUMA架构的优缺点

最新推荐文章于 2024-08-13 10:35:27 发布

Linux加油站

最新推荐文章于 2024-08-13 10:35:27 发布

阅读量751

点赞数 1

文章标签： linux 内存管理 Linux内核

本文链接：https://blog.csdn.net/m0_74282605/article/details/131005673

版权

本文探讨了Linux内核中的NUMA（Non-Uniform Memory Access）架构，解释了其工作原理，包括节点间内存访问速度差异。内容涉及查看NUMA节点、内存分配策略（default、bind、interleavel、preferred）以及如何关闭NUMA。同时，文章提到了NUMA对MySQL服务器的影响，指出在某些情况下关闭NUMA的必要性，并提供了关闭NUMA的方法。此外，还讨论了IO调度器的选择和调整，以及swappiness参数对内存交换行为的影响。

摘要由CSDN通过智能技术生成

numa把一台计算机分成多个节点(node),每个节点内部拥有多个CPU，节点内部使用共有的内存控制器，节点之间是通过互联模块进行连接和信息交互。
因此节点的所有内存对于本节点所有的CPU都是等同的，对于其他节点中的所有CPU都不同。因此每个CPU可以访问整个系统内存，但是访问本地节点的内存速度
最快(不经过互联模块),访问非本地节点的内存速度较慢(需要经过互联模块)，即CPU访问内存的速度与节点的距离有关，该距离成为Node Distance。
查看当前numa的节点情况：
numactl --hardware

节点之间的距离(Node Distance)指从节点1上访问节点0上的内存需要付出的代价的一种表现形式。
Numa内存分配策略有一下四种:
缺省default:总是在本地节点分配(当前进程运行的节点上)。
绑定bind:强制分配到指定节点上。
交叉interleavel:在所有节点或者指定节点上交叉分配内存。
优先preferred:在指定节点上分配，失败则在其他节点上分配。
查看当前系统numa策略：
numactl --show
因为numa默认的内存分配策略是优先在进程所在CPU的本地内存中分配，会导致CPU节点之间内存分配不均衡，
当某个CPU节点内存不足时，会导致swap产生，而不是从远程节点分配内存，这就是swap insanity现象。
MySQL服务器为什么需要关闭numa?
MySQL是单进程多线程架构数据库，当numa采用默认内存分配策略时，MySQL进程会被并且仅仅会被分配到numa的一个节点上去。
假设这个节点的本地内存为10GB,而MySQL配置20GB内存，超出节点本地内存部分(20GB-10GB)Linux会使用swap而不是使用其他节点的物理内存。
在这种情况下