linux下numa详解

一.SMP介绍

即对称多处理器结构，是指多个CPU对称工作，无主次或从属关系。各CPU共享相同的物理内存，每个 CPU访问内存中的任何地址所需时间是相同的，因此SMP也被称为一致存储器（UMA）。对SMP计算机进行扩展的方式包括增加内存、使用更快的CPU、增加CPU数量、扩充I/O(槽口数与总线数)以及添加更多的外部设备(通常是磁盘存储)。SMP服务器的主要特征是共享，系统中所有资源(CPU、内存、I/O等)都是共享的。也正是由于这种特征，导致了SMP服务器的主要问题，那就是它的扩展能力非常有限。对于SMP服务器而言，每一个共享的环节都可能造成SMP服务器扩展时的瓶颈，而最受限制的则是内存。由于每个CPU必须通过相同的内存总线访问相同的内存资源，因此随着CPU数量的增加，内存访问冲突将迅速增加，最终会造成CPU资源的浪费，使 CPU性能的有效性大大降低。SMP型的服务器CPU数量最好是2-4颗，不然就会达到上述所说的性能瓶颈。

二.NUMA

为了扩展更多的CPU可以利用NUM技术，将多个CPU进行分组，比如将4个CPU分成一组，如果总的CPU数为16个，就可以分成4组，每一个组就叫做一个node，node结点之间通过互连模块互相连接起来，每个node中有独立的本地内存等资源，但是每个node可以通过互连模块访问别的node的内存等资源，但是访问node本地资源的速度快，但一个node通过互连模块访问别的node时速度比较慢。因此NUMA也叫做非一致存储访问。所以在开发程序时要尽量避免node之间的访问。