C++系列-new与内存池

爱吃不爱吃

于 2024-10-01 22:00:43 发布

阅读量691

点赞数 14

分类专栏： C++系列文章标签： c++ 服务器

本文链接：https://blog.csdn.net/weixin_57257683/article/details/142675239

版权

1 篇文章 0 订阅

订阅专栏

new一定会陷入内核态么

先说结论，new 操作符并不一定每次都会导致程序进入内核态。因为malloc会在用户态进行缓存内存块，对于小内存的申请直接从用户态拿，只有当缓存的内存块不够时才会调用brk（小于128k）或者mmap(大于128k)系统调用陷入内核态。

在 C++ 中，new 操作符用于动态分配内存，其底层是通过调用标准库的内存分配函数（通常是 malloc 或自定义的内存分配器）来实现的。内存分配器（如 malloc）管理内存时，通常使用两种系统调用：

这两种系统调用都需要进入内核态来申请或管理内存，因为它们需要操作系统进行虚拟内存管理（如修改进程地址空间、分配虚拟内存页等）。

当需要向操作系统申请新内存时，new 会调用底层的 malloc 或 operator new，而 malloc 会通过 brk 或 mmap 系统调用来分配内存。因为 brk 和 mmap 都需要与内核进行交互，所以这时 new 会导致进入内核态。
缺少足够的空闲内存时，例如当前的内存池（Heap Pool）中没有足够的内存空间时，new 需要请求新的内存，从而进入内核态。

内存复用时：如果 new 调用的内存分配器（如 malloc 或自定义内存池）在用户态已经管理了一块空闲的内存区域，那么直接从用户态的内存池中分配内存即可，不需要额外调用 brk 或 mmap，因此不会陷入内核态。
小块内存分配时：许多内存分配器会在用户态维护一个小内存池（如 tcmalloc、jemalloc、ptmalloc 等）。当分配小块内存时，如果内存池中已经有足够的内存块，则不会调用系统调用，而是直接在用户态进行分配，从而不会进入内核态。

在高性能场景中，用户通常使用内存池来管理动态内存。内存池通过一次性向操作系统申请较大的内存块，并在用户态进行分配和回收，减少频繁的系统调用，从而避免程序频繁进入内核态。

内存池的工作原理：
- 一次性向操作系统申请一大块内存（可能使用 mmap 或 brk），然后将这块内存在用户态划分成多个小块进行管理。
- 当程序调用 new 进行内存分配时，直接从内存池中取出空闲内存块，而不需要频繁进行系统调用。
优点：
- 避免了频繁的内存分配导致的上下文切换，从而显著提高程序的执行效率。
- 减少了内存碎片化问题，因为内存池可以更加精细地管理内存分配和回收。

如果内存分配器使用了内存池或其他优化策略（例如 tcmalloc、jemalloc、ptmalloc），new 的行为会更加高效：

多线程分配：如 tcmalloc 和 jemalloc，在多线程环境下为每个线程分配独立的线程本地内存池。这样，在多线程同时调用 new 时，每个线程可以在用户态完成内存分配，从而避免频繁的锁竞争和内核态切换。
小对象优化：针对小对象（如 16 字节、32 字节）的频繁分配，通常使用对象池（Object Pool）或自由链表（Free List），从而显著提升小内存块分配的效率，避免进入内核态。

new 并不一定会进入内核态。只有在内存池耗尽或需要申请新内存时，new 会调用底层分配器（malloc 或 operator new），从而使用系统调用（brk 或 mmap）进入内核态。
使用用户态内存池或高效的内存分配器（如 tcmalloc、jemalloc 等），可以避免频繁的 new 调用进入内核态，从而提高程序的整体性能。

那么问题来了：

内存分配器在用户态的缓存确实可以在一定程度上减少进入内核态的频率，但在某些情况下，额外实现一个用户态内存池仍然是有必要的。以下是一些原因，解释为什么在高性能应用中使用内存池仍然是一个有效的策略：

减少分配和释放的开销：尽管分配器有用户态缓存，但频繁地调用 new 和 delete 仍然会导致分配器维护内部数据结构的开销。内存池可以通过一次性分配一大块内存并进行内部管理，避免每次小块分配时的额外开销。
批量分配：内存池通常会支持批量分配，可以一次性分配多个对象，这在多次分配时能够显著提高性能。