这是 cdeveloper 的第 31 篇原创
共享内存 Shared Memory
Hello,大扎好,这次跟大家分享的是在 Linux 中最快的一种 IPC 方式:共享内存 Shared Memory,它的基本原理是:
内核开辟一片内存区域,然后多个用户进程可以将这片区域映射到它们自己的地址空间中进行读写。
为什么这种方式最快?
因为数据不需要在进程之间复制,只要一个进程写入数据,另一个进程就能马上读取数据了,但是读取和写入必须同步。
共享内存属性
我们可以在终端中使用 ipcs -m 查看系统当前开辟的共享内存:
可以看到列出了共享内存的一些属性:地址,id,拥有者等等。
共享内存在哪里?
进程可以将共享内存映射到自己的地址空间中,如下:
可以看到中间有一个内存映射区域,进程把内核的共享内存映射到这个地方,模型如下:
进程可以通过共享内存的 API 获得内核所管理的共享内存的一份映射,例如直接同步读写自己的映射文件就可以实现进程 A 和 B 之间的通信了,非常简单。
共享内存的操作
共享内存使用起来比较简单,但是需要注意必须保持不同进程的读写同步,可以使用信号量或者互斥锁等。
本次主要介绍共享内存,不会涉及同步相关的操作,不然内容就太多了。
下面的例子主要介绍共享内存相关的 API 操作,当你熟悉了基本的用法,在以后学习同步时可以加上同步机制来保证读写正确。
共享内存(SHM)的操作主要分为下面 4 个步骤:
创建或获取 SHM
映射 SHM 到进程地址空间
操作映射后的区域,即读写
关闭进程地址空间的映射区域
分别来了解这些操作的 API。
1. 创建:shmget
创建 SHM 调用 shmget:
2. 映射:shmat
shmat 将由 shmget 返回的 shmid 标识的 SHM 映射到进程的地址空间:
其中 shmaddr 参数主要有 2 种情况:
shmaddr = NULL:系统选择一块合适的内存地址作为映射的起始地址
shmaddr != NULL:用户自己地址,但是该地址需要符合一定的条件,详情参考 man shmat
3. 关闭映射:shmdt
shmdt 解除当前进程映射的 SHM:
例子:读写 SMemory
我们先创建一个片 SHM,然后写入内容:
我们再写一个程序来映射 SHM 并读取其中的内容:
编译:
先运行写入 SHM:
./write_shm
再运行读取 SHM:
./read_shm
I'm share memory
成功读取了写进程的写入的数据,虽然不是同步的,但是至少能够获取数据。最后再来分析分析内核中的 SHM 调用过程吧。
共享内存的内核机制
由于 SHM 的操作函数比较多,我这里只分析 shmget 函数,其他的函数都是类似的,先从 glibc 的库函数开始:linux/shmget.c
这个函数直接进行了系统调用,来继续分析 Linux 3.4 内核大体的执行过程:
函数陷入内核后调用由 SYSCALL_DEFINE3 定义的系统调用 shmget,之后对 shm_ops 中的回调函数赋值。
然后调用 ipcget,在这个函数中先进行预处理,接着调用 shm_ops 中设置的 newseg 回调函数,这个回调函数在内核中开辟一段 SHM 内存空间,至此就完成共享内存的创建。
其中 shm_ops 结构非常重要:
从这个结构的注释可以看到这个结构被「消息队列」,「信号量」,「共享内存」3 种 IPC 所使用。
故这个结构非常的关键,其中的函数指针基本都指向某一个 IPC 的实现函数,之后被底层回调使用。
整个过程如下:
因为 shmget 会创建或者获取一个 SHM,所以最后会涉及内核内存的分配 vmalloc 和 kmalloc,详细的过程可以继续跟踪 ipc/shm.c
结语
这次分享了速度最快的 IPC 机制:共享内存(Shared Memory),IPC 的 API 操作比较多这里不可能全部介绍,但是一定要善于使用 man 手册。
我们也在内核中了解了 shmget 的基本调用过程,其他的函数也是类似的,都可以通过 SYSCALL_DEFINE 这个宏开始跟踪,这个内核系统调用的关键地方。
OK,到此为止,希望你能多多实践,也欢迎交流,感谢你的阅读,我们下次再见 :)
PS:大家清明节回去的时候路上注意安全,最近天气不好。
长按关注我吧
点个赞呗