众所周知,kafka之所以吞吐量高,其中的一个重要原因就是因为其consumer在读取日志文件时使用了mmap的方式,mmap与常规文件读写的区别如下:
总结:mmap之所以能有效提高kafka的吞吐量,是因为其在进行log文件读取的时候直接将log文件读入用户态进行缓存,绕过了内核态的page cache,避免了内核态和用户态的切换过程。
参考:
https://juejin.im/post/59f8691b51882534af254317#heading-16
https://www.cnblogs.com/huxiao-tee/p/4657851.html#_label2
https://www.cnblogs.com/huxiao-tee/p/4660352.html