BoltDB 进程与 BoltDB 数据库文件读写交互模式
通常,处理文件,都会遇到这些问题:
- 文件在磁盘上,而进程要处理的数据在内存里
- 文件会很大,常态是远大于内存总量
- 磁盘IO耗时 10+ ms ,如何组织文件中的格式,减少磁盘IO
本文介绍下 BoltDB 如何处理这些问题
mmap 内存映射文件
mmap 是一种把文件内容全部(或部分)映射到进程内存空间,然后进程就可以像访问普通内存的方式,访问文件内容
mmap 是一个系统调用,它与虚拟内存地址、缺页中断等词汇经常一起出现,是现代操作系统一个非常强大的机制
一般的,数据库实现,都是通过 mmap 方式,来处理数据库文件。比如 MySQl InnoDB 也是类似处理
下面代码摘至 bolt_unix.go (mmap 不同平台,调用上会稍有差异):
// mmap memory maps a DB's data file.
func mmap(db *DB, sz