浅谈MongoDB数据储存引擎

~奔跑的简默~

已于 2023-10-23 16:05:01 修改

阅读量878

点赞数

分类专栏： MongoDB系列文章标签： mongodb 数据库 nosql

于 2023-05-19 11:15:00 首次发布

本文链接：https://blog.csdn.net/weixin_59801183/article/details/130729053

版权

MongoDB系列专栏收录该内容

11 篇文章

订阅专栏

MongoDB 数据储存引擎

数据储存引擎是数据库管理系统中负责管理数据的存储、维护和恢复的关键组件。本文将介绍 MongoDB 的两种主要存储引擎：WiredTiger 和 MMAPv1，并比较它们的特点和性能差异，以便在实际应用中做出合适选择。

1. MongoDB 的存储引擎简介

数据存储引擎是一种用于管理数据存储和检索的底层技术。在MongoDB中，数据存储引擎负责处理数据的存储、索引、查询和事务等操作。MongoDB支持多种数据存储引擎，以满足不同的性能和功能需求。

以下是MongoDB中常用的数据存储引擎：

WiredTiger：MongoDB的默认数据存储引擎，提供高性能、高并发和多版本并发控制（MVCC）等特性。适用于大多数场景，包括OLTP、OLAP和混合负载等。
MMAPv1：MongoDB 3.0之前的默认数据存储引擎，提供基本的性能和功能。自MongoDB 4.0起，已被弃用。

MongoDB 支持多种数据存储引擎，分别在性能、数据压缩、内存使用等方面有所差异。下面将在介绍 MongoDB 中两种主要的存储引擎：WiredTiger 和 MMAPv1。

2. WiredTiger存储引擎

WiredTiger是MongoDB的默认数据存储引擎，提供高性能、高并发和多版本并发控制（MVCC）等特性。WiredTiger采用了一种称为LSM（Log-Structured Merge）树的技术，将数据分为多个层次，以提高写入性能。同时，WiredTiger支持多线程和多核并发，充分利用硬件资源。
以下是WiredTiger存储引擎的主要特点：

2.1 高性能

WiredTiger使用B+树作为数据结构，支持高效的数据存储和检索。同时，WiredTiger采用了一种称为LSM（Log-Structured Merge）树的技术，将数据分为多个层次，以提高写入性能。这种数据结构允许WiredTiger在高并发环境下实现高吞吐量和低延迟。

2.2 高并发

WiredTiger支持多线程和多核并发，充分利用硬件资源。同时，WiredTiger采用了一种称为乐观并发控制（OCC）的技术，减少锁的开销，提高并发性能。在写操作时，WiredTiger 只会锁定受影响的文档，从而减少了锁冲突，提高了并发性能。

2.3 多版本并发控制（MVCC）

WiredTiger支持多版本并发控制（MVCC），允许多个事务同时读取和修改数据。通过MVCC，WiredTiger可以实现快照隔离（Snapshot Isolation）和读已提交（Read Committed）等隔离级别。

2.4 数据压缩

WiredTiger支持多种数据压缩算法，如Snappy、zlib和zstd等。通过数据压缩，WiredTiger可以减少磁盘空间和I/O开销，提高存储效率。

2.5 事务支持

WiredTiger支持多文档事务，允许在一个事务中对多个文档进行原子性操作。通过事务，WiredTiger可以实现一致性、隔离性和持久性等ACID特性。

3. MMAPv1

MMAPv1 是 MongoDB 中的一种早期存储引擎，已于 MongoDB 4.0 中标记为 已弃用。其特点包括：

基于内存映射：这个存储引擎将数据文件映射到内存中，执行查询时直接访问内存。
集合级别的锁定：写操作会锁定整个集合，对并发写请求影响更大。
不支持事务：在 MMAPv1 引擎中，多文档事务是不支持的。

4. 引擎选择与性能优化

选择适合的存储引擎需根据特定工作负载和应用场景。通常情况下，WiredTiger 引擎是推荐的默认选择，因为它具有更好的性能、更小的存储空间需求，并且支持事务。MMAPv1 因为其已弃用的状态，不建议在新项目中使用。

当使用 WiredTiger 作为存储引擎时，以下一些建议可以帮助提高数据库性能：

压缩算法选择：根据需求在压缩比和性能（CPU 消耗）之间取得平衡。例如，Snappy 算法占用较少 CPU 并具有良好的读写性能，Zlib 算法具有更高的压缩比但占用较多的 CPU。
内存管理：确保系统为数据库提供足够的内存，这可以显著提高 WiredTiger 的性能。

要更改MongoDB的存储引擎，可以在启动时通过--storageEngine选项指定。例如，要使用WiredTiger存储引擎，可以使用以下命令启动MongoDB：

mongod --storageEngine wiredTiger

在MongoDB中，可以通过配置文件或命令行选项设置WiredTiger存储引擎和相关选项。以下是一些常用的配置选项：

storage.engine：设置存储引擎。默认为wiredTiger。
storage.wiredTiger.engineConfig.cacheSizeGB：设置WiredTiger缓存大小。默认为物理内存的一半，最大为50%。
storage.wiredTiger.collectionConfig.blockCompressor：设置WiredTiger数据压缩算法。可选值包括none（无压缩）、snappy（Snappy压缩）、zlib（zlib压缩）和zstd（zstd压缩）。默认为snappy。
storage.wiredTiger.indexConfig.prefixCompression：设置WiredTiger索引压缩。默认为true，表示启用索引压缩。

以下是一个配置文件示例：

storage:
  dbPath: /data/db
  engine: wiredTiger
  wiredTiger:
    engineConfig:
      cacheSizeGB: 4
    collectionConfig:
      blockCompressor: snappy
    indexConfig:
      prefixCompression: true