MMKV源码解析

已于 2022-03-23 22:05:31 修改
阅读量1.7k 收藏 2
点赞数
分类专栏： 源码 文章标签： MMKV MMKV源码解析 mmkv源码
于 2022-03-23 22:04:16 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_35523678/article/details/123697194
版权

基于version：1.2.5

目录

1、初始化

2、获取MMKV实例

1、MMKV内部构建

3、写入：encode

在缓存中找到了

4、读取：decode

5、其他：多进程、文件锁等

1、初始化

链路：MMKV.java：initialize->jniInitialize→native-bridge.cpp：initializeMMKV->MMKV.cpp：initializeMMKV

  1. 初始化经过MMKV.java文件进行了根目录的记录随后调用到了初始化native层
  2. native层：
  • 通过Linux系统的互斥锁、自己设置的标记为来保证：一个进程只初始化一次MMKV
  • 保存根目录为全局变量
  • 通过传入的串地址生成真正目标需要的目录结构

2、获取MMKV实例

链路：MMKV.java：mmkvWithID->getMMKVWithID->native-bridge.cpp：mmkvWithID->MMKV_Android.cpp：mmkvWithID

注⚠️：不管是使用默认的defaultMMKV还是mmkvWithID都是最终都汇于一处

  1. 前部的调用都是通过是否加密、realPath条件进行不同的参数配置最终都是调用到了MMKV_Android.cpp的方法中
  2. MMKV_Android.cpp的mmkvWithID：
    • 通过mmapID和relativePath拼接后md5得到mmap的key（项目中其实relativePath为null，所以mmapId就是我们传入的fileName）
    • 缓存中找到直接返回

    • 如果缓存没有就构建一个新的实例

其实从这里可以发现java层的MMKV实例只是一个壳，是否构建MMKV实例是在native层进行的

1、MMKV内部构建

在MMKV_Android.cpp进行了真正的MMKV构建，各种参数配置,这里我们关注两个最关键的地方：m_metaFile、loadFromFile

文件映射：m_metaFile

链路：MMKV_Android.cpp：MMKV：m_metaFile：MemoryFile_Android.cpp：MemoryFile：reloadFromFile：mmap

首先验证文件大小

  • 文件小于最小单位或者不是最先文件单位的整数倍，则进行整理大小（处理成整数倍方便对应内存映射管理）
  • 大小符合映射条件，直接进行mmap映射

我们来来看下第一种情况：

第二种情况省去了第一种情况的大小调整直接进行了映射

到这里文件就完成了通过mmap映射到内存，并拿到了映射的地址：m_ptr

载入数据：loadFromFile

映射完内存，把数据文件倒入到内存就可以开干了！

导入数据前会现检验一下是否映射完毕映射内存可用，否则会重复一下映射的过程，同时这里会进行数据校验，其中包含文件大小和CRC校验

  • CRC：通过验证则将文件数据读入m_crcDigest进行记录并将文件读入到m_dic，不通则回调异常onMMKVCRCCheckFail清空缓存文件数据,此次写入作废，有效防止恶意攻击

之后如果有回写标示（是在后续encode确认空间够用时标记）进行回写数据去重⚠️。

到这我们就基本完成了构建工作，并且有了m_dic，这块内存缓存后期就能被我们所用进行快速的查询。

3、写入：encode

调用链路（以string为例）：native-bridge.cpp：encodeString：set：MMKV_IO.cpp：setDataForKey

除了开始有一个简单的判断值是否有效外，最终就是setDataForKey的舞台了

这里我们重点关注下不实用密钥的情况，与有密钥对大体一致，只是有密钥对会有一些加密数据判断处理

分两种情况：在缓存中找到 or 未找到。最后更散列

在缓存中找到了

首先计算出key与value经过ProtocolBuffer（ProtocolBuffer编码）编码完了的长度并进行空间验证，如果空间不足，进行扩容

扩容

  1. 前提：剩余可使用大小现在小于要写入的新值的大小 or m_dic是空的
  2. 会提前准备一些条件进行校验，如：现在所需要的空间、每个键值的平均大小、未来可能需要的大小
  3. 没有空间进行完全回写，请将其加倍；空间不足以供将来使用，请将其加倍以避免频繁完全回写
  4. 进行一次回写

最后的写入操作：doAppendDataWithKey

  1. 首先在确认一下可用大小：ensureMemorySize
  2. 通过m_output进行key、value写入到映射文件内存
  3. 步骤2完毕后还有有一些加密的判断操作以及CRC的更新

4、读取：decode

调用链路：native-bridge.cpp：decodeString  ：MMKV.cpp：getString

读取相对来说很简单

  1. 从内存m_dic中获取到数据的MMBuffer
  2. 通过CodedInputData获得其中真正的value

5、其他：多进程、文件锁等

这里就不多说了，官方给了非常详细的解答：MMKV for Android 多进程设计与实现

参考文献：

存储性能优化 MMKV源码解析 - 简书前言 好久没有更新常用的第三方库了。让我们来聊聊MMKV这个常用的第三方库。MMKV这个库是做什么的呢？他本质上的定位和sp有点相似，经常用于持久化小数据的键值对。其速度可以...https://www.jianshu.com/p/c12290a9a3f7

禄的光线
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【Android源码面试宝典】MMKV从使用到原理分析（一）
itbird的专栏
02-28 4250
去年，我们写过一篇文章，对于android原生提供的key-value存储API SharePreference，进行了，进行了深入的探索、总结。但是之前的文章，我们仅仅指出了问题，没有给大家提供解决方案，也就是说，SharePreference既然不建议使用，那么我应该使用啥？ mmkv原理 mmkv使用
Android MMKV高性能键值存储.zip
03-18
若被平台自动设置收费、C币，请联系我改免费。平台老是自动变收费，有毛病？MMKV高性能键值存储，请参考文章：https://cupster.blog.csdn.net/article/details/114987061
腾讯开源 K-V 组件 MMKV 源码浅析
粉丝交流群：957013433
03-05 1608
突然对 MMKV 的实现非常感兴趣，因此写下此文。由于本人经验不足，如果文中内容有误请路过的大佬加以指正，下面开始正文： MMKV是腾讯于 2018 年 9 月 20 日开源的一个 K-V 组件，下面是官方对它的介绍： MMKV 是基于 mmap 内存映射的 key-value 组件，底层序列化/反序列化使用 protobuf 实现，性能高，稳定性强。从 2015 年中至今在微信上使用，其...
MMKV源码解读与理解
maniuT的博客
10-19 213
通过 mmap 技术实现的高性能通用 key-value 组件。同时选用 protobuf 协议，进一步压缩数据存储。标准 protobuf 不提供增量更新的能力，每次写入都必须全量写入。考虑到主要使用场景是频繁地进行写入更新，我们需要有增量更新的能力：将增量 kv 对象序列化后，直接 append 到内存末尾；这样同一个 key 会有新旧若干份数据，最新的数据在最后；那么只需在程序启动第一次打开 mmkv 时，不断用后读入的 value 替换之前的值，就可以保证数据是最新有效的。
微信MMKV源码分析(一) | 整体流程
weixin_34417200的博客
09-27 823
初始化 在使用MMKV框架前，需调用以下方法进行初始化 MMKV.initialize(context); 复制代码这里的Java层主要是获取到保存文件的路径，传入Native层，这里默认的路径是APP的内部存储目录下的mmkv路径，这里不支持修改，如需修改，需将源码clone下来手动修改编译了。 public static String initialize(Context context) {...
荣登Github日榜！微信最新开源MMKV
weixin_34416649的博客
09-25 330
MMKV 开源当日即登Github Trending日榜，三日后荣登周榜。MMKV 在腾讯内部开源半年，得到公司内部团队的广泛应用和一致好评。 MMKV 是基于 mmap 内存映射的移动端通用 key-value 组件，底层序列化/反序列化使用 protobuf 实现，性能高，稳定性强。从 2015 年中至今，在 iOS 微信上使用已有近 3 年，其性能和稳定性经过了时间的验证。近期已移植到 A...
TX开源库 - MMKV 易语言封装调用-易语言
06-11
TX开源库 - MMKV 易语言封装调用-易语言
MMKV.zip
01-10
用MMKV存hello world navive!
高性能MMKV
02-27
android高性能MMKV 比sharedperference好用 适合初学者学习
mmkv.zip
12-22
mmkv.zip
android handler的机制和原理_Handler机制原理
weixin_39816027的博客
11-27 277
说到 Android 消息机制，就不得不谈到 Handler 机制，接下来本文以 android-29 的源码分析 Handler 机制的原理。首先 Handler 是在 android.os 包下，与它在同一个包下的 Looper，Message，MessageQueue 等就是本文的重点。// 举个例子 这是 handler 在子线程使用的典型实例，下面按步骤分析：1. Looper.prep...
微信MMKV源码阅读随笔
weixin_34367257的博客
09-25 229
一、功能介绍 MMKV 是基于 mmap 内存映射的 key-value 组件，底层序列化/反序列化使用 protobuf 实现，性能高，稳定性强。从 2015 年中至今，在 iOS 微信上使用已有近 3 年，其性能和稳定性经过了时间的验证。近期也已移植到 Android 平台，一并开源。 二、总体设计 三、性能分析 1.单进程性能 （测试机器是 Pixel 2 XL 64G，Android ...
Nice 片 之 兄 dei 一起来看看 MMKV 。。。
静心 Study
11-26 887
LZ-Says：希望，你我都好。 前言 Hello，好久不见。 还记得某天，由于后台接口更新导致 App 本地数据库也要随之更新，因为之前项目着急，果断采用 SQLite，最直接导致只要后台接口更新，APP 就得更新。 而本地则采用一对一，Key - Values 对应。 那么，有没有一种更好的方案呢？ 存 key 以及对应的 Json？ 倒是一个可行的方案，只不过，用的时候还得解析，这个...
Android 存储优化 —— MMKV 集成与原理，一文带你搞懂Android多线程Handler
m0_66145114的博客
01-18 1704
done = (*slash == ‘\0’); *slash = ‘\0’; if (stat(path, &sb) != 0) { // 执行创建文件夹的操作, C 中无 mkdirs 的操作, 需要一个一个文件夹的创建 if (errno != ENOENT || mkdir(path, 0777) != 0) { MMKVWarning("%s : %s", path, strerror(errno)); return false; } } // 若非文件夹, 则说明为非法路径 else i
MMKV_MMKV
weixin_39594191的博客
12-22 1357
KVUtils忽喷public final class KVUtils {//MMKV.initialize(this); //初始化mmkv// // 增//mmkv.encode("token", token);//// 删//mmkv.removeValueForKey("token"); //删除单个//mmkv.removeValuesForKeys(new String[]{"...
MMKV基本使用与源码解析
gqg_guan的博客
03-07 2222
MMKV基本使用与源码解析
MMKV_MMKV 原理以及使用
weixin_39874881的博客
12-22 251
介绍MMKV是基于mmap内存映射的移动端通用key-value组件，底层序列化/反序列化使用protobuf实现，性能高，稳定性强。从2015年中至今，在iOS微信上使用已有近3年，近期移植到Android平台，移动端全平台通用，并全部在Github上开源。MMKV 原理内存准备:通过 mmap 内存映射文件，提供一段可供随时写入的内存块，App 只管往里面写数据，由操作系统负责将内存回写到文件...
pre_o_1csdn63m9a1bs0e1rr51niuu33e.a
最新发布
05-15
pre_o_1csdn63m9a1bs0e1rr51niuu33e.a
matlab建立计算力学课程的笔记和文件.zip
05-15
matlab建立计算力学课程的笔记和文件.zip
Android MMKV
08-06
Android MMKV是一个高性能、高可靠性的键值存储库，特别适用于Android平台。它是基于C++编写的，并提供了Java和C++的API接口，可以方便地在Android应用中进行键值存储操作。 MMKV的特点包括： 1. 高性能：MMKV使用mmap技术将数据映射到内存中，读写速度非常快。 2. 高可靠性：MMKV采用了数据完整性校验和Crash Reco

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值