zRAM内存压缩技术分析及优化方向

最新推荐文章于 2023-08-16 17:23:48 发布
VIP文章 最新推荐文章于 2023-08-16 17:23:48 发布
阅读量3.9k 收藏 25
点赞数 4
分类专栏： Linux内存管理 文章标签： linux android 性能优化
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_38135221/article/details/127042461
版权

目录

1. zRAM出现的背景

2. zRAM软件架构

3. zRAM实现分析

3.1 zRAM驱动模块

3.2 数据流模块

3.3 压缩算法模块

3.4 zRAM读写流程

3.5 zRAM writeback功能

4. zRAM性能调优

4.1 zram大小

4.2 内存压缩算法

4.3 zram的簇预读

4.4 zram的vma预读

4.5 zram使用程度倾向

4.6 zRAM去重

4.7 多种压缩算法组合压缩

5. 参考资料

1. zRAM出现的背景

阿姆达尔定律告诉我们，任何计算机操作系统总是存在瓶颈。从历史上看，许多系统上工作负载的瓶颈是 CPU，因此系统设计人员致力于 CPU 运行更快、更高效，不断增加 CPU 内核的数量。 慢慢地，RAM 越来越成为瓶颈。当数据从磁盘加载到 RAM时，CPU会闲置地等待。增大 RAM 并不总是一个具有成本效益的选择，有时甚至根本不是一个选择。更快的 I/O 总线和固态磁盘SSD减少了瓶颈，但并没有消除它。于是工程师们想，假如可以增加存储在 RAM 中的有效数据量，那不是很好吗？而且，由于这些 CPU 无论如何都在等待，也许我们可以使用这些空闲的 CPU 周期来做一些事情实现这一目标？这是内核压缩的目标：我们在 RAM 中保留更多压缩数据，并使用空闲的 CPU 周期来执行压缩和解压缩算法。

zRAM于2014 年进入 Linux 3.14 内核主线，但由于 Linux 用途十分广泛，这一技术并非没有默认启用，只有 Android 移动终端设备和少部分的 Linux 桌面发行版如 Fedora 默认启用了这一技术，以保证多任务场景下内存的合理分层存储。

举个具体的例子，你在android手机上连续打开了10个应用，系统空闲内存持续下降，通过zRAM内存压缩会把最近最少使用的页面压缩起来， 如淘宝的页面已最近最少使用的，原来占用100M的匿名页会压缩起来存放，压缩后占用40M，通过这个压缩就节省了60M内存。从而过到内存压缩保留更多数据在RAM中的目的, 让用户体验更佳。

2. zRAM软件架构

zRAM本质是一个块设备驱动，它使用内存模拟block device的做法。它把内存回收的策略交给内存管理，把压缩和解压缩交给压缩库，把自身内存分配交给zsmalloc， zRAM自身就是一个简单的驱动。

zRAM的软件架构主要包含3部分:

3. zRAM实现分析

3.1 zRAM驱动模块

  • zram_init

zram_init注册了zram块设备驱动,流程如下:

最低0.47元/天 解锁文章
五花肉666
关注
  • 4
    点赞
  • 踩
  • 25
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
zram lz4 和 lzo 算法性能评估比较
qkhhyga2016的博客
12-28 2万+
本次评估是基于高通660 平台，Arm 64 位处理器，其中有 8 个核，4个小核 1.8G 频率，4个大核 2.2G 频率 ，主要对比 zram 的两个主流的压缩算法的性能差别。由于前段时间在看工作中发现这个平台默认只使用 lzo，但在社区上早就有了 lz4 的算法，且性能要比 lzo 算法在读方面要好 3 倍，于是就搜了一下 lz4 的压缩算法在 arm 平台上的实际表现，可惜资料很少
systemd-zram:使用systemd将交换驱动器创建到内存中
05-12
再见Github ... 为什么我要离开Github？ 因为我不能接受这样的想法，即微软现在拥有最大的托管开源代码的地方。 和 ？ 同样是因为Github没有花时间问我们，开发人员，用户，如果我们对这项操作是否满意，我的答复是...
Linux内核：内存管理——ZRAM
m0_74282605的博客
05-22 995
而被放到 swap 分区的应用程序，所占用的内存都是被压缩过的，比如，微信在普通内存中占用 50 MB 的空间，如果压缩率为 0.4，则放到 swap 分区里面的数据只需要 20 MB 的空间，这样 swap 分区里面就可以存放更多后台临时不用的应用程序，变相扩展了内存的大小。而多压缩流的架构会让写（压缩）操作可以并行去执行，大大提高了压缩的效率和稳定性。本文主要介绍在 Android 设备上使用的 zram swap，它可以让小内存的设备在多任务的情况下切换自如，提高用户体验。
BobBuilder_app
03-09
Twitter Digg Facebook Del.icio.us Reddit Stumbleupon Newsvine Technorati Mr. Wong Yahoo! Google Windows Live Send as Email Add to your CodeProject bookmarks Discuss this article 85 Print Article Database » Database » Other databasesLicence CPOL First Posted 19 Jan 2012 Views 24,219 Downloads 992 Bookmarked 74 times RaptorDB - The Key Value Store V2 By Mehdi Gholam | 8 Mar 2012 | Unedited contribution C#.NETDBABeginnerIntermediateAdvanceddatabase Even faster Key/Value store nosql embedded database engine utilizing the new MGIndex data structure with MurMur2 Hashing and WAH Bitmap indexes for duplicates. See Also More like this More by this author Article Browse Code Stats Revisions (8) Alternatives 4.95 (56 votes) 1 2 3 4 5 4.95/5 - 56 votes μ 4.95, σa 1.05 [?] Is your email address OK? You are signed up for our newsletters but your email address is either unconfirmed, or has not been reconfirmed in a long time. Please click here to have a confirmation email sent so we can confirm your email address and start sending you newsletters again. Alternatively, you can update your subscriptions. Add your own alternative version Introduction What is RaptorDB? Features Why another data structure? The problem with a b+tree Requirements of a good index structure The MGIndex Page Splits Interesting side effects of MGIndex The road not taken / the road taken and doubled back! Performance Tests Comparing B+tree and MGIndex Really big data sets! Index parameter tuning Performance Tests - v2.3 Using the Code Differences to v1 Using RaptorDBString and RaptorDBGuid Global parameters RaptorDB interface Non-clean shutdowns Removing Keys Unit tests File Formats File Format : *.mgdat File Format : *.mgbmp File Format : *.mgidx File Format : *.mgbmr , *.mgrec History Download RaptorDB_v2.0.zip - 38.7 KB Download RaptorDB_v2.1.zip - 39 KB Download RaptorDB_v2.2.zip - 39 KB Download RaptorDB_v2.3.zip - 39.6 KB D
Linux Zram配置使用（特定平台&个人使用，maybe不具普适性）
Ambition66的博客
11-07 910
zram配置使用
RHEL8启用zRAM
最新发布
识途老码
08-16 664
RHEL8启用zRAM
zram的writeback机制
u010136054的专栏
06-22 1194
zram writeback机制
手机上的算法优化 —— 内存压缩算法
tim514的博客
12-20 7730
【前言】 随着手机APP的升级，手机的内存也越来越大，在有限的内存空间里存放更多的数据，成为了对developer的挑战，接下来我会介绍一下内存中最常使用的几种算法，并剖析一下适合的使用场景。 由于鄙人知识浅薄，在这里仅分析ZRAM中使用的压缩算法，收集于大神，在这里做总结。 【压缩算法】 查看手机目前收集中支持的ZRAM压缩算法： cat sys/block/zram0/comp_algorithm ...
zRAM内存压缩技术原理与应用
一口Linux的专栏
07-26 5549
1. 技术背景 说到压缩这个词，我们并不陌生，应该都能想到是降低占用空间，使同样的空间可以存放更多的东西，类似于我们平时常用的文件压缩,内存压缩同样也是为了节省内存。 尽管当前android手机6GB，8GB甚至12GB的机器都较为常见了，但内存无论多大，总是会有不够用的时候。当系统内存紧张的时候，会将文件页丢弃或回写回磁盘（如果是脏页），还可能会触发LMK杀进程进行内存回收。这些被回收的内存如果再次使用都需要重新从磁盘读取，而这个过程涉及到较多的IO操作。就目前的技术而言，IO的速度远远慢于这RAM操
了解ZRAM技术
平凡之路
03-08 7066
转自：http://kernel.meizu.com/zram-introduction.html参考：http://blog.csdn.net/gjy211/article/details/52015167zram 技术的由来zram1（也称为 zRAM，先前称为 compcache）是 Linux 内核的一项功能，可提供虚拟内存压缩。zram 通过在 RAM 内的压缩块设备上分页，直到必须使用...
Zstd 压缩性能分析（含比较）
yizhiniu_xuyw的专栏
10-27 4657
About Zstd Zstd，全称 Zstandard，是 Facebook 于 2016 年开源的新无损压缩算法。与 zlib、lz4、xz 等当前流行的压缩算法不同，Zstd 寻求一种压缩性能与压缩率通吃的方案，而实际上它也确实做到了。在由官方所列出的表格中，可以看到，Zstd 不仅具备优秀的压缩性能，在压缩率上也有非常亮眼的表现。 go库 https://github.com/klauspost/compress.git Reference https://facebook.gi.
zram-generator:适用于zram设备的系统单位生成器
05-04
用于zram设备的systemd-zram[email protected]生成器 该生成器提供了一种简单快速的机制来配置/dev/zram*设备上的交换。 主要用例是创建交换设备，但是也可以创建带有文件系统的设备，请参见下文。 配置 默认配置文件...
zram-init:具有zsh和openrc支持的zram linux内核模块的包装器脚本
05-18
zram-init 具有交互式和init支持的zram内核模块的包装器脚本（C）MartinVäth（马丁在mvath.de）。 非常感谢AUTHORS文件中的所有人做出的贡献。 该软件包的许可证是GNU公共许可证GPL-2。 SPDX许可证标识符：仅GPL-...
hypervisor-zram-root:管理程序友好的根 fs 设置 - 在内存中，压缩，可快照
07-13
管理程序-zram-root 用于从可逻辑卷 (LV) 启动根文件系统的配置文件，卷组 (VG) 位于。 Conf 文件基于 Debian Wheezy。 需要额外的包（除了最小基础）：lvm2，virt-what如何U 盘设置 # ...
android-zram-status-master.zip
07-25
android-zram-status-master.zip
android底层之什么是Zram？
一只攻城的柿子
07-24 2万+
ZRAM的理解 ZRAM（压缩内存）的意思是说在内存中开辟一块区域压缩数据……就是说假设原来150MB的可用内存现在可以放下180MB的东西……本身不会提高内存容量和运行速度……只是让后台程序更少被系统砍掉罢了，为了能得到更多多任务运行……而且这个压缩动作会加重CPU负担…… ZRAM是linux的一种内存优化技术，基本工作原理是：通过划定一片区域，将压缩过后的硬盘数据放入该区域，以实现高速读...
ubuntu 14.04 使用zram
weixin_34221036的博客
11-02 271
众所周知，现代计算机的瓶颈在于硬盘，而Linux系统在设计时，为了高负载下的安全性而牺牲性能，使用了虚拟内存swap作为权宜之计，不至于系统缺乏可用内存而崩溃，结果可想而知，就是一旦swap到硬盘就会慢如牛，性能就会直线下降。因此理论上，一旦使用了swap，就意味着你应该加内存条了。zram算是穷人的福音，将一部分物理内存虚拟成特殊的具有压缩功能的块设备（类似tmpfs，但tmpfs不具备压缩功能...
几种压缩算法的压缩和速度比较 LZ4太快了
热门推荐
leilonghao的博客
06-14 7万+
Quick Benchmark: Gzip vs Bzip2 vs LZMA vs XZ vs LZ4 vs LZO EDIT: Add zstd Contents  [hide]  1 Selected archives2 Test conditions3 The file test results 3.1 Compressed
通过android设备自身的init.qcom.post_boot.sh实现修改zram大小
深夜听表
08-22 5398
通过修改android的init.qcom.post_boot.sh实现配置zram大小 开端 前几天看到好多手机在拿内存扩展做卖点，然后看了一下，不过好像还是linux的swap没啥亮点，不过发现也有个zram的玩意，原谅我孤陋寡闻现在才知道，这东西好像还不错，类似于win10的那个内存压缩， 通过压缩长时间不在前台的进程来节省内存占用，不会像swap一样频繁操作闪存，也可以减少IO操作节省资源，延长闪存寿命，不过内存压缩是一种用时间换空间的方式，解压缩过程也是需要消耗少量cpu资源。参考文章zRAM内存
android zram
05-20
ZRAM（也称为压缩RAM）是一种内存压缩技术，在Linux系统中被广泛使用。它将一部分内存空间作为压缩空间，将未使用的内存页面压缩到这个空间中，从而节省了物理内存空间。 在Android系统中，ZRAM可以用来增加系统的内存容量，从而提高系统的性能。当系统内存不足时，ZRAM会自动将未使用的内存页面压缩到ZRAM设备中。这样可以减少内存交换到磁盘上的频率，提高系统的响应速度。 要启用ZRAM，在Android设备上需要进行以下步骤： 1. 确认内核支持ZRAM功能。 2. 修改系统启动文件以启用ZRAM。 3. 设置ZRAM设备的大小和压缩算法。 需要注意的是，启用ZRAM会增加系统的CPU和IO开销，可能会影响系统的电池寿命。因此，在启用ZRAM之前，需要仔细考虑设备的硬件配置和使用场景。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值