GC看这一篇就够了

最新推荐文章于 2021-12-21 23:58:01 发布
最新推荐文章于 2021-12-21 23:58:01 发布
阅读量204 收藏
点赞数
分类专栏： go
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u013616005/article/details/118610388
版权

文章目录


感谢幼麟实验室的生动讲解
垃圾回收之写屏障
go GC探秘

引言

由于函数调用栈会在函数返回后销毁，如果不能在编译阶段确定数据对象的大小或者对象生命周期超出当前所在函数，那就不适合分配在栈上 而应该分配到堆上
他们占用的内存需要程序主动释放才可以重新使用 否则成为垃圾
在这里插入图片描述

非追踪

引用计数  及时回收  开销大

追踪式

  • 标记-清除，目前主流的垃圾回收算法：核心思想是可达性近似等价于存活性的

  • 分代 基于弱分代回收假说 大部分对象都在年轻时死亡

单核

前提：暂停用户程序，只专注于垃圾回收

  • 自动垃圾回收：

由运行时识别不再有用得数据并释放他们占用的内存
内存何时被释放 被释放的内存如何处理
那么，问题来了，自动垃圾回收怎么区分哪些数据对象是垃圾呢？
还得从虚拟地址空间看，程序中用的到的数据一定是从栈、数据段这些根节点追踪得到的数据
虽然能够追踪的到 不代表一定用到，但是从这些根节点追踪不到的数据 就一定不会被用到
在这里插入图片描述

  • 三色抽象 (标记-清扫的一种)

可以清晰的展示 追踪式回收过程中对象状态的变化过程
还可以推演回收器的正确性
1、垃圾回收开始时所有对象都为白色
2、把直接追踪到的root节点都标记为灰色 灰色代表基于当前节点展开的追踪还未完成
3、当基于某个节点的追踪任务完成后 便会把该节点标记为黑色 表示它是存活节点 也无须重复标记
在这里插入图片描述

  • 标记-清扫算法带来的问题：造成内存碎片化，要找到合适的内存代价高 也可能找不到

1、可以基于BiBOP思想 把内存块划分成多种规格的 对相同规格的内存块进行统一管理 这样可以更快的匹配到大小合适的空闲内存
2、也可以移动数据 多次扫描和移动数据开销不容忽视
3、复制式回收 只有一半的堆内存可用
在这里插入图片描述

  • 尽可能的缩短STW的时间，引出增量式垃圾回收

实际上，我们总是希望能够缩短暂停的时间，可以将垃圾回收工作分多次完成，也就是用户程序和垃圾回收交替执行

  • 带来的问题：mark工作的一致性问题

下面这两个任何一个都可以解决问题
强三色不变式 不允许出现黑色到白色的引用 插入写屏障
若三色不变式 允许黑色到白色的引用，但有灰色对象能够到达该白色对象 删除写屏障

  • 怎么实现呢？

建立读写屏障
写屏障会在写操作中插入指令，目的时把数据对象的修改通知垃圾回收器，所以写屏障通常都会有一个记录集
具体实现要考虑的问题：（顺序存储 哈希表 记录精确到被修改的对象 记录其所在页）
非移动式垃圾回收中，天然的不需要读屏障
在这里插入图片描述

多核

  • 多核：暂停用户程序的前提下，多线程 并行垃圾回收

并行场景下 同步时不可避免规避的问题
并发垃圾回收时用户程序和回收器同时执行
如果没有STW，那么垃圾回收开始的消息便很难准确及时地通知所有线程
实际应用中，某些阶段实行STW, 主体并发式 主体并发增量式
在这里插入图片描述

Go的GC

  • go:mark-swap算法支持主体并发增量式回收
  • GC在准备阶段

会为每个P创建一个mark worker协程
把对应的g指针存储到P中，这些后台mark worker创建后很快陷入休眠 等待得到调度

  • 第一次STW

开启写屏障 等所有准备工作做好以后 所有P都会知道写屏障已经开启

  • GC进入mark阶段

全局变量gcphase记录GC阶段标识 _GCMark
全局变量writeBarrier记录是否开启写屏障 true
全局变量gcBlancenEnabled 用于标记是否允许进行GC标记工作 1
然后，后台这么mark worker 可以得到调度执行 展开标记工作
当没有标记工作时，

  • 第二次STW
  • GC进入MarkTermination阶段

确认所有标记工作已经完成
然后停止标记工作 将 gcphase=_GCMarkTermination gcBlancenEnabled =0

  • GC进入OFF阶段

关闭写屏障 gcphase=_GCOFF writeBarrierEnabled=false
进入OFF阶段之前，新分配的对象会直接标记为黑色，
进入OFF阶段之后，再新分配的对象会标记为白色

  • 进入清扫阶段

执行清扫工作的协程由runtime再gcenable中创建 对应g指针存储在全局变量sweep中
这个sweeper 会被加入到run queue中，它得到调度执行时，会执行清扫任务 清扫工作也是增量进行的
所以，每一轮GC开始之前 还要确保上一轮GC未完成的清扫工作
在这里插入图片描述

QA

Q1:哪些指针是GC感兴趣的？

在这里插入图片描述

  • go的内存管理

8K为一页page
多个页组成一个span
每个span都只存储一种大小的元素
大小 覆盖了小于等于32K的66种
大于32K的大对象直接在mheap中分配
多个span组成一个area
在这里插入图片描述

  • 如果协程都向mheap同时申请内存，那么同步开销太大，引入全局与本地span缓存

基于heaparea记录的元数据信息，我们只要知道一个对象的地址
1、根据bitmap信息扫描它内部是否含有指针
2、也可以根据对象地址，计算出它在哪一页

在这里插入图片描述

每个span都对应两个位图标记
在这里插入图片描述

Q2工作队列

通过区分本地工作队列与全局工作缓存，并为每个P设置写屏障缓冲区，缓解了执行并发标记工作时操作工作队列的竞争问题
在这里插入图片描述

Q3:CPU Utilization

在这里插入图片描述

Q4:Memory alloc

在这里插入图片描述

Q5:Hybrid Barrier

在这里插入图片描述

Q6:CPU Trigger

在这里插入图片描述

cugbtang
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
JVM、GC看这一篇就够了！
被基金支配的打工人
10-23 372
Class类加载 - 加载Loading 通过全限定类名，把一个类从二进制的Class文件加载到内存当中 - 类加载器 Bootstrap：启动类加载器。加载lib/rt.jar charset.jar核心类 C++实现 Extension：扩展类加载器。加载扩展jar包 jre/lib/ext/*.jar Application/System：系统类加载器。加载classpath指定内容，他是我们java中默认的类加载器，我们写的class都是用他加载的 Custom ClassLo
GC调优(入门篇)
02-15
可见，无论使用多少堆外内存，对JVM内存的使用终究是绕不过去，既然绕不过去...本文就将会介绍HBase应用场景下CMS GC策略的调优技巧，后续还会针对另一业界开始使用的GC策略－G1GC策略在HBase应用场景下进行调优介绍。
Windows Server 2008 R2之十全局编录服务器（GC）
weixin_34290096的博客
08-10 567
        GC是一台DC，它是一台特殊的DC，它存储森林中所有对象部分只读信息的特殊DC。在森林可以有多台GC，全局编录是一库，它包含了在活动目录中所有对象连续请求信息的子集，例如用户登录的ID等。 GC的主要作用有：1、存储森林对象的信息副本。2、存储能用组成员身份信息。3、提高用户主体（UPN）名称身份验证信息。4、验证林内的对象参考。     一、全局编辑服务器的规划 GC在AD...
GC中的 三色标记法
学海拾遗
06-12 6039
最近在看JVM 查资料的时候看到一篇关于三色标记法的文章觉得不错。拿过来收藏一下。因为他的配图是gif。让人一目了然啊。 原文地址《三色标记法与读写屏障》 以下内容图为摘录： 三色标记法： 首先要知道 在JVM中如何找到碎片采用的是根可达算法 root searching方法。找到以后进行mark sweep 方法进行标记。然后再root searching 一遍进行回收。所以mark sweep的特点是 地址不连续，再标记的过程中也会有新的对象被放到老年区，这时就会出现碎片，因为要扫两次所以效率略低。 三
自动的内存管理系统实操手册——Golang垃圾回收篇
QcloudCommunity的博客
08-04 846
导语|现代高级编程语言管理内存的方式分自动和手动两种。手动管理内存的典型代表是C和C++，编写代码过程中需要主动申请或者释放内存；而PHP、Java 和Go等语言使用自动的内存管理系统...
ART运行时Mark-Compact（ MC）GC执行过程分析
老罗的Android之旅
04-27 1万+
除了Semi-Space（SS）GC和Generational Semi-Space（GSS）GC，ART运行时还引入了第三种Compacting GC：Mark-Compact（MC）GC。这三种GC虽然都是Compacting GC，不过它们的实现方式却有很大不同。SS GC和GSS GC需两个Space来压缩内存，而MC GC只需一个Space来压缩内存。本文就详细分析MC GC的执行过程。
Java－ThreadLocal（看这一篇就够了）
热门推荐
了解➔熟悉➔掌握➔精通
12-17 1万+
分享一个大牛的人工智能教程。零基础！通俗易懂！风趣幽默！希望你也加入到人工智能的队伍中来！请点击http://www.captainbed.net １、什么是ThreadLocal ThreadLocal class provides thread-local variables. These variables differ from their normal counterparts in that each thread that accesses one (via its get or set
关于Jvm知识看这一篇就够了
wang123459的博客
03-12 330
本文转载自：https://mp.weixin.qq.com/s/4c9K5eYMFGVV2WyKaYXVBA 2016年左右的时候读了周志明《深入理解Java虚拟机：JVM高级特性与最佳实践》，读完之后受益匪浅，让我对Java虚拟机有了一个完整的认识，这是Jvm书籍中最好的读物之一。 后来结合实际工作中遇到的问题，写了一系列关于Jvm的文章，其中开篇的几篇内容大部分参考于此书，后期加入自...
JVM 看这一篇就够了
qq_46153765的博客
01-24 1万+
原谅我这个标题党 初识JVM规范 从三种角度认识JVM JVM概述 JVM：Java Virtual Machine，也就是Java虚拟机 所谓虚拟机是指：通过软件模拟的具有完整硬件系统功能的、运行在一个完全隔离环境中的计算机系统 JVM是通过软件来模拟Java字节码的指令集，是Java程序的运行环境 JVM主要功能 通过 ClassLoader 寻找和装载 class 文件 解释字节码成为指令并执行，提供 class 文件的运行环境 进行运行期间的内存分配和垃圾回收 提供与硬件交互的平台 虚.
gc4023 datasheet
03-27
GC4023是一款高性能的CMOS图像传感器，用于capturing高质量图像。该传感器具有1/2.7英寸的感光面积、4Mega像素的高分辨率和低噪音的特点。该传感器的datasheet提供了详细的技术规格和性能指标。 Sensor Overview ...
GC6153_SERIAL_GC6153
09-11
标题 "GC6153_SERIAL_GC6153" 指向的是一款基于MTK（MediaTek）平台的驱动程序，专为控制SPI接口的GC6153芯片而设计。这款驱动程序的主要功能是确保GC6153芯片在系统中能够正确地被初始化、配置和操作，从而实现其...
看了这篇虚拟机 GC，可以跟面试官扯半天
01-21
GC的基础知识 1.什么是GC GC 的全称是Garbage Collection，垃圾...PS:实例的变量对象有两种，一种存在堆里，一种存在栈里。 这里说的对象必须是存在堆里的。存在栈的对象无需回收。 2.如何定位垃圾 引用计数（Referen
gc02m1 datasheet
03-27
GC02M1是一款CMOS图像传感器，具有高分辨率、低噪声和高灵敏度等特点。下面是根据GC02M1 datasheet的内容生成的相关知识点： 1. 传感器概述 GC02M1是一款1/5英寸的CMOS图像传感器，具有200万像素的分辨率。它的主要...
拿下HashMap看这一篇就够了
小源同学的博客
12-21 1124
文章目录HashMap集合简介HashMap集合底层的数据结构数据结构HashMap底层的数据结构存储数据的过程代码图解添加过程面试题总结HashMap继承关系HashMap继承关系图HashMap集合类的成员成员变量源代码构造方法成员方法Put方法Hash方法putVal数组扩容 resize什么时候才需要扩容HashMap的扩容是什么HashMap删除Get方法HashMap遍历方式HashMap使用细节红黑树二叉查找树红黑树红黑树查找treeifyBin方法左旋、右旋、变色HashMap扩容HashM
Go 的内存管理看这一篇就够了
cugbtang
09-24 4157
文章目录Go 的内存管理第一章 OS是怎么管理内存的?Go为什么要有自己的内存管理?OS内存管理的主要机制第二章 Go 的内存管理第一节 管理模型第二节 逃逸分析第三节 垃圾回收参考 Go 的内存管理 本文主要参考大佬分析内存的系列文章，参杂自己的思考，谨以记录和传播知识 第一章 OS是怎么管理内存的? Go为什么要有自己的内存管理? Go语言的内存管理是建立在OS的内存管理之上的. 设计的目的是最大化的发挥OS内存管理层面的优势,避开导致低效情况. OS内存管理的主要机制 现在计算机内存管理的方式都是一步
go 源码深度解析看着一篇就够了
cugbtang
03-26 3910
【 netpoll I/O 多路复用构建原生网络模型】
Go的IO管理看这一篇就够了
cugbtang
09-25 1683
文章目录Go 的IO首要问题，内核中的缓冲和进程中的缓冲Operating System --- linux的文件I/O系统引言重要概念Go 的IOGo 和 IO的不解之缘Go的IO长什么样子IO 的姿势多种多样Go的IO具有是怎么利用内核的IO的呢？ Go 的IO 首要问题，内核中的缓冲和进程中的缓冲 内核中的缓冲 无论进程是否提供缓冲，内核都是提供缓冲的，系统对磁盘的读写都会提供一个缓冲（page/buffer cache），将数据写入到页/块缓冲进行排队，当页/块缓冲达到一定的量时，才能把数据写入
full gc多久一次算正常
最新发布
07-01
Full GC（垃圾回收）的频率因应用程序和JVM的配置而异，很难给出一个固定的时间间隔来衡量什么是正常的。Full GC通常在以下情况下发生： 1. 年轻代空间不足：当年轻代空间不足时，会触发Minor GC。如果Minor GC无法释放足够的空间，那么将触发Full GC来回收整个堆空间。 2. 永久代（在Java 8之前）或元空间（在Java 8及更高版本）不足：如果永久代或元空间不足以存储类的元数据或常量池等信息，那么会触发Full GC。 3. 显式调用：应用程序可以通过调用System.gc()方法显式触发Full GC。 4. CMS GC阶段出现失败：在使用CMS（Concurrent Mark Sweep）垃圾收集器时，如果CMS GC阶段无法完成，可能会触发Full GC。 因此，Full GC的频率取决于应用程序的内存使用情况、GC算法的选择以及JVM的配置。通常情况下，Full GC的频率应该尽量减少，因为它会导致应用程序的停顿时间增加。可以通过调整堆空间大小、调整GC算法参数或优化应用程序代码来减少Full GC的发生。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值