堆
本文整理自尚硅谷宋红康老师在B站的视频,侵权即删。
本文思维导图如下:
1 概述
堆得基本特点:
- 一个JVM实例只存在一个堆内存,堆也是Java内存管理的核心区域。
- Java堆区在JVM启动的时候即被创建,其空间大小也就确定了,是JVM管理的最大的一块内存空间。
- 堆内存的大小是可以调节的。
- 《Java虚拟机规范》规定,堆可以处于物理上不连续的内存空间中,但在逻辑上应该被视为连续的。
- 所有的线程共享Java堆,在这里还可以划分线程私有的缓冲区( Thread Local Allocation Buffer,TLAB)。
- 《Java虚拟机规范》中对堆的描述是:所有的对象实例以及数组都应当在运行时分配在堆上。(The heap is the run- time data area from which memory for all class instances and arrays is allocated)。
- 数组和对象可能永远不会存储在栈上,因为栈帧中保存引用,这个引用指向对象或者数组在堆中的位置。
- 在方法结束后,堆中的对象不会马上被移除,仅仅在垃圾收集的时候才会被移除。
- 堆是GC(Garbage Collector,垃圾收集器)执行垃圾回收的重点区域。
不同JDK版本中内存区域的划分:
现代垃圾收集器大部分都基于分代收集理论设计,堆空间细分为:
- JDK7及之前,堆内存逻辑上分为三部分:
- 新生区,Young Generation Space
- 新生区又分为Eden区和Survivor区
- 养老区,Tenure Generation Space
- 永久区,Permanent Space
- 新生区,Young Generation Space
- JDK8及之后,堆内存逻辑上分为三部分:
- 新生区,Young Generation Space
- 新生区又分为Eden区和Survivor区
- 养老区,Tenure Generation Space
- 元空间,Meta Space
- 新生区,Young Generation Space
- 以下名称通用:新生区↔新生代↔年轻代 养老区↔老年区↔老年代 永久区↔永久代
2 设置堆内存大小与OOM
堆的大小在JVM启动时就已经设定好了,可以通过选项-Xmx
和-Xms
来进行设置:
-Xms
用于表示堆区的起始内存,等价于-XX:Initial Heapsize
-Xmx
用于表示堆区的最大内存,等价于-XX:MaxHeapsize
一旦堆区中的内存大小超过-Xmx
所指定的最大内存时,将会抛出OutOfMemoryError异常。
通常会将-Xms和-Xmx两个参数配置相同的值,其目的是为了能够在Java垃圾回收机制清理完堆区后,不需要重新分隔计算堆区的大小,从而提高性能。
默认情况下,初始内存大小:物理内存大小/64;最大内存大小:物理内存大小/4。
举例OOM异常:
public class OOMTest {
public static void main(String[] args) {
List<Picture> list = new ArrayList<>();
while (true) {
try {
Thread.sleep(20);
} catch (InterruptedException e) {
e.printStackTrace();
}
list.add(new Picture(new Random().nextInt(1024 * 1024)));
}
}
}
class Picture{
private byte[] pixels;
public Picture(int length) {
this.pixels = new byte[length];
}
}
异常信息:
Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
at com.yupeng.heaptest.Picture.<init>(OOMTest.java:30)
at com.yupeng.heaptest.OOMTest.main(OOMTest.java:21)
3 年轻代与老年代
存储在中的Java对象可以被划分为两类:
- 一类是生命周期较短的瞬时对象,这类对象的创建和消亡都非常迅速;
- 另外一类对象的生命周期非常长,在某些极端的情况下还能够与JVM的生命周期保持一致。
对应地,Java堆区进一步细分,可以划分为年轻代(Young Gen)
和老年代(old Gen)
。其中年轻代又可以划分为Eden空间
、Survivor0
空间和Survivor1
空间(有时也叫做from区和to区)。
在 Hotspot中,新生代和老年代的空间比例默认是1:2,开发人员可以通过选项-XX:NewRatio=<N>
调整该比例,比如-XX:NewRatio=4,表示新生代和老年代的比例为1:4。
Eden空间和另外两个 Survivor空间的默认比例是8:1:1,开发人员可以通过选项-XX:SurvivorRatio=<N>
调整这个空间比例,例如-XX:SurvivorRatio=8。
几乎所有的Java对象都是在Eden区被new出来的,且绝大部分的Java对象的销毁都在新生代进行。IBM公司的研究表明,新生代中80%的对象都是"朝生夕死"的。
可以使用选项-Xmn
设置新生代最大内存大小,这个参数一般使用默认值就可以。
4 对象分配过程
为新对象分配内存是一件非常严谨和复杂的任务,JVM的设计者们不仅需要考虑内存如何分配、在哪里分配等问题,并且由于内存分配算法与内存回收算法密切相关,所以还需要考虑GC执行内存回收后是否会在内存空间中产生内存碎片等问题。
一般过程如下:
- new的对象先放在Eden区,此区有大小限制。
- 当Eden的空间填满时,程序又需要创建对象,JVM的垃圾回收器将进行垃圾回收( Minor GC),将Eden区和Survivor0区的不再被其他对象所引用的对象进行销毁,再加载新的对象放到Eden区。
- 将Eden区和Survivor0区的剩余存活对象移动到Survivor1区,这些存活对象的年龄会增加1。
- 如果再次触发垃圾回收,此时上次幸存下来的放到Survivor1区的,如果没有回收,就会放到Survivor0区,存活对象的年龄再增加1。
- 如果再次经历垃圾回收,此时会重新放回Survivor0区,接着再去幸存者Survivor1区,依次轮转。
- 什么时候能去养老区呢?可以设置次数,默认是15次,也就是存活对象的年龄达到15时。
- 可以设置参数:
-XX:MaxTenuringThreshold=<N>
进行设置。
- 可以设置参数:
- 在养老区,相对悠闲;当养老区内存不足时,会触发GC:Major GC,进行养老区的内存清理。
- 若养老区执行Major GC之后发现依然无法进行对象的保存,就会产生OOM异常:
java.lang.OutOfMemoryError:Java heap space
。
总结:
- 针对Survivor0和Survivor1区的总结:复制之后有交换,谁空谁是to。
- 关于垃圾收集:频繁在新生区收集,很少在养老区收集,几乎不在永久区/元空间收集。
对象的分配流程如下图所示:
5 Minor GC、Major GC和Full GC
针对 Hotspot VM的实现,GC按照回收区域又分为两大种类型:一种是部分收集(Partial GC),一种是整堆收集(Full GC):
- 部分收集(Partial GC):不是完整收集整个堆得垃圾收集:
- 新生代收集(Minor GC/Young GC),只收集新生代
- 老年代收集(Major GC/Old GC),只收集老年代
- 很多时候Major GC会和Full GC混淆,需要具体分辨是老年代单独收集还是整堆收集
- 目前,只有CMS垃圾回收器具有单独收集老年代的行为
- 混合收集,收集整个新生代以及部分老年代
- 目前,只有G1垃圾回收器有这种行为
- 整堆收集(Full GC):收集整个Java堆和方法区
年轻代GC(Minor GC)的触发机制:
- 当年轻代空间不足时,就会触发Minor GC,注意这里的年轻代满指的是Eden区满, Survivor区满不会引发GC。每次 Minor GC会清理整个年轻代的内存,即Eden满会触发Minor GC,收集Eden区的同时也会收集Survivor区。
- 因为Java对象大多都具备朝生夕灭的特性,所以Minor GC非常频繁,一般回收速度也比较快。
- Minor Gc会引发STW(Stop The World),暂停其它用户的线程,等垃圾回收结束,用户线程才恢复运行。
老年代(Major GC/Old GC)的触发机制:
- 出现了 Major GC,经常会伴随至少一次的 Minor GC(但非绝对的,在Parallel Scavenge垃圾收集器的收集策略中,就有直接进行 Major GC的策略选择过程)
- 也就是在老年代空间不足时,会先尝试触发 Minor GC,如果之后空间还不足,则触发 Major GC。
- Major GC的速度一般会比Minor gc慢10倍以上,STW的时间更长。
- 如果 Major GC后,内存还不足,就报OOM。
Full GC触发机制:
触发Full GC执行的情况有如下五种:
- 调用System.gc()时,系统建议执行Full GC,但是不一定执行。
- 老年代空间不足。
- 方法区空间不足。
- 通过Minor GC后进入老年代的平均大小大于老年代的可用内存。
- 由Eden区、 Survivor0( From Space)区向 Survivor1(To Space)区复制时,对象的大小大于To Space可用内存,则把该对象转存到老年代,且老年代的可用内存小于该对象大小时。
说明:Full GC是开发或调优中尽量要避兔的,这样暂停时间会短一些。
6 堆空间分代思想
为什么需要把堆分代?
经研究,不同对象的生命周期不同,70%~99%的对象是临时对象。新生代:主要用于存放临时对象;老年代:存放新生代中经历多次GC仍然存活的对象。
其实不分代完全可以,分代的唯一理由就是优化GC性能。如果没有分代,所有的对象都在一块,进行GC的时候要找到哪些对象没用,这样就需要对堆的所有区域进行扫描,消耗的时间更多;而很多对象都是朝生夕死的,如果分代的话,把新创建的对象放到某一地方,当GC的时候先把这块存储"朝生夕死"对象的区域进行回收,这样就会腾出很大的空间。
7 内存分配策略
针对不同年龄段的对象分配原则如下所示:
- 优先分配到Eden。
- 大对象直接分配到老年代。
- 应尽量避免程序中出现过多的大对象。
- 长期存活的对象分配到老年代。
- 动态对象年龄判断
- 如果Survivor区中具有某一相同年龄的所有对象大小的总和大于Survivor空间的一半,那么年龄大于或等于该年龄的对象可以直接进入老年代,无须等到MaxTenuringThreshold中要求的年龄。
- 空间分配担保
- 在发生 Minor GC之前,虚拟机会检查老年代最大可用的连续空间是否大于新生代所有对象的总空间。
- 如果大于,则此次Minor GC是安全的;
- 如果小于,则虚拟机会查看-XX:Handlepromotionfailure设置值是否允许担保失败。
- 如果
HandlePromotionfailure=true
,那么会继续检查老年代最大可用连续空间是否大于历次晋升到老年代的对象的平均大小。- 如果大于,则尝试进行一次Minor GC,但这次 Minor GC依然是有风险的;
- 如果小于,则改为进行一次Full GC。
- 如果
HandlePromotionfailure=false
,则改为进行一次Full GC。
- 如果
- JDK6 Update 24之后的规则变为:只要老年代的连续空间大于新生代对象总大小或者历次晋升的平均大小,就会进行Minor gc,否则将进行Full GC。
- 在发生 Minor GC之前,虚拟机会检查老年代最大可用的连续空间是否大于新生代所有对象的总空间。
8 为对象分配内存:TLAB
为什么有TLAB(Thread Local Allocation Buffer):
- 堆区是线程共享区域,任何线程都可以访问到堆区中的共享数据。
- 由于对象实例的创建在JVM中非常频繁,因此在并发环境下从堆区中划分内存空间是线程不安全的。
- 为避免多个线程操作同一地址,需要使用加锁等机制,进而影响分配速度。
什么是TLAB:
- 从内存模型而不是垃圾收集的角度,对Eden区域继续进行划分,JVM为每个线程分配了一块私有缓存区域,它包含在Eden空间内。
- 多线程同时分配内存时,使用TLAB可以避免一系列的非线程安全问题,同时还能够提升内存分配的吞吐量,因此可以将这种内存分配方式称之为快速分配策略。
- 所有OpenJDK衍生出来的JVM都提供了TLAB的设计。
说明:
- 尽管不是所有的对象实例都能够成功在TLAB中分配内存,但JVM确实是将TLAB作为内存分配的首选。
- 在程序中,可以通过选项
-XX:UseTLAB
设置是否开启TLAB空间。 - 默认情况下,TLAB空间的内存非常小,仅占有整个Eden空间的1%,可以通过选项
-XX:TLABWasteTargetPercent
设置TLAB空间所占用Eden空间的百分比大小。 - 一旦对象在TLAB空间分配内存失败时,JVM会尝试通过使用加锁机制确保数据操作的原子性,从而按前面所属流程,在Eden空间中分配内存。
9 堆空间的参数设置
官方说明:https://docs.oracle.com/javase/8/docs/technotes/tools/unix/java.html
-XX:+PrintFlagsInitial
:查看所有参数的默认初始值-XX:+PrintFlagsFinal
:查看所有参数的最终值(可能会修改,不再是初始值)-Xms
:初始堆空间内存,例如-Xms60m
,代表初始堆空间内存大小为60m。默认为物理内存的1/64。-Xmx
:最大堆空间内存,例如-Xmx60m
,代表最大堆空间内存为60m。默认为物理内存的1/4。-XX:NewRatio
:设置新生代与老年代的比例,例如-XX:NewRatio=3
,代表新生代与老年代的比例为1:3。-XX:SurvivorRatio
:设置新生代中Eden区与Survivor区的比例,例如-XX:NewRatio=6
,代表Eden区与Survivor区的比例为6:1。默认为8,注意:虽然默认为8,但还是要显式设置以后,才真正地是此比例。-XX:MaxTenuringThreshold
:设置Survivor区对象进入Old区的年龄阈值,默认为15。-XX:+PrintGCDetails
:每次GC时打印详细消息。默认情况下,此选项处于禁用状态。- 打印GC简要消息:
-XX:+PrintGC
或-verbose:gc
。
- 打印GC简要消息:
10 小结
新生代是对象的诞生、成长、消亡的区域,一个对象在这里产生、应用,最后被垃圾回收器收集、结束生命。
老年代放置长生命周期的对象,通常都是从Survivor区域筛选拷贝过来的Java对象。当然,也有特殊情况,普通的对象会被分配在TLAB上;如果对象较大,JVM会试图直接分配在Eden其他位置上;如果对象太大,完全无法在新生代找到足够长的连续空闲空间,JVM就会直接分配到老年代。
于禁用状态。
- 打印GC简要消息:
-XX:+PrintGC
或-verbose:gc
。
10 小结
新生代是对象的诞生、成长、消亡的区域,一个对象在这里产生、应用,最后被垃圾回收器收集、结束生命。
老年代放置长生命周期的对象,通常都是从Survivor区域筛选拷贝过来的Java对象。当然,也有特殊情况,普通的对象会被分配在TLAB上;如果对象较大,JVM会试图直接分配在Eden其他位置上;如果对象太大,完全无法在新生代找到足够长的连续空闲空间,JVM就会直接分配到老年代。
当GC只发生在年轻代中,回收年轻代对象的行为被称为 Minor GC。当GC发生在老年代时,则被称为 Major GC或者Full GC。一般的, Minor GC的发生频率要比Major GC高很多,即老年代中垃圾回收发生的频率大大低于年轻代。