5.方法区(元空间)
方法区
栈、堆、方法区的交互关系
从是否共享的角度来看
方法区的理解
《Java虚拟机规范》中说明:“尽管所有的方法区在逻辑上是属于堆的一部分,但一些简单的实现可能不会去进行垃圾收集或者进行压缩。”但对于HotSpot JVM 而言,方法区还有一个别名叫Non-Heap
(非堆),目的是要和堆分开。
所以,方法区看作是一块独立于Java堆的内存空间。
- 方法区(Method Area)与Java堆一样,是各个线程共享的内存区域
- 方法区在JVM启动的时候被创建,并且它的实际的物理内存空间中和Java堆区一样都是可以不连续的。
- 方法区的大小,跟堆空间一样,可以选择固定大小或者可扩展。
- 方法区的大小决定了系统可以保存多少个类,如果系统定义了太多的类导致方法区溢出,虚拟机同样会抛出内存溢出错误:
java.lang.OutOfMemoryError:PermGen space
或者java.lang.OutOfMemoryError:Metaspace
- 关闭JVM就会释放这个区域的内存。
HotSpot 中方法区的演进
- 在JDK7 以前,习惯上把方法区,称为永久代。JDK8 开始,使用元空间取代了永久代。
- 本质上,方法区和永久代并不等价。仅对Hotspot而言。《Java虚拟机规范》对如何实现方法区,不做统一要求。例如:
BEA JRockit/IBM J9
中不存在永久代的概念。【现在看来,当年使用永久代,不是一个好主意。导致Java程序更容易OOM(超过-XX:MaxPermSize
上限)】
- 而到了JDK 8,终于完全放弃了永久代大概念,改用与JRockit、J9一样在本地内存中实现的元空间(MetaSpace)来代替。
- 元空间的本质和永久代类似,都是对JVM规范中方法区的实现。不过元空间与永久代最大的区别在于:元空间不在虚拟机设置的内存中,而是使用本地内存。
- 永久代、元空间二者并不只是名字变了,内部结构也调整了。
- 根据《Java虚拟机规范》的规定,如果方法区无法满足新的内存分配需求时,将会抛出OOM异常。
- 方法区(Method Area)与Java堆一样,是各个线程共享的内存区域。
- 方法区在JVM启动的时候被创建,并且它的实际的物理内存空间中和Java堆区一样都是可以不连续的。
- 方法区的大小,跟堆空间一样,可以选择固定大小或者可扩展。
- 方法区的大小决定了系统可以保存多少个类,如果系统定义了太多的类,导致方法区移除,虚拟机同样会抛出内存溢出错误:
java.lang.OutOfMemoryError:PermGen space
或者java.lang.OutOfMemoryError:Metaspace
- 加载大量的第三方的jar;Tomcat部署的工程过多(30-50个);大量动态的生成反射类
- 关闭JVM就会释放这个区域的内存。
设置方法区大小与OOM
-
方法区的大小不必是固定的,JVM可以根据应用的需求动态调整。
-
JDK7 以前
-
通过
-XX:PermSize
来设置永久代初始分配空间。默认值是20.75M -
-XX:MaxPermSize
来设定永久代最大可分配空间。32为机器默认是64M,64位 -
当JVM加载的类信息容量超过了这个值,会报
OutOfMemoryError:PermGenSpace
-
-
JDK8 及之后:
- 元数据区大小可以使用参数
-XX:MetaspaceSize
和-XX:MaxMetaspaceSize
指定,替代上述原有的两个参数。 - 默认值依赖于平台。windows下,
-XX:MetaspaceSize
是21M,-XX:MaxMetaspaceSize
的值是-1
,即没有限制 - 与永久代不同,如果不指定大小,默认情况下,虚拟机会耗尽所有的可用系统内存。如果元数据区发生溢出,虚拟机一样会抛出
OutOfMemoryError:Metaspace
-XX:MetaspaceSize
设置初始的元空间大小。对于一个64位的服务器端JVM来说,其默认的-XX:metaspaceSize
值为21MB。这就是初始的高水线,一旦触及这个水位线,Full GC将会被触发并写在没用的类(即使这些类对应的类加载器不再存活),然后这个高水位线将会充值,新的高水位线的值取决于GC后释放了多少元空间。如果释放的空间不足,那么在不超过MaxmetaspaceSize
时,适当提高该值。如果释放空间过多,则适当降低该值。- 如果初始化的高水位线设置过低、上述高水位线调整情况会发生很多次。通过垃圾回收器的日志可以观察到Full GC 多次调用。为了避免频繁地GC,建议将
-XX:MetaspaceSize
设置为一个相对较高的值。
- 元数据区大小可以使用参数
-
解决这些OOM
- 要解决OOM异常或heap space的异常,一般的手段是首先通过内存映像分析工具(Eclipse Memory Analyzer)对dump出来的堆转储快照进行分析,重点是确认内存中的对象是否是必要的,也就要先分清到底是出现了内存泄露(Memory Leak)还是内存溢出(Memory Overflow)。
- 如果是内存泄露,可进一步通过工具查看泄露对象到GC Roots的引用链。于是就能找到泄露对象是通过怎样的路径与GC Roots相关并导致垃圾收集器无法自动回收它们的。掌握了泄露对象的类型信息,以及GC Roots 引用链的信息,就可以比较准确地定位出泄露代码的位置。
- 如果不存在内存泄露,换句话说就是内存中的对象确实都还必须存活着,那就应当检查虚拟机的堆参数(-Xmx 与 -Xms),与机器物理内存对比看是否还可以调大,从代码上检查是否存在某些生命周期过长,持有状态时间过长的情况,尝试减少程序运行期的内存消耗。
方法区内部结构
-
方法区存储什么?
《深入理解Java虚拟机》书中对方法区(Method Area)存储内容描述如下:它用于存储已被虚拟机加载的类型信息、常量、静态变量、即时编译器编译后的代码缓存等。
类型信息
对每个加载的类型(类class、接口interface、枚举enum、注解annotation),JVM必须在方法区中存储以下类型信息:
- 这个类型的完整有效名称(全名= 包名.类名)
- 这个类型直接父类的完整有效名(对于interface或是java.lang.Object,都没有父类)
- 这个类型的修饰符(public,abstract,final的某个子集)
- 这个类型直接接口的一个有序表
域(Field)信息
JVM必须在方法区中保存类型的所有域的相关信息以及域的声明顺序。
域的相关信息包括:域名称、域类型、域修饰符(public,private,protected,static,final,volatile,transient的某个子集)
方法信息(Method)信息
JVM必须保存所有方法的以下信息,同域信息一样把控声明顺序:
- 方法名称
- 方法的返回类型(或void)
- 方法的修饰符(public,private,protected,static,final,synchronized,native,abstract的一个子集)
- 方法的字节码(bytecodes)、操作数栈、局部变量表及大小(abstract和native方法除外)
- 异常表(abstract和native方法除外)
- 每个异常处理的开始位置,结束位置、代码处理在程序计数器中的偏移地质、被捕获的异常类的长廊池索引
示例:
public class MethodInnerStrucTest extends Object implements Comparable<String>,Serializable {
//属性
public int num = 10;
private static String str = "测试方法的内部结构";
//构造器 默认空参构造器
//方法
public void test1(){
int count = 20;
System.out.println("count = " + count);
}
public static int test2(int cal){
int result = 0;
try {
int value = 30;
result = value / cal;
} catch (Exception e) {
e.printStackTrace();
}
return result;
}
@Override
public int compareTo(String o) {
return 0;
}
}
javap解析字节码文件
public class com.atguigu.java.MethodInnerStrucTest extends java.lang.Object implements java.lang.Comparable<java.lang.String>, java.io.Serializable //类型信息
//域信息【成员属性】
public int num;
descriptor: I
flags: ACC_PUBLIC
//方法信息
public com.atguigu.java.MethodInnerStrucTest();
descriptor: ()V
flags: ACC_PUBLIC
Code:
stack=2, locals=1, args_size=1
0: aload_0
1: invokespecial #1 // Method java/lang/Object."<init>":()V
4: aload_0
5: bipush 10
7: putfield #2 // Field num:I
10: return
LineNumberTable:
line 10: 0
line 12: 4
LocalVariableTable:
Start Length Slot Name Signature
0 11 0 this Lcom/atguigu/java/MethodInnerStrucTest;
non-final的类变量
- 静态变量和类关联在一起,随着类的加载而加载,它们成为类数据在逻辑上的一部分。
- 类变量被类的所有实例共享,即使没有类实例时你也可以访问它。
全局常量 static final
- 被声明为final的类变量的处理方法则不同,每个全局常量在编译的时候就会被分配了。
示例:static
和 static final
解析字节码后的区别
public static int count;
descriptor: I
flags: ACC_PUBLIC, ACC_STATIC // 在类加载的链接阶段中的prepare中赋初值,在Initialization阶段中赋值
public static final int number;
descriptor: I
flags: ACC_PUBLIC, ACC_STATIC, ACC_FINAL
ConstantValue: int 2 //final 在编译时就会确定值
运行时常量池 对比 常量池
- 方法区,内部包含了运行时常量池。
- 字节码,内部包含了常量池。
- 要弄清楚方法区,需要理解ClassFile,因为加载类的信息都在方法区。
- 要弄清方法区的运行时常量池,需要理解清楚ClassFile中的常量池。
一个有效的字节码文件中除了包含类的版本信息、字段、方法以及接口等描述信息外,还包含了一项信息那就是常量池表(Constant Pool Table),包括各种字面量和堆类型、域和方法的符号引用。
-
为什么需要常量池?
一个java源文件中的类、接口,编译后产生一个字节码文件。而Java中的字节码需要数据支持,通常这种数据会很大以至于不能直接存到字节码里,换另一种方式,可以存到常量池,这个字节码包含了指向常量池的引用。在动态链接的时候会用到运行时常量池。
常量池中有什么?
集中在常量池内存储的数据类型包括:
- 数量值
- 字符串值
- 类引用
- 字段引用
- 方法引用
例如:
public class MethodAreaTest{
public static void main(String[] args) {
Object obj = new Object();
}
}
// Object foo = new Object(); 会被编译成如下字节码
0: new #2 // Class java/lang/Object
1: dup
2: invokespecial #3 // Method java/lang/Object"<init>"() V
小结:常量池,可以看做是一张表,虚拟机指令根据这张常量表找到要执行的类名、方法名、参数类型、字面量等类型。
运行时常量池
- 运行时常量池(Runtime Constant Pool)是方法区的一部分
- 常量池(Constant Pool Table)是Class文件的一部分,用于存放编译期生成的各种字面量与符号引用,这部分内容将在类加载后存放到方法区的运行时常量池中。
- 运行时常量池,在加载类和接口到虚拟机后,就会创建对应的运行时常量池中。
- JVM为每个已加载的类型(类或接口)都维护一个常量池。池中的数据项像数组项一样,是通过索引访问的。
- 运行时常量池中包含多种不同的常量,包括编译期就已经明确的数值字面量,也包括到运行期解析后才能够获得的方法或者字段引用。此时不再是常量池中的符号地址了,这里换为真实地址。
- 运行时常量池,相对于Class文件常量池的另一重要特征是:具备动态性。
- 运行时常量池类似于传统编程语言中的符号量表(Symbol table),但是它所包含的数据却比符号表要更丰富一些。
- 当创建类或接口的运行时常量池时,如果构造运行时常量池所需的内存空间超过了方法区所能提供的最大值,则JVM会抛OutOfMemoryError异常。
方法区使用举例
public class MethodAreaDemo {
public static void main(String[] args) {
int x = 500;
int y = 100;
int a = x / y;
int b = 50;
System.out.println(a+b);
}
}
方法区的演进细节
- 首先明确:只有HotSpot才有永久代。BEA JRockit、IBM J9等来说,是不存在永久代的概念的。原则上如何实现方法区属于虚拟机实现细节,不受《Java虚拟机规范》管束,并不要求统一
- HotSpot中方法区的变化
-
永久代演进到元空间
随着Java8 的到来,HotSpot VM 中再也见不到永久代了。但是这并不意味着类的元数据信息也消失了。这些数据被移到了一个与堆不相连的本地内存区域,这个区域叫做元空间(MetaSpace)。
由于类的元数据分配在本地内存中,元空间的最大可分配空间就是系统可用内存空间。
这项改动是很有必要的,原因有:
-
为永久代设置空间大小是很难确定的。
在某些场景下,如果动态加载类过多,容易产生Perm区的OOM。比如某个实际Web工程中,因为功能点比较多,在运行的过程中,要不断动态添加很多类,经常出现致命错误。
OOM:PermGen space
而元空间和永久代之间最大的区别在于:元空间并不存在虚拟机中,而是使用本地内存。因此,默认情况下,元空间的大小仅受本地内存限制。
-
对永久代进行调优是很困难的。
- StringTable为什么要调整
JDK7 中将StringTable放到了堆空间中。因为永久代的回收效率很低,在FullGC 的时候才会触发,而Full GC
是老年代的空间不足,永久代不足时才会触发,这就导致StringTable回收效率不高。而我们开发中会有大量的字符串被创建,回收效率低,导致永久代内存不足。放到堆里,能及时回收内存。
- 静态变量存放位置
// JDK 7:
// -Xms200m -Xmx200m -XX:PermSize=300m -XX:MaxPermSize=300m -XX:+PrintGCDetails
// JDK 8:
// -Xms200m -Xmx200m -XX:MetaspaceSize=300m -XX:MetaspaceSize=300m -XX:+PrintGCDetails
public class StaticFieldTest {
private static byte[] arr = new byte[1024*1024*100]; //100MB
public static void main(String[] args) {
System.out.println(StaticFieldTest.arr);
try {
Thread.sleep(10000);
} catch (InterruptedException e){
e.printStackTrance();
}
}
}
JDK7: 存放于老年代(OldGen)中
JDK8:存放于老年代中
结论:静态引用对应的对象实体始终都存储在堆空间中
方法区垃圾回收
有些人认为方法区(如HotSpot虚拟机中的元空间或者永久代)是没有垃圾回收行为的,其实不然。《Java虚拟机规范》对方法区的约束是非常宽松的,提到过可以不要求虚拟机在方法区中实现垃圾收集。事实上也有未实现或未能完整实现方法区类型卸载的收集器存在(如JDK 11时期的ZGC收集器就不支持类型卸载)。
一般来说这个区域的回收效果比较难令人满意,尤其是类型的卸载,条件相当苛刻。但是这部分区域的回收有时又确实是必要的。
方法区的垃圾收集主要回收两部分内容:常量池中废弃的常量和不再使用的类型。
-
先来说说方法区内常量池中主要存放的两大类常量:字面量和符号引用。字面量比较接近Java 语言层次的常量概念,如文本字符串,被声明为final的常量值等。而符号引用则属于编译原理方面的概念,包括下面三类常量:
- 类和接口的全限定类名
- 字段的名称和描述符
- 方法的名称和描述符
-
HotSpot虚拟机对常量池的回收策略是很明确的,只要常量池中的常量没有被任何地方引用,就可以被回收。
-
回收废弃常量与回收Java堆中的对象非常相似
-
判断一个常量是否被“废弃”还是相对简单,而要判定一个类型是否属于“不再被使用的类"的条件就比较苛刻了。需要同时满足下面三个条件:
- 该类所有的实例都已经被回收,也就是Java堆中不存在该类及其任何派生子类的实例。
- 加载该类的类加载器已经被回收,这个条件除非是精心设计的可替换类加载器的场景,如OSGI,JSP的重加载等,否则通常是很难达成的。
- 该类对应的java.lang.Class对象没有在任何地方被引用,无法再任何地方通过反射访问该方法。
-
Java 虚拟机被运行对满足上述三个条件的无用类进行回收,这里说的仅仅是“被允许”,而不是和对象一样,没有引用了就必然会回收。关于是否要对类型进行回收,
HotSpot
虚拟机提供了-Xnclassgc
参数进行控制,还可以使用-verbose:class
以及-XX:+TraceClass-Loading
、-XX:+TraceClassUnLoading
查看类加载和卸载信息 -
在大量使用反射、动态代理、
CGLib
等字节码框架,动态生成JSP以及OSGi
这类频繁自定义类加载器的场景中,通常都需要Java 虚拟机具备卸载的能力,以保证不会对方法区造成过大的内存压力。