第九章 - 方法区
1.栈、堆、方法区的交互关系
从内存结构上看
从线程共享与否的角度看
栈、堆、方法区的交互关系
-
Person类的.class信息存放在方法区中
-
person变量存放在Java栈的局部变量表中,引用指向Java堆里真正存放的位置
-
真正的person对象存放在Java堆中
-
在person对象中,有个指针指向方法区中的person类型数据,表明这个person对象是用方法区中的Person类new出来的
2.方法区的理解
方法范围
方法区的位置
-
《Java虚拟机规范》中明确说明:尽管所有的方法区在逻辑上是属于堆的一部分,但一些简单的实现可能不会选择去进行垃圾收集或者进行压缩。
-
对于
HotSpotJVM
而言,方法区还有一个别名叫做Non-Heap(非堆),目的就是要和堆分开。 -
所以,方法区可以看做是一块独立于Java堆的内存空间。
方法区的理解
方法区主要存放的是Class,而堆中主要存放的实例化的对象。
-
方法区
(Method Area)
与Java堆一样,是各个线程共享的内存区域。 -
多个线程同时加载同一个类时,只能有一个线程能加载该类,其他线程只能等待该线程加载完毕,然后直接使用该类,即类只能加载一次。
-
方法区在
JVM
启动的时候被创建,并且它的实际物理内存空间和Java堆区一样都可以是不连续的。 -
方法区的大小,跟堆空间一样,可以选择固定大小或者可扩展。
-
方法区是接口,元空间或者永久代是方法区的实现。
-
方法区的大小决定了系统可以保存多少个类,如果系统定义了太多的类,导致方法区溢出,虚拟机同样会抛出内存溢出的错误:
-
java.lang.OutofMemoryError:
PermGen space
(JDK7
之前) -
java.lang.OutOfMemoryError:
Metaspace
(JDK8
之后)
-
-
举例说明方法区
OOM
-
加载大量的第三方jar包
-
Tomcat部署的工程过多
-
大量动态的生成反射类
-
-
关闭
JVM
就会释放这个区域的内存
代码示例
/**
* -Xms600m -Xmx600m
*/
public class EdenSurvivorTest {
public static void main(String[] args) {
System.out.println("我只是来打个酱油~");
try {
Thread.sleep(1000000);
} catch (InterruptedException e) {
e.printStackTrace();
}
}
}
-
简单的程序,加载了好多类
-
可以看到设置堆内存为600M后,年轻代+老年代=600M,所以说方法区是不存在堆中的
2.3 Hotspot中方法区的演进过程
-
在 JDK7 及以前,习惯上把方法区,称为永久代。JDK8开始,使用元空间取代了永久代。JDK 1.8之后,元空间存放在堆外内存中。
-
我们可以将方法区类比为Java中的接口,将永久代或元空间类比为Java中具体的实现类。
-
本质上,方法区和永久代并不等价。仅是对Hotspot而言的可以看作等价。《Java虚拟机规范》对如何实现方法区,不做统一要求。例如:BEAJRockit / IBM J9 中不存在永久代的概念。
-
现在来看,当年使用永久代,不是好的idea。导致Java程序更容易OOm(超过-XX:MaxPermsize上限) 而到了JDK8,终于完全废弃了永久代的概念,改用与JRockit、J9一样在本地内存中实现的元空间(Metaspace)来代替。
-
元空间的本质和永久代类似,都是对JVM规范中方法区的实现。不过元空间与永久代最大的区别在于:元空间不在虚拟机设置的内存中,而是使用本地内存。
-
永久代、元空间二者并不只是名字变了,内部结构也调整了
-
根据《Java虚拟机规范》的规定,如果方法区无法满足新的内存分配需求时,将抛出OOM异常
3.设置方法区大小与OOM
方法区的大小不比是固定的,JVM可以根据应用的需要动态调整。
JDK7 永久代
-
通过-XX:Permsize来设置永久代初始分配空间。默认值是20.75M
-
-XX:MaxPermsize来设定永久代最大可分配空间。32位机器默认是64M,64位机器模式是82M
-
当JVM加载的类信息容量超过了这个值,会报异常OutofMemoryError:PermGen space。
JDK8 元空间
-
元数据区大小可以使用参数
-XX:MetaspaceSize
和-XX:MaxMetaspaceSize
指定 -
默认值依赖于平台,Windows下,
-XX:MetaspaceSize
约为21M,-XX:MaxMetaspaceSize
的值是-1,即没有限制。 -
与永久代不同,如果不指定大小,默认情况下,虚拟机会耗尽所有的可用系统内存。如果元数据区发生溢出,虚拟机一样会抛出异常
OutOfMemoryError:Metaspace
-
-XX:MetaspaceSize
:设置初始的元空间大小。对于一个 64位 的服务器端JVM
来说,其默认的 -XX:MetaspaceSize
值为21MB。这就是初始的高水位线,一旦触及这个水位线,Full GC
将会被触发并卸载没用的类(即这些类对应的类加载器不再存活),然后这个高水位线将会重置。新的高水位线的值取决于GC
后释放了多少元空间。-
如果释放的空间不足,那么在不超过
MaxMetaspaceSize
时,适当提高该值。 -
如果释放空间过多,则适当降低该值。
-
-
如果初始化的高水位线设置过低,上述高水位线调整情况会发生很多次。通过垃圾回收器的日志可以观察到
Full GC
多次调用。为了避免频繁地GC
,建议将-XX:MetaspaceSize
设置为一个相对较高的值。
代码示例
/**
* 测试设置方法区大小参数的默认值
*
* jdk7及以前:
* -XX:PermSize=100m -XX:MaxPermSize=100m
*
* jdk8及以后:
* -XX:MetaspaceSize=100m -XX:MaxMetaspaceSize=100m
*/
public class MethodAreaDemo {
public static void main(String[] args) {
System.out.println("start...");
try {
Thread.sleep(1000000);
} catch (InterruptedException e) {
e.printStackTrace();
}
System.out.println("end...");
}
}
-XX:MetaspaceSize=100m -XX:MaxMetaspaceSize=100m
命令查看:
~ % jps
~ % jinfo -flag MetaspaceSize 47064
~ % jinfo -flag MaxMetaspaceSize 47064
如何解决OOM
-
要解决OOM异常或heap space的异常,一般的手段是首先通过内存映像分析工具(如Eclipse Memory Analyzer)对dump出来的堆转储快照进行分析,重点是确认内存中的对象是否是必要的,也就是要先分清楚到底是出现了内存泄漏(Memory Leak)还是内存溢出(Memory Overflow)。
-
内存泄漏就是有大量的引用指向某些对象,但是这些对象以后不会使用了,但是因为它们还和GC ROOT有关联,所以导致以后这些对象也不会被回收,这就是内存泄漏的问题。
-
如果是内存泄漏,可进一步通过工具查看泄漏对象到GC Roots的引用链。于是就能找到泄漏对象是通过怎样的路径与GC Roots相关联并导致垃圾收集器无法自动回收它们的。掌握了泄漏对象的类型信息,以及GC Roots引用链的信息,就可以比较准确地定位出泄漏代码的位置。
-
如果不存在内存泄漏,换句话说就是内存中的对象确实都还必须存活着,那就应当检查虚拟机的堆参数(-Xmx与-Xms),与机器物理内存对比看是否还可以调大,从代码上检查是否存在某些对象生命周期过长、持有状态时间过长的情况,尝试减少程序运行期的内存消耗。
4.方法区的内部结构
方法区结构
《深入理解Java虚拟机》书中对方法区(Method Area)存储内容描述如下:它用于存储已被虚拟机加载的类型信息、常量、静态变量、即时编译器编译后的代码缓存等。
类型信息
对每个加载的类型(类class、接口interface、枚举enum、注解annotation),JVM必须在方法区中存储以下类型信息:
-
这个类型的完整有效名称(全类名=包名.类名)
-
这个类型直接父类的完整有效名(对于interface或是java.lang.Object,都没有父类)
-
这个类型的修饰符(public,abstract,final的某个子集)
-
这个类型直接接口的一个有序列表
域(Field)信息
-
JVM必须在方法区中保存类型的所有域的相关信息以及域的声明顺序。
-
域信息
通俗来讲是类的成员变量 -
域的相关信息包括:
-
域名称
-
域类型
-
域修饰符(public,private,protected,static,final,volatile,transient的某个子集)
-
方法(Method)信息
JVM必须保存所有方法的以下信息,同域信息一样包括声明顺序:
-
方法名称
-
方法的返回类型(包括 void 返回类型),void 在 Java 中对应的类为 void.class
-
方法参数的数量和类型(按顺序)
-
方法的修饰符(public,private,protected,static,final,synchronized,native,abstract的一个子集)
-
方法的字节码(bytecodes)、操作数栈、局部变量表及大小(abstract和native方法除外)
-
异常表(abstract和native方法除外),异常表记录每个异常处理的开始位置、结束位置、代码处理在程序计数器中的偏移地址、被捕获的异常类的常量池索引
代码示例
/**
* 测试方法区的内部构成
*/
public class MethodInnerStrucTest extends Object implements Comparable<String>, Serializable {
//属性
public int num = 10;
private static String str = "测试方法的内部结构";
//构造器没写
//方法
public void test1() {
int count = 20;
System.out.println("count = " + count);
}
public static int test2(int cal) {
int result = 0;
try {
int value = 30;
result = value / cal;
} catch (Exception e) {
e.printStackTrace();
}
return result;
}
-
反编译字节码文件,并输出到文本文件中,便于查看
-
参数 -p 确保能查看 private 权限类型的字段或方法
javap -v -p MethodInnerStrucTest.class > Text.txt
域信息特殊情况
non-final 类型的类变量
-
静态变量和类关联在一起,随着类的加载而加载,他们成为类数据在逻辑上的一部分
-
类变量被类的所有实例共享,即使没有类实例时,你也可以访问它
代码示例
-
如下代码所示,即使我们把order设置为null,也不会出现空指针异常
-
这更加表明了 static 类型的字段和方法随着类的加载而加载,并不属于特定的类实例
/**
* non-final的类变量
*/
public class MethodAreaTest {
public static void main(String[] args) {
Order order = null;
order.hello();
System.out.println(order.count);
}
}
class Order {
public static int count = 1;
public static final int number = 2;
public static void hello() {
System.out.println("hello!");
}
}
hello!
1
全局常量:static final
-
全局常量就是使用 static final 进行修饰
-
代码示例
class Order {
public static int count = 1;
public static final int number = 2;
public static void hello() {
System.out.println("hello!");
}
}
-
反编译,查看字节码指令,可以发现 number 的值已经写死在字节码文件中了
public static int count;
descriptor: I
flags: ACC_PUBLIC, ACC_STATIC
public static final int number;
descriptor: I
flags: ACC_PUBLIC, ACC_STATIC, ACC_FINAL
ConstantValue: int 2
-
方法区,内部包含了运行时常量池
-
字节码文件,内部包含了常量池
-
要弄清楚方法区,需要理解清楚ClassFile,因为加载类的信息都在方法区。
-
要弄清楚方法区的运行时常量池,需要理解清楚ClassFile中的常量池。
常量池
-
一个有效的字节码文件中除了包含类的版本信息、字段、方法以及接口等描述符信息外
-
还包含一项信息就是常量池表(Constant Pool Table),包括各种字面量和对类型、域和方法的符号引用
为什么需要常量池
-
一个java源文件中的类、接口,编译后产生一个字节码文件。而Java中的字节码需要数据支持,通常这种数据会很大以至于不能直接存到字节码里,换另一种方式,可以存到常量池
-
这个字节码包含了指向常量池的引用。在动态链接的时候会用到运行时常量池
常量池中有什么
-
数量值
-
字符串值
-
类引用
-
字段引用
-
方法引用
常量池总结
常量池,可以看做是一张表,虚拟机指令根据这张常量表找到要执行的类名、方法名、参数类型、字面量等信息
运行时常量池
-
运行时常量池(Runtime Constant Pool)是方法区的一部分。
-
常量池表(Constant Pool Table)是Class字节码文件的一部分,用于存放编译期生成的各种字面量与符号引用,这部分内容将在类加载后存放到方法区的运行时常量池中。
-
运行时常量池,在加载类和接口到虚拟机后,就会创建对应的运行时常量池。
-
JVM为每个已加载的类型(类或接口)都维护一个常量池。池中的数据项像数组项一样,是通过索引访问的。
-
运行时常量池中包含多种不同的常量,包括编译期就已经明确的数值字面量,也包括到运行期解析后才能够获得的方法或者字段引用。此时不再是常量池中的符号地址了,这里换为真实地址。
-
运行时常量池,相对于Class文件常量池的另一重要特征是:具备动态性。
-
运行时常量池类似于传统编程语言中的符号表(symbol table),但是它所包含的数据却比符号表要更加丰富一些。
-
当创建类或接口的运行时常量池时,如果构造运行时常量池所需的内存空间超过了方法区所能提供的最大值,则JVM会抛OutOfMemoryError异常。
5.方法区的演进
JDK6
-
方法区由永久代实现,使用 JVM 虚拟机内存
JDK7
-
方法区由永久代实现,使用 JVM 虚拟机内存
JDK8及以后
-
方法区由元空间实现,使用物理机本地内存
永久代为什么要被元空间替代
由于类的元数据分配在本地内存中,元空间的最大可分配空间就是系统可用内存空间,这项改动是很有必要的,原因有:
1.为永久代设置空间大小是很难确定的
-
在某些场景下,如果动态加载类过多,容易产生Perm区的OOM。比如某个实际Web工程中,因为功能点比较多,在运行过程中,要不断动态地加载很多类,经常出现致命错误。Exception in thread 'dubbo client x.x connector' java.lang.OutOfMemoryError:PermGen space
-
而元空间和永久代之间最大的区别在于:元空间并不在虚拟机中,而是使用本地内存。因此,默认情况下,元空间的大小仅受本地内存限制。
2.对永久代进行调优是很困难的
-
方法区的垃圾收集主要回收两部分内容:常量池中废弃的常量和不再用的类型,方法区的调优主要是为了降低Full GC
-
有些人认为方法区(如HotSpot虚拟机中的元空间或者永久代)是没有垃圾收集行为的,其实不然。《Java虚拟机规范》对方法区的约束是非常宽松的,提到过可以不要求虚拟机在方法区中实现垃圾收集。事实上也确实有未实现或未能完整实现方法区类型卸载的收集器存在(如JDK11时期的ZGC收集器就不支持类卸载)。
-
一般来说这个区域的回收效果比较难令人满意,尤其是类型的卸载,条件相当苛刻。但是这部分区域的回收有时又确实是必要的。以前Sun公司的Bug列表中,曾出现过的若干个严重的Bug就是由于低版本的HotSpot虚拟机对此区域未完全回收而导致内存泄漏。
字符串常量池
字符串常量池 StringTable 为什么要调整位置?
-
JDK7中将StringTable放到了堆空间中。因为永久代的回收效率很低,在Full GC的时候才会执行永久代的垃圾回收,而Full GC是老年代的空间不足、永久代不足时才会触发。
-
这就导致StringTable回收效率不高,而我们开发中会有大量的字符串被创建,回收效率低,导致永久代内存不足。放到堆里,能及时回收内存。
方法区的垃圾回收
-
有些人认为方法区(如Hotspot虚拟机中的元空间或者永久代)是没有垃圾收集行为的,其实不然。
-
《Java虚拟机规范》对方法区的约束是非常宽松的,提到过可以不要求虚拟机在方法区中实现垃圾收集。事实上也确实有未实现或未能完整实现方法区类型卸载的收集器存在(如JDK11时期的ZGC收集器就不支持类卸载)。
-
一般来说这个区域的回收效果比较难令人满意,尤其是类型的卸载,条件相当苛刻。但是这部分区域的回收有时又确实是必要的。以前sun公司的Bug列表中,曾出现过的若干个严重的Bug就是由于低版本的HotSpot虚拟机对此区域未完全回收而导致内存泄漏。
-
方法区的垃圾收集主要回收两部分内容:常量池中废弃的常量和不再使用的类型。
方法区常量的回收
先来说说方法区内常量池之中主要存放的两大类常量:字面量和符号引用
-
字面量比较接近Java语言层次的常量概念,如文本字符串、被声明为final的常量值等
-
而符号引用则属于编译原理方面的概念,包括下面三类常量:
-
类和接口的全限定名
-
字段的名称和描述符
-
方法的名称和描述符
-
-
HotSpot虚拟机对常量池的回收策略是很明确的,
只要常量池中的常量没有被任何地方引用,就可以被回收
。 -
回收废弃常量与回收Java堆中的对象非常类似。(关于常量的回收比较简单,重点是类的回收)
方法区类的回收
-
判定一个常量是否“废弃”还是相对简单,而要判定一个类型是否属于“不再被使用的类”的条件就比较苛刻了。需要同时满足下面三个条件:
-
该类所有的实例都已经被回收,也就是Java堆中不存在该类及其任何派生子类的实例。
-
加载该类的类加载器已经被回收,这个条件除非是经过精心设计的可替换类加载器的场景,如OSGi、JSP的重加载等,否则通常是很难达成的。
-
该类对应的java.lang.Class对象没有在任何地方被引用,无法在任何地方通过反射访问该类的方法。
-
-
Java虚拟机被允许对满足上述三个条件的无用类进行回收,这里说的仅仅是“被允许”,而并不是和对象一样,没有引用了就必然会回收。关于是否要对类型进行回收,HotSpot虚拟机提供了-Xnoclassgc参数进行控制,还可以使用-verbose:class 以及 -XX:+TraceClass-Loading、-XX:+TraceClassUnLoading查看类加载和卸载信息
-
在大量使用反射、动态代理、CGLib等字节码框架,动态生成JSP以及 OSGi 这类频繁自定义类加载器的场景中,通常都需要Java虚拟机具备类型卸载的能力,以保证不会对方法区造成过大的内存压力。
运行时数据区总结
-
线程私有结构:程序计数器、虚拟机栈、本地方法栈
-
每个虚拟机栈由具体的栈帧组成,在栈帧的动态链接中,保存至对方法的引用
-
方法区在 JDK7 之前,使用永久代实现,在 JDK8 之后,使用元空间实现
-
Minor GC 针对于新生区,Major GC 针对于老年区,Full GC 针对于整个堆空间和方法区