1 栈、堆、方法区的交互关系

9.1_1

从线程共享与否的角度来看

9.1_2
9.1_3.png
9.1_4

2 方法区的理解

2.1 方法区在哪里?

《Java 虚拟机规范》中明确说明:“尽管所有的方法区在逻辑上是属于堆的一部分,但一些简单的实现可能不会选择去进行垃圾收集或进行压缩。”

但对于 HotSpot JVM 而言,方法区还有一个别名叫做 Non-Heap(非堆),目的就是要和堆分开。

所以,方法区看作是一块独立于 Java 堆的内存空间。

9.2.1_1

2.2 方法区的基本理解

  • 方法区(Method Area)与 Java 堆一样,是各个线程共享的内存区域。
  • 方法区在 JVM 启动的时候被创建,并且它在实际的物理内存空间中,和 Java 堆区一样都可以是不连续的。
  • 方法区的大小,跟堆空间一样,可以选择固定大小或者可扩展。
  • 方法区的大小决定了系统可以保存多少个类,如果系统定义了太多的类,导致方法区溢出,虚拟机同样会抛出内存溢出错误:java.lang.OutOfMemoryError: PermGen space (JDK7及之前)或者 java.lang.OutOfMemoryError: Metaspace(JDK7 之后)。
    • 比如:加载大量的第三方 jar 包;Tomcat 部署的工程过多;大量动态的生成反射类等。
  • 关闭 JVM 就会释放这个区域的内存。

2.3 HotSpot 中方法区的演进

在 jdk7 及以前,习惯上把方法区称为永久代。jdk8 开始,使用元空间取代了永久代。

本质上,方法区和永久代并不等价,等价仅是对 HotSpot 而言的。《Java 虚拟机规范》对如何实现方法区不做统一要求。例如:BEA JRockit / IBM J9 中不存在永久代的概念。

现在看来,当年使用永久代不是好的idea,因为这会导致 Java 程序更容易 OOM(超过 -XX:MaxPermSize 上限)。

9.2.3_1 9.2.3_2

到了 JDK8,永久代的概念被完全废除,改用了与 JRockit、J9 一样在本地内存中实现的元空间(Metaspace)来代替。

9.2.3_3

元空间的本质和永久代类似,都是对 JVM 规范中方法区的实现。区别是:元空间不在虚拟机设置的内存中,而是使用本地内存

永久代、元空间二者并不只是名字变了,内部结构也调整了。

根据《Java虚拟机规范》的规定,如果方法区无法满足新的内存分配需求时,将抛出 OOM 异常。

3 设置方法区大小与 OOM

方法区的大小不必是固定的,JVM 可以根据应用的需要动态调整。

JDK7 及以前:

  • -XX:PermSize:设置永久代初始分配空间。默认值是20.75M。
  • -XX:MaxPermSize:设定永久代最大可分配空间。32位机器默认是64M,64位机器默认是82M。
    • 当 JVM 加载的类信息容量超过了这个值,会报 OutOfMemoryError: PermGen space 异常。
9.3_1

格式:-XX:PermSize=100m -XX:MaxPermSize=100m

JDK8 及以后:

元数据区大小可以使用参数 -XX:MetaspaceSize 和 -XX:MaxMetaspaceSize 指定。

  • 格式:-XX:MetaspaceSize=100m -XX:MaxMetaspaceSize=100m

默认值依赖于平台。windows下,-XX:MetaspaceSize 是21M,-XX:MaxMetaspaceSize的值是-1,即没有限制。

与永久代不同,如果不指定大小,默认情况下,虚拟机会耗尽所有可用的系统内存。如果元数据区发生溢出,虚拟机会抛出 OutOfMemoryError: Metaspace 异常。

对于一个64位的服务器端 JVM 来说,-XX:MetaspaceSize 的默认值是21M,这是初始的高水位线,一旦触及这个水位线,Full GC 将会被触发,并卸载没用的类(即这些类对应的类加载器不再存活),然后这个高水位线将会重置。新的高水位线的值取决于 GC 后释放了多少元空间,如果释放的空间不足,那么在不超过 MaxMetaspace 时,适当提高该值;如果释放空间过多,则适当降低该值。

  • 如果初始化的高水位线设置过低,上述高水位线调整情况会发生很多次。通过垃圾回收器的日志可以观察到 Full GC 多次调用。为了避免频繁地 GC ,建议将 -XX:MetaspaceSize 设置为一个相对较高的值。

如何解决这些 OOM?

要解决 OOM 异常或 heap space 异常,一般的手段是首先通过内存映像分析工具(如 Eclipse Memory Analyzer)对 dump 出来的堆转储快照进行分析,重点是确认内存中的对象是否是必要的,也就是要先分清楚到底是出现了内存泄漏(Memory Leak)还是内存溢出(Memory Overflow)。

如果是内存泄漏,可进一步通过工具查看泄露对象到 GC Roots 的引用链,于是就能找到泄露对象是通过怎样的路径与 GC Roots 相关联并导致垃圾收集器无法自动回收它们的。掌握了泄露对象的类型信息,以及 GC Roots 引用链的信息,就可以比较准确地定位出现泄露代码的位置。

如果不存在内存泄露,即内存中的对象确实都还必须存活着,那就应当检查虚拟机的堆参数(-Xmx 与 -Xms),与机器物理内存对比看是否还能调大,从代码上检查是否存在某些对象生命周期过长、持有状态时间过长的情况,尝试减少程序运行期的内存消耗。

4 方法区的内部结构

9.4.0_1

4.1 方法区(Method Area)存储什么

《深入理解 Java 虚拟机》书中对方法区存储内容描述如下:

它用于存储已被虚拟机加载的类型信息常量静态常量即时编译器编译后的代码缓存等。

9.4.1_1

4.2 类型信息

对每个加载的类型(类 class、接口 interface、枚举 enum、注解 annotation),JVM 必须在方法区中存储以下信息:

  1. 这个类型的完整有效名称(全名 = 包名.类名)
  2. 这个类型直接父类的完整有效名(对于 interface 或是 java.lang.Object,都没有父类)
  3. 这个类型的修饰符(public,abstract,final 的某个子集)
  4. 这个类型直接接口的一个有序列表

4.3 域(Field)信息

域,即成员变量。

JVM 必须在方法区中保存类型的所有域的相关信息以及域的声明顺序。

域的相关信息包括:域名称、域类型、域修饰符(public,private,protected,static,final,volatile,transient的某个子集)

4.4 方法(Method)信息

JVM 必须保存所有方法的以下信息,同域信息一样包括声明顺序:

  • 方法名称
  • 方法的返回类型(或 void)
  • 方法参数的数量和类型(按顺序)
  • 方法的修饰符(public,private,protected,static,final,synchronized,native,abstract 的一个子集)
  • 方法的字节码(bytecodes)、操作数栈、局部变量表及大小(abstract 和 native 方法除外)
  • 异常表 (abstract 和 native 方法除外)
    • 每个异常处理的开始位置、结束位置、代码处理在程序计数器中的偏移地址、被捕获的异常类的常量池索引

4.5 non-final 的类变量

  • 静态变量和类关联在一起,随着类的加载而加载,它们成为类数据在逻辑上的一部分。
  • 类变量被类的所有实例共享,即使没有类实例时也可以被访问

如下面的程序依旧可以正常运行:

public class MethodAreaTest {
    public static void main(String[] args) {
        Order order = null;
        order.hello();
        System.out.println(order.count);
    }
}

class Order {
    public static int count = 1;
    public static final int number = 2;

    public static void hello() {
        System.out.println("hello!");
    }
}

全局常量:static final

被声明为 final 的类变量的处理方法则不同,每个全局常量在编译的时候就会被分配了。

反编译上述的 Order 类,可以得到:

9.4.5_1

4.6 运行时常量池和常量池

  • 方法区内部包含了运行时常量池。
  • 字节码文件包含了常量池。

常量池

一个有效的字节码文件中除了包含类的版本信息、字段、方法以及接口等描述信息外,还包含一项信息,那就是常量池表(Constant Pool Table),包括各种字面量和对类型、域和方法的符号引用。

常量池,可以看作是一张表,虚拟机指令根据这张常量表找到要执行的类名、方法名、参数类型、字面量等类型。

运行时常量池

  • 运行时常量池(Runtime Constant Pool)是方法区的一部分。
  • 常量池表(Constant Pool Table)是 Class 文件的一部分,用于存放编译期生成的各种字面量与符号引用,这部分内容将在类加载后存放到方法区的运行时常量池中。
  • 在加载类和接口到虚拟机后,就会创建对应的运行时常量池。
  • JVM 为每个已加载的类型(类或接口)都维护一个常量池,池中的数据项像数组项一样,是通过索引访问的。
  • 运行时常量池中包含多种不同的常量,包括编译期就已经明确的数值字面量,也包括到运行期解析后才能获得的方法或者字段引用,此时不再是常量池中的符号地址了,这里换为真实地址。
    • 运行时常量池相对于 Class 文件常量池的另一重要特征是:具备动态性
  • 运行时常量池类似于传统编程语言中的符号表(symbol table),但是它所包含的数据却比符号表要更加丰富一些。
  • 当创建类或接口的运行时常量池时,如果构造运行时常量池所需的内存空间超过了方法区所能提供的最大值,则 JVM 会抛 OutOfMemoryError 异常。

5 HotSpot 中方法区演进细节

只有 HotSpot 才有永久代。对于 BEA JRockit、IBM J9 等来说,是不存在永久代的概念的。原则上如何实现方法区属于虚拟机实现细节,不受《Java 虚拟机规范》管束,并不要求统一。

HotSpot 中方法区的变化:

jdk1.6 及之前 有永久代(permanent generation),静态变量存放在永久代上
jdk1.7 有永久代,但已经逐步“去永久代”,字符串常量池、静态变量移除,保存在堆中
jdk1.8及之后 无永久代,类型信息、字段、方法、常量保存在本地内存的元空间,但字符串常量池、静态变量仍存放在堆中

JDK6:

9.5_1

JDK7:

9.5_2

JDK8:

9.5_3

永久代为什么要被元空间替换?

由于类的元数据分配在本地内存中,元空间的最大可分配空间就是系统可用内存空间。

这项改动是很有必要的,原因有:

  1. 永久代应该设置的空间大小很难确定。

在某些场景下,如果动态加载类过多,容易产生 Perm 区的 OOM。而元空间和永久代之间最大的区别在于:元空间并不在虚拟机中,而是使用本地内存。因此,默认情况下,元空间的大小仅受本地内存的限制。

  1. 对永久代的调优是很困难的。

StringTable 为什么要调整?

jdk7 中将 StringTable 放到了堆空间中。因为永久代的回收效率很低,在 Full GC 的时候才会触发,而 Full GC 是老年代的空间不足、永久代不足时才会触发,这就就导致 StringTable 回收效率不高。而开发中会有大量的字符串被创建,回收效率低,导致永久代不足。放在堆里,能及时回收内存。

6 方法区的垃圾收集

《Java 虚拟机规范》对方法区的约束是非常宽松的,提到过可以不要求虚拟机在方法区中实现垃圾收集。事实上也确实有未实现或未能完整实现方法区类型卸载的收集器存在(如 JDK11 时期的 ZGC 收集器就不支持类卸载)。

方法区的垃圾收集主要回收两部分内容:常量池中废弃的常量和不再使用的类型。

方法区内常量池中主要存放两大类常量:字面量和符号引用。

  • 字面量比较接近 Java 语言层次的常量概念,如文本字符串、被声明为 final 的常量值等。
  • 符号引用属于编译原理方面的概念,包括下面三类常量:
    • 类和接口的全限定名
    • 字段的名称和描述符
    • 方法的名称和描述符

HotSpot 虚拟机对常量池的回收策略是很明确的,只要常量池中的常量没有被任何地方引用,就可以被回收

回收废弃常量与回收 Java 堆中的对象非常类似。

判定一个常量是否“废弃”还是相对简单的,而判定一个类型是否属于”不再被使用的类“的条件就比较苛刻了,需要同时满足下面三个条件:

  • 该类的所有实例都已经被回收,也就是 Java 堆中不存在该类及其任何派生子类的实例。
  • 加载该类的类加载器已经被回收,这个条件除非是经过精心设计的可替换类加载器的场景,如 OSGi、JSP的重加载等,否则通常是很难达成的。
  • 该类对应的 java.lang.Class 对象没有在任何地方被引用,无法在任何地方通过反射访问该类的方法。

Java 虚拟机被允许对满足上述三个条件的无用类进行回收,这里说的仅仅是”被允许“,而并不是和对象一样,没有引用了就必然会回收。

关于是否要对类型进行回收,HotSpot 虚拟机提供了 -Xnoclassgc 参数进行控制,还可以使用 -verbose:class 以及 -XX:+TraceClass-Loading、-XX:+TraceClassUnLoading 查看类加载器和卸载信息。

在大量使用反射、动态代理、CGLib 等字节码框架,动态生成 JSP 以及 OSGi 这类频繁自定义类加载器的场景中,通常都需要 Java 虚拟机具备类型卸载的能力,以保证不会对方法区造成过大的内存压力。

7 总结与常见面试题

9.7_1
  • 百度:
    • 三面:说一下 JVM 内存模型吧,有哪些区?分别是干什么的?
  • 蚂蚁金服:
    • Java8 的内存分代改进
    • JVM 内存分哪几个区,每个区的作用是什么?
    • 一面:JVM 内存分布/内存结构?栈和堆的区别?堆的结构?为什么有两个 survivor 区?
    • 二面:Eden 和 Survivor 的比例分配
  • 小米
    • jvm 内存分区,为什么要有新生代和老年代
  • 字节跳动
    • 二面:Java 的内存分区
    • 二面:讲讲 jvm 运行时数据区
    • 什么时候对象会进入老年代?
  • 京东
    • JVM 的内存结构,Eden 和 Survivor 比例。
    • JVM 内存为什么要分成新生代,老年代,持久代。新生代中为什么要分成 Eden 和 Survivor。
  • 天猫
    • 一面:JVM 内存模型以及分区,需要详细到每个区放什么。
    • 一面:JVM 的内存模型,Java8 做了什么修改
  • 拼多多
    • JVM 内存分哪几个区,每个区的作用是什么?
  • 美团
    • Java 内存分配
    • jvm 的永久代中会发生垃圾回收吗?
    • 一面:jvm内存分区,为什么要有新生代和老年代?