JVM 堆的那些琐事

咋废话少说，直接进入重点 😃😃😃

堆

一、堆（Heap）的核心概述

image-20220327114401347

一、堆的核心概述

  • 一个JVM实例只存在一个堆内存，堆也是Java内存管理的核心区域。
  • Java堆区在JVM启动的时候即被创建，其空间大小也就确定了，是JVM管理的最大一块内存空间。堆内存的大小是可以调节的。
  • 《Java虚拟机规范》规定，堆可以处理物理上不连续的内存空间中，但在逻辑上它应该被视为连续的。
  • 所有的线程共享Java堆，在这里还可以划分线程私有的缓冲区（Thread Local Allocation Buffer, TLAB)。
  • 《Java虚拟机规范》中对Java堆的描述是：所有的对象实例以及数组都应当在运行时分配在堆上，“几乎”所有的对象实例都在这里分配内存。
  • 数组和对象可能永远不会存储在栈上，因为栈帧中保存引用，这个引用指向对象或者数组在堆中的位置。
  • 在方法结束后，堆中的对象不会马上被移除，仅仅在垃圾收集的时候才会被移除。
  • 堆，是GC（Garbage Collection, 垃圾收集器）执行垃圾回收的重点区域。
image-20220327114407903

二、堆的核心概述：内存细分

现代垃圾收集器大部分都基于分代收集理论设计，堆空间细分为：

Java 7及之前堆内存逻辑上分为三部分：新生区+养老区+永久区

  • Young Generation Space 新生区 Young/New
    • 又被划分为Eden区和Survivor区
  • Tenure generation space 养老区 Old/Tenure
  • Permanent Space 永久区 Perm

Java 8 及之后堆内存逻辑上分为三部分：新生区+养老区+元空间

  • Young Generation Space 新生区 Young/New
    • 又被划分为Eden区和Survivor区
  • Tenure generation space 养老区 Old/Tenure
  • Meta Space 元空间 Meta

约定：新生区 = 新生代 = 年轻代 养老区 = 老年区 = 老年代 永久区 = 永久代

三、堆的内部结构

image-20220327114415132

二、设置堆内存大小与OOM

一、堆空间大小的设置

Java堆区用于存储Java对象实例，那么堆的大小在JVM启动时就已经设定好了，大家可以通过选项“-Xmx" 和 "-Xms" 来进行设置。

  • "-Xms" 用于表示堆区的起始内存，等价于 -XX：InitialHeapSize
  • "-Xmx" 则用于表示堆区的最大内存，等价于 -XX：MaxHeapSize

一旦堆区中的内存大小超过“-Xmx" 所指定的最大内存时，将会抛出OutOfMemoryError异常。

通常会将 -Xms 和 -Xmx两个参数配置相同的值，其目的是为了能够在java垃圾回收机制清理完堆区后不需要重新分隔计算堆区的大小，从而提高性能。

默认情况下，初始内存大小：物理电脑内存大小 / 64, 最大内存大小：物理电脑内存带下 / 4。

二、OutOfMemory举例

public class OOMTest {
    public static void main(String[] args) {
        ArrayList<Picture> list = new ArrayList<>();
        while (true) {
            try  {
                Thread.sleep(20);
            } catch (InterruptedException e) {
                e.printStackTrace();
            }
            List.add(new Picture(new Random().nextInt(1024 * 1024)));
        }
    }
}

Exception in thread "main" java.lang.OutOfMemoryError:Java heap space
	at....

三、年轻代与老年代

存储在JVM中的Java对象可以被划分为两类：

  • 一类是生命周期较短的瞬时对象，这类对象的创建和消亡都非常迅速
  • 另外一类的生命周期却非常长，在某些极端的情况下还能够与JVM的生命周期保持一致

Java 堆区进一步细分的话，可以划分为年轻代（YoungGen）和老年代（OldGen)，其中年轻代又可以换分为 Eden 空间、Survivor0 和 Survivor1 空间（有时也叫做 from 区、to 区）。

新生代占 1/3、老年代占2/3。其中Eden占新生代的8/10, from区和 to 区各占1/10

配置新生代与老年代在对结构的占比：

  • 默认 -XX: NewRaio = 2, 表示新生代占1， 老年代占2， 新生代占整个堆的 1/3
  • 可以修改 -XX: NewRatio = 4, 表示新生代占1， 老年代占4， 新生代占整个堆的1/5

在HotSpot中，Eden空间和另外两个Survivor空间缺省所占的比例是 8:1:1，当然开发人员可以通过选项“-XX:SurvivorRatio" 调整这个空间比例。比如：-XX：SurvivorRatio = 8。

几乎所有的Java对象都是在Eden区被 new 出来的。

绝大部分的Java对象的销毁都在新生代进行了，IBM公司的专门研究标明，新生代中80%的对象都是“朝生夕死”的。

可以使用选项“-Xmn”设置新生代最大内存大小，这个参数一般使用默认值就可以了。

四、图解对象分配过程

一、对象分配过程：概述

为新对象分配内存时一键非常严谨和复杂的任务, JVM的设计者们不仅需要考虑内存如何分配、在哪里分配等问题，并且由于内存分配算法与内存回收算法密切相关，所以还需要考虑GC执行完内存回收后是否会在内存空间中产生内存碎片。

new 的对象先放在伊甸园区，此区有大小限制。当伊甸园区的空间填满时，程序又需要创建对象，JVM的垃圾回收器将对伊甸园区进行垃圾回（Minor GC）， 将伊甸园区中的不再被其他对象所引用的对象（垃圾）进行销毁，再加载新的对象放到伊甸园区。然后将伊甸园中的剩余对象移动到幸存者0区。

如果再次触发垃圾回收，此时上次幸存先来的放到幸存者0区的，如果没有回收，就会放到幸存者1区。如果再次垃圾回收，此时会重新放到幸存者0区，如此反复。

啥时候能去养老区呢？可以设置次数。默认是15次。可以设置参数：-XX: MaxTenuringThreshold= 进行设置。在养老区，相对悠闲。当养老区内存不足时，再次触发GC:Major GC，进行养老区的内存清理。

若养老区执行了Major GC之后发现依然无法进行对象的保存，就会产生OOM。

java.lang.OutOfMemoryError：Java Heap space

二、对象分配过程

总结：

  • 针对幸存者s0, s1区的总结：复制之后又交换，谁空谁是 to。
  • 关于垃圾回收：频繁在新生区收集，很少在养老区收集，几乎不在永久区/元空间收集。
image-20220327114427882

三、常用调优工具

  • JDK命令行
  • Eclipse：Memory Analyzer Tool
  • Jconsole
  • VisualVM
  • Jprofiler
  • Java Flight Recorder
  • GCViewer
  • GC Easy

五、Minor GC、Major GC 与 Full GC

JVM在进行GC时，并非每次对应上面三个内存（新生代、老年代； 方法区）区域一起回收的，大部分时候回收的都是指新生代。

针对HotSpot VM的实现，它里面的GC按照回收区域又分为两大种类型：一种是部分收集（Partial GC），一种是整堆收集（Full GC)

部分收集：不是完整收集整个Java堆的垃圾收集。其中又分为：

  • 新生代（Minor GC/ Young GC）：只是新生代的垃圾收集
  • 老年代收集（Major GC / Old GC）：只是老年代的垃圾收集
    • 目前，只有CMS GC会有单独收集老年代的行为。
    • 注意，很多时候Major GC 会和Full GC混淆使用，需要具体分辨是老年代回收还是整堆回收。
  • 混合收集（Mixed GC）：收集整个新生代以及部分老年代垃圾收集。
    • 目前，只有G1 GC会有这种行为。

整堆收集（Full GC）：收集整个java堆和方法区的垃圾收集。

年轻代GC（Minor GC）触发机制：

  • 当年轻代空间不足时，就会触发Minor GC，这里的年轻代满指的是Eden代满，Survivor满不会引发GC。（每次 Minor GC 会清理年轻代的内存）。
  • 因为Java对象大多都具备朝生夕灭的特性，所以Minor GC非常频繁，一般回收速度也比较快。
  • Minor GC 会引发STW，暂停其他用户的线程，等垃圾回收结束，用户线程才恢复运行。

老年代GC（Major GC/ Full GC）触发机制：

  • 指发生在老年代的GC，对象从老年代消失时，我们说“Major GC”或“Full GC"发生了。
  • 出现了Major GC, 经常会伴随至少一次的Minor GC （但非绝对的，在Parallel Scavenge 收集器的收集策略里就有直接进行Major GC的策略选择过程）。也就是在老年代空间不足时，会先尝试触发Minor GC 。如果之后空间还不足，则触发Major GC
  • Major GC的速度一般会比Minor GC慢10倍以上，STW的时间更长。
  • 如果Major GC之后，内存还不足，就报OOM了。

Full GC 触发机制：

  • 调用System.gc()时，系统建议执行Full GC，但是不必然执行
  • 老年代空间不足
  • 方法区空间不足
  • 通过Minor GC 后进入老年代的可用内存
  • 由于Eden区、survivor space0(From Space) 区向survivor space1（To Space)区复制时，对象大小大于To Space可用内存，则把该对象转存到老年代，且老年代的可用内存小于该对象大小。

说明：full gc是开发或调优中尽量要避免的。这样暂停时间会短一些。

六、堆空间分代思想

为什么需要把Java堆分代？不分代就不能正常工作了吗？

经研究，不同对象的生命周期不同。70%~90%的对象是临时对象。

  • 新生代：有Eden、两块大小相同的Survivor（又称为from/to, s0/s1）构成，to总为空。
  • 老年代：存放新生代中经历多次GC仍然存活的对象。

其实不分代完全可以，分代的唯一理由就是优化GC性能。如果没有分代，那所有的对象都在一块，就如同把一个学校的人都关在一个教室。GC的时候找到哪些对象没用，这就就会对堆的所有区域进行扫描。而很多对象都是朝生夕死的，如果分代的话，把新创建的对象放到某一地方，当GC的时候先把这块存储“朝生夕死”对象的区域进行回收，这样就会腾出很大的空间出来。

七、内存分配策略

如果对象在Eden出生并经过一次MinorGC后仍然存活，并且能被Survivor容纳的话，将被移动到Survivor空间中，并将对象年龄设置为1。对象在Survivor区中每熬过一次MinorGC ，年龄就增加1岁，当他的年龄增加到一定程度（默认15岁，其实每个JVM、每个GC都有所不同）时，就会被晋升到老年代中。

对象晋升老年代的年龄阈值，可以通过选项 -XX:MaxTenuringThreshold来设置。

针对不同年龄段的对象分配原则如下：

  • 优先分配到 Eden 区域：大多数情况下，对象在新生代Eden区中分配。当Eden区没有足够空间进行分配时，虚拟机将发起一次Minor GC。

  • 大对象直接分配到老年代：HotSpot虚拟机提供了-XX：PretenureSizeThreshold 参数，指定大于该设置值的对象直接在老年代分配，这样做的目的就是避免在 Eden 区及两个 Survivor 区之间来回复制，产生大量的内存复制操作。

  • 长期存活的对象分配到老年代：对象通常在Eden区里诞生，如果经过第一 次Minor GC 后仍然存活，并且能被Survivor 容纳的话，该对象会被移动到 Survivor 空间中，并且将其对象年龄设为1岁。对象在 Survivor 区中每熬过一次 Minor GC，年龄就增加1岁，当它的年龄增加到一定程度（默认为15），就会被晋升到老年代中。可以通过参数-XX：MaxTenuringThreshold设置。

  • 动态对象年龄判断：如果Survivor区中年龄相同的所有对象大小总和大于Survivor空间的一半，年龄大于或等于该年龄的对象可以直接进入老年代，无需等到 MaxTenuringThreshold 中要求的年龄。

  • 空间分配担保：在发生Minor GC之前，虚拟机必须先检查老年代最大可用的连续空间是否大于新生代所有对象总空间，如果这个条件成立，那这一次Minor GC可以确保是安全的。如果不成立，则虚拟机会先查看 -XX：HandlePromotionFailure 参数的设置值是否允许担保失败（Handle Promotion Failure）；如果允许，那会继续检查老年代最大可用的连续空间是否大于历次晋升到老年代对象的平均大小，如果大于，将尝试进行一次Minor GC，尽管这次Minor GC是有风险的；如果小于，或者-XX：HandlePromotionFailure 设置不允许冒险，那这时就要改为进行一次Full GC。

八、为对象分配内存：TLAB

一、为什么有TLAB

堆区是线程共享区域，任何线程都可以访问到堆区中的共享数据。由于对象实例的创建在JVM中非常频繁，因此在并发环境下从堆区中划分内存空间是线程不安全的，为了避免多个线程作同一地址，需要使用加锁机制，进而影响分配速度。

二、什么是TLAB

从内存模型而不是垃圾收集的角度，对Eden区域继续进行划分，JVM 为每个线程划分一个私有缓存区域，它包含在 Eden 空间内。

多线程同时分配内存，使用 TLAB （Thread Local Allocation Buffer）可以避免一系列的非线程安全问题，同时还能够提升内存分配的吞吐量，因此我们可以将这种内存分配方式称为快速分配策略。

OpenJDK 衍生出来的 JVM 都提供了 TLAB 的设计。

image-20220327114435294

三、TLAB的再说明

尽管不是所有的对象实例都能够在TLAB中成功分配内存，但JVM确实是将TLAB作为内存分配的首选。

在程序中，开发人员可以通过选项”-XX"UseTLAB“ 设置是否开启TLAB空间。

默认情况下，TLAB空间的内存非常小，仅占有整个Eden空间的1%， 当然我们可以通过选项“-XX：TLABWasteTargetPercent" 设置TLAB空间所占Eden空间的百分比大小。

一旦对象在TLAB空间分配内存失败时，JVM就会尝试着通过使用加锁机制确保操作的原子性，从而直接在Eden空间中分配内存。

九、堆空间的参数设置

  • -XX：+PrintFlagsInitial : 查看所有的参数默认初始值
  • -XX：+PrintFlagsFinal: 查看所有的参数的最终值（可能会存在修改，不再是初始值）
  • -Xms：初始堆空间内存（默认为物理内存的1/64）
  • -Xmx：最大堆空间内存（默认为物理内存的 1/4）
  • -Xmn：设置新生代的大小。（初始值及最大值）
  • -XX：NewRatio：设置新生代与老年代在对结构的占比
  • -XX：SurvivorRatio：设置新生代的Eden 和 S0/S1空间的比例
  • -XX：MaxTenuringThreshold：设置新生代的最大年龄
  • -XX：+PrintGCDetails：输出详细的GC处理日志。
    • 打印gc简要信息：① -XX：+PrintGC ② -verbose:gc
  • -XX:HandlePromotionFailure：是否设置空间分配担保。
  • 在发生Minor GC之前，虚拟机会检查老年代最大可用的连续空间是否大于新生代所有对象的总空间。
    • 如果大于，则此次Minor GC 是安全的
    • 如果小于，则虚拟机会查看-XX：HandlePromotionFailure设置值是否允许担保失败。
    • 如果HandlePromotionFaulure=true, 那么会继续检查老年代最大可用连续空间是否大于历次晋升到老年代的对象的平均大小。
      • 如果大于，则尝试进行一次Minor GC，但这次Minor GC 依然是由风险的。
      • 如果小于，则改为进行一次Full GC 。
    • 如果HandlePromotionFailure=false，则改为进行一次Full GC。
  • 在JDK6 Update24之后，HandlePromotionFailure 参数不会再影响到虚拟机的空间分配担保策略，观察OpenJDK中的源码变化，虽然源码中还定义了HandlePromotionFailure 参数，但是在代码中已经不会再使用它。JDK6 Update24之后的规则变为只要老年代的连续空间大于新生代对象总大小或者历次晋升的平均大小就会进行Minor GC，否则将进行Full GC。

十、堆是分配对象存储的唯一选择吗

一、堆是分配对象存储的唯一选择吗

随着 JIT 编译器的发展与逃逸技术逐渐成熟，栈上分配、标量替换优化技术将会导致一些微妙的变化，所有的对象都分配到堆上也渐渐变的不那么“绝对”了。

在Java虚拟机中，对象是在 Java 堆中分配内存的，这是一个普遍的常识。但是，有一种特殊情况，那就是经过逃逸分析（Escape Analysis）后发现，一个对象并没有逃逸出方法的话，那么就可能被优化成栈上分配。这样就无需在堆上分配内存。这样就无需在堆上分配内存，也无需进行垃圾回收了。这也是最常见的堆外存储技术。

此外，前面提到的基于 OpenJDK 深度定制的 TaoBao VM，其中创新的 GCIH（GC invisible heap）技术实现 off-heap ,将生命周期较长的 Java 对象从 heap 中移至 heap 外，并且 GC 不管 GCIH 内部的 Java 对象，以此达到降低 GC 的回收频率和提升 GC 的回收效率的目的。

二、逃逸分析概述

如何将堆上的对象分配到栈，需要使用逃逸分析手段。这是一种可以有效减少Java程序中同步负载和内存堆分配压力的跨函数全局数据流分析算法。

通过逃逸分析，Java Hotspot 编译器能够分析出一个新的对象的引用的使用范围从而决定是否要将这个对象分配到堆上。

逃逸分析的基本行为就是分析对象动态作用域：

  • 当一个对象在方法中被定义后，对象只在方法内部使用，则认为没有发生逃逸。
  • 当一个对象在方法中被定义后，它被外部方法所引用，则认为发生逃逸。例如作为调用参数传递到其他地方中。
public void method() {
	V v = new V();
	// use v
	// ...
	v = null
}

没有发生逃逸的对象，则可以分配到栈上，随着方法执行的结束，栈空间就被移除。

public static StringBuffer createStringBuffer(String s1, String s2) {
	StringBuffer sb = new StringBuffer();
	sb.append(s1);
	sb.append(s2);
	return sb;
}

// 上述代码如果想要StringBuffer sb不逃出方法，可以这样写。
public static String createStringBuffer(String s1, String s2) {
	StringBuffer sb = new StringBuffer();
	sb.append(s1);
	sb.append(s2);
	return sb.toString();
}

三、参数设置

在 JDK 6u23版本之后，HotSpot中默认就已经开启了逃逸分析。如果使用的是较早的版本，开发人员则可以通过下面选修设置：

  • 选项“ -XX：+DoEscapeAnalysis"显示开启逃逸分析
  • 通过选项“ -XX：+PrintEscapeAnalysis”查看逃逸分析的筛选结果。

结论：开发中使用局部变量，就不要定义在方法外。

四、逃逸分析：代码优化

使用逃逸分析，编译器可以对代码做如下优化：

  • 栈上分配，将堆分配转化栈分配，如果一个对象在子程序中分配，要使指向该对象的指针永远不会逃逸，对象可能是栈分配的候选，而不是堆分配。
  • 同步省略，如果一个对象被发现只能从一个线程被访问到，那么对于这个对象的操作可以不考虑同步。
  • 分离对象或标量替换。有的对象可能不需要作为一个连续的内存结构存在也可以被访问到，那么对象的部分（或全部）可以不存储在内存，而是存储在CPU寄存器中。

五、代码优化之栈上分配

JIT 编译器在编译期间根据逃逸分析的结果，发现如果一个对象并没有逃逸出方法的话，就可能被优化成栈上分配。分配完成后没继续在调用栈内执行，最后线程结束，栈空间被回收，局部变量对象也被回收。这样就无需进行垃圾回收了。

常见的栈上分配的场景：成员变量赋值、方法返回值、实例引用传递。

六、代码优化之同步省略（消除）

线程同步的代价是相当高的，同步的后果是降低并发性和性能。

在动态编译同步块的时候，JIT编译器可以借助逃逸分析来判断同步块所使用的锁对象是否只能被一个线程访问而没有被发布到其他线程。如果没有，那么 JIT 编译器在编译这个同步块的时候就会取消对这部分代码的同步。这样就能大大提高并发性和性能。这个取消同步的过程就叫同步省略，也叫锁消除。

如以下代码

public void f() {
    Object hollis = new Object();
    synchronized(hollis) {
        System.out.println(hollis);
    }
}

// 代码中会对hollis这个对象进行加锁，但是hollis对象的声明周期只在f()方法中，并不会被其他线程所访问到，所以在JIT编译阶段就会被优化掉。优化成：
public void f() {
    Object hollis = new Object();
    System.out.println(hollis);
}

七、代码优化之标量替换

标量（Scanlar）是指一个无法再分解成更小的数据的数据。Java中的原始数据类型就是标量。相对的，那些还可以分解的数据叫做聚合量（Aggregate），Java中的对象就是聚合量，因为他可以分解成其他聚合量和标量。

在JIT阶段，如果经过逃逸分析，发现一个对象不会被外界访问的话，那么经过JIT优化，就会把这个对象拆解若干个其中包含的若干个成员变量来代替。这个过程就是标量替换。

public static void main(String[] args) {
    alloc();
}
private static void alloc() {
    Point point  =new Point(1, 2);
    System.out.println("point.x=" + point.x + "; point.y" + y);
}
class Point{
    private int x;
    private int y;
}

以上代码，经过标量替换之后，就会变成：

private static void alloc() {
    int x = 1;
    int y = 2;
    System.out.print("point.x=" + x + "; point.y=" + y);
}

可以看到，Point这个聚合量经过逃逸分析后，发现他并没有逃逸，就被替换成两个标量了。那么标量替换有什么好处呢？就是可以大大减少堆内存的占用。因为一旦不需要创建对象了，那么就不再需要分配堆内存了。

标量替换为栈上分配提供了很好的基础。

标量替换参数设置：

  • 参数 -XX: +EliminateAllocations：开启了标量替换（默认打开），允许将对象打撒分配在栈上。

上述代码在主函数中进行了1亿次alloc。调用进行对象创建，由于User对象实例需要占据约16字节的空间，因此累计分配空间达到将近1.5G。如果堆空间小于这个值，就必然会发生GC。使用如下参数运行上述代码：

-server -Xmx100m -Xms -XX:+DoEscapeAnalysis -XX:+PrintGC -XX:+EliminateAllcations

这里使用参数如下：

  • 参数-server：启动Server模式，因为在Server模式下，才可以启动逃逸分析。
  • 参数 -XX：+DoEscapeAnalysis：启用逃逸分析
  • 参数-Xmx10m: 指定了堆空间最大为10MB
  • 参数-XX：+PrintGC: 将打印GC日志。
  • 参数 -XX：+EliminateAllocations: 开启了标量替换（默认打开），允许将对象打散分配在栈上，比如对象拥有id和name两个字段，那么这两个字段将会被视为两个独立的局部变量进行分配。

八、逃逸分析小结：逃逸分析并不成熟

关于逃逸分析的论文在1999年就已经发表，但直到JDK1.6才有实现，而且这项技术到如今也并不是成熟的。

其根本原因就是无法保证逃逸分析的性能消耗一定能高于他的消耗。虽然经过逃逸分析可以做到标量替换、栈上分配、和锁消除。但是逃逸分析自身也是需要进行一系列复杂的分析的，这其实也是一个相对耗时的过程。

一个极端的例子，就是经过逃逸分析之后，发现没有一个对象是不逃逸的。那这个逃逸分析的过程就白白浪费掉了。

虽然这项技术并不成熟，但是它也是即使编译器优化技术中的一个十分重要的手段。

注意到有一些观点，认为通过逃逸分析，JVM会在栈上分配那些不会逃逸的对象，这在理论上是可行的，但是取决于JVM设计者的选择。Oracle Hotspot JVM中并未这么做，这一点在逃逸分析相关的文档里已经说明了，所以可以明确所有的对象都是创建在堆上的。

目前很多书籍还是基于JDK 7以前的版本，JDK已经发生了很大变化，intern字符串的缓存和静态变量曾经都被分配在永久代上面，而永久代已经被元数据区取代，而是直接在堆上分配，所以这一点同样符合前面 一点的结论：对象实例都是分配在堆上的。

十一、小结

年轻代是对象的诞生、成长、消亡的区域，一个对象在这里产生、应用，最后被垃圾回收器收集、结束生命。

老年代放置长生命周期的对象，通常都是从Survivor区域筛选拷贝过来的Java对象。当然，也有特殊情况，我们知道普通的对象会被分配在TLAB上；如果对象较大，JVM会试图直接分配在Eden其他位置上；如果对象太大，完全无法在新生代找到足够长的连续空闲空间，JVM就会直接分配到老年代。

当GC只发生在年轻代中，回收年轻代对象的行为被称为MinorGC。当GC发生在老年代则被称为MajorGC或者FullGC。一般的，MinorGC发生的频率要比MajorGC高很多，即老年代中垃圾回收发生的频率将大大低于年轻代。

posted @ 2022-06-07 19:43  Maple~  阅读(37)  评论(0)  编辑  收藏  举报