Android GC 原理探究

导语

想写一篇关于 android GC 的想法来源于追查一个魅族手机图片滑动卡顿问题，由于不断的 GC 导致的丢帧卡顿的问题让我们想了很多方案去解决，所以就打算详细的看看内存分配和 GC 的原理，为什么会不断的 GC，GC ALLOC 和 GC COCURRENT 有什么区别，能不能想办法扩大堆内存减少 GC 的频次等等。

1、JVM 内存回收机制

1.1 回收算法

标记回收算法（Mark and Sweep GC）

从”GC Roots”集合开始，将内存整个遍历一次，保留所有可以被 GC Roots 直接或间接引用到的对象，而剩下的对象都当作垃圾对待并回收，这个算法需要中断进程内其它组件的执行并且可能产生内存碎片

复制算法 (Copying）

将现有的内存空间分为两快，每次只使用其中一块，在垃圾回收时将正在使用的内存中的存活对象复制到未被使用的内存块中，之后，清除正在使用的内存块中的所有对象，交换两个内存的角色，完成垃圾回收。

标记-压缩算法 (Mark-Compact)

先需要从根节点开始对所有可达对象做一次标记，但之后，它并不简单地清理未标记的对象，而是将所有的存活对象压缩到内存的一端。之后，清理边界外所有的空间。这种方法既避免了碎片的产生，又不需要两块相同的内存空间，因此，其性价比比较高。

分代

将所有的新建对象都放入称为年轻代的内存区域，年轻代的特点是对象会很快回收，因此，在年轻代就选择效率较高的复制算法。当一个对象经过几次回收后依然存活，对象就会被放入称为老生代的内存空间。对于新生代适用于复制算法，而对于老年代则采取标记-压缩算法。

1.2 复制和标记-压缩算法的区别

乍一看这两个算法似乎并没有多大的区别，都是标记了然后挪到另外的内存地址进行回收，那为什么不同的分代要使用不同的回收算法呢？

其实 2 者最大的区别在于前者是用空间换时间后者则是用时间换空间。

前者的在工作的时候是不没有独立的“mark”与“copy”阶段的，而是合在一起做一个动作，就叫 scavenge（或 evacuate，或者就叫 copy）。也就是说，每发现一个这次收集中尚未访问过的活对象就直接 copy 到新地方，同时设置 forwarding pointer。这样的工作方式就需要多一份空间。

后者在工作的时候则需要分别的 mark 与 compact 阶段，mark 阶段用来发现并标记所有活的对象，然后 compact 阶段才移动对象来达到 compact 的目的。如果 compact 方式是 sliding compaction，则在 mark 之后就可以按顺序一个个对象“滑动”到空间的某一侧。因为已经先遍历了整个空间里的对象图，知道所有的活对象了，所以移动的时候就可以在同一个空间内而不需要多一份空间。

所以新生代的回收会更快一点，老年代的回收则会需要更长时间，同时压缩阶段是会暂停应用的，所以给我们应该尽量避免对象出现在老年代。

2、Dalvik 虚拟机

2.1 java 堆

Java 堆实际上是由一个 Active 堆和一个 Zygote 堆组成的，其中，Zygote 堆用来管理 Zygote 进程在启动过程中预加载和创建的各种对象，而 Active 堆是在 Zygote 进程 fork 第一个子进程之前创建的。以后启动的所有应用程序进程是被 Zygote 进程 fork 出来的，并都持有一个自己的 Dalvik 虚拟机。在创建应用程序的过程中，Dalvik 虚拟机采用 COW 策略复制 Zygote 进程的地址空间。

COW 策略：一开始的时候（未复制 Zygote 进程的地址空间的时候），应用程序进程和 Zygote 进程共享了同一个用来分配对象的堆。当 Zygote 进程或者应用程序进程对该堆进行写操作时，内核就会执行真正的拷贝操作，使得 Zygote 进程和应用程序进程分别拥有自己的一份拷贝，这就是所谓的 COW。因为 copy 是十分耗时的，所以必须尽量避免 copy 或者尽量少的 copy。

为了实现这个目的，当创建第一个应用程序进程时，会将已经使用了的那部分堆内存划分为一部分，还没有使用的堆内存划分为另外一部分。前者就称为 Zygote 堆，后者就称为 Active 堆。这样只需把 zygote 堆中的内容复制给应用程序进程就可以了。以后无论是 Zygote 进程，还是应用程序进程，当它们需要分配对象的时候，都在 Active 堆上进行。这样就可以使得 Zygote 堆尽可能少地被执行写操作，因而就可以减少执行写时拷贝的操作。在 Zygote 堆里面分配的对象其实主要就是 Zygote 进程在启动过程中预加载的类、资源和对象了。这意味着这些预加载的类、资源和对象可以在 Zygote 进程和应用程序进程中做到长期共享。这样既能减少拷贝操作，还能减少对内存的需求。

2.2 和 GC 有关的一些指标

记得我们之前在优化魅族某手机的 gc 卡顿问题时，发现他很容易触发 GC_FOR_MALLOC，这个 GC 类别后续会说到，是分配对象内存不足时导致的。可是我们又设置了很大的堆 Size 为什么还会内存不够呢，这里需要了解以下几个概念：分别是 Java 堆的起始大小（Starting Size）、最大值（Maximum Size）和增长上限值（Growth Limit）。

在启动 Dalvik 虚拟机的时候，我们可以分别通过-Xms、-Xmx和-XX:HeapGrowthLimit三个选项来指定上述三个值，以上三个值分别表示表示

  • Starting Size： Dalvik 虚拟机启动的时候，会先分配一块初始的堆内存给虚拟机使用。
  • Growth Limit：是系统给每一个程序的最大堆上限,超过这个上限，程序就会 OOM
  • Maximum Size：不受控情况下的最大堆内存大小，起始就是我们在用 largeheap 属性的时候，可以从系统获取的最大堆大小

同时除了上面的这个三个指标外，还有几个指标也是值得我们关注的，那就是堆最小空闲值（Min Free）、堆最大空闲值（Max Free）和堆目标利用率（Target Utilization）。假设在某一次 GC 之后，存活对象占用内存的大小为 LiveSize，那么这时候堆的理想大小应该为(LiveSize / U)。但是(LiveSize / U)必须大于等于(LiveSize + MinFree)并且小于等于(LiveSize + MaxFree)，每次 GC 后垃圾回收器都会尽量让堆的利用率往目标利用率靠拢。所以当我们尝试手动去生成一些几百 K 的对象，试图去扩大可用堆大小的时候，反而会导致频繁的 GC，因为这些对象的分配会导致 GC，而 GC 后会让堆内存回到合适的比例，而我们使用的局部变量很快会被回收理论上存活对象还是那么多，我们的堆大小也会缩减回来无法达到扩充的目的。 与此同时这也是产生 CONCURRENT GC 的一个因素，后文我们会详细讲到。

2.3 GC 的类型

  • GC_FOR_MALLOC: 表示是在堆上分配对象时内存不足触发的 GC。
  • GC_CONCURRENT: 当我们应用程序的堆内存达到一定量，或者可以理解为快要满的时候，系统会自动触发 GC 操作来释放内存。
  • GC_EXPLICIT: 表示是应用程序调用 System.gc、VMRuntime.gc 接口或者收到 SIGUSR1 信号时触发的 GC。
  • GC_BEFORE_OOM: 表示是在准备抛 OOM 异常之前进行的最后努力而触发的 GC。

实际上，GC_FOR_MALLOC、GC_CONCURRENT 和 GC_BEFORE_OOM 三种类型的 GC 都是在分配对象的过程触发的。而并发和非并发 GC 的区别主要在于前者在 GC 过程中，有条件地挂起和唤醒非 GC 线程，而后者在执行 GC 的过程中，一直都是挂起非 GC 线程的。并行 GC 通过有条件地挂起和唤醒非 GC 线程，就可以使得应用程序获得更好的响应性。但是同时并行 GC 需要多执行一次标记根集对象以及递归标记那些在 GC 过程被访问了的对象的操作，所以也需要花费更多的 CPU 资源。后文在 Art 的并发和非并发 GC 中我们也会着重说明下这两者的区别。

2.4 对象的分配和 GC 触发时机

  1. 调用函数 dvmHeapSourceAlloc 在 Java 堆上分配指定大小的内存。如果分配成功，那么就将分配得到的地址直接返回给调用者了。函数 dvmHeapSourceAlloc 在不改变 Java 堆当前大小的前提下进行内存分配，这是属于轻量级的内存分配动作。
  2. 如果上一步内存分配失败，这时候就需要执行一次 GC 了。不过如果 GC 线程已经在运行中，即 gDvm.gcHeap->gcRunning 的值等于 true，那么就直接调用函数 dvmWaitForConcurrentGcToComplete 等到 GC 执行完成就是了。否则的话，就需要调用函数 gcForMalloc 来执行一次 GC 了，参数 false 表示不要回收软引用对象引用的对象。
  3. GC 执行完毕后，再次调用函数 dvmHeapSourceAlloc 尝试轻量级的内存分配操作。如果分配成功，那么就将分配得到的地址直接返回给调用者了。
  4. 如果上一步内存分配失败，这时候就得考虑先将 Java 堆的当前大小设置为 Dalvik 虚拟机启动时指定的 Java 堆最大值，再进行内存分配了。这是通过调用函数 dvmHeapSourceAllocAndGrow 来实现的。
  5. 如果调用函数 dvmHeapSourceAllocAndGrow 分配内存成功，则直接将分配得到的地址直接返回给调用者了。
  6. 如果上一步内存分配还是失败，这时候就得出狠招了。再次调用函数 gcForMalloc 来执行 GC。参数 true 表示要回收软引用对象引用的对象。
  7. GC 执行完毕，再次调用函数 dvmHeapSourceAllocAndGrow 进行内存分配。这是最后一次努力了，成功与事都到此为止。

示例图如下：

通过这个流程可以看到，在对象的分配中会导致 GC，第一次分配对象失败我们会触发 GC 但是不回收 Soft 的引用，如果再次分配还是失败我们就会将 Soft 的内存也给回收，前者触发的 GC 是 GC_FOR_MALLOC 类型的 GC，后者是 GC_BEFORE_OOM 类型的 GC。而当内存分配成功后，我们会判断当前的内存占用是否是达到了 GC_CONCURRENT 的阀值，如果达到了那么又会触发 GC_CONCURRENT。

那么这个阀值又是如何来的呢，上面我们说到的一个目标利用率，GC 后我们会记录一个目标值，这个值理论上需要再上述的范围之内，如果不在我们会选取边界值做为目标值。虚拟机会记录这个目标值，当做当前允许总的可以分配到的内存。同时根据目标值减去固定值（200~500K),当做触发 GC_CONCURRENT 事件的阈值。

2.5 回收算法和内存碎片

主流的大部分 Davik 采取的都是标注与清理（Mark and Sweep）回收算法，也有实现了拷贝 GC 的，这一点和 HotSpot 是不一样的，具体使用什么算法是在编译期决定的，无法在运行的时候动态更换。如果在编译 dalvik 虚拟机的命令中指明了”WITH_COPYING_GC”选项，则编译”/dalvik/vm/alloc/Copying.cpp”源码 – 此是 Android 中拷贝 GC 算法的实现，否则编译”/dalvik/vm/alloc/HeapSource.cpp” – 其实现了标注与清理 GC 算法。

由于 Mark and Sweep 算法的缺点，容易导致内存碎片，所以在这个算法下，当我们有大量不连续小内存的时候，再分配一个较大对象时，还是会非常容易导致 GC，比如我们在该手机上 decode 图片，具体情况如下：

所以对于 Dalvik 虚拟机的手机来说，我们首先要尽量避免掉频繁生成很多临时小变量（比如说：getView，onDraw 等函数），另一个又要尽量去避免产生很多长生命周期的大对象。

3、ART 内存回收机制

3.1 Java 堆

ART 运行时内部使用的 Java 堆的主要组成包括 Image Space、Zygote Space、Allocation Space 和 Large Object Space 四个 Space，Image Space 用来存在一些预加载的类， Zygote Space 和 Allocation Space 与 Dalvik 虚拟机垃圾收集机制中的 Zygote 堆和 Active 堆的作用是一样的，

Large Object Space 就是一些离散地址的集合，用来分配一些大对象从而提高了 GC 的管理效率和整体性能，类似如下图：

在下文的 GC Log 中，我们也能看到在 art 的 GC Log 中包含了 LOS 的信息，方便我们查看大内存的情况。

3.2 GC 的类型

  • kGcCauseForAlloc ，当要分配内存的时候发现内存不够的情况下引起的 GC，这种情况下的 GC 会 stop world
  • kGcCauseBackground，当内存达到一定的阀值的时候会去出发 GC，这个时候是一个后台 gc，不会引起 stop world
  • kGcCauseExplicit，显示调用的时候进行的 gc，如果 art 打开了这个选项的情况下，在 system.gc 的时候会进行 gc
  • 其他更多

3.3 对象的分配和 GC 触发时机

由于 Art 下内存分配和 Dalvik 下基本没有任何区别，我直接贴图带过了。

3.4 并发和非并发 GC

Art 在 GC 上不像 Dalvik 仅有一种回收算法，Art 在不同的情况下会选择不同的回收算法，比如 Alloc 内存不够的时候会采用非并发 GC，而在 Alloc 后发现内存达到一定阀值的时候又会触发并发 GC。同时在前后台的情况下 GC 策略也不尽相同，后面我们会一一给大家说明。

非并发 GC

步骤 1. 调用子类实现的成员函数 InitializePhase 执行 GC 初始化阶段。

步骤 2. 挂起所有的 ART 运行时线程。

步骤 3. 调用子类实现的成员函数 MarkingPhase 执行 GC 标记阶段。

步骤 4. 调用子类实现的成员函数 ReclaimPhase 执行 GC 回收阶段。

步骤 5. 恢复第 2 步挂起的 ART 运行时线程。

步骤 6. 调用子类实现的成员函数 FinishPhase 执行 GC 结束阶段。

并发 GC

步骤 1. 调用子类实现的成员函数 InitializePhase 执行 GC 初始化阶段。

步骤 2. 获取用于访问 Java 堆的锁。

步骤 3. 调用子类实现的成员函数 MarkingPhase 执行 GC 并行标记阶段。

步骤 4. 释放用于访问 Java 堆的锁。

步骤 5. 挂起所有的 ART 运行时线程。

步骤 6. 调用子类实现的成员函数 HandleDirtyObjectsPhase 处理在 GC 并行标记阶段被修改的对象。。

步骤 7. 恢复第 4 步挂起的 ART 运行时线程。

步骤 8. 重复第 5 到第 7 步，直到所有在 GC 并行阶段被修改的对象都处理完成。

步骤 9. 获取用于访问 Java 堆的锁。

步骤 10. 调用子类实现的成员函数 ReclaimPhase 执行 GC 回收阶段。

步骤 11. 释放用于访问 Java 堆的锁。

步骤 12. 调用子类实现的成员函数 FinishPhase 执行 GC 结束阶段。

所以不论是并发还是非并发，都会引起 stopworld 的情况出现，并发的情况下单次 stopworld 的时间会更短，基本区别和。

3.5 Art 并发和 Dalvik 并发 GC 的差异

首先可以通过如下 2 张图来对比下

Dalvik GC：

Art GC：

Art 的并发 GC 和 Dalvik 的并发 GC 有什么区别呢，初看好像 2 者差不多，虽然没有一直挂起线程，但是也会有暂停线程去执行标记对象的流程。通过阅读相关文档可以了解到 Art 并发 GC 对于 Dalvik 来说主要有三个优势点：

1、标记自身

Art 在对象分配时会将新分配的对象压入到 Heap 类的成员变量 allocation_stack_ 描述的 Allocation Stack 中去，从而可以一定程度缩减对象遍历范围。

2、预读取

对于标记 Allocation Stack 的内存时，会预读取接下来要遍历的对象，同时再取出来该对象后又会将该对象引用的其他对象压入栈中，直至遍历完毕。

3、减少 Pause 时间

在 Mark 阶段是不会 Block 其他线程的，这个阶段会有脏数据，比如 Mark 发现不会使用的但是这个时候又被其他线程使用的数据，在 Mark 阶段也会处理一些脏数据而不是留在最后 Block 的时候再去处理，这样也会减少后面 Block 阶段对于脏数据的处理的时间。

3.6 前后台 GC

前台 Foreground 指的就是应用程序在前台运行时，而后台 Background 就是应用程序在后台运行时。因此，Foreground GC 就是应用程序在前台运行时执行的 GC，而 Background 就是应用程序在后台运行时执行的 GC。

应用程序在前台运行时，响应性是最重要的，因此也要求执行的 GC 是高效的。相反，应用程序在后台运行时，响应性不是最重要的，这时候就适合用来解决堆的内存碎片问题。因此，Mark-Sweep GC 适合作为 Foreground GC，而 Mark-Compact GC 适合作为 Background GC。

由于有 Compact 的能力存在，碎片化在 Art 上可以很好的被避免，这个也是 Art 一个很好的能力。

3.7 Art 大法好

总的来看，art 在 gc 上做的比 dalvik 好太多了，不光是 gc 的效率，减少 pause 时间，而且还在内存分配上对大内存的有单独的分配区域，同时还能有算法在后台做内存整理，减少内存碎片。对于开发者来说 art 下我们基本可以避免很多类似 gc 导致的卡顿问题了。另外根据谷歌自己的数据来看，Art 相对 Dalvik 内存分配的效率提高了 10 倍，GC 的效率提高了 2-3 倍。

4、GC Log

当我们想要根据 GC 日志来追查一些 GC 可能造成的卡顿时，我们需要了解 GC 日志的组成，不同信息代表了什么含义。

4.1 Dalvik GC 日志

dalvik 的日志格式基本如下：

D/dalvikvm: <GC_Reason> <Amount_freed>, <Heap_stats>, <Pause_time>, <Total_time>
  • gc_reason：就是我们上文提到的，是 gc_alloc 还是 gc_concurrent，了解到不同的原因方便我们做不同的处理。
  • amount_freed：表示系统通过这次 GC 操作释放了多少内存
  • Heap_stats：中会显示当前内存的空闲比例以及使用情况（活动对象所占内存 / 当前程序总内存）
  • Pause_time：表示这次 GC 操作导致应用程序暂停的时间。关于这个暂停的时间，在 2.3 之前 GC 操作是不能并发进行的，也就是系统正在进行 GC，那么应用程序就只能阻塞住等待 GC 结束。而自 2.3 之后，GC 操作改成了并发的方式进行，就是说 GC 的过程中不会影响到应用程序的正常运行，但是在 GC 操作的开始和结束的时候会短暂阻塞一段时间，所以还有后续的一个 total_time。
  • Total_time:表示本次 GC 所花费的总时间和上面的 Pause_time,也就是 stop all 是不一样的，卡顿时间主要看上面的 pause_time。

4.2 Art GC 日志

I/art: <GC_Reason> <Amount_freed>, <LOS_Space_Status>, <Heap_stats>, <Pause_time>, <Total_time>

基本情况和 Dalvik 没有什么差别，GC 的 Reason 更多了，还多了一个 OS_Space_Status

  • LOS_Space_Status：Large Object Space，大对象占用的空间，这部分内存并不是分配在堆上的，但仍属于应用程序内存空间，主要用来管理 bitmap 等占内存大的对象，避免因分配大内存导致堆频繁 GC。

写在最后：图片来源自网络，特别鸣谢老罗。

posted @ 2017-05-18 19:14  专注it  阅读(309)  评论(0)  编辑  收藏  举报