美文网首页程序员技术栈
【即插即用的硬干货】线上系统出现频繁 JVM FullGC 时,

【即插即用的硬干货】线上系统出现频繁 JVM FullGC 时,

作者: 编程小世界 | 来源:发表于2019-05-07 14:55 被阅读2次

背景

我们上线Java服务的时候需要对其配置一些JVM参数,如堆空间大小、虚拟机栈大小、垃圾回收算法。对于年轻代和老年代我们可以配置不同的垃圾回收算法。在一些对 rt 要求很高的场景,服务不能有长时间的卡顿, CMS 就可以运用于此场景。

Concurrent Mark Sweep ,是一款基于并发、使用标记清除算法的垃圾回收算法,只针对老年代进行垃圾回收。

CMS收集器工作时,GC工作线程和用户线程可以并发执行,以达到降低 STW 时间的目的。

开起VM选项 -XX:+UseConcMarkSweepGC ,表示对老年代的回收采用CMS。

前置知识

STW

首先,我们需要理清一个概念,即只有 标记 阶段才需要 STW 。

标记完成以后,需要清除的对象已经确定,无论此时是否产生新的垃圾,都不影响对这些对象的清理。也就是说, 清除 阶段是可以设计成和用户线程并发执行的。

JVM在暂停的时候,需要选准一个时机,由于JVM系统运行期间的复杂性,不可能做到随时暂停,因此引入了 安全点(safepoint) 的概念:程序只有在运行到安全点的时候,才可以暂停下来。

HotSpot 采用主动中断的方式,让执行线程在运行期轮询是否需要暂停的标志,若需要则中断挂起。

HotSpot 使用了几条短小精炼的汇编指令便可完成安全点轮询以及触发线程中断,因此对系统性能的影响几乎可以忽略不计。

可达性

可达性 是指,如果一个对象会被至少一个程序中的可达对象通过直接或间接的方式引用,则称该对象是 可达的 。

更详细地说,一个对象满足以下两个条件之一,即被判定为可达的。

本身是根对象 。根(root)是指由堆以外空间访问的对象。JVM会将以下对象标记为根:

虚拟机栈(栈帧中的本地变量表)中引用的对象;

方法区中的类静态属性引用的对象;

方法区中的常量引用的对象;

本地方法栈中JNI的引用对象

被一个可达的对象引用 。

CMS的几个阶段

CMS 将可达性分析分解成两个阶段:

仅扫描与根节点直接关联的对象; 

继续向下扫描完所有对象。

因此, 标记 阶段也被拆分成两个阶段,即 初始标记 和 并发标记 。

CMS完整的收集过程如下:

初始标记(init-mark) :仅扫描与根节点直接关联的对象并标记,这个阶段必须 STW , 由于跟节点数量有限,所以这个过程非常短暂。

并发标记(concurrent-marking) :与用户线程并发标记。这个阶段在初始标记的基础上继续向下追溯标记。在并发标记阶段,用户线程和标记线程并发执行,所以用户不会感受到停顿。

并发预清理(concurrent-precleaning) :与用户线程并发进行。在并发标记阶段一些对象的引用已经发生了变化, precleaning 会发现这些引用关系的改变,并将存活的对象标记。举个例子:如果线程A有一个指向对象X的引用,并将该引用传递给了线程B,CMS需要记录下线程B持有了对象X,即使线程A已经不存在了。 precleaning 是为了减少下一阶段“重新标记”的工作量,因为 remark 阶段会 STW 。

重新标记(remark) :  remark 阶段会 STW 。如果应用正在并发运行且在不断地改变对象引用, CMS 则不能准确地确定某个对象是否存活。所以 CMS 会在 remark 阶段STW ,从而获取所有引用关系的改变。

并发清理(concurrent-sweeping) :清理垃圾对象,这个阶段GC线程和用户线程并发执行。

并发重置(concurrent-reset) :重置CMS收集器的数据结构,做好下一次执行GC任务的准备工作。

进群:697699179可以获取Java各类入门学习资料!

这是我的微信公众号【编程study】各位大佬有空可以关注下,每天更新Java学习方法,感谢!

学习中遇到问题有不明白的地方,推荐加小编Java学习群:697699179内有视频教程 ,直播课程 ,等学习资料,期待你的加入

线上Full GC分析

线上某服务的老年代配置了CMS,但却在gc.log发现连续Full GC的问题。JVM参数配置如下:

-XX:+UseCMSInitiatingOccupancyOnly-XX:CMSInitiatingOccupancyFraction=68

参数的意义是:在老年代到 68% 的时候,会触发一次CMS GC,应该是出现类似如下的日志:

T20:10:37.803+0800: 3246087.559:[CMS-concurrent-mark-start]T20:10:38.463+0800: 3246088.220:[CMS-concurrent-mark: 0.661/0.661 secs][Times: user=3.17 sys=0.56, real=0.66 secs]T20:10:38.463+0800: 3246088.220:[CMS-concurrent-preclean-start]T20:10:38.552+0800: 3246088.309:[CMS-concurrent-preclean: 0.069/0.089 secs][Times: user=0.14 sys=0.04, real=0.09 secs]_T20:10:38.552+0800: 3246088.309:[CMS-concurrent-abortable-preclean-start]

但线上环境的日志却出现如下的情况:

老年代配置了900M,但却在只使用了50+M的时候触发了Full GC,而且是在短暂的时间内连续触发。

配置了CMS却触发Full GC,有以下几种可能:

大对象分配时,年轻代不够,直接晋升到老年代,老年代空间也不够,触发 Full GC(老年代还剩800+M,显然不可能)

内存碎片导致(由于CMS是基于标记清除算法的,所有会导致内存碎片,但通过grep -i "cms" gc.log,JVM尚未触发过CMS回收,所以也不存在内存碎片的说法)

CMS GC失败导致(从gc.log并未找到concurrent mode failure的记录,排除)

jmap -histo(人为执行该命令)

经笔者回忆,在中午快12点的时候确实登录过线上机,执行过 jmap -histo:live 命令,经验证,手动执行 jmap -histo:live ,也确实会在gc.log出现触发 Full GC的现象,问题得到验证。

相关文章

  • 【即插即用的硬干货】线上系统出现频繁 JVM FullGC 时,

    背景 我们上线Java服务的时候需要对其配置一些JVM参数,如堆空间大小、虚拟机栈大小、垃圾回收算法。对于年轻代和...

  • Java应用内存泄露排查

    JVM如果出现内存泄露,典型的现象就是系统FullGC比较频繁。到最后干脆OOM(Out of Memory)了。...

  • Day15 JVM调优实战

    JVM调优 主要调这几个指标,GC停顿时间,吞吐量,FullGC次数。 当我们发现线上出现频繁的gc的时候,不能直...

  • Day16 JVM调优实战

    JVM调优 主要调这几个指标,GC停顿时间,吞吐量,FullGC次数。 当我们发现线上出现频繁的gc的时候,不能直...

  • 《Java 虚拟机原理》7.4 精选 —— FullGC 篇

    FullGC 常见问题思考Q1:现网系统发生频繁 FullGC (约每10分钟一次),登陆机器发现 JVM 参数只...

  • JVM 调优实战

    简书 许乐转载请注明原创出处,谢谢! 【案例】 最近我的同学遇到一个线上问题,线上机器的jvm进程频繁FullGC...

  • 翻车现场:一次JVM FullGC引发的宕机事故

    这篇文章给大家聊一次线上生产系统事故的解决经历,其背后代表的是线上生产系统的 JVM FullGC 可能引发的严重...

  • JVM调优-转载

    【案例】 最近我的同学遇到一个线上问题,线上机器的jvm进程频繁FullGC(大约每10分钟一次),登陆机器发现j...

  • CMS堆外内存泄露案例2

    问题描述 线上生产机器fullgc很频繁几乎一分钟一次,younggc确无。 问题分析 fullgc频繁第一反应是...

  • 线上FullGC频繁的排查

    问题 前段时间发现线上的一个dubbo服务Full GC比较频繁,大约每两天就会执行一次Full GC。 Full...

网友评论

    本文标题:【即插即用的硬干货】线上系统出现频繁 JVM FullGC 时,

    本文链接:https://www.haomeiwen.com/subject/geodoqtx.html