jstat -gcutil 12345 2000 10
jmap -dump:live,format=b,file=/tmp/a.hprof 12345
jcmd 12345 GC.class_histogram | head

线上接口每隔一阵卡顿几秒,监控显示 Full GC 次数持续增长,堆使用率居高不下。这类现象通常不是突然出现的,往前翻半天日志能看到苗头。

追下去是这么回事:老年代对象回收不掉,可能是缓存无上限或集合只增不减,导致每次 GC 后占用仍然很高。

「JVM Full GC 排查」确认了原因之后,改动尽量只碰那一处,顺手改的东西后面最容易出问题。同一份配置存在多处的,先确认改的是被加载的那一份。

新版本先放一台机器上跑一天再全量,问题一般在这段时间暴露。备份不是备了就行,恢复一次才算数,很多备份文件打开才发现是空的。

接口问题先分清是没发出去、发出去了没收到,还是收到了处理失败。偶发问题先统计频率,一小时几次和一天一次,查法完全不同。

处理上按这个顺序:用 jstat 观察回收前后老年代占用;对比多次 GC 的回收效果;导出堆快照定位大对象。

确认没问题再收工,优化后 Full GC 频率明显下降,每次回收后老年代占用能降到低位。

作者 9823189