【问题标题】:Heapsize in javacore and heapdump: 20x difference on IBM JVMjavacore 和 heapdump 中的堆大小:IBM JVM 上的 20 倍差异
【发布时间】:2019-01-16 01:09:50
【问题描述】:

注意到生产服务器(Websphere8.5.5)开始消耗大量内存。

javacore dump 中的数字清楚地表明罪魁祸首是一个过大的堆:

|  +--Memory Manager (GC): 5,496,900,272 bytes / 3193 allocations
|  |  |
|  |  +--Java Heap: 5,368,770,560 bytes / 1 allocation
|  |  |
|  |  +--Other: 128,129,712 bytes / 3192 allocations  

但同时,在 MAT 中打开的堆转储报告堆的总容量约为 200M(有时高达 300M,但永远不会更多)。

这到底是什么意思?堆转储可信吗?如果是,有没有办法释放未使用的堆内存?

更新:完整的 NATIVEMEM 部分,根据要求

1MEMUSER       JRE: 7,211,791,256 bytes / 39196 allocations
1MEMUSER       |
2MEMUSER       +--VM: 6,772,051,048 bytes / 29934 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Classes: 370,339,176 bytes / 10002 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Shared Class Cache: 62,914,560 bytes / 1 allocation
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Other: 307,424,616 bytes / 10001 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Memory Manager (GC): 5,496,900,272 bytes / 3193 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Java Heap: 5,368,770,560 bytes / 1 allocation
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Other: 128,129,712 bytes / 3192 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Threads: 91,710,312 bytes / 3408 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Java Stack: 5,958,456 bytes / 349 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Native Stack: 68,812,800 bytes / 248 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Other: 16,939,056 bytes / 2811 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Trace: 3,415,376 bytes / 1229 allocations
2MEMUSER       |  |
3MEMUSER       |  +--JVMTI: 17,776 bytes / 13 allocations
2MEMUSER       |  |
3MEMUSER       |  +--JNI: 5,821,768 bytes / 9844 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Port Library: 794,750,560 bytes / 401 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Unused <32bit allocation regions: 794,704,552 bytes / 87 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Other: 46,008 bytes / 314 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Other: 9,095,808 bytes / 1844 allocations
1MEMUSER       |
2MEMUSER       +--JIT: 436,874,280 bytes / 8850 allocations
2MEMUSER       |  |
3MEMUSER       |  +--JIT Code Cache: 268,435,456 bytes / 1 allocation
2MEMUSER       |  |
3MEMUSER       |  +--JIT Data Cache: 48,235,968 bytes / 23 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Other: 120,202,856 bytes / 8826 allocations
1MEMUSER       |
2MEMUSER       +--Class Libraries: 2,865,928 bytes / 412 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Harmony Class Libraries: 2,000 bytes / 1 allocation
2MEMUSER       |  |
3MEMUSER       |  +--VM Class Libraries: 2,863,928 bytes / 411 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--sun.misc.Unsafe: 2,635,720 bytes / 307 allocations
4MEMUSER       |  |  |  |
5MEMUSER       |  |  |  +--Direct Byte Buffers: 2,625,112 bytes / 304 allocations
4MEMUSER       |  |  |  |
5MEMUSER       |  |  |  +--Other: 10,608 bytes / 3 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Other: 228,208 bytes / 104 allocations

【问题讨论】:

  • 我看到的唯一奇怪的事情是有大约 750MB 的释放 32 位分配区域。这可能表明某种不必要的流失。但我首先会从收集 RSS/VSZ 上的匹配操作系统数据开始,并定期收集 javacores。如果 RSS 超过 -Xmx,那么我会担心。如果您需要更多帮助,可以打开支持案例。

标签: java memory-management jvm websphere heap-memory


【解决方案1】:

NATIVEMEMINFO 部分显示虚拟内存,因此5,368,770,560 仅表示 JVM 虚拟地为堆分配了那么多内存。实际驻留的数量取决于实际的堆大小和堆使用情况。例如,如果大量垃圾在永久区域中堆积,然后在完整的 GC 中被清理,那么可能在某个时候这些页面成为常驻页面,但实际存活的数量取决于许多因素。我相信当 JVM 启动时,它实际上分配了 -Xmx 的完整大小,所以我认为你总是会在 NATIVEMEMINFO 中看到堆的完整大小(也可能是它只分配了 -Xms,所以如果你'reseeing 大于-Xms,那么这意味着压力驱动堆增加[虽然当然,注意正常的sawtooth])。

当您在 MAT 中加载转储时,默认情况下,它会运行完整的垃圾回收并从主视图中删除所有无法访问的对象。您可以单击概览页面上的“无法访问的对象直方图”链接,然后滚动到底部的浅堆总数行,以查看堆转储中有多少“垃圾”。 MAT 首选项中还有一个“保留无法访问的对象”选项,这会将所有这些对象保留在主 MAT 视图中,但这通常不是很有用。

所以基本答案是 MAT 只显示活动对象,因此在转储时,有 200-300MB 活动对象。其余的可能在垃圾箱中,或者根本不存在,而 NATIVEMEMINFO 只是显示虚拟大小。

随着时间的推移查看堆使用情况的更好方法是verbosegc并加载GCMV

-Xverbosegclog:verbosegc.%seq.log,20,50000

【讨论】:

  • 如果我们假设JVM在启动时分配了完整的Xmx,那么Xms参数在这种情况下的作用是什么?
  • 我刚刚在您发表此评论时编辑了我的答案,因为我意识到它可能只是虚拟分配-Xms,然后如果有压力,只会将虚拟分配增加到-Xmx (但如果只是终身制的锯齿状增长,那可能是良性的;即托儿所跟不上终身制的速度)。
  • 感谢您的更新。最后,您是否认为有一种方法可以强制 jvm 在大部分未使用的情况下释放整个 Xmx 的一部分?我的意思当然是原生内存。
  • JVM 具有执行 Java 堆收缩的能力,但您将进行一场艰苦的战斗才能真正让操作系统释放内存,因为即使 JVM frees 虚拟内存,标准C 库(例如 Linux 上的 libc)通常只是将这些分配放入它们的空闲列表中,而不是实际将内存归还给操作系统。你的目标是什么?
  • 您必须删除*index 文件并在检查该选项后重新解析堆转储,但不要打扰 - 只需单击“无法访问的对象直方图”链接(不检查无法访问),这将告诉您垃圾中有多少(转到底部总计行)。 keep unreachables 对象仅在您出于某种原因需要垃圾对象之间的关系时才使用,这种情况非常罕见。
猜你喜欢
  • 2012-05-02
  • 2011-04-25
  • 2011-06-28
  • 2013-12-05
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2011-09-22
  • 2010-11-29
相关资源
最近更新 更多