javacore和heapdump中的堆大小:在IBM JVM上相差20倍

Question

我们注意到生产服务器(Websphere8.5.5 8.5.5)开始消耗大量内存。

javacore dump中的数字清楚地告诉我们，罪魁祸首是一个过大的堆：

|  +--Memory Manager (GC): 5,496,900,272 bytes / 3193 allocations
|  |  |
|  |  +--Java Heap: 5,368,770,560 bytes / 1 allocation
|  |  |
|  |  +--Other: 128,129,712 bytes / 3192 allocations  

但与此同时，在MAT中打开的heap dump报告堆的总容量约为200M (有时高达300M，但绝不会超过300M)。

它的真正含义是什么？堆转储是否值得信任？如果是，有没有办法释放未使用的堆内存？

更新:完整的NATIVEMEM部分，根据要求

1MEMUSER       JRE: 7,211,791,256 bytes / 39196 allocations
1MEMUSER       |
2MEMUSER       +--VM: 6,772,051,048 bytes / 29934 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Classes: 370,339,176 bytes / 10002 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Shared Class Cache: 62,914,560 bytes / 1 allocation
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Other: 307,424,616 bytes / 10001 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Memory Manager (GC): 5,496,900,272 bytes / 3193 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Java Heap: 5,368,770,560 bytes / 1 allocation
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Other: 128,129,712 bytes / 3192 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Threads: 91,710,312 bytes / 3408 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Java Stack: 5,958,456 bytes / 349 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Native Stack: 68,812,800 bytes / 248 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Other: 16,939,056 bytes / 2811 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Trace: 3,415,376 bytes / 1229 allocations
2MEMUSER       |  |
3MEMUSER       |  +--JVMTI: 17,776 bytes / 13 allocations
2MEMUSER       |  |
3MEMUSER       |  +--JNI: 5,821,768 bytes / 9844 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Port Library: 794,750,560 bytes / 401 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Unused <32bit allocation regions: 794,704,552 bytes / 87 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Other: 46,008 bytes / 314 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Other: 9,095,808 bytes / 1844 allocations
1MEMUSER       |
2MEMUSER       +--JIT: 436,874,280 bytes / 8850 allocations
2MEMUSER       |  |
3MEMUSER       |  +--JIT Code Cache: 268,435,456 bytes / 1 allocation
2MEMUSER       |  |
3MEMUSER       |  +--JIT Data Cache: 48,235,968 bytes / 23 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Other: 120,202,856 bytes / 8826 allocations
1MEMUSER       |
2MEMUSER       +--Class Libraries: 2,865,928 bytes / 412 allocations
2MEMUSER       |  |
3MEMUSER       |  +--Harmony Class Libraries: 2,000 bytes / 1 allocation
2MEMUSER       |  |
3MEMUSER       |  +--VM Class Libraries: 2,863,928 bytes / 411 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--sun.misc.Unsafe: 2,635,720 bytes / 307 allocations
4MEMUSER       |  |  |  |
5MEMUSER       |  |  |  +--Direct Byte Buffers: 2,625,112 bytes / 304 allocations
4MEMUSER       |  |  |  |
5MEMUSER       |  |  |  +--Other: 10,608 bytes / 3 allocations
3MEMUSER       |  |  |
4MEMUSER       |  |  +--Other: 228,208 bytes / 104 allocations

Answer 1

JVM部分显示了虚拟内存，因此5,368,770,560仅仅意味着NATIVEMEMINFO已经为堆实际分配了那么多内存。实际驻留的数量将取决于实际的堆大小和堆使用情况。例如，如果大量垃圾堆积在永久区域中，然后在完整的GC中被清理，那么这些页面可能会在某个时候成为常驻页面，但有多少页面实际处于活动状态取决于许多因素。我相信当JVM启动时，它实际上分配了-Xmx的全部大小，所以我认为您将始终在NATIVEMEMINFO中看到堆的完整大小(也可能它只分配-Xms，所以如果您看到的内容大于-Xms，那么这意味着压力驱使堆增加[当然，请注意正常的sawtooth])。

当您在MAT中加载转储时，默认情况下，它会运行完整的垃圾回收，并从主视图中删除任何无法访问的对象。您可以单击Overview页面上的"Unreachable Objects Histogram“链接，并滚动到底部的sum of shallow heap total行，以查看堆转储中有多少”垃圾“。在MAT首选项中也有一个“保留不可达对象”的选项，它会将所有这些对象都保留在主视图中，但这通常不是很有用。

所以基本的答案是，MAT只显示活动的对象，所以在转储时，有200-300MB的活动对象。剩下的可能在垃圾桶里，或者根本就不在那里，NATIVEMEMINFO只是显示虚拟大小。

查看一段时间内的堆使用情况的更好方法是在GCMV中执行verbosegc和load

-Xverbosegclog:verbosegc.%seq.log,20,50000