java - 如何在java中查找非堆空间内存泄漏？

Question

我们有一个使用 eclipse-jetty 版本 8.1.6 的 java 网络服务器。最近我们开始注意到内存不足错误。 我们几乎没有对 Activity 线程数进行分析。这在 100 左右似乎是合理的。该进程有 5GB 最大堆内存和 4GB 初始堆内存。

Process Details
Environment: Docker(kubernetes)
java.version="1.8.0_91"
java.vm.info="mixed mode"
java.vm.name="Java HotSpot(TM) 64-Bit Server VM"
thread size = 1024K
ulimit is unlimited for max process per user.
Container(Pod) Max memory is allocated to be 8GB

网络服务器平均每分钟接收 350 个请求。我们还在 ELB(kubernetes 服务)后面运行许多这样的实例。运行几个小时后，我们注意到这个 OOM。该问题是随机的，压力测试时出现。

OOM 堆栈跟踪:

java.lang.OutOfMemoryError: unable to create new native thread
   at java.lang.Thread.start0(Native Method) [na:1.8.0_91]
   at java.lang.Thread.start(Thread.java:714) [na:1.8.0_91]
   at org.eclipse.jetty.util.thread.QueuedThreadPool.startThread(QueuedThreadPool.java:441) [jetty-util-8.1.16.v20140903.jar:8.1.16.v20140903]
   at org.eclipse.jetty.util.thread.QueuedThreadPool.dispatch(QueuedThreadPool.java:366) [jetty-util-8.1.16.v20140903.jar:8.1.16.v20140903] 

由于线程计数的数量是合理的。我怀疑有内存泄漏。但是我无法在 docker 容器上找到堆外内存大小。 有办法找到它吗？

经过一段时间的搜索，我在jetty下面发现了这个bug。

如何在不升级 jetty 的情况下验证错误是否是由于以下问题引起的？

相关错误 ID:https://bugs.eclipse.org/bugs/show_bug.cgi?id=477817

Answer 1

您可以尝试将 -XX:-HeapDumpOnOutOfMemoryError 添加到您的 java 启动参数中并查看转储。