java nmt_强大的nmt

java有NativeMemoryTracking帮助我们查看jvm带来的内存分配问题，这个只能看jvm带来的，如果是jni的调用申请的内存，那这个工具是没有用的。那大家可能疑惑了，那这个工具也没想象的那么有用，java各种分区，堆的，非堆的，还有直接内存的值jmx都有，想排查是否是jvm带来的似乎也可以做到。那NativeMemoryTracking的作用是什么呢？

对比现有的工具

查看内存数据的工具其实很多，我们通过NativeMemoryTracking和他们进行一下比较。

jstat

NativeMemoryTracking

jmx是否支持命令行观察

支持

支持

不支持

是否支持直接内存

不支持

支持

支持

是否支持unsafe的分配

不支持

支持

不支持

对比的最后一项，很多人可能就要提出疑问，直接内存不就是利用unsafe分配的吗，那这里怎么还写了jmx不支持呢。

直接内存的使用其实是DirectByteBuffer自己维护的内存计数。也就是这个直接内存的数据其实是java code自己维护出来的，只要跳过这些，直接拿他的底层实现方式unsafe.allocateMemory(size);那这个数据是不会被直接内存统计到的，但是nmt可以。

对比之下，我们可以了解nmt的功能和优势，他提供了一种，非图形化界面，而且可以和top配合，快速区分内存占用的到底是谁的问题，如果nmt的数据没有增长，但是top的res涨了说明大概率是jni的调用导致的，如果是jvm的内存增长，我们可以通过detail来查看。

上手使用nmt

我们就拿一个直接内存的demo测试。

public class Malloc {

public static void main(String[] args) {

new Thread(()->{

int i=0;

List s= new LinkedList();

while (i<10){

ByteBuffer buffer = ByteBuffer.allocateDirect(1024*1024*100);

s.add(buffer);

System.out.println("malloc");

i++;

try {

Thread.sleep(3000);

} catch (InterruptedException e) {

e.printStackTrace();

}

}

}).start();

new Thread(()->{

int i=0;

while (i<10){

byte[] bytes =new byte[1024*1024*10];

}

}).start();

}

}

启动nmt功能。

-XX:NativeMemoryTracking=detail

开启baseline功能。

jcmd pid VM.native_memory baseline

开启了baseline，我们可以更直观的看到数据增长，打印出的数据会有+号。

我们先查看summary信息，先看看谁在增长

jcmd pid VM.native_memory summary.diff

(malloc=123KB #536 +1)

(mmap: reserved=249600KB, committed=2536KB)

- GC (reserved=165933KB, committed=155689KB)

(malloc=12689KB #138)

(mmap: reserved=153244KB, committed=143000KB)

- Compiler (reserved=133KB, committed=133KB)

(malloc=2KB #32)

(arena=131KB #7)

- Internal (reserved=1035599KB +307200KB, committed=1035599KB +307200KB)

(malloc=1035567KB +307200KB #2102 +3)

(mmap: reserved=32KB, committed=32KB)

目前测试使用的是java8，用unsafe申请的内存会在Internal中。

然后使用detail.diff来查看到底是谁导致的。

我们依据summary的分区的数据，找到我们关注的是Internal。然后基于这个再看diff

[0x000000010cf8638b] Unsafe_AllocateMemory+0x78

[0x0000000110d99667]

(malloc=1024000KB type=Internal +307200KB #10 +3)

这里我们就只看type为Internal的,可以看到这里是unsafe分配的。

小结

通过nmt，我们可以快速的区别出问题到底是是不是来自jvm分配，不是话，就使用native的查找泄漏的方式查看，如果是的话，可以先通过summary查看到底是那个区域，然后利用detail.diff查看具体区域的分配。