Native Memory Tracking

Native Memory Tracking

Takahiro YAMADA@yamadamn

2013/11/9

アジェンダ

• Native Memory Tracking (NMT) とは

• NMTを使ってみる

•補足・参考情報

アジェンダ

• Native Memory Tracking (NMT) とは

• NMTを使ってみる

•補足・参考情報

Native Memory Tracking (NMT) の概要

• Javaヒープ以外のネイティブ領域の使われ方をトラッキング• 例えば、従来では難しかったネイティブ領域のリークを確認• デフォルトでは無効• 有効化すると、5～10%のオーバーヘッドがあるとされている

• Oracle (HotSpot) JDK 7 Update 40 (7u40) 以降で利用可能• JRockitの診断コマンドprint_memusage相当をHotSpotに移植

©Oracle

NMTの利用方法•起動オプションを指定して有効化

• -XX:NativeMemoryTracking=[off|summary|detail]

• jcmdでNMTの使用状況を確認• jcmd <PID> VM.native_memory

[summary | detail | baseline | summary.diff | detail.diff | shutdown | autoShutdown][scale= KB | MB | GB]

•利用方法はヘルプで確認可能• jcmd <PID> help VM.native_memory

オプション 説明off NMTをオフ (デフォルト)

summary サブシステムごとのメモリ使用量のみ集計detail summaryに加え、コールサイトごとのメモリ使用量も収集

アジェンダ

• Native Memory Tracking (NMT) とは

• NMTを使ってみる

•補足・参考情報

NMTを使ってみる (1)$ jcmd24000 com.sun.enterprise.glassfish.bootstrap.ASMain --domain domain1 23974 org.apache.derby.drda.NetworkServerControl start24112 sun.tools.jcmd.JCmd

$ jcmd 24000 VM.native_memory summary24000:

Native Memory Tracking:

Total: reserved=946746KB, committed=695670KB

- Java Heap (reserved=786432KB, committed=583168KB) (mmap: reserved=786432KB, committed=583168KB)

- Class (reserved=4196KB, committed=4196KB) (classes #14259) (malloc=4196KB, #5743)

(途中省略)- Pooled Free Chunks (reserved=187KB, committed=187KB) (malloc=187KB)

NMTを使ってみる (2)$ jcmd 24000 VM.native_memory detail (最初の方はsummaryと同じ内容)

Virtual memory map:

[0x000000004018a000 - 0x000000004028b000] reserved 1028KB for Thread Stack from [JavaThread::run()+0x24] [0x000000004018a000 - 0x000000004028b000] committed 1028KB from [JavaThread::run()+0x24]

[0x0000000040540000 - 0x0000000040641000] reserved 1028KB for Thread Stack from [GCTaskThread::run()+0x1c] [0x0000000040540000 - 0x0000000040641000] committed 1028KB from [GCTaskThread::run()+0x1c]

(途中省略)

[0x00002aea3c810889] WatcherThread::run()+0x19 (mmap: reserved=1028KB, committed=1028KB)

[0x00002aea3c815ce6] Threads::create_vm(JavaVMInitArgs*, bool*)+0x1b6 (mmap: reserved=1028KB, committed=1028KB)

NMTを使ってみる (3)$ jcmd 24000 VM.native_memory baseline24000:Successfully baselined.

(しばらくしてから以下実行)

$ jcmd 24000 VM.native_memory summary.diff24000:

Native Memory Tracking:

Total: reserved=979593KB +30511KB, committed=728741KB +30735KB

- Java Heap (reserved=786432KB, committed=582144KB -1023KB) (mmap: reserved=786432KB, committed=582144KB -1023KB)

- Class (reserved=4370KB +174KB, committed=4370KB +174KB) (classes #15772 +1513) (malloc=4370KB +174KB, #6890 +1133)

(途中省略)- Pooled Free Chunks (reserved=17651KB +17464KB, committed=17651KB +17464KB) (malloc=17651KB +17464KB)

アジェンダ

• Native Memory Tracking (NMT) とは

• NMTを使ってみる

•補足・参考情報

追加JVMオプション

• NMT関連の追加のオプション-XX:+UnlockDiagnosticVMOptions によって追加オプションを有効化

• NMT以外にも様々な診断用の追加オプションを有効化できる模様-XX:+PrintNMTStatistics

• VM終了時に、NMTの統計情報を出力

• オプション-XX:NativeMemoryTracking=[summary|detail]の指定に準じる

• -XX:-AutoShutdownNMT• NMTの自動シャットダウンを無効化

• リソースが少ない状態(例: ネイティブ領域が枯渇)だと、NMTが自動停止されるが、それを無効化しておく

jcmdのTips• jcmd 0 <コマンド>

• PIDに「0」を指定すると、認識したすべてのJVMプロセスに対し実行• VM.native_memory以外も利用可能

•他の使い方は、ヘルプ(jcmd -h)を確認

$ jcmd 0 VM.native_memory24000:

Native Memory Tracking:

Total: reserved=954125KB, committed=714821KB

- Java Heap (reserved=786432KB, committed=593408KB) (mmap: reserved=786432KB, committed=593408KB)

(途中省略)

23974:Native memory tracking is not enabled ←このプロセスはNMTが無効

[参考] JRockitのprint_memusage

• jrcmd <PID> print_memusage$ jrcmd23227 weblogic.Server

23402 jrockit.tools.jrcmd.JrCmd

$ jrcmd 23227 print_memusage23227:Total mapped 2098408KB (reserved=1143216KB)- Java heap 524288KB (reserved=0KB)- GC tables 17548KB- Thread stacks 33572KB (#threads=37)- Compiled code 1048576KB (used=12253KB)- Internal 1352KB- OS 222184KB- Other 129800KB- Classblocks 6656KB (malloced=6615KB #18395)- Java class data 113408KB (malloced=113207KB #83208 in 18395 classes)- Native memory tracking 1024KB (malloced=88KB #10)

参考資料• NMT

• Native Memory Tracking in 7u40 | Marcus Hirt• http://hirt.se/blog/?p=401

•診断コマンド - print_memusage (JRockit)• http://docs.oracle.com/cd/E22646_01/doc.40/b61441/diagnostic.htm#BABJHFHC

• jcmd• jcmd をさわってみよう

• http://www.slideshare.net/TsunenagaHanyuda/jcmd-16803399• JDK7u4の新機能について - Programming Studio

• http://www.coppermine.jp/docs/programming/2012/08/jdk7u4.html

• Java Roadmap• JavaOne 2013 Report - Java Roadmap

• http://www.slideshare.net/OracleMiddleJP/javaone-2013-report/21

まとめ

• JDK7u40以降では、Native Memory Tracking (NMT) を利用可能

•まずは触ってみましょう

• JDK6以前をご利用の方はバージョンアップをメジャーバージョン

リリース日 公式アップデート終了

1.4 2002/2 2006/125.0 2004/5 2009/106 2006/12 2013/27 2011/7 2015/3 (*)

* もしくはそれ以降。事情により変更になる場合があります。http://www.oracle.com/technetwork/jp/java/eol-135779-ja.html

ご清聴いただき、ありがとうございました

Takahiro YAMADA@yamadamn

2013/11/9