JVM效能優化

IT王小二發表於2021-06-15

JVM 效能優化。

一、記憶體溢位

記憶體溢位的原因:程式在申請記憶體時,沒有足夠的空間。

1. 棧溢位

方法死迴圈遞迴呼叫(StackOverflowError)、不斷建立執行緒(OutOfMemoryError)。

2. 堆溢位

不斷建立物件,分配物件大於最大堆的大小(OutOfMemoryError)。

3. 直接記憶體

JVM 分配的本地直接記憶體大小大於 JVM 的限制,可以通過-XX:MaxDirectMemorySize 來設定(不設定的話預設與堆記憶體最大值一樣,也會出現OOM 異常)。

4. 方法區溢位

一個類要被垃圾收集器回收掉,判定條件是比較苛刻的,在經常動態生產大量 Class 的應用中,CGLIb 位元組碼增強,動態語言,大量 JSP(JSP 第一次執行需要編譯成 Java 類),基於 OSGi 的應用(同一個類,被不同的載入器載入也會設為不同的類),都可能會導致OOM。

二、記憶體洩露

程式在申請記憶體後,無法釋放已申請的記憶體空間,導致這一部分的原因主要是程式碼寫的不合理,比如以下幾種情況。

1. 長生命週期的物件持有短生命週期物件的引用

例如將 ArrayList 設定為靜態變數,然後不斷地向ArrayList中新增物件,則 ArrayList 容器中的物件在程式結束之前將不能被釋放,從而造成記憶體洩漏。

2. 連線未關閉

如資料庫連線、網路連線和 IO 連線等,只有連線被關閉後,垃圾回收器才會回收對應的物件。

3. 變數作用域不合理

例如:

  • 一個變數的定義的作用範圍大於其使用範圍。
  • 如果沒有及時地把物件設定為 null。

4. 內部類持有外部類

Java 的 非靜態內部類 的這種建立方式,會隱式地持有外部類的引用,而且預設情況下這個引用是強引用,因此,如果內部類的生命週期長於外部類的生命週期,程式很容易就產生記憶體洩露(可以理解為:垃圾回收器會回收掉外部類的例項,但由於內部類持有外部類的引用,導致垃圾回收器不能正常工作)。

解決辦法:將非靜態內部類改為 靜態內部類,即加上 static 修飾,例如:

public class Jvm5 {
    private static String string = "SuunyBear";

    public static void show() {
        System.out.println("show");
    }

    public static void main(String[] args) {
        Jvm5 m = new Jvm5();
        // 非靜態內部類的構造方式
        // Child c=m.new Child();
        Child c = new Child();
        c.test();
    }

    /**
     * 內部類Child --靜態的,防止記憶體洩漏
     */
    static class Child {
        public int i;

        public void test() {
            System.out.println("string:" + string);
            show();
        }
    }
}

5. Hash值改變

在集合中,如果修改了物件中的那些參與計算雜湊值的欄位,會導致無法從集合中單獨刪除當前物件,造成記憶體洩露。

使用例子來說明。

public class Jvm6 {
    private int x;
    private int y;

    public Jvm6(int x, int y) {
        super();
        this.x = x;
        this.y = y;
    }
    /**
     * 重寫HashCode的方法
     */
    @Override
    public int hashCode() {
        final int prime = 31;
        int result = 1;
        result = prime * result + x;
        result = prime * result + y;
        return result;
    }
    /**
     * 改變y的值:同時改變hashcode
     */
    public void setY(int y) {
        this.y = y;
    }

    public static void main(String[] args) {
        HashSet<Jvm6> hashSet = new HashSet<Jvm6>();
        Jvm6 data1 = new Jvm6(1, 3);
        Jvm6 data2 = new Jvm6(3, 5);
        hashSet.add(data1);
        hashSet.add(data2);
        data2.setY(7); // data2的Hash值改變
        hashSet.remove(data2); // 刪掉data2節點
        System.out.println(hashSet.size()); // 2
    }
}

三、記憶體溢位和記憶體洩漏辨析

  • 記憶體溢位:實實在在的記憶體空間不足導致。
  • 記憶體洩漏:該釋放的物件沒有釋放,常見於使用容器儲存元素的情況下。

如何避免

  • 記憶體溢位:檢查程式碼以及設定足夠的空間。
  • 記憶體洩漏:一定是程式碼有問題,往往很多情況下,記憶體溢位往往是記憶體洩漏造成的。

四、瞭解MAT

mat是一個記憶體洩露的分析工具。

1. 淺堆和深堆

  • 淺堆(Shallow Heap):是指一個物件所消耗的記憶體。
  • 深堆(Retained Heap):這個物件被 GC 回收後,可以真實釋放的記憶體大小,也就是隻能通過物件被直接或間接訪問到的所有物件的集合。通俗地說,就是一個物件包含(引用)的所有物件的大小,如圖:

深堆

2. MAT的使用

1、下載MAT工具:下載地址

2、記憶體溢位例子演示

引數說明:

  • -Xms5m 堆初始大小5M
  • -Xmx5m 堆最大大小5M
  • -XX:+PrintGCDetails 列印gc日誌詳情
  • -XX:+HeapDumpOnOutOfMemoryError 輸出記憶體溢位檔案
  • -XX:HeapDumpPath=D:/oomDump/dump.hprof 記憶體溢位檔案儲存位置,此檔案用於MAT分析
/**
 * VM Args:-Xms5m -Xmx5m  -XX:+PrintGCDetails -XX:+HeapDumpOnOutOfMemoryError -XX:HeapDumpPath=D:/oomDump/dump.hprof
 */
public class Jvm7 {

    public static void main(String[] args) {
        // 在方法執行的過程中,它是GCRoots
        List<Object> list = new LinkedList<>();
        int i = 0;
        while (true) {
            i++;
            if (i % 10000 == 0) {
                System.out.println("i=" + i);
            }
            list.add(new Object());
        }
    }
}

設定引數執行後,記憶體溢位,程式結束,然後我們就可以用下載好的MAT來分析了,當然MAT也只是分析猜想,並不代表一定是這個原因導致記憶體溢位。

開啟我們儲存的檔案目錄進行分析。

MAT使用1

分析結果。

MAT使用2

此時可以檢視詳情檢視具體原因,當然這個原因也只是一種猜想。

五、JDK提供的一些工具

分類 屬性值 描述
命令列工具 jps 虛擬機器程式狀況工具
jstat 虛擬機器統計資訊監視工具
jinfo Java配置資訊工具
jmap Java記憶體映像工具
jhat 虛擬機器堆轉儲快照分析工具
jstack Java堆疊跟蹤工具
視覺化工具 JConsole Java監視與管理控制檯
VisualVM 多合一故障處理工具

所有的工具都在jdk的安裝bin目錄下,比如我的在C:\My Program Files\Java\jdk1.8.0_201\bin

其中一般情況命令列線上上伺服器上使用,視覺化工具在本地使用,當然如果你的線上伺服器允許遠端的話也可以使用視覺化工具。

六、GC調優

1. GC調優重要引數

生產環境推薦開啟

  • -XX:+HeapDumpOnOutOfMemoryError
    • 輸出記憶體溢位檔案
  • -XX:HeapDumpPath=D:/oomDump/dump.hprof
    • 記憶體溢位檔案儲存位置,此檔案用於MAT分析
    • 當然,一般Linux伺服器可以設定為 ./java_pid<pid>.hprof 預設為Java程式啟動位置

調優之前開始,調優之後關閉

  • -XX:+PrintGC
    • 除錯跟蹤之 列印簡單的 GC 資訊引數:
  • -XX:+PrintGCDetails和-XX:+PrintGCTimeStamps
    • 列印詳細的 GC 資訊
  • -Xlogger:logpath:log/gc.log
    • 設定 gc 的日誌路,將 gc.log 的路徑設定到當前目錄的 log 目錄下. 應用場景: 將 gc 的日誌獨立寫入日誌檔案,將 GC 日誌與系統業務日誌進行了分離,方便開發人員進行追蹤分析

考慮使用

  • -XX:+PrintHeapAtGC
    • 列印推資訊,獲取 Heap 在每次垃圾回收前後的使用狀況
  • -XX:+TraceClassLoading
    • 在系統控制檯資訊中看到 class 載入的過程和具體的 class 資訊,可用以分析類的載入順序以及是否可進行精簡操作
  • -XX:+DisableExplicitGC
    • 禁止在執行期顯式地呼叫 System.gc()

2. GC調優的原則(很重要)

  • 大多數的 java 應用不需要 GC 調優
  • 大部分需要 GC 調優的的,不是引數問題,是程式碼問題
  • 在實際使用中,分析 GC 情況優化程式碼優化 GC 引數 要多得多
  • GC 調優是最後的手段

調優的目的

  • GC 的時間夠小
  • GC 的次數夠少發生
  • Full GC 的週期足夠的長,時間合理,最好是不發生

注: 如果滿足下面的指標,則一般不需要進行 GC調優

  • Minor GC 執行時間不到 50ms
  • Minor GC 執行不頻繁,約 10 秒一次
  • Full GC 執行時間不到 1s
  • Full GC 執行頻率不算頻繁,不低於 10 分鐘 1 次

3. GC調優步驟

1、監控 GC 的狀態使用各種 JVM 工具,檢視當前日誌,分析當前 JVM 引數設定,並且分析當前堆記憶體快照和 gc 日誌,根據實際的各區域記憶體劃分和 GC 執行時間,覺得是否進行優化。

2、分析結果,判斷是否需要優化如果各項引數設定合理。

  • 系統沒有超時日誌出現,GC 頻率不高,GC 耗時不高,那麼沒有必要進行 GC 優化。
  • 如果 GC 時間超過 1 秒,或者頻繁 GC,則必須優化。

3、調整 GC 型別和記憶體分配如果記憶體分配過大或過小,或者採用的 GC 收集器比較慢,則應該優先調整這些引數,並且先找 1 臺或幾臺機器進行 測試,然後比較優化過的機器和沒有優化的機器的效能對比,並有針對性的做出最後選擇。

4、不斷的分析和調整通過不斷的試驗和試錯,分析並找到最合適的引數5,全面應用引數如果找到了最合適的引數,則將這些引數應用到所有伺服器,並進行後續跟蹤。

分析GC日誌

主要關注 MinorGC 和 FullGC 的回收效率(回收前大小和回收比較)、回收的時間。

1、-XX:+UseSerialGC

  • 以引數-Xms5m -Xmx5m -XX:+PrintGCDetails -XX:+UseSerialGC 為例詳細說明。
  • [DefNew: 1855K->1855K(1856K), 0.0000148 secs][Tenured: 2815K->4095K(4096K), 0.0134819 secs] 4671K。
  • DefNew 指明瞭收集器型別,而且說明了收集發生在新生代。
  • 1855K->1855K(1856K)表示,回收前 新生代佔用 1855K,回收後佔用 1855K,新生代大小 1856K
  • 0.0000148 secs 表明新生代回收耗時。
  • Tenured 表明收集發生在老年代。
  • 2815K->4095K(4096K), 0.0134819 secs:含義同新生代最後的 4671K 指明堆的大小。

2、-XX:+UseParNewGC

  • 收集器引數變為-XX:+UseParNewGC。
  • 日誌變為:[ParNew: 1856K->1856K(1856K), 0.0000107 secs][Tenured: 2890K->4095K(4096K), 0.0121148 secs]。
  • 收集器引數變為-XX:+ UseParallelGC 或 UseParallelOldGC。
  • 日誌變為:[PSYoungGen: 1024K->1022K(1536K)] [ParOldGen: 3783K->3782K(4096K)] 4807K->4804K(5632K)。

3、-XX:+UseConcMarkSweepGC 和 -XX:+UseG1GC

使用這兩個收集器的日誌會和UseParNewGC一樣有明顯的相關字樣。

4. 專案啟動調優

開啟日誌分析-XX:+PrintGCDetails,啟動專案時,通過分析日誌,不斷地調整引數,減少GC次數。

例如:

1、碰到 Metadata空間 不足發生GC,那麼調整 Metadata空間 -XX:MetaspaceSize=64m 減少 FullGC 。
2、碰到MinorGC,那麼調整堆空間 -Xms1000m 大小減少FullGC 。
3、如果還是有MinorGC,那麼繼續增大堆空間大小,或者增大新生代比例 -Xmn900m GC,此時新生代空間為900m,老年代大小100m 。

5. 專案執行GC調優

使用 jmeter 工具 來進行壓測,然後分析原因,進行調優,當然 正式上線的專案請謹慎操作

jmeter工具安裝使用

1、下載好對應版本的jmeter,注意jdk版本。

jmeter下載

2、jmeter需要Java執行時環境,所以如果報錯請先檢查你的Java環境變數設定,解壓到你想要的路徑,例如我解壓在C:\My Program Files\apache-jmeter-5.2.1,在bin目錄下有一個 jmeter.bat 檔案,雙擊啟動。

至於具體怎麼使用就百度吧,基本拿到軟體就知道使用了,畢竟這個說來就浪費篇幅了。

聚合報告引數

這裡放出我本地 jmeter 測試一個專案之後的 聚合報告引數解釋

聚合報告引數

6. 推薦策略(僅作參考)

1、新生代大小選擇

  • 儘可能設大,直到接近系統的最低響應時間限制(根據實際情況選擇).在此種情況下,新生代收集發生的頻率也是最小的.同時,減少到達老年代的物件。
  • 避免設定過小,當新生代設定過小時會導致:MinorGC 次數更加頻繁、可能導致 MinorGC 物件直接進入老年代,如果此時老年代滿了,會觸發 FullGC。

2、老年代大小選擇

一般吞吐量優先的應用都有一個很大的新生代和一個較小的老年代.原因是,這樣可以儘可能回收掉大部分短期物件,減少中期的物件,而老年代盡存放長期存活物件

七、逃逸分析

補充知識,並非所有的物件都會在堆上面分配,而沒有在堆上分配的物件是因為經過逃逸分析,分析之後發現該物件的大小可以在棧上分配,不會造成棧溢位,這時,物件就可以在棧上分配。

當然,如果經過逃逸分析,發現該物件在棧上分配會照成棧溢位,那麼該物件就會在堆空間分配。

引數jdk1.8預設開啟

  • -XX:+DoEscapeAnalysis 啟用逃逸分析(預設開啟)
  • -XX:+EliminateAllocations 標量替換(預設開啟)
  • -XX:+UseTLAB 本地執行緒分配緩衝(預設開啟)

八、常用的效能評價/測試指標

一個 web 應用不是一個孤立的個體,它是一個系統的部分,系統中的每一部分都會影響整個系統的效能。

1、響應時間:提交請求和返回該請求的響應之間使用的時間,一般比較關注平均響應時間。
2、併發數:同一時刻,對伺服器有實際互動的請求數,和網站線上使用者數的關聯:1000 個同時線上使用者數,可以估計併發數在 5%到 15%之間,也就是同時併發數在 50~150 之間。
3、吞吐量:對單位時間內完成的工作量(請求)的量度,例如1秒處理5萬個請求。

都讀到這裡了,來個 點贊、評論、關注、收藏 吧!

文章作者:IT王小二
首發地址:https://www.itwxe.com/posts/5878703e/
版權宣告:文章內容遵循 署名-非商業性使用-禁止演繹 4.0 國際 進行許可,轉載請在文章頁面明顯位置給出作者與原文連結。

相關文章