亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

JVM全體系筆記:內(nèi)存模型、類加載與垃圾回收調(diào)優(yōu)實戰(zhàn)

JVM全體系筆記:內(nèi)存模型、類加載與垃圾回收調(diào)優(yōu)實戰(zhàn) 做了這么多年Java后端兜兜轉(zhuǎn)轉(zhuǎn)還是覺得JVM這塊最值得花時間去啃。不管你是剛接觸Java的新手還是已經(jīng)工作幾年的老開發(fā)JVM相關(guān)的問題總會以各種方式出現(xiàn)在你的面前——線上應(yīng)用突然內(nèi)存溢出、面試被問垃圾回收器選型、啟動時莫名其妙報錯。這篇筆記我就把JVM全體系的知識點串聯(lián)起來結(jié)合我實際踩過的坑和調(diào)優(yōu)經(jīng)驗整理成文希望能幫你少走一些彎路。內(nèi)容偏實操概念部分我也會講清楚背后的原理接著往下看。1. 內(nèi)容整體設(shè)計與思路拆解1.1 為什么JVM知識必須體系化學(xué)習(xí)很多人學(xué)JVM喜歡直接啃面試題比如JVM內(nèi)存模型是什么垃圾回收算法有哪些如何設(shè)置JVM參數(shù)背得滾瓜爛熟但一到線上出了問題還是無從下手。原因就在于面試題是碎片化的知識點而JVM本身是一個環(huán)環(huán)相扣的系統(tǒng)。舉個最典型的例子你只知道年輕代和老年代的比例卻不理解對象晉升的觸發(fā)條件那你在調(diào)優(yōu)時設(shè)置的-Xmn參數(shù)就完全是拍腦袋決定的而且拍完了還不知道對不對。我自己的體會是JVM學(xué)習(xí)必須沿著一條主線走從Java源碼編譯成字節(jié)碼到類加載機制把字節(jié)碼裝入運行時數(shù)據(jù)區(qū)再到執(zhí)行引擎逐條解釋執(zhí)行或即時編譯最后落到垃圾回收器對內(nèi)存進行自動管理。這條主線上每一個環(huán)節(jié)都會衍生出值得深入的知識點比如運行時數(shù)據(jù)區(qū)就是常說的JVM內(nèi)存模型類加載機制里面又牽扯到雙親委派模型垃圾回收又要講清楚G1和ZGC的區(qū)別。按照這條主線去梳理筆記你會發(fā)現(xiàn)前后知識點是能互相印證的學(xué)習(xí)效率會高很多。我在整理這份筆記時把整條主線又分成了三大部分內(nèi)存結(jié)構(gòu)與管理、類的生命周期與加載機制、垃圾收集與調(diào)優(yōu)實戰(zhàn)。每個部分內(nèi)部再往下拆比如垃圾收集部分會從最基礎(chǔ)的引用計數(shù)法講起然后到可達性分析再到各種垃圾收集器的演進。用這種金字塔式的結(jié)構(gòu)來記筆記面試前翻一遍能在腦子里快速建立起知識樹平時排查問題時也能順著樹枝快速定位到具體環(huán)節(jié)。1.2 這套筆記適合誰看以及能解決什么問題這份筆記面向的讀者大概有這么幾類第一類是準(zhǔn)備Java后端崗位面試的開發(fā)者JVM相關(guān)問題在面試中出現(xiàn)的頻率極高尤其是內(nèi)存模型、垃圾回收、類加載這幾個方向?qū)儆诒乜碱}第二類是剛接手線上服務(wù)運維的初級開發(fā)可能已經(jīng)遇到過幾次應(yīng)用重啟或者內(nèi)存告警但不太清楚要怎么分析和解決第三類是希望系統(tǒng)梳理JVM知識體系、補齊短期內(nèi)的中級開發(fā)者。這套筆記能解決三個層面的問題面試層面幫你把??键c串成體系避免零散記憶實戰(zhàn)層面教你遇到OutOfMemoryError、頻繁Full GC時該用什么工具、按什么順序去排查原理層面讓你知道參數(shù)背后對應(yīng)的是哪一塊運行時數(shù)據(jù)區(qū)調(diào)整之后影響的是哪個環(huán)節(jié)。我見過太多人把-Xms和-Xmx設(shè)成一樣的值就以為完成了JVM調(diào)優(yōu)但實際連堆內(nèi)存使用率都不看這種參數(shù)潔癖式的調(diào)優(yōu)沒有實際意義。另一個容易被忽視的點是JVM知識體系和JDK版本強相關(guān)。JDK 8默認(rèn)的Parallel ScavengeJDK 11開始G1成為默認(rèn)收集器JDK 17則進一步優(yōu)化了ZGC。我在筆記里特意標(biāo)出了每個知識點在不同JDK版本下的差異避免讀者看清一色的舊版資料后拿JDK 11以上的環(huán)境去套JDK 8的默認(rèn)配置結(jié)果完全對不上號。2. 核心細(xì)節(jié)解析與實操要點2.1 JVM內(nèi)存模型理解一切調(diào)優(yōu)的基礎(chǔ)把JVM內(nèi)存模型放在整個體系的第一位因為它決定了你后面學(xué)的所有垃圾回收、參數(shù)調(diào)優(yōu)都會落在哪塊區(qū)域上。JVM在運行Java程序時會把它管理的內(nèi)存劃分為若干個不同的數(shù)據(jù)區(qū)域這些區(qū)域各有各的用途、創(chuàng)建時間和銷毀時間。很多人面試時背得很溜一畫圖就露餡原因是沒有理解每個區(qū)域的設(shè)計意圖。程序計數(shù)器是線程私有的行號指示器字節(jié)碼解釋器工作時就是通過改變這個計數(shù)器的值來選取下一條需要執(zhí)行的字節(jié)碼指令。分支、循環(huán)、跳轉(zhuǎn)、異常處理、線程恢復(fù)等基礎(chǔ)功能都需要依賴它。注意這里有個面試高頻考點程序計數(shù)器是唯一一個不會出現(xiàn)OutOfMemoryError的區(qū)域因為它的生命周期隨線程創(chuàng)建而創(chuàng)建、隨線程結(jié)束而消亡。Java虛擬機棧也是線程私有的生命周期和線程相同。棧里面存放的是一個個棧幀每個方法在執(zhí)行的同時會創(chuàng)建一個棧幀棧幀里存儲了局部變量表、操作數(shù)棧、動態(tài)鏈接、方法出口等信息。平時遇到的StackOverflowError就是在虛擬機棧深度超過JVM允許范圍時拋出的。我用一個生活化的類比來幫助理解如果把線程看作一條工廠流水線那虛擬機棧就是流水線上的工位一個方法調(diào)用就在工位上放一個加工單據(jù)方法返回就把單據(jù)拿走工位上的作業(yè)空間是固定有上限的。本地方法棧和虛擬機棧的作用非常相似區(qū)別在于虛擬機棧為Java方法服務(wù)本地方法棧為Native方法服務(wù)。HotSpot虛擬機把這兩者合二為一了所以在實際的JVM內(nèi)存模型中畫圖時通常畫成一塊。Java堆是JVM管理的最大的一塊內(nèi)存區(qū)域也是垃圾回收器重點關(guān)注的地方幾乎所有的對象實例都在這里分配。堆在物理上可以不連續(xù)只要邏輯上連續(xù)即可。從垃圾回收的角度堆又可以細(xì)分為新生代和老年代新生代里還有Eden區(qū)和Survivor區(qū)From和To這種劃分是為了更好地回收短期存活的對象。再看方法區(qū)它用于存儲已被虛擬機加載的類型信息、常量、靜態(tài)變量、即時編譯器編譯后的代碼緩存等數(shù)據(jù)。JDK 8以后方法區(qū)被移到了元空間Metaspace不再使用堆內(nèi)存而是使用本地內(nèi)存。2.2 JVM參數(shù)設(shè)置這一步錯了應(yīng)用根本起不來JVM參數(shù)雖然只是一行行啟動命令但它的坑反而最多。我記得有一次幫同事排查一個Spring Boot應(yīng)用啟動失敗的問題現(xiàn)象是點擊啟動按鈕后控制臺直接報error invoking method. failed to launch jvm我第一反應(yīng)是JVM版本不匹配查了一圈才發(fā)現(xiàn)是IDEA里的VM options填了一個不存在的路徑參數(shù)JVM啟動時解析參數(shù)失敗直接中止。這種問題看著嚇人其實排查路徑很明確先確認(rèn)JDK本身能正常運行再確認(rèn)IDE或啟動腳本傳入的每一個參數(shù)都能被當(dāng)前JDK版本識別和支持。JVM參數(shù)大致可以分成三類標(biāo)準(zhǔn)參數(shù)以-開頭、非標(biāo)準(zhǔn)參數(shù)以-X開頭和非穩(wěn)定參數(shù)以-XX開頭。標(biāo)準(zhǔn)參數(shù)在所有JDK版本中都保持兼容比如-version、-classpath非標(biāo)準(zhǔn)參數(shù)是JDK特有的比如-Xms、-Xmx、-Xmn這些參數(shù)在未來的JDK版本中可能會調(diào)整但當(dāng)前版本是穩(wěn)定的-XX參數(shù)則是最不穩(wěn)定的比如-XX:UseG1GC、-XX:MaxMetaspaceSize不同版本之間可能有很大變化。實際工作中用得最多的是堆內(nèi)存相關(guān)的幾個參數(shù)-Xms初始堆大小、-Xmx最大堆大小、-Xmn新生代大小、-XX:MetaspaceSize元空間初始大小和-XX:MaxMetaspaceSize元空間最大大小。很多人會有疑問-Xms和-Xmx設(shè)置成不一樣的值好還是壞我的建議是生產(chǎn)環(huán)境直接設(shè)置成一樣的值避免JVM在運行期因為堆內(nèi)存使用波動而頻繁擴展或收縮堆大小這反而會帶來額外的性能開銷。注意這只是基于我實際運維經(jīng)驗的一種工程慣例如果你的應(yīng)用內(nèi)存占用有非常明顯的波峰波谷也可以保留JVM自動伸縮堆的能力具體情況具體分析。關(guān)于Cannot collect JVM options caused by: 0: cannot read:d:v作業(yè)實訓(xùn) vjetbrain_這類報錯我在這里也多說一句。這是典型的啟動工具在讀取JVM options配置時遇到了一個路徑字符串中包含特殊字符比如空格、冒號、中文導(dǎo)致讀取失敗。解決辦法很簡單檢查IDE或啟動腳本中配置的JVM options文件路徑把路徑用引號包起來或者挪到不包含特殊字符的目錄下。這不算什么高深問題但它出現(xiàn)的頻率真不低尤其是Windows環(huán)境下目錄命名比較隨意的情況。2.3 類加載機制JVM運行的物流系統(tǒng)我之前遇到過一個問題明明項目里有一個類運行時就報ClassNotFoundException找了半天才發(fā)現(xiàn)是打Jar包時沒有把依賴打進去。這就牽扯到類加載機制了。JVM的類加載器可以類比成物流系統(tǒng)里的調(diào)度中心負(fù)責(zé)把字節(jié)碼文件從磁盤或網(wǎng)絡(luò)加載到JVM內(nèi)存中并生成對應(yīng)的Class對象。類加載器之間是父子關(guān)系頂層是啟動類加載器Bootstrap ClassLoader加載JAVA_HOME/lib目錄下的核心類庫再往下是擴展類加載器Platform ClassLoader主要負(fù)責(zé)加載一些擴展的Jar包最下層是應(yīng)用類加載器App ClassLoader負(fù)責(zé)加載用戶類路徑上的所有類。這種層級關(guān)系的精髓在于雙親委派模型當(dāng)一個類加載請求到來時首先會把這個請求委派給父類加載器去完成每一層的父類加載器都無法完成時子加載器才會嘗試自己加載。雙親委派模型的好處很本質(zhì)它保證了Java核心類庫的類型安全。舉個例子如果你自己寫了一個java.lang.String類想混進JVM里替換核心類雙親委派模型會讓啟動類加載器優(yōu)先加載真正的java.lang.String你自定義的類根本沒機會被加載也就無法破壞核心類庫的結(jié)構(gòu)。很多人面試喜歡問如何打破雙親委派模型目的就是為了考察你是否真正理解了這個機制的邊界在哪里。常見的打破方式是自定義類加載器并重寫loadClass方法Tomcat就通過這種方式實現(xiàn)了多個Web應(yīng)用之間的類隔離。類加載過程本身又分為加載、驗證、準(zhǔn)備、解析、初始化五個階段。加載是找到字節(jié)碼文件并讀入內(nèi)存驗證是確保字節(jié)碼文件符合JVM規(guī)范防止惡意代碼準(zhǔn)備是為類變量分配內(nèi)存并設(shè)置初始值解析是把符號引用替換為直接引用初始化是執(zhí)行類構(gòu)造器clinit方法。我想指出一個容易混淆的細(xì)節(jié)準(zhǔn)備階段賦的是默認(rèn)值比如int類型是0不是你在代碼里寫的初始值實際賦初始值的操作發(fā)生在初始化階段。3. 實操過程與核心環(huán)節(jié)實現(xiàn)3.1 從零配置一份合理的JVM啟動參數(shù)先來走一遍生產(chǎn)環(huán)境JVM參數(shù)配置的完整實操。假設(shè)我們有一個Spring Boot應(yīng)用部署在4核8G的云服務(wù)器上目標(biāo)是支撐日均百萬級請求量的業(yè)務(wù)。在配置參數(shù)之前先要做一個粗略的資源規(guī)劃操作系統(tǒng)本身要留出1G左右的內(nèi)存剩下的內(nèi)存里JVM堆內(nèi)存可以分配4G到5G元空間固定256M線程棧大小根據(jù)業(yè)務(wù)特性設(shè)置。如果按照堆4G來配置我的啟動參數(shù)大致是這樣一組java -Xms4g -Xmx4g -Xmn2g \ -XX:MetaspaceSize256m \ -XX:MaxMetaspaceSize256m \ -XX:UseG1GC \ -XX:MaxGCPauseMillis100 \ -XX:HeapDumpOnOutOfMemoryError \ -XX:HeapDumpPath/data/logs/jvm/heapdump.hprof \ -jar your-app.jar每個參數(shù)的含義拆開來看-Xms4g -Xmx4g把初始堆和最大堆都設(shè)為4G避免堆伸縮-Xmn2g設(shè)定2G的新生代新生代夠大短期對象基本都在新生代就被回收掉了不會頻繁晉升到老年代-XX:UseG1GC指定使用G1垃圾收集器它的優(yōu)勢在于可預(yù)測的停頓時間-XX:MaxGCPauseMillis100設(shè)定目標(biāo)GC停頓不超過100毫秒-XX:HeapDumpOnOutOfMemoryError和-XX:HeapDumpPath是強烈建議配置的一旦發(fā)生內(nèi)存溢出自動導(dǎo)出堆轉(zhuǎn)儲文件這是事后排查的關(guān)鍵證據(jù)。這里有幾個要注意的點。第一-Xmn不是越大越好新生代太大意味著老年代被壓縮如果老年代空間不夠?qū)ο髸苯釉谀昀洗峙浠蛘哳l繁觸發(fā)Full GC。第二MaxGCPauseMillis只是一個軟目標(biāo)G1會盡量去滿足但在極端情況下它會放棄這個目標(biāo)優(yōu)先保證吞吐量所以不要以為設(shè)置了100毫秒就萬事大吉。第三MetaspaceSize別設(shè)太小很多框架比如Spring、MyBatis會生成大量動態(tài)代理類如果元空間上限設(shè)太低運行一段時間后會出現(xiàn)OutOfMemoryError: Metaspace。經(jīng)驗值一般從256M起步但也取決于你的項目復(fù)雜度和依賴數(shù)量。配置完成后最不能省的一步是壓測驗證。我會先用壓測工具比如JMeter模擬線上流量跑個十幾分鐘同時配合JVM監(jiān)控工具觀察堆內(nèi)存曲線和GC頻率。你設(shè)定參數(shù)的最終目的是讓應(yīng)用在最高峰流量時段內(nèi)Full GC頻率趨近于零Young GC頻率穩(wěn)定在幾十秒到幾分鐘內(nèi)一次服務(wù)響應(yīng)時間沒有明顯的毛刺。如果壓測發(fā)現(xiàn)老年代占用居高不下說明對象晉升得太早或太快可能需要調(diào)整新生代大小或者讓大對象直接在老年代分配。3.2 從Error invoking method到Cannot collect JVM options的排障實錄這張里我記幾個親測有效的排查過程它們都和IDE啟動Java程序相關(guān)現(xiàn)象相似但根因完全不同非常值得對比著看。案例一是error invoking method. failed to launch jvm。出現(xiàn)這個提示時我先在命令行里手動執(zhí)行java -version發(fā)現(xiàn)JDK正常工作。接著再看IDE里配置的JRE/JDK路徑發(fā)現(xiàn)項目SDK指向的是一個只裝了JRE的目錄JDK和JRE混用導(dǎo)致IDE找不到完整的運行時環(huán)境。這里你還需要分清楚JRE和JDK的關(guān)系JRE是Java運行時環(huán)境只包含JVM和核心類庫負(fù)責(zé)把Java程序跑起來JDK是Java開發(fā)工具包包含了JRE的全部內(nèi)容又額外提供了編譯器、調(diào)試器等開發(fā)工具。所以如果你的IDE項目SDK只指向JRE路徑那編譯調(diào)試功能會受限但通常啟動程序時如果只是運行模式有JRE也能跑。排障時要看得再細(xì)一層如果項目SDK路徑?jīng)]問題那再看啟動配置里的VM options很多時候報這個錯是因為參數(shù)里寫了當(dāng)前JDK版本不支持的-XX參數(shù)比如在JDK 8上寫了-XX:UseZGC啟動程序時JVM直接拒絕啟動。案例二是Cannot collect JVM options caused by: 0: cannot read:d:v作業(yè)實訓(xùn) vjetbrain_。這個報錯的字面意思就是JVM options收集失敗原因在于JVM options配置文件路徑無法讀取。我遇到的情況是IDE的VM options文件路徑指向了一個目錄但目錄名里含有空格和中文解析器在讀取時把路徑截斷了。解決辦法很簡單用文本編輯器打開IDE的配置文件找到VM options路徑配置項把路徑用英文雙引號整體包住。如果你根本不知道VM options文件在哪也可以在IDE里直接把啟動配置里的VM options清空改用程序內(nèi)代碼設(shè)置或環(huán)境變量設(shè)置避免文件路徑解析的問題。案例三是jvm reference can not find the corresponding jvm service。這個錯誤常見于使用了某些Java Agent插件或者容器化部署場景。它想表達的意思是JVM引用找不到對應(yīng)的JVM服務(wù)通常是啟動時嘗試連接JVM服務(wù)比如JMX、JVM attach機制失敗。排查思路是先確認(rèn)Java進程確實在運行再用jps命令查看本機Java進程ID最后檢查啟動參數(shù)里的-Dcom.sun.management.jmxremote相關(guān)配置是否正確。如果是在容器里跑還要確認(rèn)容器是否暴露了JMX端口很多環(huán)境里容器內(nèi)部網(wǎng)絡(luò)和宿主機網(wǎng)絡(luò)的端口映射不一致會導(dǎo)致外部監(jiān)控工具連接不上。3.3 JVM參數(shù)設(shè)置與調(diào)優(yōu)實戰(zhàn)工具箱再分享一套我平時做JVM調(diào)優(yōu)時一定會用到的工具鏈。不看數(shù)據(jù)就調(diào)參數(shù)都是耍流氓所以工具優(yōu)先級排在參數(shù)前面。JDK自帶的命令行工具永遠(yuǎn)是首選比如jps查看Java進程jstat查看GC情況和類加載統(tǒng)計jmap導(dǎo)出堆內(nèi)存快照jstack導(dǎo)出線程快照。線上排查時我最常用的組合是先用jps確認(rèn)進程號再用jstat -gcutil pid 1000每秒打印一次GC匯總信息能看到Eden、Survivor、老年代的使用百分比以及Young GC和Full GC的次數(shù)和耗時。如果發(fā)現(xiàn)Full GC次數(shù)多再用jmap -dump:formatb,fileheap.hprof pid導(dǎo)出堆快照交給MAT或者VisualVM分析對象引用鏈定位到底是哪塊業(yè)務(wù)代碼在瘋狂造對象。還有一個容易被忽略的工具是jcmd它可以算是jmap、jstack、jstat的集大成者很多JDK版本里官方推薦優(yōu)先使用jcmd。比如想看線程轉(zhuǎn)儲jcmd pid Thread.print就能搞定想看堆信息jcmd pid GC.heap_info也可以。線上事故處理時如果環(huán)境里只允許用一個工具我會選jcmd因為它一個命令能完成大多數(shù)診斷需求。調(diào)優(yōu)的流程也很有講究不要一上來就改參數(shù)。第一步先明確瓶頸是內(nèi)存不足是線程競爭還是GC停頓過高第二步用工具采集數(shù)據(jù)GC日志、堆轉(zhuǎn)儲、線程轉(zhuǎn)儲至少收集一份。第三步才是針對瓶頸做參數(shù)調(diào)整每次只改一兩個參數(shù)改完重新壓測對比不要一次改五六個參數(shù)否則出了問題你根本不知道是哪一個改壞的。關(guān)于GC日志別忘了在啟動參數(shù)里加上-Xlog:gc*:file/data/logs/jvm/gc.logJDK 9語法JDK 8用-XX:PrintGCDetails有了GC日志才能復(fù)盤每次GC行為。3.4 一堂課理解JVM面試必問的垃圾回收器垃圾回收是JVM面試題的重災(zāi)區(qū)但也是調(diào)優(yōu)繞不開的核心。我在筆記里整理了這樣一條技術(shù)演進線Serial - Serial Old - Parallel Scavenge - Parallel Old - CMS - G1 - ZGC。這條線的演進邏輯本質(zhì)上就是追求兩件事減少暫停時間提高吞吐量。這兩個目標(biāo)看似矛盾不同收集器只是在兩者之間做了不同取舍。Serial和Parallel系列都是分代收集器的典型代表新生代用復(fù)制算法老年代用標(biāo)記-整理或標(biāo)記-清除算法。Parallel Scavenge的設(shè)計目標(biāo)偏吞吐量優(yōu)先適合后臺計算任務(wù)它在JDK 8里是默認(rèn)收集器。CMSConcurrent Mark Sweep則追求最短停頓時間采用標(biāo)記-清除算法并發(fā)標(biāo)記和并發(fā)清除階段可以和業(yè)務(wù)線程一起跑代價是吞吐量下降而且CMS在JDK 9以后就被標(biāo)記為廢棄了。G1Garbage First是JDK 11以后的默認(rèn)收集器它的核心思路是把堆劃分成多個大小相等的Region在后臺維護一個優(yōu)先級列表優(yōu)先回收垃圾對象最多的Region。它不像傳統(tǒng)分代收集器那樣在物理上區(qū)分年輕代老年代而是讓每個Region動態(tài)扮演Eden、Survivor或Old的角色這種設(shè)計既保證了可預(yù)測的停頓時間又避免了CMS的碎片問題。ZGC則是面向超大堆TB級別的低延遲收集器停頓時間控制在10毫秒以內(nèi)原理上使用了著色指針和讀屏障技術(shù)理論要求遠(yuǎn)高于G1。面試題里經(jīng)常問怎么選擇垃圾回收器我會這么答如果追求最大吞吐量且不介意偶爾的長停頓選Parallel系列如果業(yè)務(wù)對延遲敏感GC停頓影響用戶體驗選G1并配合MaxGCPauseMillis設(shè)置期望停頓目標(biāo)如果堆內(nèi)存極大且延遲要求極高探索ZGC。這個回答能覆蓋大多數(shù)場景也能展示出你對不同收集器的適用邊界有真實理解。實際選擇時建議參考官方文檔和壓測結(jié)果不要人云亦云。4. 常見問題與排查技巧實錄把平時容易被問爆的、踩過坑的JVM問題整理成了速查表直接照著排查效率很高。問題現(xiàn)象可能原因建議排查方向啟動即報failed to launch jvmJDK/JRE路徑配置錯誤、VM options含非法參數(shù)先單獨執(zhí)行java -version再檢查IDE項目SDK路徑和啟動參數(shù)啟動報Cannot collect JVM optionsVM options配置文件路徑無法讀取含空格或中文用引號包住路徑或清理路徑中的特殊字符運行中報OutOfMemoryError: Java heap space堆內(nèi)存不足或內(nèi)存泄漏導(dǎo)出堆快照用MAT分析大對象引用鏈檢查-Xmx是否合理運行中報OutOfMemoryError: Metaspace元空間不足或動態(tài)類生成過多增大-XX:MaxMetaspaceSize檢查是否有類加載器泄漏頻繁Full GCGC日志顯示老年代占滿對象晉升過快、有大對象直接進入老年代觀察Survivor區(qū)大小與晉升閾值考慮調(diào)整-Xmn或-XX:MaxTenuringThreshold應(yīng)用響應(yīng)慢但CPU占用不高線程阻塞、死鎖或鎖競爭使用jstack抓線程快照分析BLOCKED狀態(tài)線程和鎖等待關(guān)系JMX監(jiān)控連接不上報cannot find the corresponding jvm service端口未開放或JVM attach機制失敗檢查JMX端口映射使用jps確認(rèn)進程是否存活我在這份表格里想特別強調(diào)-XX:MaxTenuringThreshold這個參數(shù)。它控制的是對象在年輕代熬過多少次Young GC后晉升到老年代默認(rèn)值在HotSpot里通常是15。但如果你發(fā)現(xiàn)老年代增長過快且老年代對象大多不是大對象可以適當(dāng)降低這個閾值或反過來調(diào)大但這必須配合對象年齡分布的數(shù)據(jù)來判斷。直接用-Xlog:gcagetrace可以打印對象年齡分布看到底是哪幾個年齡段的對象占比高再決定要不要調(diào)整閾值。另一個值得單獨拎出來講的問題是OutOfMemoryError的分型。很多人一看到OOM就想著加內(nèi)存這是最常見的誤區(qū)。OOM分好幾種Java heap space說明堆內(nèi)存不夠可能是內(nèi)存泄漏或者業(yè)務(wù)量真的超出預(yù)期Metaspace說明元空間不夠unable to create new native thread說明操作系統(tǒng)無法創(chuàng)建新線程往往是線程數(shù)打滿了還可能是操作系統(tǒng)級限制GC overhead limit exceeded說明JVM一直忙于GC但收效甚微是內(nèi)存泄漏的強信號。加-Xmx只能短期掩蓋前兩種問題真正要治本必須分析堆轉(zhuǎn)儲找到泄漏源。排查時我還會用到一個小技巧打開GC日志后關(guān)注Young GC之后老年代的占用變化。正常情況下老年代占用應(yīng)該平穩(wěn)如果每次Young GC后老年代都明顯增長說明大量對象歲數(shù)沒到就提前晉升了這時候要懷疑Survivor空間太小對象在Survivor區(qū)裝不下直接被提升。相應(yīng)的調(diào)整方向是增加-Xmn或者提高Survivor區(qū)比例讓存活的對象有足夠空間在新生代完成多輪回收。再補一個容易被忽略的點線程棧大小-Xss。默認(rèn)值在大多數(shù)平臺上是1M對于業(yè)務(wù)中大量使用遞歸或者深方法調(diào)用鏈的場景1M可能不夠用會出現(xiàn)StackOverflowError但隨便改大這個值也不是好事因為線程棧是從操作系統(tǒng)內(nèi)存中分配的線程數(shù)一多內(nèi)存消耗巨大。一個典型場景是服務(wù)器上線程數(shù)達到幾百上千每個線程棧1M光線程棧就要占幾百M甚至幾G內(nèi)存。所以如果應(yīng)用是IO密集型、線程數(shù)多、調(diào)用鏈不深反而可以考慮調(diào)小-Xss來節(jié)省內(nèi)存比如-Xss512k讓同樣的物理內(nèi)存能支撐更多線程。# 一個實用的JVM GC日志查看命令示例按每10次GC匯總一次采樣數(shù)據(jù) jstat -gcutil pid 1000 10輸出結(jié)果里FGC列代表Full GC次數(shù)FGCT列代表Full GC累計耗時GCT代表所有GC累計耗時。如果FGC在短時間內(nèi)漲得很快或者FGCT數(shù)值異常高那基本可以判斷GC出了問題繼續(xù)往下抓堆快照就行了。5. 深入追問JVM原理層面那些面試官想聽的東西如果你準(zhǔn)備的是高級崗位的面試只背參數(shù)和工具是不夠的。面試官往往還會圍繞JVM原理問幾個為什么這里我把高頻追問也整理一遍。5.1 為什么說Java是跨平臺的跨的到底是什么很多人張口就來Java跨平臺是因為JVM但面試官就是想聽更完整的鏈路.java源文件通過各種編譯器比如javac編譯成字節(jié)碼文件字節(jié)碼是JVM的指令集和操作系統(tǒng)、CPU架構(gòu)無關(guān)不同平臺安裝不同版本的JVMJVM負(fù)責(zé)把字節(jié)碼翻譯成本地機器指令。所以跨平臺的是Java字節(jié)碼和JVM這一整套運行時規(guī)范不是編譯后的機器碼本身。換個說法你拿到一份.class文件在任何安裝了對應(yīng)JDK/JRE的平臺上都能直接運行這才叫跨平臺。5.2 為什么需要JIT即時編譯器解釋執(zhí)行字節(jié)碼效率不高所以HotSpot引入了JITJust-In-Time編譯器。當(dāng)某個方法被頻繁調(diào)用時JIT會把它編譯成機器碼并緩存下來下次直接執(zhí)行機器碼速度大幅提升。這就是熱點代碼的概念也解釋了為什么Java應(yīng)用剛啟動時性能通常差一些隨著時間推移越跑越快。JIT有兩種主流模式C1編譯器Client模式編譯速度快但優(yōu)化程度一般C2編譯器Server模式編譯慢但優(yōu)化徹底。高版本JDK還在推進GraalVM作為新一代JIT編譯器這是一個值得關(guān)注的演進方向。5.3 為什么元空間替換了永久代永久代PermGen是JDK 8以前方法區(qū)的實現(xiàn)但它有個致命缺陷占用JVM堆內(nèi)存大小難以精確控制經(jīng)常因為加載大量類就拋OutOfMemoryError: PermGen space。元空間Metaspace的核心變化是使用本地內(nèi)存默認(rèn)情況下大小只受宿主機可用內(nèi)存限制這就避免了永久代那種明明機器內(nèi)存還多JVM卻先死了的尷尬。改到元空間后JDK自身也需要動態(tài)生成大量內(nèi)部類不再受堆大小的約束穩(wěn)定性明顯改善。5.4 為什么線上環(huán)境GC日志和HeapDump一定要開我不止一次在排查線上問題時因為GC日志缺失而抓瞎。HeapDumpOnOutOfMemoryError也是同樣重要的護身符一旦程序因為OOM掛掉至少能留下一份堆快照文件你可以復(fù)盤是哪個方法導(dǎo)致了內(nèi)存暴漲。如果這兩個都沒開進程一掛你只能靠監(jiān)控面板上的歷史曲線去猜效率天差地別。另外在容器環(huán)境里跑Java應(yīng)用還有一個和以前不一樣的點容器會限制CPU和內(nèi)存但JVM不是總能自動識別容器的資源限制。JDK 8u191以前的版本JVM默認(rèn)可能看到的是宿主機全部內(nèi)存導(dǎo)致-Xmx設(shè)大了容器直接被殺JDK 8u191及以后增加了-XX:UseContainerSupport默認(rèn)開啟來自動感知容器配額。所以如果你用低版本JDK跑容器切記升級版本或手動設(shè)置合理的堆內(nèi)存參數(shù)否則會出現(xiàn)應(yīng)用沒報OOM但容器反復(fù)被殺重啟的詭異現(xiàn)象。6. 聊聊我整理這套JVM筆記踩過的一些坑最后這部分不按知識體系來就說幾個我在實際整理和學(xué)習(xí)過程中印象最深的教訓(xùn)希望你能繞開。第一個教訓(xùn)是參數(shù)別照抄網(wǎng)上配置。網(wǎng)上那些-Xms8g -Xmx8g -Xmn4g的配置看著大氣但你的應(yīng)用根本用不了那么大堆內(nèi)存時反而會帶來問題。我見過一個小應(yīng)用被設(shè)置了8G堆結(jié)果GC掃描的Region數(shù)量比正常情況多好幾倍停頓時間更長性能不升反降。JVM參數(shù)沒有銀彈一切以你的壓測數(shù)據(jù)和監(jiān)控數(shù)據(jù)為準(zhǔn)。第二個教訓(xùn)是JDK版本之間的坑。網(wǎng)上很多文章寫于JDK 8時代里面的默認(rèn)垃圾收集器、永久代這些說法放到JDK 17上早就不成立了。整理筆記時我特意對照了多個版本的官方文檔確保每個知識點都標(biāo)明了適用的JDK版本范圍。你自己學(xué)習(xí)時也要養(yǎng)成看官方文檔的習(xí)慣尤其是JEP里關(guān)于垃圾回收器的描述比任何二手資料都可靠。第三個教訓(xùn)是學(xué)會看原始GC日志別只看監(jiān)控大屏。監(jiān)控面板上的GC曲線很好用但很多細(xì)節(jié)必須回看原始日志才能定位比如對象晉升的年齡分布、每次GC前后各區(qū)域的使用量變化、GC導(dǎo)致的用戶線程停頓耗時。這些信息在匯總面板里往往被壓縮成平均值真實的問題反而被平滑掉了。有一次定位頻繁Young GC問題我就是在原始日志里發(fā)現(xiàn)Survivor區(qū)在每次GC前都已經(jīng)滿了屬于典型的Survivor空間配置過小這種信息光看監(jiān)控面板很難推斷出來。第四個教訓(xùn)是心態(tài)層面的JVM調(diào)優(yōu)不是炫技是拿數(shù)據(jù)說話。不要為了調(diào)而調(diào)先看業(yè)務(wù)有沒有問題再看監(jiān)控數(shù)據(jù)有沒有異常最后才動手改參數(shù)。很多應(yīng)用默認(rèn)參數(shù)就能跑得很好亂調(diào)參數(shù)反而制造新問題。這套筆記整理下來我自己最大的收獲其實不是記住了多少個參數(shù)而是形成了一套先測量、再分析、最后調(diào)整的思維方式這套方式在做任何性能優(yōu)化時都通用。我目前還在持續(xù)完善這份JVM筆記比如GC日志里那些詳細(xì)字段的含義、ZGC在JDK 17下的實際表現(xiàn)、GraalVM原生鏡像的優(yōu)缺點對比后續(xù)有新的實測數(shù)據(jù)也會繼續(xù)回來更新這篇文章。如果你在照著配置參數(shù)或者排查問題時遇到了別的怪問題歡迎在評論區(qū)和我說說具體情況我們一起把這份實操經(jīng)驗庫補得更全。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
在线可观看的黄色网址| 亚洲视频1区| 手机午夜电影神马久久| 亚洲蜜臀懂色| 百度百度日本操逼| www五月| 伊人大香蕉在线| 97chaopenrihan| 熟妇xxxxx性春色| 密桃99999| 九九av| 日韩免费a级毛片无码a∨| 久热伊人| 91亚洲影视| 成年人一级黄色毛片大全在线观看| 久热69九色熟妇97| 色噜噜狠狠色综无码久久合欧美| 懂色AV蜜臀无码精品APP | 91黑丝操| av资源在线播放天堂| 亚洲天天精品| www色日本| 亚洲综合另类色图| 国产一区二区在线电影| 日韩91网| 另类图片五月| 黑人免费福利视频| 大香蕉欧美日韩| 人人操人人色人人摸| 中文字幕片| 超碰97色| 精品乱子一区二区三区99| 日本一级特级毛片视频| 亚洲AV乱码专区国产噜噜亚洲| 一区二区三区不卡视频| http://qxhbdz.com| 成人羞羞视频国产| 欧美日韩国产男人| 少妇高潮对白在线观看| 性一级黄色录像片网站导航| 美日韩一卡二卡三卡免费人妻精品| 国产路线专区| 97色插| 在线无码视频| 91日韩网站| www.97在线| 亚洲影院无码在线| 国产偷人妻精品一区二区在线| 18禁的网站在线| 欧美96交| 亚洲精品 欧美精品| 樱花蜜乳av| 碰人碰碰人人开房人肉| 天天欧美欧美亚洲网| 亚洲中文字幕在现观看| 亚州九九九精品视频| 亚洲天堂无码| 久草成人| 欧美一品道| 亚洲人妻AV| 人妻色偷色噜| 大香蕉92| 人妻少妇视频在线播放| 人人人人插| 日韩精品一二三| 九月AV| 国产色综合亚洲色综合吹潮| 欧美 亚洲精品首页| 日韩另类色图| 欧美激情综合色综合啪啪五月| 伊人网免费视频| 人人妻天天做天天爽| 丁香五月电影| 激情干在线| 久久精品国产亚洲粉嫩| 日本中文字幕一区| www鬼畜国产男人的天堂| 九月丁香综合网| 97资源久久| 亚州九九九精品视频| 婷婷九月色| 芊芊操逼视频无码| 欧美日韩欧美| 少好三P| 久久亚洲不卡| 免费一级视频特黄色大片| 国产在线视频午夜精华在| 91成人久久| 丁香六月天| 国产黄片在线免费观看| 亚洲性爱成人| 国产女s强制榨精视频| 91白嫩| 人妻黑丝袜电影| 女色视频社区| 国产九九久久久精品| 青青久久手机线视频| 9色国产精品一区粉嫩| 快灬快灬 一下爽蜜桃在线观看| 麻豆 亚洲 97| 精品小视频在线| 亚洲影视综合网| 亚洲第一无码播放立川理惠| yellow网站免费观看日韩高清无码| 亚洲97超碰| www.久久超碰| aV中文麻| 9久9久| 超碰97在线色男人??| 亚洲91亚洲| 久久久久免费少妇| www.婷婷六月天| 日韩一级片在线看| 国产少妇肉丝在线观看| 久久久久人妻| 五月丁香色综合| 色综合久| 天天日天天插| 骚逼一区二区| 黄久在线| 久久九九久精品国产尤物|国产精品爽黄69天堂A片潘金莲,国产亚洲精品第一综合 | 日本一区二区中文字幕久久| 日本久久女同性恋视频| 可免费观看的av毛片中日美韩| 欧美性爱无码一区二区三区| 爱爱动态120秒| 亚洲精品97p| 黄片视频观看| 亚洲成人色情五月天丁香花| 五月亭亭六月丁香| AV一二区| 1769成人国产精品视频| 久久e6只有精品| 欧美特大AA级黄片| 野狼激情网| 中文字幕人妻色偷偷久久皮| 日韩人妻播放| TS人妖另类精品视频系列| 草b在线| 午夜一级免费毛片| 国产精品一区二区三区在线| 91久精品| 欧美少妇性爱网站| 精品传媒在线一区| 蜜桃臀 后入 一区 二区 三区 在线| 操东北女人| 欧美影音在线| 91黑丝在线播放| 黄色在线网站| 五月天色图| 精品超碰国产| 看免费的黄片| 一区二区三区不卡视频| 91男人综合| 欧美伦乱爱| 偷拍欧美综合| 91动漫操逼视频| 久久久久久九九九| 日产成人久久| 亚洲人在线| 操91| 激情久久av一区av二区av| 超碰在线免费一区二区三区| 久久久久9999妇女| 97色论| 一区二区 日韩 欧美 国产 传媒| 深夜激情| 久久爽爽精品| 综合情欲网| 久久色AV线| 啊啊啊不要啊啊受不了了视频在线 | 超碰在线成人电影| Julia Annxxxxx| 欧美亚洲一区二区久久久婷精品大包诱| 人人摸人人叼| 成人午夜小视频手机在线看| 久久精品店| 国产亚洲中文不卡二区| 天天色播亚洲综合网站| 六月丁香啪啪啪| www.五月天| 成人在线视频二区| 老熟女综合| 麻豆天美AV传媒第一页| 二级毛片| 日韩色| 日日操免费视频| 性爱视频免费网址| 99久久婷婷丁香| 欧美日本中字另类在线| 久99久视频精选| 91天天爱| 性综合网| 婷婷激情综合网| 麻豆亚洲Av成人无码一区精品| 亚洲天天艹| 亚州操操穴网| 国产精品在线一区二区| 青草精品视频-日本久久久久网站| 无码一区免费在线不卡| 嫖老熟女A片一二三区| 色优久久| 极品人妻少妇综合| 家庭乱伦网站国产| 神马久久中文字幕| 欧美日韩中文亚洲v在线综合| 2020中文字幕| 91插B网站| 国产又黄又爽又刺激久久久久久| 一区二区三区精品黑丝白丝酒店对鸡 | 色眯眯射| 蜜乳av一区二区| 欧美日韩人人精品| 久久99久久99精品天美传媒棢·纸:. | 日韩操人| 亚洲黄色| 国产性刺激| 91黑人狂躁丰满熟妇| 日本高清电影欧美色图| 欧美高清第一页| av一区二区三区四区五区久草臀| 人人操人人射人人干| 欧美片第一页| 99热在线不卡| 欧美性爱第一区| 四虎视频在线观看| 天天操人人操狠狠插| 116美女午夜| 成人蜜乳小视频网站| 9 7超碰在线免费观看| 精品无码一区二区三区| 欧美一区二区三区成人性生活| 99国产精品视频尤物| 伊人久久大香蕉线AV五月天| 五月婷婷六月丁香网址| 伊人四虎综合| 亚洲熟妇丝袜在线观看| 日本不卡高清视频| 在线播放欧洲免费av| 欧美97视频| 在线岛国新天堂8| 91劲爆| 日韩97超碰中文字幕| 日本1区2区不卡视频| 日日日骚女人精品| 长长久久曰曰夜夜成人网| 中国人高清www色视频免费| 91女神在线视频| 美女午夜福利免费视频| av天堂加勒比| 五月婷婷爱六月丁香色| 熟妇综合一区二区三区| 青青草在线视频人人想人人上| 97色碰| 欲射影视| AV天天在线观看| 国产乱伦性爱区| 国产精品久久久久久久久久久久久久| av东京热男人的天堂| 青青草原人妻| 啊啊啊啊视频免费| 吻戏激情性巴克| 亚洲色图亚洲无码强奸乱伦| 五月天社区| 日本黄色大片一级视频免费麻豆| 九久精品| 中文久久96| 日本中文字幕在线视频 | 蜜臀久久99精品久久久久久成人小说| 久久一二三四五六七八九区区| 色色色网站| 色一情一乱一乱一区91Av| 人人天天干干| 狠狠干婷婷| 人妻精品视频一区二区| 亚洲国产精品无码AV在线| 最近2018中文字幕在线高清第一页| 加勒比海人人操超碰在线| 久久99手机免费视频| 99re6国产精品99re在线| 熟妇视频一区二区三区在线观看| 久久9精品视频| 亚洲av性爱电影| 精品久久久久久中文字幕视频免费| 中文字幕免费在线观看| 无码人妻毛片丰满熟妇精品区| 乱人乱色一区二区三区免费| 中文乱码字幕观看视频| 色妇综合网| 91亚洲综合在线| 韩国免费播放一级毛片| 午夜理论片在线观看免费| 国产 丝袜 欧美中文 另类| 免费观看的av| 亚洲欧洲久久天堂| 99re99在线视频| 免费观看一区| 秋霞一级视频在线观看免费| 91蜜臀熟女| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 久久久久成人蜜桃精品| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 日本影视久久免费| 再深点灬舒服灬太大了好硬好爽| 色九九九九久| 鸥美极品| 久热香蕉精品在线视频| 久久九七| 免费久久一级毛片大黄| 日本三级日本三级三级人妇四虎| 天操天操夜操夜月操月年年操操| 蜜臀久久99精品久久久久久婷婷| 超碰成人最新最好看| 97爱免费插| 国产自产22区| 国产精品美女在线一区| 成·人免费午夜在线观看| 久久9 9 9精品| 九九九九九九视频免费| 成人日韩欧美| 久久精品成人一区二区三区蜜臀| 伊人网青青| 超碰亚洲97| 茄子社区国产精品| 欧美成人性爱视频免费观看| 高清国产成人无码| 久久人人看| 日韩精品99999| 丰满人妻一区二区三区免费| 欧洲精品人妻| 97内射偷拍| 天天做日日做天天欢。| 中文字幕人成乱码熟女香港| 一本一道久久综合久久| 97五月天| 强被迫伦姧在线观看无码网站| 亚洲精品免费中文字幕| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 精品九区| 久久伊人最新网址视频| 色欲av一区二区三区蜜芽| 九九综合久久中文字幕| 2018天天干在线视频| 少妇高潮对白在线观看| 九九久久九九久久| 中出789在线视频| 99热国产| 白丝一区| 国语精品内射在线观看| 水野优香在线观看| 国产精品网站免费| 日逼97| 放黄片放3级黄片没穿衣服| Sekablack无码一区| 麻花传媒免费网站在线观看| 天天射影院| 国产精品网站免费| 一二三四视频在线社区中文字幕| 97在线亚洲| 国产精品人妻无码久久久老鸭窝| 亚洲精品亚洲人成在线麻豆| 夜夜嗨AV一区天天| 久久久91福利姬| 国产老太乱伦一区| 青草草免费网站av| 小少妇| 校园春色宗合网| 久久高潮妇女视频| 亚洲精品啪视频| 欧美在线官网| 欧美另类天堂| 一区二区三区 丝袜高跟| 丝袜美腿91| 精品久久久久久无码| 国产又色又爽又舒服的三级视频| 绑缚麻绳人妻寝取完整版| 久久女人| 欧美亚洲日本视频久久久 | 美女毛片999| 久久嫩草| 日韩中文字幕在线视频观看| 97碰碰日本乱偷人妻中文的| 国产精品国产亚洲区艳妇糸列| 国产久久免费精品视频| 国产后入精品| 美女9118禁| 粉嫩粉嫩一区性色AV片| 好看的91视频| 男女啪啪网站免费视频| 五月激情综合网| 98福利在线视频| 午夜啪| 狠狠色综合网| 午夜操操操| 不卡一区二区日本视频| 天天夜夜久久| 东京热视频网| 密臀在线免费观看| 97超碰护士| 任你艹| 青青草华人在线欧美在线| 人妻 丝袜美腿 中文字幕| 久久久中文版| 国产亚洲女v在线观看| 九月AV| 国产女同在线观看视频| 欧美爆操91| 国产在线视频午夜精华在| 美女诱惑爱爱| 天天综合网网欲色| 欧美少妇第一页| 久久精品国产亚洲AV清纯| 日夜啪电影| 国产精品乱码久久久久| 欧美78p| 美国日韩黄片| 91女人的网站| 亚洲精品尤物yw在线影院| 青青草啪啪网| 久久riav中文精品| 肉丝中文无码高清| 99热精品在线观看| 97超碰人妻| 久久一二区四| 无码外流操逼视频| 好吊爽好吊爽在线视频,中文字幕精品一区二区日本,国产良妇出轨视频在线观看, | 亚洲欧美综合| 艾草av| AV麻豆免费一区| 青娱乐大香蕉| 日本日皮视频逼| 国产9熟妇视频网站| 日本三级韩国三级99| 男人的天堂2018| 校园春色欧美色图| 亚洲精品性爱片| 日韩av情韩国爱禁区av一区二区| 丁香九月激情啪| 九久精品| 夜夜福利| 五月色综合| 国产一级高清免费观看| 色制服丝袜夫妻av一区| 色婷婷基地| 岛国1区2区3区在线观看| 午夜AV污污污| 熟妇高潮一区二区免费视频| 中国乱伦一区二区| 美国美女AV在线| 超碰国产精品无码| 亚洲999综合| 久久国内| 摸奶性爱视频网站在线免费播放| 久久日本熟女精品一区| 777奇米影视777四色| 亚洲色宗合| 九九九九九九九九九五码| www.婷婷五月天| 日韩精品中文字幕人妻| 97在线观看视频| 97大色网| 激情网五月天| 最新av中文字幕高清| 亚洲和欧美裸体美女双飞视频| 亚洲五区熟女| 超碰在线国产| 啪啪AV导航| 思思热国产高清| 舔舔啊| 亚洲精品色| 亚洲熟女中文字幕在线| 国产无码高清操逼视频| 香蕉视频精品亚洲一区二区三区在线播| 麻豆天美传媒在线视频天堂| 婷婷综合视频| 亚洲最大网站av| 免费日韩黄片| 色呦呦国产精品免费看| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区 | 99re在线视频| 中文幕97| 美女裸体麻豆天美蜜桃91| www.狠狠干.coom| 色色色色电影网| 国产高清MV操逼视频| 亚洲天堂在线怕怕视频| 女欧美一区二三区| 少妇综合| 久久男人的天堂| 日本2020一区二区| 欧美第一页| 欧美性天天影院| 久久久网一区| 啊啊啊好舒服视频在线观看| 欧美中字二区| 中 文字幕一区二区三四 五 区日 日 骚 | 婷婷10月天青娱乐| 亚洲猛交| 操一对老熟妇爽上天视频| 97伦乱| 超碰9 7女人 | 精品视频日日夜夜| 欧美三级一级| 99青青草国产视频| 日韩不卡网操逼中文字幕日韩| 日少妇亚洲版| 色www精品视频在线观看| 中文字幕免费观看| 色香伊人| 欧美中字二区| 一区二区播放| 国产剧情在线| 久久草草亚洲蜜桃臀| 在线观看一级α片刺激高潮视频| 丰满人妻一区二区三区性色| 午夜视频好爽啊| 精品偷拍13p欧美dodk视频| 婷婷丁香九月| 亚洲乱码尤物193YW| 国产精品亚洲一级av第二区| 日韩人妻 中文字幕| 国产精品久久久鸭无码的功能| 中字乱伦AV| 人妻少妇蜜桃视频欧美一区| 狠狠色婷婷| caopeng97| 亚洲精品天天影视综合网| 99只有精品| 亚洲中文字幕av| 国产精品一区二区三区四区五区| 人人么人人操| 中国国国产一级特黄毛片| 亚洲AV成人无码一区二区三区在线观看| 欧美日韩国产中文精品字幕自在自线 | 超碰欧美在线欧美| 精产品久久| 成人午夜高潮av猛片| 精品一区二区在线针对华人免费观看这里只有精品免费观看 | 99无码视频| 日韩无码嘿咻黑热久| 97色妞| 午夜操操操| 福利视频合集| 中文AV制服乱伦| 黄页视频网站野外| 2020视频1区2区3区| 精品一区二区麻豆| 日韩色| 女人被男人桶爽视频网站| 国产欧美一区激情交| 亚洲、日韩、综合、另类| 亚洲日本天堂| 91亚洲综合在线| 国产精品网址| 激情小说图片亚洲首页 | 韩日欧亚a级| 亚洲天堂一区二区久久| 920日本午夜免费| 青草影院内射高潮| 乱伦一二三| 色婷五月| 中文字幕精品专区搜索结果91| 一区二区中文| 国产伦精品一区二区三区在线观| 四虎国产成人精品免费一女五男| 99在线精品视频| 国内毛片婷婷六月色| 99久久这里只有精品| 亚洲AV色图一区| 日韩综合成人免费视频| 视频在线观看一二三区| 青青草公开在线免费不卡视频| 久久久久人妻二区精品叶可怜| 精品久久久久久亚洲| 中文字幕一品色图| 亚洲成人一区二区精品| 亚洲天堂色图| 激情在线青青操| 欧美视频在线视频免费va| 狠狠2050在线观看| 人人妻碰人人免费| 操九九九九九九| 一区二区三区麻豆| 日韩999| 天天欧美97| 在线观看黄色电话| 在线 欧美 亚洲| 国产精品久久成人免费| 激情啪啪视频| 日本一区二区成人在线| 97免费视频网| 国产福利一区二| 午夜激情床戏激情| 久久AV无码AV| 亚州再线| 亚洲精品性爱片| 日韩精品人妻中文字幕久久久| 丝袜AV一区二区三区| 五月天婷婷综合网| 亚洲天堂男| 久久久人体| 好爽视频在线观看视频| 97久久精品亚洲| 亚洲综合嫩| 啊啊啊啊一区| 亚洲综合91| 打av高清| 操操操日本的逼| 97久久天天综合色天天综合色电影| 国产麻豆福利av在线播放| 啊啊啊啊二区好大| 中文字幕91页| 精品中文一区二区| 久久国产热视频97电影| 日韩欧美久久婷婷网站| 五月天激情小说| 久久大| 亚洲宗合电影| 色色香蕉| 久9综合在线| www.五月天| 午夜啪| 97碰碰日本乱偷人妻中文的| 日本高清有码网址视频| 少妇熟女一区二区三区| 人妻激情另类| 尤物网址| 青青久草| 麻豆福利视频导航| 韩国午夜理伦三级好看| 91老司机精品| 精品国产一区二区三区久久久蜜臀 | 视频国产欧美在线播放| 色网综合网| 26uuu国产| 成人97人人超碰人人| 精品乱码在线观看| 91在线页| caoni国产亚洲av| 东京热毛片177b2viP| 骚熟女吞| 亚洲天堂区| 日本成人A片免费看| 女人香蕉久久毛毛片精品| 欧美综合站| 强奸乱伦大香蕉| 成人久久久| 久9久精品视频| 亚州精人品大香蕉| 天天做日日爱夜夜爽| 成人一二| 91免费看中出视频| 快点操死我| 无遮挡猛进视频免费无限观看| 97综合网| 欧美的精品的视频| 国产亚洲精品美女| 图色综合网| 99自拍视频| 国产区性爱在线视频秋霞豆 | 欧美熟妇亚洲版| 中文字幕日韩国产传媒欧美精品| 欧美午夜一区二区三区| 国产丝袜美女在线一区| 性一级黄色录像片网站导航| 夜夜嗨老熟女AV一区二区三区| 素人美腿视频网站| 亚洲熟妇极品| 久操网址| 日韩熟女乱伦中出| 日韩av性爱在线播放| 91色插| 国产精品另类一区大香蕉| 成人在线视频一区| 91夜色chaopeng| 东北黄色电影| 婷婷综合激情| 色九区| 九久9精品| 国产九九九九九九九九| 亚洲系列第一页| 亚洲图片婷婷五月天| 日本国产亚洲一区在线观看| 美女久久久久久久久久久| 欧美第五页| 不卡六六在线91| 青青操视频在线| 综合网97| 中出后入| 丰满熟女人妻一区二区三五十一路| 妇人噜噜| 青草影院内射高潮| 色 婷97| 久久少妇视频| 欧亚第一综合网| 精产国品一区二三产品| 天天摸夜夜摸| 九一综合精品视品av| 五月天黄色av| 69人妻精品丰满熟女区| 欧美大香蕉97| 亚州综合AⅤ| 鸥美极品| 久9久9久9久9久9久9| 国产白丝网站| 99精品人妻| 极品色综合| 夜夜精品视频| 精品无码欧美三级| 影音先锋少妇| 极品美女福利在线观看| 美女自卫慰黄网站免费| 五月丁香综合激情| 久视频在线观看| 91在线色| 999九九九九国产动| 黑人与人妻| 欧美九一精品久久久熟妇| 欧美视频一区二区三区| 色汉综合| 强奸国产在线| 超碰人人干| 久久理论字幕视频| 亚洲综合骚逼| 97操碰| 熟妇综合一区二区三区| 亚洲视频1区| 国产激情片在线观看| 色色无码| 久干网| 亚洲丝袜少妇在线| 免费家庭乱伦视频| 黄aaaaaaaaaaaaaaaaaa色网站| 五月丁香成人网| 亚洲五区熟女| 96一区二区三区| 国产色产精品在线观看| 日韩性爱1级片视频| 欧美在线播放aaaa| 三级三级三级日本99| 97 视频在线| 少妇天堂| 国产不卡免费在线视频| 色99色| 97bbn| 94色色电影网| 欧美大香蕉专区网| 亚洲男人的天堂V| 亚洲精品97中文字幕| 久久六六| 日韩免费性爱视频在线观看| 亚洲天堂女优在线| 久草毛片| 国产对白刺激视频| 麻豆天美电影一区二区| 黄色不卡视频| 91综合中文字幕| 超碰人人超在线观看| 激情图片伦理国产一区二区日韩| 久久97视频| 天天操夜夜操狠很操| 亚洲成人免费电影| 国产亚洲日本| 岛国黄片网站| 亚洲一区中文字幕一区| 精品人妻无码一区二区三区不卡-精品人妻无码一区二区...|精品少妇一区二区三 | 中出在线视频| 黄色片一区二区三区四区五区| 欧美少妇熟女| 国内毛片四区| 久久精品中文字幕无码l| 91+欧美| 精品久久久久久久| 色色色999| 日本不卡一区二区三区| 美女诱惑一区| 五月婷婷六月丁香| 婷婷精品久久av影视| 天天干干天天干干| 九九九九日本 | 神马久久中文字幕| 久久久久久亚洲Av无码精| 91视频国品一二三区| 超碰 欧美| 国产操逼逼网| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 亚洲电影91| 丰满岳乱妇一区二区三区| 2020视频1区2区3区| 2017超碰| 强歼乱伦资源网| 大香蕉琪琪日本女优不卡| 亚洲AV成人无码一二三久久| 精品人妻中文字幕高清| 97香焦色区| 天天看片青娱乐| 777奇米影视777四色| 91色综合色| 唐山老熟妇露脸啪啪叫| 超碰在线1234区| 国产18精品亚洲精品| 男人的天堂色偷偷青青草视频婷婷网| 探花视频免费观看国产专区| 久久久工口| yw尤物av无码点击进入麻豆| 日韩AV一区二区三区三州三州| 秋霞色色影院| 五月天色电影| 99精品欧美一区二区三区桃色| 狠狠2050在线观看| 日韩在线欧美精品一区二区| 老师充足的奶水小说| 尤物av网站免费在线播放| 欧美性,色九九| 中文人妻av高清一区| 国产女人9999| 国产亚洲国产超碰| 久久久久久久性爱| 亚洲天堂另类小说男人| 另类TS人妖一区二区三区| 欧美 熟女 日韩| 日本在线播放不卡一区| 久久啊啊| 亚洲日韩青青草色月| 日韩性爱1级片视频| 欧美,亚洲,日韩,v,天堂,手机在线观看 | 东北黄色电影| 高清国产精品无码| 伊人嫩草| 人妻在线臀日韩| 郑州宾馆老熟女露脸啪啪| 欧美色图片色哟哟| 四月丁香婷婷| 久久久免费的精品| 国产精品扒开腿做爽爽爽视频| 韩日男人的天堂| xxx0国产在线播放| 日本熟妇人妻一区二区三区| 免费农村成人少妇人妻Aa一区二区视频| 亚洲性爱成人| 黄站在线免费观看| 韩国久久97| 国产精品成人福利在线| 99999亚洲另类| 宅男午夜在线视频| 思思热久久成人| 91bbbbbb| 色哟哟1区2区| 九九久久九九久久| 日韩色欲久久一二三四区| 熟妇人妻一二三区免费| 亚洲国产一级中文综合久久天堂在线免费观看 | 手机在线观看不卡无码av| 欧亚日韩一区在线| 嫩草黄页| 青青草国产亚洲精品久久| 久操不卡视频| 一级一性爱免费视频| 玖玖久久久| 中国操逼无码| 亚洲毛片久久| 午夜综合在线| 久久欧洲| 九九毛片这里只有精品| 国产亚洲精品第一最新| www.色综合| 精品成人av一区二区三区在线| 日韩欧美tv一区二区在线观看| 日韩性爱长视频免费| 九t超碰| 草B在线| 欧美日韩人妻精品一区二区三区| 日本不卡码黄色| 爱丝福利| 久久久久久久综合,国产| 黄片www视频免费| 狠狠爱综合网| 亚洲欧洲日韩中文字幕一区| 欧美成人一级免费电影| 99 国产丝袜在线| 欧美成年人性爱视频免费观看| 欧美日韩91| 肥佬影院91| 黄色在线网站| 久久久9999| 亚洲欧美日韩免费观看| 襙一襙| 日韩无码黄色片| 欧美婷婷| 久草在| 九九热av| 100啪啪视频大全| 欧美专区日本专区| 热久日综合| 久操av在线| 欧美综合第一页| Blackedraw视频一区二区| 天堂av2019| 亚洲人久久久久日| 欧亚性爱视频免费看| 黑人与人妻| 被男人吃奶很爽的毛片| 亚洲有码 视频一区| 91天天综合在线观看| 在免费jIzzjIzz在线视频| 青青草大香蕉在线视频| 成人毛片免费| 亚洲男人天堂网久久| 97爱爱爱| 亚洲熟妇丝袜在线观看| 91福利网在线观看| 久久久久久久久久久97| 91老熟妇| 亚洲精品国产精品乱码不卡| 高潮毛片无遮挡高清免费| 欧美 亚洲 大香| 无码国产Av| 九九九九一级| 亚洲欧洲另类| 99色网| 九九九九九九视频| 91快色色色色色| 98久久超碰| 日韩中文字幕熟妇人妻 | 91丨九色丨国产丨人妻在线| 欧美A√综合网 | 1人人看人人摸人人操| 天天日天天操VV| 亚洲欧洲国产综合av| 免费国产视频| 性性欧美| www老逼91| 精品v日韩欧美国产| 国产成人久久精品蜜臀| 欧洲一区二区三区免费| 日韩精品在线观看网站| 亚洲欧美高清无码| 久久精品99| 一及黄久一点| www.99热| 黑人黄片在线免费观看| 国产日韩精品suv| 夜夜高潮夜夜爽夜夜爱爱一区| 人人妻人人操人人乐| 欧美精品久久久久久久久88| 久操精品| 天天综合网网欲色| 天干天干天干天天做| 伊人色综合欧美| 啊嗯好大视频在线观看| 香蕉在线一区二区三区| 亚洲少妇中文字幕网址| 亚洲字幕一区二区| 久久国产AⅤ| 91观看 国产白丝| 国产后入式在线观看| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 精品久久人妻成人网| 欧美日本中字另类在线| 911av网站免费观看| 蜜乳视频网站| 九九综合久久中文字幕| 国产粉嫩蜜臀av一区二区三区| 91欧美综合| 91内射| 久热影视| 在线无码操| 大香蕉手机视频| 日本 成 人 小说 电影 一区二区| aaa一级黄片| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | a网站免费观看| 天天日天天插| 欧美爆操91| 亚州男人的天堂| 国语精品av| 富女玩鸭子一级毛片| 四虎国产精品永久地址入口| 午夜福利精品| 久妇网| 激情情色五月天| 综合网亚洲| 手机在线视频国内精品| 大奶啊啊好爽 | 99精品国产户外露出| 伊人久久综合精品欧美| 狠狠操狠狠爱| 嫩草影院永久在线制服丝袜| 久肏视频字幕| 日本三级A片网站com| 久久激情视频| 智利AV在线网| 我要去看2个日本美女.com曹逼 | 成人在线视频二区| 熟女熟妇一区二区三区视频| 国产强奸乱伦无码视频| 成功精品影院| 亚洲 欧美 综合 91| 伊人专区一区二区三区| 亚洲成人在线播放| 欧美色吧综合| 国产精品久久久久久照片| 天天干2019| 人人妻人人爽一区二区三区| 国产操逼逼网| 少妇色综合| 国产操操日韩三级黄| 精品97久久综合| 亚洲欧洲av影音| 久久久久久久久久久97| 九九草| 久久久亚洲精品电影免费看| 男人天堂2030| 亚洲天堂性爱| 91精品国产91久久青草| 亚洲va综合va国产va中文| 一本大道久| 调教熟妇 久久久久久| AV有码在线| 超碰亚洲97| 日本人妻伦在线中文字幕| 亚洲瓯美色图| 最新三级网址| 国产精品一区在线播放| 强奸乱亚洲| 日韩中文字墓| 精品一区二区三区四区外站| 两性色网| 果冻传媒A片麻豆熟妇人妻| 操九九九九九九| 国产精品一区二区校花| 青青五月天| 宗合情欲网| 91精品黄在线观看| 26UUU欧美日本| 97免费视频在线观看视频| 欧美 亚洲 偷拍自拍| 亚洲乱码精品一区二区| 2017大香蕉国产精品久久| 97色碰| 亚洲天堂AV在线播放| 久久久久久九九九| 五月天加勒比啪| 日本 免费 一区二区三区 久久香蕉 | 亚洲另类综合欧美| 夜夜操青青草| 日韩激情电影中文字幕| 97中文综合| 色哟哟av网址| 亚洲视频,小说| 99无码| 欧美亚洲日韩人妻在线观看| 久久国产性爱| 婷婷干黄色| 精品无码欧美三级| 东京热av影院| 超碰色97| 91性网| 伊人操| av中亚| 91色综合| 国产亚洲精品久久久久小| 七月婷婷综合| 翔田千里爆乳巨臀无码| 视频不卡中文字幕| 91精品老女人| 青娱乐福利99| 精品一区二区在线针对华人免费观看这里只有精品免费观看 | 成人av性爱电影在线观看| 韩国手机不卡无码三级视频| 肉嘟嘟www视频在线观看高清| 成人五月香网在线| 长久操视频| 内射老妇BBWX0C0CK| 色婷婷综合网站| 国产在线综合福利网站| 精品在线观看视频在线| 淫色网综合| 91亚洲人| 日韩九区| q2午夜理论片夜色av| 影音先锋日本一区二区| 亚洲欧美一区二区三区在钱蜜桃| 色哟哟精品1精品2| 久久国产性爱| 白丝少妇一区二区| 四虎国产精品永久在线囯在线| 婷婷五月综合激情| 久久久女人| 中文字幕jul-617人妻熟女| 中文字幕伊人| 精品亚洲国产成人精品| 国产久久男人天堂| 中国女人内射6XXXXX| 国产有码一区| www欧美91| 日本狠狠干| 啊啊啊啊啊好多水| 久无码| AV天堂国产| 亚洲色图第四色| 人人色人人操在线| 蜜臀久久久99久久久久 | 啊啊啊啊操死我| 97久久超碰国产精品| 国产精品女生av| 色第一页| 欧美区亚洲区偷拍区| 亚洲一区二区三区久久 亚洲一区二区| 久操大香蕉超碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰 | 婷婷激情五月综合| 女人高潮抽搐喷水视频网站| 人妻在线中出视频| 亚洲丝袜少妇在线| 色婷婷久久| 天干天干天干天天做| 免费看久久久性性| 99久在线精品99re8| 人妻中文字幕日韩电影| AV色图| 久久这里只精品99re66图| 韩国嫰模上门援交视频| 国产精品婬乱一级毛片彝族| 国产免费久久精品99re韩国| 三级激情网站| 色香伊人| 国产粉嫩出水在线播放| 97超碰9| 欧亚乱色熟一区二区三四区| 国产视频人人网| 精品999日本| 图片区小说区| 精品亚洲天堂| 91色伦综合| www.婷婷五月天| 黄色片A级一区二区三区| 国产一区二区久久| www.色综合| 无码直播久久久| 少妇高潮九九九九九九九| 美国美女AV在线| 综合自拍| 人人干黄色| 日韩有码专区| 韩日精品福利视频一区不卡在线免| 色综合色欲色综合色综合色综合| 97亚洲在线| 青青草华人在线欧美在线| 色老汉色| 日韩pv中文| 色婷网| 俺去俺来也在线www| 成人一道本免费视频| 99热在线观看| 操久久久久| 98超碰欧美| 91麻豆天美国产欧美高潮| 我爱搞逼综合网| 成人在线永久| 啊啊啊啊啊啊啊在线|