亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Java異常處理全攻略:體系、機(jī)制、性能與排查實(shí)戰(zhàn)

Java異常處理全攻略:體系、機(jī)制、性能與排查實(shí)戰(zhàn) 寫(xiě)Java也寫(xiě)了十個(gè)年頭了異常處理這個(gè)話題每年都會(huì)翻出來(lái)聊但每次看新人的代碼還是會(huì)頭皮發(fā)麻。有的把異常當(dāng)擺設(shè)catch完打一行日志就當(dāng)無(wú)事發(fā)生有的把異常當(dāng)萬(wàn)能藥任何業(yè)務(wù)分支都用拋異常解決。異常處理不是Java語(yǔ)法里最難的那一坨但絕對(duì)是最能看出一個(gè)程序員功底的地方也是面試必問(wèn)、上線必踩的環(huán)節(jié)。這篇內(nèi)容我打算系統(tǒng)地把Java異常處理從頭到尾捋一遍從異常體系本身到底層機(jī)制從實(shí)戰(zhàn)策略到性能考量再到高頻問(wèn)題的排查思路。無(wú)論你是剛學(xué)Java準(zhǔn)備面試的在校生還是工作中時(shí)不時(shí)被線上異常困擾的初級(jí)開(kāi)發(fā)甚至是想幫團(tuán)隊(duì)定一套異常規(guī)范的組長(zhǎng)這篇都能給你一些可以直接用的東西。1. 異常體系全景先搞清楚Java到底把“錯(cuò)誤”分成了幾類很多初學(xué)者看了不少異常處理的代碼但問(wèn)起Throwable和Exception、Error之間的關(guān)系還是說(shuō)不明白。這個(gè)搞不清楚后面設(shè)計(jì)異常和處理策略都會(huì)跑偏。1.1 Throwable家族不要把Error當(dāng)Exception來(lái)處理先看最頂層的Throwable這是Java里所有“可以被拋出”的對(duì)象的共同父類下面分了兩大派系Error和Exception。Error表示的是JVM層面的嚴(yán)重問(wèn)題比如OutOfMemoryError、StackOverflowError、NoClassDefFoundError。這類問(wèn)題基本不是你的代碼能“捕獲后恢復(fù)”的捕獲了也沒(méi)用因?yàn)槌绦虼藭r(shí)大概率已經(jīng)處于半癱瘓狀態(tài)。所以常規(guī)處理原則就一句話不要在代碼里捕獲Error也不要去處理它讓它直接冒泡讓JVM和應(yīng)用進(jìn)程一起完蛋然后靠監(jiān)控報(bào)警去拉起來(lái)。我還有一點(diǎn)要特別提醒catch (Throwable t)這種寫(xiě)法在大項(xiàng)目里幾乎等于定時(shí)炸彈。Throwable是連Error一起捕獲的有些監(jiān)控框架會(huì)用它來(lái)做兜底記錄但如果你在業(yè)務(wù)代碼里寫(xiě)這種捕獲就等于把OOM也一并吞了后面出現(xiàn)詭異的內(nèi)存問(wèn)題排查起來(lái)非常痛苦。Exception是程序運(yùn)行中可恢復(fù)、可處理的問(wèn)題比如文件找不到、網(wǎng)絡(luò)超時(shí)、參數(shù)不合法。這才是我們?nèi)粘R攸c(diǎn)關(guān)注的。1.2 受檢異常與非受檢異常語(yǔ)法規(guī)定背后的歷史包袱Exception又進(jìn)一步分成兩類受檢異常Checked Exception和非受檢異常Unchecked Exception。受檢異常是編譯器強(qiáng)制要求你處理的典型就是IOException、SQLException。如果你調(diào)用了一個(gè)會(huì)拋受檢異常的方法你就必須“聲明throws”或者“try-catch”否則代碼編譯不過(guò)去。這個(gè)設(shè)計(jì)是Java早期的理念認(rèn)為程序應(yīng)當(dāng)對(duì)可預(yù)見(jiàn)的錯(cuò)誤顯式處理。但后來(lái)的實(shí)踐表明這個(gè)設(shè)計(jì)過(guò)度理想化了——很多時(shí)候你根本沒(méi)法在當(dāng)前位置處理這個(gè)異常卻還是被逼著寫(xiě)了一堆try-catch最后只是把異常包一層又拋出去純屬增加噪音。非受檢異常就是RuntimeException的子類以及Error。這類異常編譯器不管你可以選擇不捕獲。NullPointerException、IllegalArgumentException、ClassCastException、IndexOutOfBoundsException都屬于這一類。它們代表的通常是編程邏輯錯(cuò)誤或前置條件未滿足本來(lái)就該在代碼層面提前規(guī)避而不是依賴運(yùn)行時(shí)的異常處理機(jī)制。有個(gè)非常關(guān)鍵的區(qū)別需要理解Spring事務(wù)默認(rèn)只在RuntimeException非受檢時(shí)回滾受檢異常默認(rèn)不回滾。這個(gè)特性讓后來(lái)絕大多數(shù)Java框架更傾向于使用RuntimeException。所以現(xiàn)在寫(xiě)Java新代碼里基本不推薦自定義受檢異常除非你明確知道調(diào)用方必須處理。1.3 自定義異常應(yīng)該怎么選父類自定義異常是項(xiàng)目中不可避免的。你總會(huì)需要一個(gè)BizException或者BusinessException來(lái)表示業(yè)務(wù)規(guī)則被違反。我的建議是業(yè)務(wù)異常統(tǒng)一繼承RuntimeException。理由主要有三個(gè)。第一因?yàn)镾pring事務(wù)默認(rèn)回滾不會(huì)出現(xiàn)事務(wù)提交了一半結(jié)果的情況。第二不用在每個(gè)業(yè)務(wù)方法上逼著調(diào)用方聲明throws代碼更干凈。第三可以通過(guò)異常類型做統(tǒng)一攔截比如在ControllerAdvice里統(tǒng)一處理成錯(cuò)誤碼返回給前端。繼承層次不要太深統(tǒng)一一個(gè)頂層業(yè)務(wù)異常類就夠了。如果確實(shí)需要細(xì)分可以考慮用異常內(nèi)部的錯(cuò)誤碼枚舉來(lái)區(qū)分而不是搞出一堆異常子類。我見(jiàn)過(guò)有些項(xiàng)目里業(yè)務(wù)異常子類幾十個(gè)維護(hù)起來(lái)非常麻煩新增一個(gè)錯(cuò)誤場(chǎng)景就要新建一個(gè)類。2. 核心機(jī)制解析try、catch、finally和try-with-resources的深層邏輯異常處理語(yǔ)法本身不復(fù)雜但真正用好的不多。這一章我重點(diǎn)拆解幾個(gè)容易出問(wèn)題的機(jī)制細(xì)節(jié)。2.1 try-catch-finally執(zhí)行順序與finally陷阱正常場(chǎng)景下try塊里代碼順序執(zhí)行一旦拋出異常直接跳到對(duì)應(yīng)的catch塊無(wú)論是否發(fā)生異常finally塊都會(huì)執(zhí)行。這個(gè)大家都懂但下面幾個(gè)邊界場(chǎng)景很容易踩坑。第一個(gè)陷阱是finally里的return。如果try或catch里有return語(yǔ)句而finally里也有return那么finally里的return會(huì)覆蓋前面的返回值。更離譜的是如果finally里拋出了異常try和catch里原本的異常會(huì)被完全掩蓋。這類代碼在code review時(shí)一定要直接打回finally塊里只做清理資源這類工作不要return、不要throw。第二個(gè)陷阱是System.exit()。如果在try塊里調(diào)用了System.exit()JVM進(jìn)程直接終止finally塊不會(huì)執(zhí)行。有些同學(xué)面試會(huì)被問(wèn)“finally一定執(zhí)行嗎”標(biāo)準(zhǔn)答案就是要排除JVM退出和線程中斷這類場(chǎng)景。第三個(gè)陷阱是catch的順序。多個(gè)catch塊時(shí)子類異常必須放在父類異常前面否則編譯器直接報(bào)錯(cuò)。比如catch (IOException e)必須在catch (Exception e)前面。道理其實(shí)很簡(jiǎn)單異常匹配是自上而下找第一個(gè)能匹配的catch塊如果先寫(xiě)了父類子類異常就被父類“截胡”了。try { // 業(yè)務(wù)代碼... } catch (FileNotFoundException e) { // 更具體的處理邏輯 } catch (IOException e) { // 更通用的IO處理邏輯 }2.2 try-with-resources資源關(guān)閉的標(biāo)準(zhǔn)答案如果你還在用finally去關(guān)閉流或數(shù)據(jù)庫(kù)連接我建議把這段看完。Java 7引入的try-with-resources才是資源關(guān)閉的標(biāo)準(zhǔn)姿勢(shì)它要求資源類實(shí)現(xiàn)AutoCloseable接口InputStream、OutputStream、Connection這些都實(shí)現(xiàn)了。讓我用一個(gè)非常實(shí)際的多資源場(chǎng)景來(lái)演示。以前要正確關(guān)閉兩個(gè)流必須寫(xiě)嵌套的try-finally還得處理各自的異常代碼又長(zhǎng)又容易出錯(cuò)// 推薦寫(xiě)法try-with-resources多個(gè)資源用分號(hào)分隔 try (InputStream input new FileInputStream(input.txt); OutputStream output new FileOutputStream(output.txt)) { byte[] buffer new byte[1024]; int len; while ((len input.read(buffer)) ! -1) { output.write(buffer, 0, len); } }你不需要手動(dòng)close編譯器會(huì)自動(dòng)生成關(guān)閉邏輯而且關(guān)閉順序是逆序的后聲明先關(guān)閉對(duì)應(yīng)先開(kāi)output再關(guān)output再關(guān)input。還有一點(diǎn)做得非常講究如果try塊和close方法都拋出了異常Java會(huì)優(yōu)先保留try塊里的原始異常同時(shí)把close階段拋出的異常作為“被抑制異常”掛到原始異常上。你可以用getSuppressed()方法拿到它們。這樣排查問(wèn)題時(shí)不會(huì)被莫名其妙的關(guān)閉異常干擾主方向這個(gè)設(shè)計(jì)值得手動(dòng)點(diǎn)贊。2.3 throw與throws異常是怎么傳播上來(lái)的throws是方法聲明的一部分表示“我這個(gè)方法可能拋出這個(gè)異常調(diào)用方自己要心里有數(shù)”。throw則是主動(dòng)拋出一個(gè)異常實(shí)例。兩者動(dòng)作不同但經(jīng)常在一段代碼里配合出現(xiàn)。傳播規(guī)則是這樣的異常從最先發(fā)生的地方逐層往外拋如果每一層都不捕獲最終會(huì)到達(dá)線程的頂層處理器。對(duì)于主線程異常會(huì)直接導(dǎo)致程序退出并打印堆棧。對(duì)于線程池里的線程情況要復(fù)雜一些這個(gè)后面會(huì)單獨(dú)說(shuō)。有個(gè)最佳實(shí)踐要強(qiáng)調(diào)在做異常轉(zhuǎn)換和包裝的時(shí)候一定要保留原始堆棧。比如你寫(xiě)throw new BizException(庫(kù)存不足, e);這個(gè)構(gòu)造方式會(huì)把e作為cause傳進(jìn)去。而你寫(xiě)成“手動(dòng)拼接消息”的話throw new BizException(庫(kù)存不足: e.getMessage());就丟失了原始異常的完整堆棧排查問(wèn)題時(shí)幾乎等于廢掉了一條重要線索。所以永遠(yuǎn)記住cause參數(shù)必須傳這是異常處理最基本的職業(yè)素養(yǎng)。3. 實(shí)戰(zhàn)中的異常處理策略什么時(shí)候捕獲、什么時(shí)候拋出、什么時(shí)候自定義機(jī)制明白了真正難的是策略。異常處理本質(zhì)上是“在哪里處理最合適”的問(wèn)題處理早了破壞封裝處理晚了又容易堆滿日志。3.1 捕獲粒度別在底層捕獲你處理不了的異常新手最常見(jiàn)的錯(cuò)誤是在方法內(nèi)部把異常catch掉再打一行日志然后繼續(xù)往下走。這種“假裝處理”的代碼是最毒的因?yàn)槌绦蚍祷刂祷蚝罄m(xù)邏輯很可能已經(jīng)處在一個(gè)錯(cuò)誤狀態(tài)但表面上一片安靜等到數(shù)據(jù)錯(cuò)亂了才顯示出問(wèn)題。核心原則是在當(dāng)前這個(gè)層級(jí)能做出有效應(yīng)對(duì)才捕獲如果不能就往上拋。什么叫有效應(yīng)對(duì)比如你寫(xiě)的是接口的入口層那你可以捕獲業(yè)務(wù)異常并轉(zhuǎn)換為約定的錯(cuò)誤碼返回給前端比如你寫(xiě)的是定時(shí)任務(wù)批處理那你可以捕獲單條數(shù)據(jù)的異常并標(biāo)注這批次里哪些數(shù)據(jù)失敗繼續(xù)處理后面的數(shù)據(jù)。這些都是有效應(yīng)對(duì)。如果只是中間層做數(shù)據(jù)組裝、調(diào)用外部服務(wù)、讀文件你沒(méi)有能力決定“失敗后對(duì)用戶說(shuō)什么”那就別捕獲讓異常繼續(xù)往上走由統(tǒng)一出口處理。3.2 自定義業(yè)務(wù)異常與錯(cuò)誤碼別一股腦拋Exception自定義業(yè)務(wù)異常的核心價(jià)值是讓錯(cuò)誤信息結(jié)構(gòu)化。一個(gè)合格的自定義異常要能表達(dá)三層信息發(fā)生了什么、影響誰(shuí)、具體是哪個(gè)上下文。我常用的做法是定義一個(gè)帶錯(cuò)誤碼枚舉的BizException再加一個(gè)字段用來(lái)攜帶上下文數(shù)據(jù)。比如一個(gè)導(dǎo)入訂單的功能拋出異常時(shí)除了錯(cuò)誤碼還可以把失敗的那一行數(shù)據(jù)一起帶上。這樣統(tǒng)一處理時(shí)能直接把“第xx行數(shù)據(jù)不合法”這樣的提示返回給前端。public class BizException extends RuntimeException { private final ErrorCode errorCode; private final String context; public BizException(ErrorCode errorCode, String context) { super(String.format(%s: %s, errorCode.getMessage(), context)); this.errorCode errorCode; this.context context; } // getter省略... }這里有一個(gè)細(xì)節(jié)異常message要包含足夠的參數(shù)方便日志排查。我經(jīng)??吹接腥藪伋霎惓r(shí)只寫(xiě)“參數(shù)錯(cuò)誤”日志里根本不知道是哪個(gè)參數(shù)錯(cuò)了、值是多少。能把參數(shù)值拼進(jìn)異常消息就能省掉很多日后的“考古工作”。3.3 異常日志規(guī)范同樣一段代碼日志價(jià)值天差地別異常處理和日志是伴生關(guān)系處理得再好日志打不好線上問(wèn)題一樣抓瞎。先說(shuō)不好的寫(xiě)法。第一種是 catch 后只打一行e.getMessage()然后當(dāng)作沒(méi)事。第二種是log.error(error)不帶任何異常對(duì)象。第三種是printStackTrace()把堆棧打到標(biāo)準(zhǔn)輸出一旦線上系統(tǒng)把stdout重定向到別的文件你根本不知道日志去哪了而且這種寫(xiě)法在分布式系統(tǒng)里完全無(wú)法和請(qǐng)求鏈路關(guān)聯(lián)。推薦的做法是用日志框架的占位符并且在最后一個(gè)參數(shù)傳入異常對(duì)象這樣框架會(huì)自動(dòng)打完整堆棧try { orderService.createOrder(orderDTO); } catch (BizException e) { log.error(創(chuàng)建訂單失敗, userId{}, orderNo{}, userId, orderNo, e); throw e; }這段日志的價(jià)值在于不但知道“創(chuàng)建訂單失敗”這個(gè)事實(shí)還有userId、orderNo這種排查問(wèn)題的錨點(diǎn)最后還有完整異常堆棧。如果業(yè)務(wù)里還接入了traceId那就更完美了一個(gè)鏈路上下游的異常都能串起來(lái)。4. 性能與并發(fā)場(chǎng)景異常處理不能拖垮系統(tǒng)“性能”這個(gè)詞大部分人是不會(huì)第一時(shí)間和異常處理聯(lián)系在一起的但等你的系統(tǒng)上了量級(jí)異常的性能開(kāi)銷就會(huì)變得非常明顯。4.1 為什么異常創(chuàng)建比普通對(duì)象創(chuàng)建貴異常的昂貴之處不在try-catch本身而在throw new的那一刻。JVM在創(chuàng)建異常對(duì)象時(shí)要填充線程當(dāng)前調(diào)用棧也就是抓取棧幀快照這個(gè)操作比普通new一個(gè)Object高出兩三個(gè)數(shù)量級(jí)。更致命的是如果你在循環(huán)里頻繁拋出異常這個(gè)開(kāi)銷會(huì)被放大幾十倍。所以實(shí)戰(zhàn)里有一條鐵律不要用異常做控制流。我見(jiàn)過(guò)有人用NumberFormatException來(lái)判斷字符串是不是數(shù)字用ArrayIndexOutOfBoundsException來(lái)檢測(cè)數(shù)組結(jié)束這些都屬于典型的錯(cuò)誤示范。正確做法是直接用正則、Character.isDigit()或顯式判斷。// 反例異常控制流 try { int val Integer.parseInt(str); } catch (NumberFormatException e) { // 認(rèn)為不是數(shù)字 }如果你確實(shí)要對(duì)所有字符串做轉(zhuǎn)換并容忍非法值可以在高頻路徑上用“前置校驗(yàn)parse”組合或者干脆在外面catch但內(nèi)部已經(jīng)限定了這個(gè)方法的調(diào)用頻率。總之異常是給“不該發(fā)生但發(fā)生了”的情況準(zhǔn)備的不是給“預(yù)期會(huì)發(fā)生”的事情準(zhǔn)備的分支邏輯。4.2 批量處理中的異常隔離一條壞數(shù)據(jù)不應(yīng)該帶崩整批批處理是異常設(shè)計(jì)最容易失衡的場(chǎng)景。一條臟數(shù)據(jù)拋個(gè)異常如果沒(méi)處理好整批任務(wù)戛然而止之前處理完的幾千條全部白做。但如果每條都捕獲、打印堆棧那日志量和CPU開(kāi)銷又不劃算。正確設(shè)計(jì)思路是把單條捕獲和失敗收集結(jié)合起來(lái)循環(huán)內(nèi)逐條捕獲收集錯(cuò)誤到List不中斷批量循環(huán)外根據(jù)錯(cuò)誤數(shù)量決定是繼續(xù)還是告警。同時(shí)日志層面要做降噪相同錯(cuò)誤碼只記錄一次完整堆棧后續(xù)只計(jì)數(shù)。ListString failMessages new ArrayList(); for (OrderDTO dto : batchList) { try { processOne(dto); } catch (BizException e) { failMessages.add(訂單 dto.getOrderNo() 失敗: e.getMessage()); } } if (!failMessages.isEmpty()) { alarmService.sendBatchWarn(batchId, failMessages.size(), failMessages.stream().limit(20).collect(Collectors.toList())); }還有個(gè)經(jīng)驗(yàn)批處理里最怕的是“無(wú)差別異常捕獲”把程序Bug也當(dāng)作業(yè)務(wù)失敗一樣吞掉。我的建議是只catch預(yù)期的BizException和明顯的可恢復(fù)異常對(duì)于RuntimeException跑出來(lái)的程序缺陷應(yīng)該讓它中斷一次打出一個(gè)完整堆棧然后修復(fù)代碼而不是偽裝成一條失敗記錄繼續(xù)跑。4.3 線程池和異步任務(wù)中的異常處理異常不會(huì)自動(dòng)消失只會(huì)自動(dòng)被吃掉用線程池的時(shí)候有個(gè)普遍誤區(qū)以為任務(wù)里的異常會(huì)自動(dòng)像主線程那樣打印出來(lái)。其實(shí)Exception在execute()方式提交的任務(wù)里會(huì)被線程池的run()方法捕獲然后靜默丟棄。也就是說(shuō)你在業(yè)務(wù)代碼里沒(méi)捕獲的異常線上日志里什么都看不到任務(wù)看起來(lái)是“沒(méi)報(bào)錯(cuò)”地消失了。這非常危險(xiǎn)。如果你用ExecutorService的execute(Runnable)提交任務(wù)一定記得給線程池設(shè)置一個(gè)UncaughtExceptionHandler作為全局兜底日志。如果你用的是submit(Callable)任務(wù)里的異常會(huì)被存儲(chǔ)在Future內(nèi)部必須調(diào)用future.get()才會(huì)被重新拋出。所以submit之后最好結(jié)合Future的get結(jié)果統(tǒng)一處理別調(diào)了submit就徹底不管了。ThreadPoolExecutorExecutor pool new ThreadPoolExecutor( 4, 8, 60, TimeUnit.SECONDS, new LinkedBlockingQueue(1000), new NamedThreadFactory(order-async), new ThreadPoolExecutor.AbortPolicy() ); pool.setUncaughtExceptionHandler((t, e) - log.error(線程池任務(wù)異常, thread{}, t.getName(), e));5. 常見(jiàn)問(wèn)題速查與排查技巧實(shí)錄與其把每個(gè)異常類都背一遍不如掌握一套排查思路。我在這一章里把高頻異常整理成一份速查表再結(jié)合真實(shí)案例講講排查鏈路。5.1 高頻異常案例NPE、ClassCastException、IndexOutOfBoundsNullPointerException在所有線上異常里排第一。排查NPE的核心是讀堆棧Java高版本會(huì)精確提示“Cannot invoke xxx because the return value of xxx is null”直接定位是哪個(gè)調(diào)用null了。如果堆棧信息里看不出來(lái)最快的辦法是在IDE里設(shè)置 “NPE breakpoint”開(kāi)啟斷點(diǎn)條件后異常拋出的那一瞬間就能看到當(dāng)前作用域里每個(gè)變量的值。它最讓人頭疼的是各種“偽裝NPE”比如Stream里map中調(diào)用方法返回null后續(xù)reduce直接炸。規(guī)避思路無(wú)非兩個(gè)要么源頭杜絕用Optional Objects.requireNonNull盡早暴露要么在邊界防御對(duì)關(guān)鍵接收對(duì)象做isNull判斷。ClassCastException通常不是“強(qiáng)轉(zhuǎn)錯(cuò)類型”而是類加載器問(wèn)題或泛型擦除帶來(lái)的假象。我遇到過(guò)的情況包括不同jar包帶了同一個(gè)類的不同版本代碼里強(qiáng)轉(zhuǎn)成另一個(gè)ClassLoader加載的版本直接ClassCastException。排查時(shí)除了看堆棧還要看是哪個(gè)ClassLoader加載的這兩個(gè)類。至于IndexOutOfBoundsException常見(jiàn)于遍歷時(shí)刪元素、計(jì)算數(shù)組索引越界處理原則是“用迭代器刪除、無(wú)把握就用for倒序或stream filter”。速查表整理如下異常類型常見(jiàn)誘因排查重點(diǎn)NullPointerException調(diào)用鏈中某個(gè)中間值為null高版本直接看堆棧提示是哪個(gè)方法調(diào)用導(dǎo)致ClassCastException強(qiáng)轉(zhuǎn)類型不匹配、類加載器不一致加JVM參數(shù)打印類加載器確認(rèn)jar版本IndexOutOfBoundsException集合動(dòng)態(tài)修改、索引計(jì)算錯(cuò)誤檢查循環(huán)下標(biāo)、刪除操作方式IllegalArgumentException參數(shù)校驗(yàn)失敗但被忽略看是否進(jìn)入異常控制流的錯(cuò)誤場(chǎng)景OutOfMemoryError堆內(nèi)存泄漏或堆參數(shù)過(guò)小dump堆再分析大對(duì)象、GC Roots引用鏈5.2 用堆棧信息定位問(wèn)題的“Caused by”才是關(guān)鍵排查異常的第一個(gè)動(dòng)作不是看第一行而是看完整的堆棧鏈特別是Caused by后面的部分。尤其在異常被層層包裝后只有追到根因才能真正解決問(wèn)題。我舉個(gè)例子一個(gè)調(diào)用第三方接口的服務(wù)一直報(bào)BizException面上消息是“調(diào)用超時(shí)”。表面看是接口問(wèn)題但繼續(xù)往下翻Caused by是SocketTimeoutException再往下還有一層Caused by是DNS解析超時(shí)。真正要處理的是DNS服務(wù)器速度而不是給接口超時(shí)加長(zhǎng)。如果只看第一層這個(gè)問(wèn)題永遠(yuǎn)解決不了。所以我在團(tuán)隊(duì)里反復(fù)強(qiáng)調(diào)“看堆棧只看到Error Line就開(kāi)始回復(fù)這是最不專業(yè)的排查方式。” 至少要看完整堆棧的caused by鏈。5.3 線上異常排查的完整鏈路traceId 日志級(jí)別 分組告警線上問(wèn)題比本地復(fù)現(xiàn)難得多核心武器是鏈路追蹤和日志。一個(gè)請(qǐng)求從網(wǎng)關(guān)進(jìn)入后都會(huì)由框架生成traceId并塞進(jìn)MDC。這樣一條請(qǐng)求在多個(gè)服務(wù)間的所有日志都帶著同一個(gè)traceId用grep一拉就能還原整條鏈路。異常排查最基礎(chǔ)的操作就是報(bào)錯(cuò)發(fā)生時(shí)先用異常信息里的關(guān)鍵字搜traceId再把這條traceId的所有日志按時(shí)間順序捋一遍。日志級(jí)別這里也要有講究。不要把業(yè)務(wù)異常的ERROR級(jí)別當(dāng)洪水猛獸在批量任務(wù)中一條數(shù)據(jù)失敗是正常情況級(jí)別應(yīng)該用WARN只有整批失敗、服務(wù)不可用、內(nèi)存異常才應(yīng)該用ERROR。不然日志系統(tǒng)里全是ERROR真正嚴(yán)重的問(wèn)題反而不容易區(qū)分。告警這塊我建議按異常類型分組而不是按服務(wù)維度無(wú)腦觸發(fā)。BizException可以單獨(dú)設(shè)置低頻告警NPE和類轉(zhuǎn)換異常這類程序Bug可以整頁(yè)郵件告警Infrastructure異常網(wǎng)絡(luò)超時(shí)、數(shù)據(jù)庫(kù)連接池打滿要走獨(dú)立的高優(yōu)告警通道。6. 團(tuán)隊(duì)規(guī)范與異常處理的長(zhǎng)期修養(yǎng)很多人以為異常處理是“語(yǔ)法技巧”但一個(gè)項(xiàng)目里異常處理好不好更多取決于團(tuán)隊(duì)有沒(méi)有形成一致的規(guī)范。有些原則是靠日積月累沉淀出來(lái)的。6.1 異常處理相關(guān)的團(tuán)隊(duì)規(guī)約寧可少吞不可多寫(xiě)我參與過(guò)的幾個(gè)項(xiàng)目都定了一些異常相關(guān)的規(guī)約核心大致是禁止捕獲異常后不處理、不輸出、不重新拋出。實(shí)現(xiàn)了“處理”就一定要有動(dòng)作。禁止捕獲Exception后只打e.getMessage()不打堆棧。禁止用異??刂茦I(yè)務(wù)流程比如用parse異常當(dāng)校驗(yàn)分支。禁止在循環(huán)中創(chuàng)建、拋出、捕獲異常來(lái)做分支判斷。業(yè)務(wù)異常必須使用統(tǒng)一異常類和統(tǒng)一錯(cuò)誤碼禁止直接拋new RuntimeException(中文提示)。禁止在finally里return或throw這是代碼review必掛項(xiàng)。這些規(guī)約不是教條每條背后都有一次深刻的線上事故或者繁瑣排查的教訓(xùn)換來(lái)的。6.2 從“會(huì)用異?!钡健霸O(shè)計(jì)異常”像設(shè)計(jì)API一樣設(shè)計(jì)你的異常更高一層的異常處理能力是把異常當(dāng)作API的一部分來(lái)設(shè)計(jì)。這就意味著異常類型名要說(shuō)明問(wèn)題本質(zhì)比如OrderExpiredException而不是BizException 105異常message要有可操作性異常里要能帶上下文參數(shù)調(diào)用方要能從異常中知道下一步該怎么處理。比如一個(gè)支付回調(diào)接口拋出的異常類型如果叫PaymentStatusMismatchException里面有orderId、currentStatus、expectedStatus調(diào)用方一看就知道是狀態(tài)流轉(zhuǎn)不對(duì)而不是一頭霧水地再去查數(shù)據(jù)庫(kù)。好的異常設(shè)計(jì)能顯著減少跨部門(mén)扯皮尤其在對(duì)接第三方系統(tǒng)時(shí)異常信息越明確聯(lián)調(diào)效率就越高。6.3 最后再分享一個(gè)真正值錢的經(jīng)驗(yàn)從我個(gè)人經(jīng)驗(yàn)來(lái)說(shuō)排查異常時(shí)最容易犯的錯(cuò)誤是過(guò)度依賴異常本身而忽略了正常路徑下的上下文現(xiàn)場(chǎng)。異常只是“結(jié)果先生留下的通知”真正的問(wèn)題往往發(fā)生在拋異常之前的幾步。比如數(shù)組越界越界只是結(jié)果循環(huán)邊界算錯(cuò)了才是根因校驗(yàn)失敗只是結(jié)果數(shù)據(jù)是怎么被污染的才是根因。所以我現(xiàn)在排查異常時(shí)會(huì)養(yǎng)成一個(gè)習(xí)慣不僅看異常堆棧還要順著日志往前翻30秒看看異常發(fā)生前這個(gè)請(qǐng)求都經(jīng)歷了什么。絕大多數(shù)詭異問(wèn)題的答案其實(shí)都在那段“看似正?!钡娜罩纠?。這也是我把異常處理定義為“長(zhǎng)期修養(yǎng)”的原因——它不是幾個(gè)語(yǔ)法點(diǎn)而是一整套排查問(wèn)題、設(shè)計(jì)代碼的思維方式。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
免费精品99| ,成人免费啪啪视频| 婷婷丁香成人| 萌白酱自拍视频| 天天日天天干天天操| 五月天春色激情网| 91九色网| 91黑丝露脚| 午夜激情成人在线观看| 国产高清午夜成人在线观看| 四虎精品亚洲| 91黄站| 怡春苑东京热| 国产情色第一第二页在线观看| 亚洲国产欧美中文永久| 性爱边摸边日免费AV| 亚洲天堂男人天堂网| 欧美日韩精品青青| 美日韩一二三区| 美女啊啊啊啊pc| 不卡啪啪视频| 午夜福利成人免费视频| 国产精品黄色三级av| 偷拍综合网| 伊人97| 欧美亚洲韩国视频十五区| 丝袜综合色图| 久久久久亚洲一区女同性恋中文字幕| 亚洲天堂女优在线| 91色图片| 久久97资源 网| 国产精品午夜成人福利| 91男同| 嗯嗯,好大,好爽,好骚| 亚洲中文字幕乱码无码一区二区| 麻豆天美国美国产| 久久黄黄| 久久久蜜桃一区二区三区| 99精品久久久久久久婷婷蜜桃| 亚洲暴力强奸AV| 久热香蕉精品在线视频| www激情| 91色婷婷综合久久中文字幕二区| 乱老女人一区二区视频| 色99色| 五月婷婷激情综合| 美女刺激久久国产欧美| 五月激情小说| 天天夜夜久久| 99性爱视频| 伊人成人中文字幕久久网| 狼人久草| 一区中文字幕二区日韩| AV中文字幕三四五| 国产成久久综合片| 九月丁香婷婷| 日本999精品视频| 欧美中文狠| 色老久久| 久久久久久久久999| 97aiaiai| 国产99精品一区二区三区免费| 亚洲图片色图欧美另类| 亚殴在线| www.91视频网| 国产精品视频麻豆入口| 色爱综合网| 日本伦理一区二区| AV中亚| 绯色一区二区三区不卡少妇| 婷婷久久久| 夜夜嗨av午夜成人| 91狠狠综合久久| 老外又粗又长一晚做五次| 93人人操人人| 亚洲欧洲小说图片视频 | 老熟女搡BBBB搡BBBB视频| 国产精品探花视频| 十八禁网站在线| 日本一久是| 欧美97超碰| 亚洲第一精品在线视频| av操操不卡| 中文字幕色AV| 九九干| 激情四射婷婷四五月天| 欲色啪| 久久久新亚洲AV| 日本在线视频导航| 日本好吊色视频| 国产免费内射视频| 国产成人精品日本视频| 18禁久极品美女久久哦哟呀!| 国产熟女一区二区| 日本3级一区二区免费 | 黑人狂躁日本妞一区二区三区| wwwcaobibi| 久久精品视频28| 天天日天天干少妇日| 国产欧美日韩精品中文| 日韩资源网| 四虎国产精品永久在线囯在线| 五月丁香六月婷综合成人综合| 日韩欧美被操黄免费观看| 久艹日日日| 午夜丁香| 久久久久久中文| 中文字幕奈奈美被公侵犯| 免费观看欧美日韩操逼视频| 亚洲人妻久久| 大香蕉宗合网在线| 97天天摸天天爽| A片 AV一级在线播放观看免费| av操操不卡| 亚洲图片欧美色图| 99国产精品人妻人伦| 人妻精品一区二区| 麻豆久久久久久久久丝袜 | 91操操操操| 国产人妻精品久久久一区二区三区| 97人人色| 2010男人的天堂| 殴美性天天| 久操视频免费在线观看| 青青操网| 亚洲AV无码久久精品蜜桃小说| 日本影视久久免费| 青青青青草av在线观看| 欧美日韩啪啪电影| 超碰碰小说97| 五月丁香| 香蕉欧美| 丰满人妻-区二区三区免费看| 亚洲精品视频在线播放| 亚洲Av诱惑| 精品一区二区三区蜜桃臀赵总| 97在线/亚洲| 久热伊人| 国产精品点击进入在线影院| 亚洲图片欧美另类综合免费视频大大香| 操高情无码| 亚州精品人妻一二三区| 久久久999网站| 无码精品久久| 揉揉日日日日| 久久精品视| 天天日B夜夜干B时时操B| 清纯唯美综合亚洲| 99久热精品99re6热| 萌白酱自拍视频| 嗯嗯啊啊的视频| 香蕉久久国产AV一区二区| 色在线视频导航| 亚洲91网站| 国产精品色| 99亚洲精品| 老熟女阿 国产91| 久热69九色熟妇97| 国产69精品久久久久99尤物| 欧美高清色| 91久久堂| 色九九九九久| 婷婷激情五月天小说网| 91色综合| 一区二区无码视频| 青青操在线亚洲视频观看欧美在线 | 天美91| 色偷综合| 老女人碰碰在线碰碰视频| 国产少妇肉丝在线观看| 免费看国产曰批40分钟怎么下载| 自拍内地三级在线观看| 97操b| 大肉棒导航| 99精品在线| 伊人精品久久网站| 91少妇| 男人天堂无码| 97色涩| 91精品电影18| 亚洲天堂东京热| 日韩中文字幕二区| 亚洲中文字幕精品久久久久久直播| 午夜性生活av免费在线看| 大但人体久久久久| 新97国产超碰| 99国产天美| 五月丁香色色网| 欧美黄片欧美黄片xxx| 无码丰满熟妇一区二区浪潮AV| 亚洲色人阁| 久久久成人免费av电影| 超碰久草| 欧美日韩小说| 熟女91网站| 日日骚av| 男生通女生屁股| 欧美洲精品一级| 91久久18禁| 国产精品情侣啪啪| 激情图片亚洲色图| 青青草国产亚洲精品久久| 女色视频社区| 国产又黄又猛又粗又爽的网站| 日本日逼视频网| 人人扣人人操| 天天天天干| 欧美日不卡| 五月综合激情网| 天天日天天插| 亚洲美女精品| 天天享受天天看| 手机不卡视频不卡在线一二三区| 日本不卡高清免v欧美日韩在线观看| 很很干很很操| 国产精品色哟哟| 日韩啪啪啪视频| 2017大香蕉国产精品久久| 国产青视频| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 一区在线国产播放| 精品一区二区三区蜜桃臀赵总 | www久久99| 天天干天天爽| 国产性刺激| 国产熟妇一区二区| 99热在线只有精品| 花花AV导航| 色色毛片| 5278欧美一区二区三区| 日本不卡三级网在线播放| 久久理论字幕视频| 操淫穴亚洲五月丁香| 久草精品在线| 国产精品黑人一区二区三区| 奇米狠999| 亚洲欧美精品一区天堂久久| 国产污视频麻豆传媒一区二区| 日逼五月天| 熟妇无码视频三区| 色婷婷国产精品一区在线观看| 日韩精品资源专区二区| www.av在线观看| 天无日色综合| 男人成人黄色视频在线观看免费下载| 精品久久久久久久| 亚洲av淫乱| 久草久热| 亚洲精品乱码久久久久久蜜桃麻豆| 东北熟女91| 亚洲 自拍偷拍 欧美| 欧美黄片视频在线观看免费| 91在线视频免费中出| 97操在线| 中文字幕丰满子伦无码专区在线视频最新| 国产www色在线观看| 97香焦色区| 日韩 女同 综合| 亚洲国产综合图区中文字幕| 日韩不卡在线一区二区| 国内黄色精品| 大香蕉欧美| 99久在线精品99re8| 91五月天| 玖草在线视频| 日本黄 R色 成 人网站| 亚春色色| 天天流夜夜操| 日本亚洲嫩草影院啪啪| 日本岛国黄色网址 | 国产精品黄色三级av| 国产熟女少妇一区| 少妇精品| 色婷婷久久| 青青草玖玖爱| 日韩免费看在线黄色片| 在线亚洲精品久久久| 欧美日韩在线小说 | 玖色AV| 青青青草原| 久久91精品国产9丨久久分亭| 91老司机在线视频免费观看| 伊人麻豆传媒| 亚洲男人的天堂亚洲| 天天在线91| 熟女人妻一区二区三区| 国产精品白丝AV| 美女国产一区二区久久| 欧洲一区二区三区四区在线观看| 色官网在线| 美女骚尻视频| 久久香蕉国产线看观看猫咪av| 青青草成人视频在线观看二区| 明星性猛交ⅹxxx乱大交| 五月婷婷丁香六月| 伊人加勒比| 精品无码久久久| 清纯唯美亚洲| 熟女天天干| 曰韩操B| 97精品在线| 欧美一级A片不卡视频。| 久久久久久91香蕉国产| 亚洲综合另类小说色区亚洲成av人片在www| 久久久com| 色波多| 97在线欧洲| av最新免费中文字幕| 成人久久精品| 欧美一区二区观看在线| 嗯嗯不要 视频| 操91| 欧美日韩大香蕉| 久久最新视频免费观看| 久久久国产三级黄色片| 91精片| 色爱欲亚洲| 日韩av不卡在线看| 超碰导航97| 日韩内射视频| 亚洲日韩美国人妻| 久久精品国产亚洲av水密被窝| 性色一线| 无码黑人精品一区二区三区三| 中文字幕色AV| 日本中文字幕高跟| av资源在线播放天堂| 91精品人妻一区二区三区蜜桃| 天天干天天日天天射黄色| 欧美综合娱乐久久| 9Ⅰ超碰| 综合 青草 伊久久 影院 综合 | 超碰97在线中文| 日本午夜久久电影| 黄色大片免费在线| 强乱老妇中文字幕| 亚洲色图国产另类| 欧美日韩999| 乱性AV| 国产视频97| 九九热视频这里只有精品| 久久美女福利是上海美女| 精品国产av一区二区三区四区入口| 亚洲综合九| 日本熟妇熟色97一本在线观看| 欧美精品xxxwww| 4虎在线观看| 久久夜夜夜| 9/A片 | 九久久九九久视频| 日韩天天本| 久草精品热视| 激情五月天色播| 嗯啊抽插大香蕉网页| 神马久久久久久久| 高精欧美色| 欧美后入视频| 99国产天美| 亚洲成人碰碰| 亚洲成人免费在线| 99精品成人免费看| 日韩丝袜二区| 久操网视频| 国产乱伦亚洲色图高清无码| 久久精品人妻一区| 中文字幕一区二区视频在线观看 | 色官网在线| 久久欲| 中文字幕三四区| 午夜啊啊| 欧美九九九| 久99在线免费观看视频| 欧美综色欧| 久久久久国产精品人妻aⅴ天堂| 10000部十八禁看电影| 亚洲情色婷婷五月天| 操操啪| 亚洲av无码成人精品国产| 欧亚性爱啪啪| 国产精品免费视频不卡| 国产亚洲色婷婷久久99精品91葵花宝典| 中文字幕第9页萱萱影音先锋| 久久AV无码AV| 一级性爱视频免费观看| 国产精品视频内谢女人| 亚洲无码超碰免费| 欧美的性爱网站免费| 一区操逼| 亚洲图片欧洲图片aⅴ| 亚洲色 国产 欧美 日韩| 嫩草影院性色| 色色色综合| 偷拍 精品另类 凸凹了四区| 日韩情色AV| 欧美 亚洲 另类 综合| 骚熟女吞| 女人18精品一区二区三区| 人妻色情天天操| 91天堂丝袜美腿| 亚洲美女精品九九视频| 日韩成人精品| 九九综合久久| 九九久久久九九| 青青草成人视频在线观看二区| 亚洲国产丝袜在线观看| 亚洲熟女诱惑| 久久欲| 国产美女高潮叫床视频| 超踫中文字幕| 亚洲熟女一区| 欧美日韩在线小说| 欧美一级久久久丰满| 在线强奷到舒服的无码视频| 亚洲天堂,男人| 日韩精彩免费| 亚洲精品97久久中文字幕| 老熟女综合| 中文字幕日韩人妻视频| 99热这里只有精| oumeisetupian| 色老久久| 国产免费黄色一级大片| 亚洲精品一区二区三区在线播放 | a在线观看| 这里只有精品视频在线| 日本免费中文字幕在线| 婷婷丁香五月激情啪啪| 亚洲色图激情小说| 激情婷婷丁香网| 欧美翘臀视频网站一区二区三区| 国产亚洲欧美每日在线| 婷婷九月色| 欧美成人色| 性色综合网| 中文字幕交换人妻| 色狠狠综合噜一二三区| 99色热| 牛牛AV人人夜夜澡人人爽| 逼逼逼逼操操操操操操操操操午夜剧场| 久久婷婷精品| 黄色一区三区| 久久综合资源一区二区| 中文字幕国产精品1区| 精吧天堂| 国产操逼视频在线观看| 欧美日韩m| 欧美精品不卡一二三四在线91| 欧美色www亚洲国产阿娇要播| 熟女被操视频网址| 射丝袜大香蕉| 性爱免费视频成人| 国内操逼视频二区| 性爱视频免费网址| 免费的av网| 精品人妻av区天天看片| 五月天婷婷色| 极品少妇久久久久| 女人高潮大叫一级毛片| 骚熟女AV网| 日本高清有码网址视频| 中国的操老妇女| 伊人精品久久网站| 亚洲黄色网址| 3d成人精品一区二区| 国产精品第二页| 中文字幕日韩专区精品系列| 99999精品成人| 色激情综合网站| 首页亚洲国产高跟丝袜诱惑视频| 久久午夜神马| 91男女啊啊啊| 男人女人18禁片免费看网站| 男人的天堂欧美| 欧美亚洲一级在线观看| 欧美熟女逼久久久久久| 蜜臀操逼黄色视频操的好爽| 久久九九久精品国产尤物|国产精品爽黄69天堂A片潘金莲,国产亚洲精品第一综合 | 日本一区二区成人在线| 精品一区99999| 国产情侣自拍在线播放| 91麻豆天美国产欧美高潮| 在线视频日韩欧美国产| 精品一区二区三区蜜桃| 91欧美高清| 亚洲中文字幕熟女| 欧美一区二区三区成人性生活| av在线免费一区二区| 人澡逼| 亚洲久热| 日本黄大片在线观看视频| 亚洲揄拍网| 一个人免费HD91视频| 欧美综合1性辶| 九月AV| 国产精品视频一区二区三区八戒| 麻豆天天躁天天揉揉AV| 国产久久久9999| 啪啪啪东京| 伊人四虎综合| 欧插网站| 人成午夜免费大片| 亚欧高清| 久久久免费高清中文视频| 欧美熟爽综合| 无码在线亚洲| 呦呦影院| 欧美丝袜中文字幕07在线| 色好看av| 综合激情五月天| 国产精品99精品视频网站| 爱妻综合网| 日本精品一区三区| 无码日韩网站| 日本操逼视频不卡直接放| 亚春色色| 国产亚洲日本| 在现视频女上位好爽| α√在线| .精品人妻一区二区三| 超碰在线日韩一区| 裸体美女久久久| 亚洲另类综合欧美| 亚洲国产日韩欧美熟妇在线| heyZO天然素人无码AⅤ专区| 啊啊啊好想要| 欧美96在线|欧| 欧美天天综合站| 97欧美精品综合| 日本在线一二 | 欧美在线大香蕉| 骚货| www.婷婷| 99操视频| 立川理惠无码一区二区| 操操逼操操逼操操逼逼| 激情黄色片在线观看| 91欧美色| AV中文字幕三四五| 丝袜天堂网| 亚州中文字幕超碰97| 四虎永久在线精品免费网址 | 久久华人网| 牛牛久久国产精品视频一二三| 中文字幕91综合| 大香蕉免费中文| 天天做天天爱| 午夜精品久久久久久久男人的天堂 | 亚洲一级黄色毛片| 97亚洲综合| 亚洲色图亚洲| V A在线| 免费成人自拍视频在线| 美欧色综合| 久久久极品| 欧美综合中文| 大香蕉伊人75| 天天综合网日韩| 国产精品九九九| 亚洲婷婷丁香在线| 福利视频香蕉免费一区二区在线| 在线视频免费观看午夜| 97超碰磁| 成人麻豆av电影网站| 天天色黄色影院天天操| 青娱乐国产盛宴视频| 九月丁香综合网| 一区在线国产播放| 国产精品色| 青青草原狼av| 啊啊啊啊二区好大| 中文字幕乱偷人妻久久艾草网| 欧美色自拍| 玖玖资源视频一区二区三区| 97色综合中文网| 色网色网色网色网色网色| 欧美黄色手机在线观看| 曰韩操B| 丁香婷婷啪啪| 高清不卡国产| 91国产丝袜美女| 中文字幕乱妇免费视频| 尹人免费观看视频在线| 亚洲AV无码国产精品久久久久| www九九热| 免费看污网站| 51一区二区三区| 超碰97中文| 国产一进一出视频网站| 岛国精品视频在线观看 | 在线日韩精品一区二区三区| 国产成年免费大片黄在线观看| 牛黄色久午久| 国产馆极品诱惑| 大香蕉92| 免费αV在线视频| 亚洲成熟国产精品美女| 久久久工口| 91黑丝操| 午夜人人操| 亚洲欧洲综合视频在线| 嫩草伊人久久精品| 久热最新在线杭州| 亚洲AV秘 精品久久老牛影视| 九九亚洲| 青青草好吊| 你懂的在线观看区国产| 亚洲欧洲国产综合av| 嗯嗯嗯啊啊啊操的我好爽| 伊人午夜福利视频| 日韩一区二区精彩视频| 久久婷五月天| 久久久久久裸体| 亚洲 小说 欧美 激情 另类| 丁香五月av| 日日干夜夜骑| 五十路六十路七十路熟婆| www.狠狠操| 黄色一区三区| 人人艹亚洲| 美女久久久久久久| 亚洲天堂2020| 日韩中文字幕二区| 欧美一区二区三区成人性生活| 操屄日韩| 女人妻一区| 亚洲一二三四区| 五月天婷婷久久| 99re在线视频| 国产一进一出视频网站| 色五月69夫妻| 精品无码欧美三级| 久久免费老司机精品| 丰满人妻-区二区三区免费看 | 男人干美女| 操一操摸一摸| 欧美综合第一| 100啪啪视频大全| 久久久久9久久久久| 少妇一区二区三区| 天天影视色香色欲| 欧美翘臀视频网站一区二区三区| 国产 码在线成人网站| 青青草综合在线| 日韩一级片| 欧美日韩小说| 亚洲春色激情小说| 国产精品不卡高清在线观看| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 90后性网国产欧美| 97亚洲自在精品在线观看| 中文字幕日本久久| 欧美亚洲系列| 国产一区二区三区中文字幕| 伊人国产成人av网站| 久久久艹艹艹| 欧美A片中文字幕| 国产精品视频播放| 日韩一级成人毛片免费观看 | 波多野结衣之双飞调教在线播放| 国产13区| 欧美日韩精品一区二区三区高清| 亚洲国产中文字幕| 国产亚洲99久久精品| 9丨久久九九九| 九一亚洲国产免费| 岛国大片在线观看网站入口| 日夜尻逼网| 欧美激情五月天| 国产品精品自在在线午夜免费| 亚洲影院小综合| 岛国艾薇凹凸视频天堂| 九九九九九九九九九国产精品| 人妻夜夜爽天天爽麻豆三区网站 | 天堂种子在线www网资源| 91亚洲情色| 加勒比综合九九99视频在线播放| α√在线| 91少妇| 少妇色综合| 99色色网| 国产精品一区二区校花| 日韩99999| 国产盗摄美女如厕大神作品在线观看| 午夜影美女日鸡鸡天天视频国产| se..亚洲欧美| 足交视频老司机| 亚洲天堂男人在线| 欧美另类综合久久| 日韩一级二级三级免费看完整版| 欧美 亚洲 综合 制服 另类| 青青网三级视频| 亚洲精品影视老司机| 精品人妻av区天天看片| 精吧天堂| 色月天AV导航| 色色操| 国产日韩欧美亚洲精品95 | 色欲久久综合| 韩国一级AAA| 色99999| 色69大色97香蕉| 欧洲精品在线播放| 欧美日不卡| 亚洲午夜福利视频| 国产欧美精选激情视频| 97亚洲综合影院| 黄色交缠性感爆操91国产精品免费一区二区三区 | 人妻 欧美 中文| 日韩免费人妻色情网站| 伊人色综合网电影| 成人aⅴ一区二区三区| 永久电影三级在线观看| 亚洲人妻日日日| julia ann久久| 国产成人主播| 亚洲高清内射| 蜜桃传媒一区二区亚洲| 超碰av人人人| 中文字幕一区二区三区视频播放| 奇米狠999| 欧美黄色大片在线观看| 无码不卡八戒| 国内亚洲高清无码| 亚洲天堂精品日韩电影| 国产综合久久久麻桃个| 欧美中日韩XXXX| 亚州五月| 四虎影视国产精品| 婷婷久久久精品| nuu12国产麻豆精品| 色综合超碰超| 91亚洲欧美综合高清在线| 丁香五月天久久精品视频一区二区三区| 欧美日韩色图片| 骚逼高潮久久精品| 色欧美天天| 青青草九九九九九| 四虎AV无码| 亭亭丁香激情| 午夜天堂网| 欧美夜色| 91国产丝袜美女| 男人天堂无码| 亚洲欧洲日韩中文字幕一区| 午夜一区| 中文字幕精品探花视频| 国产丝袜美女在线一区| 一区二区三区高清天码| 欧美一区二区三区另类精品| 欧美东京热精品A∨| 3p国产色噜噜一区| 色综合久| 久久一二区四| 亚洲大胆人体av| 麻豆区久久久久亚| 97久久久久| 老司机午夜精品视频| 综合影院永久入口国产| 黄色片,com| 欧美成人性爱视频大全| 美女黄色一级A视频| 日本丝袜美腿人妻九九| 精品久久九| julia国产在线| 国产91福利小视频在线观看| 日本三级一区二区 在线| 国产亚洲日本精品在线| 蜜桃久久综合视频| 久久一二三四不卡| 天天综合91入口| 国产精品黑人一区二区三区| 国语国产操逼伊人AV网| 六月丁香五月婷婷| 神马久久久久久久久久| 蜜桃久久一区| 国产精品高清2021在线| 日本精品不卡一二三区| 欧美嫩性色| 国产免费一区| 婷婷婷婷婷婷久久久久| 日本女优在线视频福利| 中文字幕一区 二区三四五 区日 日骚| 亚州乱码中文字幕综合久久久| 91无摭挡| 国产强奸乱伦欧美| 91在线无码精品秘 软件| 国内精品久久国产,www香蕉久久五月丁香,亚洲欧美日韩精品永久在线,日本精品一 | http://qxhbdz.com| 色拍偷亚洲| 97在线免费视频| 午夜高清成人在线视频| 国产盗摄美女如厕大神作品在线观看| 伊人网在线点播| 久久亚洲欧美中文字幕国语| 91无码中出人妻视频| 天堂网 主播 亚洲| 日韩免费av片高清无码| 九九色精品| 亚洲高清少妇| 亚洲巨爆乳一区二区三区四季网| 免費黃色視頻觀看一| 大吊色| 搡老女人老91妇女老熟女| 免费一级毛片在线视频观看| 97免费免费视频网| 中文字幕熟女人妻丝袜| 九久9精品| 蜜臀th| 日韩熟女乱伦中出| 伊人久久亚洲中文字幕| 亚洲熟女人妻中文字幕一区二区| 在线国产福利网址导航| 99啪啪| 精品三级在线专区| 色蜜AV| 亚州综| AA丁香综合激情| 亚欧美无遮挡| 成人免费不卡在线视频| 久久久久9999精品九九九| 久久成人国产精品| 国内黄色精品| 91丨国产丨白浆秘 洗澡动漫| 五月色综合| 欧美92| 日日操天天操| 亚洲男人天堂2017| 99热在线观看| 亚洲久久久| 国色天香av| 色姑娘综合网| 丝袜狠狠草尤物人妻av91| 久久婷婷电影网| 东京太热久久久| 国内一区二区免费| 极品白嫩福利在线| 人妻9117c| 亚洲淫乱骚妇AV| 欧美探花网| 亚洲精品1区| 亚洲一卡2卡3卡4卡乱码网站| 99re在线视频| 青娱乐日韩无码| 欧美综合色图网| 亚州精人品大香蕉| 欧美片第一页| 欧美78| HEYZO高无码国产精品227| 超碰97人人乐| 亚洲日产专区| 精品国产91内射久久| 今日头条成人一区二区三区四虎精品| 麻花豆传媒剧国产MV出差| 玖玖草久草99蜜月一区二区三区| 久久‘黄片视频| 欧美激情精品久久久久久| 嗯嗯嗯好爽| 日韩免费三级黄片电影| 91操人| 激情五月综合网| 超碰在线欧美性爱激情| 走光一区92下载| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | julia ann久久| 超碰av人人人| A级毛片在线看免费| 久草线上视频免费看| 志村玲子视频一区二区| 在线观看一级α片刺激高潮视频| 欧美亚洲宗合色性图| 久色网| 极品综合| 人妻91少妇| 色婷婷婷五月天激情四射| 视频分类 国内精品| 欧美亚洲高清| 精品女同一区| 中文字幕在在线观看网站| 中日韩熟女| 麻豆久久一区二区三区| 欧美影音在线| 天天看综合网| 偷拍自拍在线视频观看| 色悠久| 999九九九九国产动| 成人AV素股で擦久久| 国产97视频免费观看| 九九热AV| 快播久久人人aV| 欧洲亚洲人妻无码中字久久三区四区 | 熟妇人妻一区二区三区| 久久美女福利是上海美女| 国产中出内射一区二区| 成年在线视频日本亚洲在线视频区精品江靖宇公司 | 国产不卡的视频| av情色影音| 国产精品成人在线| 久操网线| 先锋影音av先锋一区| 亚洲女人91| 插B在线观看| 另类图片亚洲加勒比另类图片亚洲加勒比另类图片亚洲加勒比 | 富二代亚洲精品99| 亚洲午夜AV| 精品人妻一区| 亚洲国产精品无码AV久久久| 国产白丝AV| 精品二区三四区五电影| 天天插夜夜爽| 亚洲丝袜色图| 日韩pv中文| 屌逼麻豆| 婷婷五月天成人网| 亚洲性爱无码乱伦av| 欧美精品日韩久久久九| 三级精品三级在线观看| 97超碰欧美| 偷拍盗拍亚洲色图图片| 清纯唯美激情| 大香蕉日韩| 超碰色大香蕉| 欧美在线电影| 一卡二卡三卡| 丝袜美腿91| com 首页 18岁 禁区 女优 免费 精选 同城 | 色五月av| 97欧美日韩综合| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 91超级碰| 91Chinese在线| 97综合在线| 色丁香久久| 婷婷色五月激情| 91狠狠综合久久久久久| 91五月天| 亚洲少妇喷视频看| 欧美78p| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 亚洲熟女乱色一区二区三区| 色牛aV| 欧美熟妇成人一区二区| 无码人妻一区二区三区色欲aⅴ| 日韩日本欧美在线观看| 精品亚洲一区在线观看| 乱伦一区二区三区‘| 能在线播放的国产三级| 91精品人妻电影| 欧美一级黄片免费播放| www.丁香五月| 九九热九九热| 大香蕉在线视频重口味毛片在线| 18岁禁 茉莉成人久久| 日本男人插女人的逼黄色| 加勒比人妻综合| 美女91网址| 好爽视频在线观看视频| 欧美福利视频啊啊啊啊| 国产99精品一区二区三区免费| 午夜精品五区| 日韩熟妇二区| 白丝AV网站| 美女网站黄页| 色五月av| 日韩三A大片在线观看| 在线无码操| 亚洲图片 91| 乱老熟女一区二区三区| 91痴汉| 亚洲欧洲成人在线电影| 国产区91柔拿会所技师| 综合婷婷| 久久香蕉超碰97国产精品| 久久精品女同亚洲女同13| 日韩小电影| 色色色色日本| 9九九九九视频在线观看| 久久综合女优| 亚洲综合嫩| 嗯啊视频免费在线观看| 99啪啪| 97在线青| 久久精品人妻一区| 国产AV无码AV| 一区二区久久天天干狠狠| 欧美一区二区三区黄色影视| 欧美色图亚洲激情| 日韩乱伦影音先锋| 91啪9色| 骚鸭AV| 日本性爱欧美性爱| 男人的天堂2010| 色在线69堂| 天天看夜夜看日日干| 欧美黄片视频在线观看免费| 中国黑人三级片网站上区| 操熟女91| 国产一区二区欧美日本| 99999久久久久9国产精品| 久久久草草精品| ,成人免费啪啪视频| 日韩精品一二三四| 欧美爱国产综合、| 亚川综合视频| 午夜激情床戏激情| 78精品在线| 日韩欧美国产高清视频| 操淫穴亚洲五月丁香| 不卡在线观看视频| 东京热视频网| 欧美综合自拍成人自拍第二十页| 97欧美色综合| 成人一道本免费视频| 国产九月婷婷| 97se亚洲| 殴美在线AⅤ| 高潮嗯啊性感美女久久久| 色欲av国内精品久久久久久| www成人啪啪18秘 免费| 91五月天| 九九热久久99精品re| 亚洲日本男人天堂网| 不卡二三区人妻少妇| 国产原创剧情在线丝袜 | 97综合国产| 开心激情站| 超碰在线免费一区二区三区| 7777欧美成是人在线观看| 欧美传媒一区| av绯色| 国产不卡中文字幕免费avi| 国产精品亚洲色婷婷久久久| 欧美最婬乱婬爆婬性视频 | 国产超碰| 欧日韩一二三f区| 欧美成人性爱视频大全| 亚洲操操操无码| 黑人精品成人一区二区三区| 国产粉嫩蜜臀av一区二区三区| 黄片www视频免费| 久久人人看| 亚洲 图片 欧美 色图| 97爱爱| 天天综合AV| 9色国产精品一区粉嫩| 99爱久久视频频| 13小男生GAY自慰脱裤子| 色老汉色| 欧美一级黄片视频在线| 中国的操老妇女| 亚洲女毛多水多21P| 亚洲成人AB| www.五月天| 老熟女91| 国产精品网站免费| 嗯啊抽插大香蕉网页| 极品一区二区三区免费| 欧美日韩第一页| 老熟女91视频| 天天综合影院91| 激情五月天插| 粉嫩久久久极品| 99亚洲天堂| 国产高清自拍视频| 极品粉嫩少妇视频| 国产精品久久久无码AV网站| com 首页 18岁 禁区 女优 免费 精选 同城 | 免费自拍三级综合| 啊灬啊灬啊灬啊灬高潮奶出了免费视 | 亚洲av强奸乱伦| 大香蕉久久| 久久一二三四不卡 | 大香蕉淫人| 伊人青青一区成人视频在线观看区| 国产精品久久妻无码网站| 亚洲熟女偷拍在线观看| 97啪啪| 男人女人18禁片免费看网站| 操淫穴亚洲五月丁香| 蜜臀国产AV中文字幕| 国产AAAAAABBBBB| 日日AAvv| 亚洲男人天堂网久久| 久操视频资源站公开| 我想要 啊 啊 啊| 久久久九九九九| 久久伊人大香蕉| 操逼日批| 97se亚洲综合自| 日韩图区| renqi久久久久久久久久久久| 三级特黄60分钟播放| 精品一区二区三区麻豆| 色网在线| 精品久久在线区一区| 五月综合婷婷久久网站| 日本操逼视频免费| 蜜臀久久99'精品久久久| 午夜精品99久久久久传媒| 婷婷丁香五月天综合东京热| 亚洲av青草久久一区二区| 人人爽夜夜玩视频| 97人亚洲综合字幕| 五月花婷婷| 欧美精品久久久久久久久88| 日本性感人妻91| 亚洲色人阁| 欧美综合传媒| 91九九九小逼| 男人亚洲91首页在线| 成人三级片无码| 久久69精品久久久久久久| 亚洲不雅视频1区二区| 九九九九九九九九九九九蜜桃| 91亚洲欧美色图| 91 亚洲 欧洲| 97色婷| 色香色欲天天综合网天天来吧| 亚洲精品国产熟女| 丁香七月婷婷| 国产伦精品| 超碰诱惑| 久久风骚城市| 色五月激情AV在线| 青青草色插素人| 精品十三区| 91女神在线视频| 男人的天堂2018东京热啪啪啪| 色综合色欲色综合色综合色综合| 人人操,操人人| 日本操大逼| 国产成人欧美一区二区三区的国产| 日本熟妇人妻中出视频| 欧美日韩m| 国产精品交换一区二区| 欧美网站免费| 一区三区啪啪| 免费人成?大片在线播放| 国产精品久久久久久片| 亚洲 一区二区 自拍| 亚洲蜜乳av| 午夜精品五区| 国产偷拍自拍在线视频| 国产操偷| 久久‘黄片视频| 精品国产久热在线观看| 国产精品无码AV网站| 国产 三级自拍| 综合色播| 丝袜美腿诱惑亚洲欧美视频在线观看 | 99视频自拍| 26uuu欧美| 色av中文字| 97干色天堂| 日本最新免费韩国1区2区视频播放| 麻豆一区二区三区精品| 九一综合网| 久久熟女精品不卡一区| 夜夜欧美| 国产强奸乱伦欧美| 在线无码视频|