日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Java異常處理全攻略:體系、機(jī)制、性能與排查實(shí)戰(zhàn)

Java異常處理全攻略:體系、機(jī)制、性能與排查實(shí)戰(zhàn) 寫(xiě)Java也寫(xiě)了十個(gè)年頭了異常處理這個(gè)話題每年都會(huì)翻出來(lái)聊但每次看新人的代碼還是會(huì)頭皮發(fā)麻。有的把異常當(dāng)擺設(shè)catch完打一行日志就當(dāng)無(wú)事發(fā)生有的把異常當(dāng)萬(wàn)能藥任何業(yè)務(wù)分支都用拋異常解決。異常處理不是Java語(yǔ)法里最難的那一坨但絕對(duì)是最能看出一個(gè)程序員功底的地方也是面試必問(wèn)、上線必踩的環(huán)節(jié)。這篇內(nèi)容我打算系統(tǒng)地把Java異常處理從頭到尾捋一遍從異常體系本身到底層機(jī)制從實(shí)戰(zhàn)策略到性能考量再到高頻問(wèn)題的排查思路。無(wú)論你是剛學(xué)Java準(zhǔn)備面試的在校生還是工作中時(shí)不時(shí)被線上異常困擾的初級(jí)開(kāi)發(fā)甚至是想幫團(tuán)隊(duì)定一套異常規(guī)范的組長(zhǎng)這篇都能給你一些可以直接用的東西。1. 異常體系全景先搞清楚Java到底把“錯(cuò)誤”分成了幾類很多初學(xué)者看了不少異常處理的代碼但問(wèn)起Throwable和Exception、Error之間的關(guān)系還是說(shuō)不明白。這個(gè)搞不清楚后面設(shè)計(jì)異常和處理策略都會(huì)跑偏。1.1 Throwable家族不要把Error當(dāng)Exception來(lái)處理先看最頂層的Throwable這是Java里所有“可以被拋出”的對(duì)象的共同父類下面分了兩大派系Error和Exception。Error表示的是JVM層面的嚴(yán)重問(wèn)題比如OutOfMemoryError、StackOverflowError、NoClassDefFoundError。這類問(wèn)題基本不是你的代碼能“捕獲后恢復(fù)”的捕獲了也沒(méi)用因?yàn)槌绦虼藭r(shí)大概率已經(jīng)處于半癱瘓狀態(tài)。所以常規(guī)處理原則就一句話不要在代碼里捕獲Error也不要去處理它讓它直接冒泡讓JVM和應(yīng)用進(jìn)程一起完蛋然后靠監(jiān)控報(bào)警去拉起來(lái)。我還有一點(diǎn)要特別提醒catch (Throwable t)這種寫(xiě)法在大項(xiàng)目里幾乎等于定時(shí)炸彈。Throwable是連Error一起捕獲的有些監(jiān)控框架會(huì)用它來(lái)做兜底記錄但如果你在業(yè)務(wù)代碼里寫(xiě)這種捕獲就等于把OOM也一并吞了后面出現(xiàn)詭異的內(nèi)存問(wèn)題排查起來(lái)非常痛苦。Exception是程序運(yùn)行中可恢復(fù)、可處理的問(wèn)題比如文件找不到、網(wǎng)絡(luò)超時(shí)、參數(shù)不合法。這才是我們?nèi)粘R攸c(diǎn)關(guān)注的。1.2 受檢異常與非受檢異常語(yǔ)法規(guī)定背后的歷史包袱Exception又進(jìn)一步分成兩類受檢異常Checked Exception和非受檢異常Unchecked Exception。受檢異常是編譯器強(qiáng)制要求你處理的典型就是IOException、SQLException。如果你調(diào)用了一個(gè)會(huì)拋受檢異常的方法你就必須“聲明throws”或者“try-catch”否則代碼編譯不過(guò)去。這個(gè)設(shè)計(jì)是Java早期的理念認(rèn)為程序應(yīng)當(dāng)對(duì)可預(yù)見(jiàn)的錯(cuò)誤顯式處理。但后來(lái)的實(shí)踐表明這個(gè)設(shè)計(jì)過(guò)度理想化了——很多時(shí)候你根本沒(méi)法在當(dāng)前位置處理這個(gè)異常卻還是被逼著寫(xiě)了一堆try-catch最后只是把異常包一層又拋出去純屬增加噪音。非受檢異常就是RuntimeException的子類以及Error。這類異常編譯器不管你可以選擇不捕獲。NullPointerException、IllegalArgumentException、ClassCastException、IndexOutOfBoundsException都屬于這一類。它們代表的通常是編程邏輯錯(cuò)誤或前置條件未滿足本來(lái)就該在代碼層面提前規(guī)避而不是依賴運(yùn)行時(shí)的異常處理機(jī)制。有個(gè)非常關(guān)鍵的區(qū)別需要理解Spring事務(wù)默認(rèn)只在RuntimeException非受檢時(shí)回滾受檢異常默認(rèn)不回滾。這個(gè)特性讓后來(lái)絕大多數(shù)Java框架更傾向于使用RuntimeException。所以現(xiàn)在寫(xiě)Java新代碼里基本不推薦自定義受檢異常除非你明確知道調(diào)用方必須處理。1.3 自定義異常應(yīng)該怎么選父類自定義異常是項(xiàng)目中不可避免的。你總會(huì)需要一個(gè)BizException或者BusinessException來(lái)表示業(yè)務(wù)規(guī)則被違反。我的建議是業(yè)務(wù)異常統(tǒng)一繼承RuntimeException。理由主要有三個(gè)。第一因?yàn)镾pring事務(wù)默認(rèn)回滾不會(huì)出現(xiàn)事務(wù)提交了一半結(jié)果的情況。第二不用在每個(gè)業(yè)務(wù)方法上逼著調(diào)用方聲明throws代碼更干凈。第三可以通過(guò)異常類型做統(tǒng)一攔截比如在ControllerAdvice里統(tǒng)一處理成錯(cuò)誤碼返回給前端。繼承層次不要太深統(tǒng)一一個(gè)頂層業(yè)務(wù)異常類就夠了。如果確實(shí)需要細(xì)分可以考慮用異常內(nèi)部的錯(cuò)誤碼枚舉來(lái)區(qū)分而不是搞出一堆異常子類。我見(jiàn)過(guò)有些項(xiàng)目里業(yè)務(wù)異常子類幾十個(gè)維護(hù)起來(lái)非常麻煩新增一個(gè)錯(cuò)誤場(chǎng)景就要新建一個(gè)類。2. 核心機(jī)制解析try、catch、finally和try-with-resources的深層邏輯異常處理語(yǔ)法本身不復(fù)雜但真正用好的不多。這一章我重點(diǎn)拆解幾個(gè)容易出問(wèn)題的機(jī)制細(xì)節(jié)。2.1 try-catch-finally執(zhí)行順序與finally陷阱正常場(chǎng)景下try塊里代碼順序執(zhí)行一旦拋出異常直接跳到對(duì)應(yīng)的catch塊無(wú)論是否發(fā)生異常finally塊都會(huì)執(zhí)行。這個(gè)大家都懂但下面幾個(gè)邊界場(chǎng)景很容易踩坑。第一個(gè)陷阱是finally里的return。如果try或catch里有return語(yǔ)句而finally里也有return那么finally里的return會(huì)覆蓋前面的返回值。更離譜的是如果finally里拋出了異常try和catch里原本的異常會(huì)被完全掩蓋。這類代碼在code review時(shí)一定要直接打回finally塊里只做清理資源這類工作不要return、不要throw。第二個(gè)陷阱是System.exit()。如果在try塊里調(diào)用了System.exit()JVM進(jìn)程直接終止finally塊不會(huì)執(zhí)行。有些同學(xué)面試會(huì)被問(wèn)“finally一定執(zhí)行嗎”標(biāo)準(zhǔn)答案就是要排除JVM退出和線程中斷這類場(chǎng)景。第三個(gè)陷阱是catch的順序。多個(gè)catch塊時(shí)子類異常必須放在父類異常前面否則編譯器直接報(bào)錯(cuò)。比如catch (IOException e)必須在catch (Exception e)前面。道理其實(shí)很簡(jiǎn)單異常匹配是自上而下找第一個(gè)能匹配的catch塊如果先寫(xiě)了父類子類異常就被父類“截胡”了。try { // 業(yè)務(wù)代碼... } catch (FileNotFoundException e) { // 更具體的處理邏輯 } catch (IOException e) { // 更通用的IO處理邏輯 }2.2 try-with-resources資源關(guān)閉的標(biāo)準(zhǔn)答案如果你還在用finally去關(guān)閉流或數(shù)據(jù)庫(kù)連接我建議把這段看完。Java 7引入的try-with-resources才是資源關(guān)閉的標(biāo)準(zhǔn)姿勢(shì)它要求資源類實(shí)現(xiàn)AutoCloseable接口InputStream、OutputStream、Connection這些都實(shí)現(xiàn)了。讓我用一個(gè)非常實(shí)際的多資源場(chǎng)景來(lái)演示。以前要正確關(guān)閉兩個(gè)流必須寫(xiě)嵌套的try-finally還得處理各自的異常代碼又長(zhǎng)又容易出錯(cuò)// 推薦寫(xiě)法try-with-resources多個(gè)資源用分號(hào)分隔 try (InputStream input new FileInputStream(input.txt); OutputStream output new FileOutputStream(output.txt)) { byte[] buffer new byte[1024]; int len; while ((len input.read(buffer)) ! -1) { output.write(buffer, 0, len); } }你不需要手動(dòng)close編譯器會(huì)自動(dòng)生成關(guān)閉邏輯而且關(guān)閉順序是逆序的后聲明先關(guān)閉對(duì)應(yīng)先開(kāi)output再關(guān)output再關(guān)input。還有一點(diǎn)做得非常講究如果try塊和close方法都拋出了異常Java會(huì)優(yōu)先保留try塊里的原始異常同時(shí)把close階段拋出的異常作為“被抑制異常”掛到原始異常上。你可以用getSuppressed()方法拿到它們。這樣排查問(wèn)題時(shí)不會(huì)被莫名其妙的關(guān)閉異常干擾主方向這個(gè)設(shè)計(jì)值得手動(dòng)點(diǎn)贊。2.3 throw與throws異常是怎么傳播上來(lái)的throws是方法聲明的一部分表示“我這個(gè)方法可能拋出這個(gè)異常調(diào)用方自己要心里有數(shù)”。throw則是主動(dòng)拋出一個(gè)異常實(shí)例。兩者動(dòng)作不同但經(jīng)常在一段代碼里配合出現(xiàn)。傳播規(guī)則是這樣的異常從最先發(fā)生的地方逐層往外拋如果每一層都不捕獲最終會(huì)到達(dá)線程的頂層處理器。對(duì)于主線程異常會(huì)直接導(dǎo)致程序退出并打印堆棧。對(duì)于線程池里的線程情況要復(fù)雜一些這個(gè)后面會(huì)單獨(dú)說(shuō)。有個(gè)最佳實(shí)踐要強(qiáng)調(diào)在做異常轉(zhuǎn)換和包裝的時(shí)候一定要保留原始堆棧。比如你寫(xiě)throw new BizException(庫(kù)存不足, e);這個(gè)構(gòu)造方式會(huì)把e作為cause傳進(jìn)去。而你寫(xiě)成“手動(dòng)拼接消息”的話throw new BizException(庫(kù)存不足: e.getMessage());就丟失了原始異常的完整堆棧排查問(wèn)題時(shí)幾乎等于廢掉了一條重要線索。所以永遠(yuǎn)記住cause參數(shù)必須傳這是異常處理最基本的職業(yè)素養(yǎng)。3. 實(shí)戰(zhàn)中的異常處理策略什么時(shí)候捕獲、什么時(shí)候拋出、什么時(shí)候自定義機(jī)制明白了真正難的是策略。異常處理本質(zhì)上是“在哪里處理最合適”的問(wèn)題處理早了破壞封裝處理晚了又容易堆滿日志。3.1 捕獲粒度別在底層捕獲你處理不了的異常新手最常見(jiàn)的錯(cuò)誤是在方法內(nèi)部把異常catch掉再打一行日志然后繼續(xù)往下走。這種“假裝處理”的代碼是最毒的因?yàn)槌绦蚍祷刂祷蚝罄m(xù)邏輯很可能已經(jīng)處在一個(gè)錯(cuò)誤狀態(tài)但表面上一片安靜等到數(shù)據(jù)錯(cuò)亂了才顯示出問(wèn)題。核心原則是在當(dāng)前這個(gè)層級(jí)能做出有效應(yīng)對(duì)才捕獲如果不能就往上拋。什么叫有效應(yīng)對(duì)比如你寫(xiě)的是接口的入口層那你可以捕獲業(yè)務(wù)異常并轉(zhuǎn)換為約定的錯(cuò)誤碼返回給前端比如你寫(xiě)的是定時(shí)任務(wù)批處理那你可以捕獲單條數(shù)據(jù)的異常并標(biāo)注這批次里哪些數(shù)據(jù)失敗繼續(xù)處理后面的數(shù)據(jù)。這些都是有效應(yīng)對(duì)。如果只是中間層做數(shù)據(jù)組裝、調(diào)用外部服務(wù)、讀文件你沒(méi)有能力決定“失敗后對(duì)用戶說(shuō)什么”那就別捕獲讓異常繼續(xù)往上走由統(tǒng)一出口處理。3.2 自定義業(yè)務(wù)異常與錯(cuò)誤碼別一股腦拋Exception自定義業(yè)務(wù)異常的核心價(jià)值是讓錯(cuò)誤信息結(jié)構(gòu)化。一個(gè)合格的自定義異常要能表達(dá)三層信息發(fā)生了什么、影響誰(shuí)、具體是哪個(gè)上下文。我常用的做法是定義一個(gè)帶錯(cuò)誤碼枚舉的BizException再加一個(gè)字段用來(lái)攜帶上下文數(shù)據(jù)。比如一個(gè)導(dǎo)入訂單的功能拋出異常時(shí)除了錯(cuò)誤碼還可以把失敗的那一行數(shù)據(jù)一起帶上。這樣統(tǒng)一處理時(shí)能直接把“第xx行數(shù)據(jù)不合法”這樣的提示返回給前端。public class BizException extends RuntimeException { private final ErrorCode errorCode; private final String context; public BizException(ErrorCode errorCode, String context) { super(String.format(%s: %s, errorCode.getMessage(), context)); this.errorCode errorCode; this.context context; } // getter省略... }這里有一個(gè)細(xì)節(jié)異常message要包含足夠的參數(shù)方便日志排查。我經(jīng)??吹接腥藪伋霎惓r(shí)只寫(xiě)“參數(shù)錯(cuò)誤”日志里根本不知道是哪個(gè)參數(shù)錯(cuò)了、值是多少。能把參數(shù)值拼進(jìn)異常消息就能省掉很多日后的“考古工作”。3.3 異常日志規(guī)范同樣一段代碼日志價(jià)值天差地別異常處理和日志是伴生關(guān)系處理得再好日志打不好線上問(wèn)題一樣抓瞎。先說(shuō)不好的寫(xiě)法。第一種是 catch 后只打一行e.getMessage()然后當(dāng)作沒(méi)事。第二種是log.error(error)不帶任何異常對(duì)象。第三種是printStackTrace()把堆棧打到標(biāo)準(zhǔn)輸出一旦線上系統(tǒng)把stdout重定向到別的文件你根本不知道日志去哪了而且這種寫(xiě)法在分布式系統(tǒng)里完全無(wú)法和請(qǐng)求鏈路關(guān)聯(lián)。推薦的做法是用日志框架的占位符并且在最后一個(gè)參數(shù)傳入異常對(duì)象這樣框架會(huì)自動(dòng)打完整堆棧try { orderService.createOrder(orderDTO); } catch (BizException e) { log.error(創(chuàng)建訂單失敗, userId{}, orderNo{}, userId, orderNo, e); throw e; }這段日志的價(jià)值在于不但知道“創(chuàng)建訂單失敗”這個(gè)事實(shí)還有userId、orderNo這種排查問(wèn)題的錨點(diǎn)最后還有完整異常堆棧。如果業(yè)務(wù)里還接入了traceId那就更完美了一個(gè)鏈路上下游的異常都能串起來(lái)。4. 性能與并發(fā)場(chǎng)景異常處理不能拖垮系統(tǒng)“性能”這個(gè)詞大部分人是不會(huì)第一時(shí)間和異常處理聯(lián)系在一起的但等你的系統(tǒng)上了量級(jí)異常的性能開(kāi)銷就會(huì)變得非常明顯。4.1 為什么異常創(chuàng)建比普通對(duì)象創(chuàng)建貴異常的昂貴之處不在try-catch本身而在throw new的那一刻。JVM在創(chuàng)建異常對(duì)象時(shí)要填充線程當(dāng)前調(diào)用棧也就是抓取棧幀快照這個(gè)操作比普通new一個(gè)Object高出兩三個(gè)數(shù)量級(jí)。更致命的是如果你在循環(huán)里頻繁拋出異常這個(gè)開(kāi)銷會(huì)被放大幾十倍。所以實(shí)戰(zhàn)里有一條鐵律不要用異常做控制流。我見(jiàn)過(guò)有人用NumberFormatException來(lái)判斷字符串是不是數(shù)字用ArrayIndexOutOfBoundsException來(lái)檢測(cè)數(shù)組結(jié)束這些都屬于典型的錯(cuò)誤示范。正確做法是直接用正則、Character.isDigit()或顯式判斷。// 反例異常控制流 try { int val Integer.parseInt(str); } catch (NumberFormatException e) { // 認(rèn)為不是數(shù)字 }如果你確實(shí)要對(duì)所有字符串做轉(zhuǎn)換并容忍非法值可以在高頻路徑上用“前置校驗(yàn)parse”組合或者干脆在外面catch但內(nèi)部已經(jīng)限定了這個(gè)方法的調(diào)用頻率。總之異常是給“不該發(fā)生但發(fā)生了”的情況準(zhǔn)備的不是給“預(yù)期會(huì)發(fā)生”的事情準(zhǔn)備的分支邏輯。4.2 批量處理中的異常隔離一條壞數(shù)據(jù)不應(yīng)該帶崩整批批處理是異常設(shè)計(jì)最容易失衡的場(chǎng)景。一條臟數(shù)據(jù)拋個(gè)異常如果沒(méi)處理好整批任務(wù)戛然而止之前處理完的幾千條全部白做。但如果每條都捕獲、打印堆棧那日志量和CPU開(kāi)銷又不劃算。正確設(shè)計(jì)思路是把單條捕獲和失敗收集結(jié)合起來(lái)循環(huán)內(nèi)逐條捕獲收集錯(cuò)誤到List不中斷批量循環(huán)外根據(jù)錯(cuò)誤數(shù)量決定是繼續(xù)還是告警。同時(shí)日志層面要做降噪相同錯(cuò)誤碼只記錄一次完整堆棧后續(xù)只計(jì)數(shù)。ListString failMessages new ArrayList(); for (OrderDTO dto : batchList) { try { processOne(dto); } catch (BizException e) { failMessages.add(訂單 dto.getOrderNo() 失敗: e.getMessage()); } } if (!failMessages.isEmpty()) { alarmService.sendBatchWarn(batchId, failMessages.size(), failMessages.stream().limit(20).collect(Collectors.toList())); }還有個(gè)經(jīng)驗(yàn)批處理里最怕的是“無(wú)差別異常捕獲”把程序Bug也當(dāng)作業(yè)務(wù)失敗一樣吞掉。我的建議是只catch預(yù)期的BizException和明顯的可恢復(fù)異常對(duì)于RuntimeException跑出來(lái)的程序缺陷應(yīng)該讓它中斷一次打出一個(gè)完整堆棧然后修復(fù)代碼而不是偽裝成一條失敗記錄繼續(xù)跑。4.3 線程池和異步任務(wù)中的異常處理異常不會(huì)自動(dòng)消失只會(huì)自動(dòng)被吃掉用線程池的時(shí)候有個(gè)普遍誤區(qū)以為任務(wù)里的異常會(huì)自動(dòng)像主線程那樣打印出來(lái)。其實(shí)Exception在execute()方式提交的任務(wù)里會(huì)被線程池的run()方法捕獲然后靜默丟棄。也就是說(shuō)你在業(yè)務(wù)代碼里沒(méi)捕獲的異常線上日志里什么都看不到任務(wù)看起來(lái)是“沒(méi)報(bào)錯(cuò)”地消失了。這非常危險(xiǎn)。如果你用ExecutorService的execute(Runnable)提交任務(wù)一定記得給線程池設(shè)置一個(gè)UncaughtExceptionHandler作為全局兜底日志。如果你用的是submit(Callable)任務(wù)里的異常會(huì)被存儲(chǔ)在Future內(nèi)部必須調(diào)用future.get()才會(huì)被重新拋出。所以submit之后最好結(jié)合Future的get結(jié)果統(tǒng)一處理別調(diào)了submit就徹底不管了。ThreadPoolExecutorExecutor pool new ThreadPoolExecutor( 4, 8, 60, TimeUnit.SECONDS, new LinkedBlockingQueue(1000), new NamedThreadFactory(order-async), new ThreadPoolExecutor.AbortPolicy() ); pool.setUncaughtExceptionHandler((t, e) - log.error(線程池任務(wù)異常, thread{}, t.getName(), e));5. 常見(jiàn)問(wèn)題速查與排查技巧實(shí)錄與其把每個(gè)異常類都背一遍不如掌握一套排查思路。我在這一章里把高頻異常整理成一份速查表再結(jié)合真實(shí)案例講講排查鏈路。5.1 高頻異常案例NPE、ClassCastException、IndexOutOfBoundsNullPointerException在所有線上異常里排第一。排查NPE的核心是讀堆棧Java高版本會(huì)精確提示“Cannot invoke xxx because the return value of xxx is null”直接定位是哪個(gè)調(diào)用null了。如果堆棧信息里看不出來(lái)最快的辦法是在IDE里設(shè)置 “NPE breakpoint”開(kāi)啟斷點(diǎn)條件后異常拋出的那一瞬間就能看到當(dāng)前作用域里每個(gè)變量的值。它最讓人頭疼的是各種“偽裝NPE”比如Stream里map中調(diào)用方法返回null后續(xù)reduce直接炸。規(guī)避思路無(wú)非兩個(gè)要么源頭杜絕用Optional Objects.requireNonNull盡早暴露要么在邊界防御對(duì)關(guān)鍵接收對(duì)象做isNull判斷。ClassCastException通常不是“強(qiáng)轉(zhuǎn)錯(cuò)類型”而是類加載器問(wèn)題或泛型擦除帶來(lái)的假象。我遇到過(guò)的情況包括不同jar包帶了同一個(gè)類的不同版本代碼里強(qiáng)轉(zhuǎn)成另一個(gè)ClassLoader加載的版本直接ClassCastException。排查時(shí)除了看堆棧還要看是哪個(gè)ClassLoader加載的這兩個(gè)類。至于IndexOutOfBoundsException常見(jiàn)于遍歷時(shí)刪元素、計(jì)算數(shù)組索引越界處理原則是“用迭代器刪除、無(wú)把握就用for倒序或stream filter”。速查表整理如下異常類型常見(jiàn)誘因排查重點(diǎn)NullPointerException調(diào)用鏈中某個(gè)中間值為null高版本直接看堆棧提示是哪個(gè)方法調(diào)用導(dǎo)致ClassCastException強(qiáng)轉(zhuǎn)類型不匹配、類加載器不一致加JVM參數(shù)打印類加載器確認(rèn)jar版本IndexOutOfBoundsException集合動(dòng)態(tài)修改、索引計(jì)算錯(cuò)誤檢查循環(huán)下標(biāo)、刪除操作方式IllegalArgumentException參數(shù)校驗(yàn)失敗但被忽略看是否進(jìn)入異常控制流的錯(cuò)誤場(chǎng)景OutOfMemoryError堆內(nèi)存泄漏或堆參數(shù)過(guò)小dump堆再分析大對(duì)象、GC Roots引用鏈5.2 用堆棧信息定位問(wèn)題的“Caused by”才是關(guān)鍵排查異常的第一個(gè)動(dòng)作不是看第一行而是看完整的堆棧鏈特別是Caused by后面的部分。尤其在異常被層層包裝后只有追到根因才能真正解決問(wèn)題。我舉個(gè)例子一個(gè)調(diào)用第三方接口的服務(wù)一直報(bào)BizException面上消息是“調(diào)用超時(shí)”。表面看是接口問(wèn)題但繼續(xù)往下翻Caused by是SocketTimeoutException再往下還有一層Caused by是DNS解析超時(shí)。真正要處理的是DNS服務(wù)器速度而不是給接口超時(shí)加長(zhǎng)。如果只看第一層這個(gè)問(wèn)題永遠(yuǎn)解決不了。所以我在團(tuán)隊(duì)里反復(fù)強(qiáng)調(diào)“看堆棧只看到Error Line就開(kāi)始回復(fù)這是最不專業(yè)的排查方式。” 至少要看完整堆棧的caused by鏈。5.3 線上異常排查的完整鏈路traceId 日志級(jí)別 分組告警線上問(wèn)題比本地復(fù)現(xiàn)難得多核心武器是鏈路追蹤和日志。一個(gè)請(qǐng)求從網(wǎng)關(guān)進(jìn)入后都會(huì)由框架生成traceId并塞進(jìn)MDC。這樣一條請(qǐng)求在多個(gè)服務(wù)間的所有日志都帶著同一個(gè)traceId用grep一拉就能還原整條鏈路。異常排查最基礎(chǔ)的操作就是報(bào)錯(cuò)發(fā)生時(shí)先用異常信息里的關(guān)鍵字搜traceId再把這條traceId的所有日志按時(shí)間順序捋一遍。日志級(jí)別這里也要有講究。不要把業(yè)務(wù)異常的ERROR級(jí)別當(dāng)洪水猛獸在批量任務(wù)中一條數(shù)據(jù)失敗是正常情況級(jí)別應(yīng)該用WARN只有整批失敗、服務(wù)不可用、內(nèi)存異常才應(yīng)該用ERROR。不然日志系統(tǒng)里全是ERROR真正嚴(yán)重的問(wèn)題反而不容易區(qū)分。告警這塊我建議按異常類型分組而不是按服務(wù)維度無(wú)腦觸發(fā)。BizException可以單獨(dú)設(shè)置低頻告警NPE和類轉(zhuǎn)換異常這類程序Bug可以整頁(yè)郵件告警Infrastructure異常網(wǎng)絡(luò)超時(shí)、數(shù)據(jù)庫(kù)連接池打滿要走獨(dú)立的高優(yōu)告警通道。6. 團(tuán)隊(duì)規(guī)范與異常處理的長(zhǎng)期修養(yǎng)很多人以為異常處理是“語(yǔ)法技巧”但一個(gè)項(xiàng)目里異常處理好不好更多取決于團(tuán)隊(duì)有沒(méi)有形成一致的規(guī)范。有些原則是靠日積月累沉淀出來(lái)的。6.1 異常處理相關(guān)的團(tuán)隊(duì)規(guī)約寧可少吞不可多寫(xiě)我參與過(guò)的幾個(gè)項(xiàng)目都定了一些異常相關(guān)的規(guī)約核心大致是禁止捕獲異常后不處理、不輸出、不重新拋出。實(shí)現(xiàn)了“處理”就一定要有動(dòng)作。禁止捕獲Exception后只打e.getMessage()不打堆棧。禁止用異??刂茦I(yè)務(wù)流程比如用parse異常當(dāng)校驗(yàn)分支。禁止在循環(huán)中創(chuàng)建、拋出、捕獲異常來(lái)做分支判斷。業(yè)務(wù)異常必須使用統(tǒng)一異常類和統(tǒng)一錯(cuò)誤碼禁止直接拋new RuntimeException(中文提示)。禁止在finally里return或throw這是代碼review必掛項(xiàng)。這些規(guī)約不是教條每條背后都有一次深刻的線上事故或者繁瑣排查的教訓(xùn)換來(lái)的。6.2 從“會(huì)用異?!钡健霸O(shè)計(jì)異常”像設(shè)計(jì)API一樣設(shè)計(jì)你的異常更高一層的異常處理能力是把異常當(dāng)作API的一部分來(lái)設(shè)計(jì)。這就意味著異常類型名要說(shuō)明問(wèn)題本質(zhì)比如OrderExpiredException而不是BizException 105異常message要有可操作性異常里要能帶上下文參數(shù)調(diào)用方要能從異常中知道下一步該怎么處理。比如一個(gè)支付回調(diào)接口拋出的異常類型如果叫PaymentStatusMismatchException里面有orderId、currentStatus、expectedStatus調(diào)用方一看就知道是狀態(tài)流轉(zhuǎn)不對(duì)而不是一頭霧水地再去查數(shù)據(jù)庫(kù)。好的異常設(shè)計(jì)能顯著減少跨部門(mén)扯皮尤其在對(duì)接第三方系統(tǒng)時(shí)異常信息越明確聯(lián)調(diào)效率就越高。6.3 最后再分享一個(gè)真正值錢的經(jīng)驗(yàn)從我個(gè)人經(jīng)驗(yàn)來(lái)說(shuō)排查異常時(shí)最容易犯的錯(cuò)誤是過(guò)度依賴異常本身而忽略了正常路徑下的上下文現(xiàn)場(chǎng)。異常只是“結(jié)果先生留下的通知”真正的問(wèn)題往往發(fā)生在拋異常之前的幾步。比如數(shù)組越界越界只是結(jié)果循環(huán)邊界算錯(cuò)了才是根因校驗(yàn)失敗只是結(jié)果數(shù)據(jù)是怎么被污染的才是根因。所以我現(xiàn)在排查異常時(shí)會(huì)養(yǎng)成一個(gè)習(xí)慣不僅看異常堆棧還要順著日志往前翻30秒看看異常發(fā)生前這個(gè)請(qǐng)求都經(jīng)歷了什么。絕大多數(shù)詭異問(wèn)題的答案其實(shí)都在那段“看似正?!钡娜罩纠?。這也是我把異常處理定義為“長(zhǎng)期修養(yǎng)”的原因——它不是幾個(gè)語(yǔ)法點(diǎn)而是一整套排查問(wèn)題、設(shè)計(jì)代碼的思維方式。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
国产又黄又粗的视频| 精品成人女人久久| 香蕉一区二区三区在线视频| 91久久午夜无码鲁丝片久久人妻| 中出在线视频| 波多野结衣被操50分钟免费视频| 自偷自拍的亚洲视频| 国产青一二三| 中文字幕精品探花视频| 人妻中文字幕日韩电影| 日韩二级| 好属操| 亚洲成人福利电影免费 | 少妇人妻无码| 易易A毛视频| 欧美日韩性爱电影在线| 欧美夜夜狠| 亚州欧美一区| 亚洲AV成人无码一二三久久| 九九热免费国产视频婷婷伊人五月| 中 文字幕一区二区三四 五 区日 日 骚 | 日日骚精品视频| 91精品伊人久久久大香线蕉91| 九九久久一区二区三区| 亚洲成aⅴ人片不卡无码| 女人妻一区| 久久av无码| 日韩图区| 国产精品嫩草久久久久| 九九九九免费| 亚洲精品欧洲色| 日日AV加勒比| 97天堂| 欧美成人一级麻豆| 熟妇高潮二区三区| 久久精品美女一区| 精品人妻久久久| 中文字暮97| 日韩欧美午夜一区二区| 综合情欲网| 91蜜臀在线久久久久| 隔壁邻居波多野结衣中文字幕| 中文字幕第95页| 懂色AV一区二区三区| 日韩欧美成人午夜福利| 中文字幕免费在线观看| 青青草久久一区网| 九九香蕉网| 午夜毛片亚洲精品片国产久久久| 99蜜桃臀亚洲成人在线观看| 日本色日夜干| 少妇三P| 精品无码一区二区三区| 超碰午夜在线| 色五月亚洲| 亚洲av青草久久一区二区| 嗯嗯啊啊好大好爽| 精品久久大胆人体| 日韩免费人妻色情网站| 老子午夜伦不卡影院| 国产丝袜高跟美女av免费观看| 亚洲精品三| 国产丁香精品露脸视频| 欧美婷婷五月天| 无码操逼天堂| 日韩一级二级三级免费看完整版国语版 | 亚洲 自拍偷拍 欧美| 97亚洲精品| 人妻精品4K4K4K4K4| 天天添天天干电影| 九九av| 国产精品久久久鸭无码的功能| 国产51色综合久久免费| 久久激情亚洲精品无码?V| 久久久久幕乱码| 大香蕉宅男伊人| 五月天婷婷欧美三区| 人妻22p| 狠狠操天天干| 97色色视频| 美国aaaaa一级黄片| 东北丰满熟女国产一区| 久草福利在线资源站| 超碰碰碰碰| 精品亚洲俞拍视频一区| AV男人天堂网| 国产乱弄免费在线视频。 | 丝袜 亚洲 偷拍| 亚洲欧洲偷拍一区| 色五月天AV| 久久內射| 久久精品区| 欧洲免费一区二| 丰满少妇一区二区三区四区观看| 欧美综合加勒比在线| 精品无码人妻一区二区免费蜜桃| 久9爱精品| 天天操天天7| 人妻天天爽| 蜜臀久久99'精品久久久| 99re在线精品78| 亚州五月| 免费超碰97在线观看| 一起草欧美| 老司机深夜影院18未满| 青青操综合网| 亚洲熟妇丝袜在线观看| 啊啊啊水好多| 天天干天天狼在线视频| 在线观看十八禁| 天天日少妇逼AV| 人人色人人射人人妻| 久久久久久久久9| 日韩性爱1级片视频| 激情久久av一区av二区av| 精品人妻视频一区二区三区蜜桃视频| 日少妇视频| 中文字幕人成乱码熟女香港| 激激五月| 亚洲中文字幕av| 欧美日日操| 香蕉色网| 91色色色| 91精品网站| 凹凸视频特色日本特黄| 另类老少妇| 人人玩人人添人人澡免费| 欧美 综合| 亚洲春色一区二区三区| 无码精品久久久天天影视| 亚洲男人bt天堂| 9丨久久九九九| 欧美白嫩女HD| 秋霞网无码| 久久亚洲婷婷| aV中亚| 3p国产欧美99热| 九一国产精品| 国产污视频麻豆传媒一区二区| 日韩啪啪视频| 日本免费不卡二区| 91人妻素女| 男人的天堂VA| 亚洲色图大香| 国产成人欧美一区二区三区的国产| 粉嫩av一区二区三区四季| 国产精品黑人一区二区三区| 久区视频| 插入粉嫩少妇视频| 97人人中文网| 久热久一区二区三区| 久久春色| 老司机午夜福利视频一区二区| 色婷婷视频| 激情欧美97| 天天干一干| 久久久久久久少妇| 久久天天摸| 超碰99在线| 猛交交| 天天干2区3区| 日本中文字幕一区| 久久精品国产Aⅴ| 人妻喷水| 国产精品人人爽人人做可爱福利| 性爱综合一区二区| 秋霞无码av鲁丝片一区| A片三级无码| 91碰碰| 亚洲综合色男人网| 在线免费试看60秒| 中文字幕精品码亚洲| 91视频伊人| 日日碰狠狠添天天爽超| 久久综合九九| 成人黄页| 中文字幕精品一区二| 久久久久久久久成人av解说| 大香蕉123| 99re在线精品78| 天天看天天日天天操| 欧美东京热精品A∨| 欧美性爱十八禁| 英伦大奶子熟妇吊带| 久久久久久无码人妻中文字幕| 久久久四区| 欧美麻豆成人同性GⅤ在线| 韩国黄色片精品久久久| 亚洲大胆人体av| 九九九九热| 夜夜影视四色| 日韩中文字幕宗合在线| 三级激情网站| 一区二区视频你懂的| 殴美牲| 欧美A√综合网| 屁股久久久久久久久久| 婷婷日韩一区二区三区中文字幕在线| 蜜臀99999| 91国产操逼视频| 欧美黑人性猛交91| 久久伊人最新网址视频| 四虎影库国产精品免费| 欧美精品23| 欧美熟女妇同| 久热精品在线国产| 91久久18禁| 影音先锋日本一区二区| 亭亭在线资源| 伊人久久88国产女| 日韩免费中文字幕视频| 校园春色综合色| 小日子操bb在线看| 中文97国产| 日韩亚洲中文字幕在线| 天天射天天色成人| 久久偷拍人| 综合久久久久久久综合网| 亚洲性猛| 日本在线一二 | 精品9区| 奇米狠999| 日本色日夜干| baiduhicn.com。| 日韩欧美经典在线观看| 视频国产成人精品日本亚洲18| 安徽熟妇视频| 国产亚洲国产超碰| 五月婷网站| 97草草| 人人色人人操在线| se01国产在线视频| 无码精品啪啪啪一区二区三区三州| 久草视频分类在线| 久操国产在线| 中文字幕在在线观看网站| 婷婷久月| 日本天天干天天日一区| 视频国产精品未满十八禁止在线观看| 日本幼女18+| 国产日韩人人| 激情露脸爱| 色婷网| 日本成人A片免费看| 91九九九吃| 夜夜草我| 蜜臀一区二区三区亚洲最新章节在线观看 - 高清蜜臀一区二区三区亚洲全集播放 | 老熟妇综合| 99国内精品| 欧美人人AAA| 国产日韩在线播放av| 嗯~啊~轻一点 视频| 激情五月天综合网| 亚洲麻豆精品二区三区| 日韩一级片| 伊人久久艹| 精品一区二区成人动漫| 美女操逼福利视频| 26UUU欧美激情一区二区| 国产又猛又粗又爽又黄| 亚洲影院成人| 国产亚洲欧美每日在线| 五月天丁香婷婷综合网站| 国产精品自拍xxxx| 噜噜噜在线视频| 手机在线A片| 国产女乱淫真高清免费视频| 欧美黄色大香蕉一区二区| 亚洲综合一区二区| 久久,精品一二三| 91亚洲黑人| 欧美日韩人人早| 婷婷情色综合网| 青青草啪啪网| 九九九九九九视频| 巨乳特殊服务按摩| 性色av大全| 国产成人bd在线观看| 久久久久国产精品喷潮免费观看臀| 黄色香蕉视频网站一区| 婷婷九月丁香| 亚洲色图第一页| 欧美日韩色图片| 60秒免费小视频| 白嫩妹子国产骚| 欧美姓爱综合网| 无码78| wuyechaopeng| 亚洲有码第一页| 亚洲激情视频| 91人妻素女| 中文字幕少妇色| 亚洲日韩美女丝袜美腿人妻视频| 熟女六十路| 91欧美性| 欧美刺激色黄片免费看| 色网亚洲人| 国产无马av| 99国内熟女露脸视频| 日韩性爱人人爱人人操| 国产传媒一区日韩| 中日亚韩免费视频| 人妻黑丝袜电影| 日本欧美一区二区三区免费| 97伦乱| 午夜寂寞欧美| 亚洲天天在线| 日韩久久艹| 天天综合网日韩7799| 天天影视之亚洲综合网| 在线 制服丝袜中出 人妻| 91黑丝在线| 色女99一级片在线观看| av天堂加勒比| 国产传媒日本欧美专区| 久久91精品国产9丨久久分亭| 人人摸人人舔一区二区| 人妻加勒比东京热| a片在线播放| 久热99999| 男人亚洲91首页在线| 家庭乱伦性爱av| 91黄射| 青青爽| 男人高清无码一区二区| 亚洲国产精品久久久久婷婷老年| 美国aaaaa一级黄片| 久久免费少妇| 91美女国产在线| 爱欲AV| 国产高清精品一区二区三区毛片| 大茄子熟女AV导航| 久久精品99久久久久久| 欧美一区二区亚洲天堂| 欧美激情区| 9999九九九久久久| 成人夜夜爽| 人人艹亚洲| 国产自制av蜜乳| 天天干夜夜鈤| 欧美综合色综合| 日日做夜狠狠爱欧美黑人| 亚洲色人妻综合| 天天日天天操心| 日韩性爱再线视频| 欧美人妻一区| 久草大| 尤物一级在线免费观看| 激情久久久| 国产综合网站在线播放 | 91视频精品| 亚州一区二区| 97国产超碰| 校园春色AV天堂| v91av| 国产高清自拍| 一起草三级AV电影在线观看 | 欧美日韩另类在线| 亚洲青色欧美| 日本操大逼| 国产91专区| 久久婷婷一区二| 亚洲情色中文字幕一区| 鸡巴插逼视频| 手机看片1024你懂的国产| 国产视频大全| 色欲天天综合久久久无码网中文| 久日91在线| 亚洲高潮少妇| 国模不卡| 岛国AB视频| 综合色久| 午夜精品探花| 91在线无码精品秘 软件| 日韩国产十八禁| 无码高清少妇久久| 四虎午夜影院| 在线天堂999| 欧美激情性久久久久久| 思思热影视| 精品国产久久乱码| 2018天天干在线视频| 嗯嗯啊啊操死我| 久久久久亚洲熟妇熟女| 亚洲图片欧美另类综合免费视频大大香| 欧美色老汉| 熟女熟妇一区二区三四区| 亚州再线| 超碰午夜| 91精品无码人妻系列| 九九热九九热| 97精品国产手机| 夜夜骑夜夜操| 欧美性爱另类综合| 97在线观看免费视频l| 欧美色偷偷| 综合色99| 91美女视频直播| jk白丝没脱就开始啪啪| 亚洲一区二区三区麻豆传媒| 九九九精品美女| 97人人模人人爽人人| 久久久久久九九九九-美女久久久久久久-成人AV | 摸奶性爱视频网站在线免费播放| 99色在线视频| 精品人妻久久久| 9久久精品| 91欧洲入口| 日人妻视频91| 欧美在线色| 啪啪视频亚洲第一| 伊人aaa| 99久久久无码精品国产人| 久久人人爽爽爽人久久久| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 麻豆久久精品亚洲精品88| 宅男影院久久久,99| 欧美另类自拍 | 97天堂| 男同专区一区二区三区在线| 国产精品久久久久中文字幕| 另类成人首页一区| 强奸乱伦大香蕉网| 黑人性暴力毛片| av资源在线观看少妇| 上床啊啊啊| 久久婷五月天| 亚洲āv网址在线观看| 99热在线观看| 91丨九色丨国产丨人妻在线 | 亚洲综合成人网| 亚洲国产97| 国产精品久久久久久久免牛肉蒲团| 人妻少妇久久中文字幕一区二区 麻豆| 欧美在线播放aaaa| 国产无码精品久久久久久| 屌妞视频久久久久久久久久久久| 在线观看黄色电话| 97爱| 18+91网站| 人人操天天爽| 欧美日韩性爱无码| 内射黑丝袜| 日韩pv中文| 午夜福利视频在线一区| 久久噜| 嗯嗯啊啊视频一区二区三区| 日韩欧美午夜视频在线| 无码国产精品96久久久久孕妇| 亚洲和欧美裸体美女双飞视频| 亚洲aV无码成人在线观看| 丁香婷婷五月| 色九九九九九九| 91综合国产精品| 欧美综合97www| 丁香五月婷婷基地| 国产 日韩 欧美 中文 另类,国产 欧美 另类 制服 变态,高清 日韩 欧美 中文,高 | 99e久久国产精品| 久久久久久久精| 日韩成人小视频| 本道在线| 久操免费电影| 久久久一区二区三区麻豆| 新精精品久久精品| 超碰到97情色| 乱操9999| 美女91网| 96久久久久| 操逼无毒无码免费视频| 老女人91| 久久久久久久久久久久97| 精品制服美女中文一区二区三区| 大香蕉伊人亚洲| 一区麻豆 高清中文字幕| 依人大香蕉| 人妻熟女av国产网站| 国产 v乱码一区二| 五月丁香久久| 十八禁网站在线| 91欧美偷拍| 免费观看欧美日韩操逼视频| 超碰爽人妻熟女Av| 亚洲中文电影| 男人天堂免费| 久9久9精品| 丰满搜索结果 -第18页- 久久高清无码| 麻豆AV96熟妇人妻| 丝袜色综合| 秋霞网无码| 中国一级操逼视频| 亚洲人成网www| 96AV久久久| 亚洲人成网www| 麻豆国产成人精品| 久热大香蕉网站| 国产一二三在线视频五十路| se01国产在线视频| 亚洲精品一区中文字幕乱码| 淮穴色AV| 人人噜夜夜操| 91色欧美| 人妻少妇被猛烈进入中| 亚洲字幕一区二区| 日韩伦理久 久久 清纯| 超碰色中文| 色拍偷亚洲| 亚洲国产成人7777| 麻豆久久久一区二区| 精品综合久久久久久97| 亚洲色图8| 口爆吞精在线观看| 淫色网综合| 91精品导航| 影音先锋中文字幕日本好一区二区| 97亚洲性爱| 黄色工厂这里只有精品| 女人双腿搬开让男人桶| 欧美少妇性乱| 翔田千里爆乳巨臀无码| 丝袜狠狠草尤物人妻av91| 欧洲精品二区| av天堂影视中文在字幕在线中文| 动漫av中文| 强奸国产精品视频| 亚洲自拍欧美国产首页网曝| 91情色在线| 囯戸精品高潮呻吟旡码| 4141514逼喷水三级片| 欧洲特黄毛片免费看欧洲毛片| 久草免费福利在线播放| 欧美97在线观看| 亚洲97综| 精品一区二区三区蜜桃臀赵总 | 亚洲一区制服诱惑| 国产精品香蕉热久久新品| 中文字幕丝袜人妻| 亚洲精品国产熟女| 欧美久久人体| 激情综合五月| 日韩91网| 日韩精品视频在线观看一卡二卡| 日韩9999| 国产一级片| 九九九九AV| 欧美日韩人人精品| 日韩视频啪啪| 国产在线播放成人免费| 免费看污网址| 亚洲AV无码国产精品久久久久| 91挑色欧美| 一区二区三区激情在线观看| 欧美亚洲天堂| 亚洲图片偷拍欧美| 欧美狠狠弄| 欧美18老人禁| 夫妻AV网站| 欧美亚综合色图| 日韩一级片在线看| AAAA欧美日韩| 91亚洲人| 97欧美久久久久久久| 婷婷香蕉欧美在线一区二区三区| 97久久超碰| 88在线一区二区三区| 哈哈操电影AV| 天天影视网综合少妇| 免费看欧美美女黄色大片| 欧美丝袜中文字幕07在线| 蜜臀久久99精品| 亚洲精品丝袜| 亚欧精品久久久久久久久久久| 天天色,天天干,天天干| Sekablack无码一区| 久久一区二区蜜桃| 中文三一区| 狼人综合婷婷激情四射| 欧美日韩成人在线| 丁香六月婷婷| 亚洲精品尤物yw在线影院| 国产精品白领在线观看 | 日韩熟女精品无码专区一区二区| 91三级理论片播放器| 国产探花日韩援交| 天天视频网站黄| 中文字幕精品一区二| 欧美色图在线视频少妇| WWW美腿丝袜香蕉中文| 欧美日韩国产人人| 亚洲激情欧美色图| 狠狠躁天天躁日日躁97| 麻豆九九九| 欧美少妇高潮久久91| 亚洲欧洲第二视频在线观看色图| 久久久婷| 好吊妞转入那个网| 欧美精品偷拍| 国产精品一区二区麻豆| 丝袜亚洲91| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 超碰97综合| 人妻精品免费一二三区| 国产操操日韩三级黄| 国产女人91精品嗷嗷嗷嗷| 国产av尤物| 色一射色一射| 91操人| 白丝AV| 国模无码一区二区三区在线| 99色在线视频| 中文字幕伊人| 色欧美色交综合| 久久精品国产亚洲AV无码电影| 日日躁狠狠躁天天躁精品| 人人妻人人玩人人澡人人爽| 加勒比在线观看一区二区| 国产精品亚洲免费| 欧美激情一区二区| 97网址97| 家庭乱伦国产精品| 日韩欧美俄罗斯A片| 亚洲中文人妻色| 久久仑合| 一区二区三区看视频| 国产亚洲深夜激情| 中文字幕精品日韩中文字幕| 欧美日韩操逼动图| 日本天天吊| 超碰免费欧美7| 日韩无码极品| 欧美激情五月天| 日本裸体久久色噜噜| 四虎精品永久在线观看| 国产一级内射无挡观看| 成人综合久久精品色婷婷| 1000午夜黄色| 欧美人人曰人人操人人射射| 亚洲蜜桃V妇女| 一区二区视频你懂的| 国产欧美另类久久久精品课程| 国产精品点击进入在线影院| 黄色成品网站| 91大香蕉伊人| av凤凰久久久| 超碰色97| 啊啊啊啊嗯嗯嗯用力好爽 | 热99这里有精品综合久久 | 国产青青美女玩逼视频| 国产精品原创巨作?v网站| 99国内精品| 欧美亚洲清纯| 99超级碰免费视频| 超碰99re| 欧洲色色| 亚洲熟女人妻中文字幕一区二区| 日韩黄色成人性爱| 精品日日人妻| 婷婷丁香五月天综合东京热| 粉嫩久久久极品| 97人人模人人爽人人| 熟妇人妻丰满久久久久久久无码 | 嗯嗯啊啊操死我| 国产精品久久久久久亚洲色欲| 欧美色图中文字幕| 搡老女人911熟妇老熟女| 97天天爽| 综合久久久久久久综合网| 91亚洲不卡一区| 亚洲成人日韩小说| 亚洲图片 欧美电影| 日本久操视频| 日韩精品在线观看网站| 国产女人视频三四五区| 人人操天天爽| yellow网站免费观看日韩高清无码| 国产AV人人夜夜澡人人爽麻豆| 91av熟女人妻| 亚洲综合骚逼| 夜夜操天| 日亚韩精品视频二区三| 日韩啊V| 久久精品99久久久久久| 久久伊人大香蕉| 殴美在线AⅤ| 色眯眯av| www.AV有限公司一区| 日本大片日本一区二区免费高清| 乱欲一区二区| 中文日本免费高清| 我要色综合网站| 大香蕉琪琪日本女优不卡| 丰满翘臀美女影院视频| 日本天天操| 亚洲中文字幕精品久久久久久直播| 国产二区三区免费视频| 玖玖久久久| 玖玖爱一区在线| 欧美激情 日韩精品| 野狼激情网| 福利视频一区二区微拍| 国产一区二区三区白丝| 精品无码一区二区三区| 92性色国产午夜福利在线661 | 亚洲色图尤物视频| 影音先锋少妇| 日韩A优精品在线观看| 欧美日本中字另类在线| 日韩无码三级影院| 成人a大片在线观看| a片久久久久久久久久久久 | 国产AV线| 欧美熟妇色| 国产拍偷精品网站| 欧姜老司机| 亚洲一区二区在线观看91| 久久精品国产亚洲av水密被窝| 九九九九精品视频| 粉嫩av平台| 97干97色| 亚洲无码日韩电影| 操www| www.色操逼| 精品大久久| 91九九九吃| 蜜臀久久99精品久久久久久-DVD| 亚洲学生妹高清av| 亚洲囯产精品女人久久久| 嫖老熟女A片一二三区| 成人 日韩欧美一区| 色网1| 亚洲无码电影久久久| 成人AV超碰免费在线| 91超碰人人操| 97日视频| 国产日本顶级一区二区三区| av网站国产主播在线| 亚洲综合影院| 91精品国产日韩欧美综合| 亚洲欧美日韩精品久久久一区二区| 99精品久久久久久久婷婷| 狠狠色丁香| 91总综合网| 试看60秒 爽| 國產尤物AV尤物在線觀看| 国产精品小视频一区二区三区| 欧美在线综合| A 在线网址| 九九色精品| 熟女啪啪视频| 国产精品视频播放| 久久这里只精品免费福利| 另类专区在线观看| 欧美日韩97在线| 黄色一区二区秘书性感| 色五月天AV| 丝袜人妻av一区二区| 精品在线观看视频在线| 亚洲日韩XXX| 天天操夜夜嗨| 天天天堂影视日韩亚洲91| 啪啪视频亚洲第一| 欧美白嫩女HD| 国产免a费看黄片在线| 伊蕉97蜜桃97狠狠综合干| 日韩免费av片高清无码| 色女网日韩| 色翁荡息又大又硬又粗又爽| 欧美专利1区2区3区4区5区免费| 91欧美亚洲| 亚洲综合激情五月久久| 女色综合| 人妻无码后入| 黄色av片三级三级三级免费看| 亚洲97P| 欧美一区二区观看在线| 精品超碰色| 性爱av网站| 一区二区不卡视| 精品人妻一区二区免费蜜桃| 18禁免费视频| 9I1性色影院| 成人网欧美风情| 最新中文字幕精品在线| 97在线免费看视频| 今日头条成人一区二区三区四虎精品| 久久东京伊人一本到鬼色| 东京热,男人的天堂| 亚洲国产一区二区三区在线 | 日韩欧美一级特黄大片| 亚洲成成熟女人综合一区二区| 久jiu久神马影院| 婷婷视频在线免费观看| 欧美人妻少妇| 欧美色图下一页| 一道本久久棕合爱| 黄色免费网页无码| 少妇被c 黄 免费观看| 男人的天堂日韩| julia在线观看久久| 欧美黄片欧美黄片xxx| 精品无码一区二区三区| 国产91丝袜在线播放蜜月| 青青11操操操操操操操操| 乱伦3P视频| 青娱乐亚洲自拍| 熟女激情综合网| 无码精品啪啪啪一区二区三区三州| 无码99| 26uuu欧美| 99成人| 国产精品自拍xxxx| 超碰91在线| 淫荡网址| 亚洲 欧美 日韩 国产一区二区| 日日骚一区二区三区| 久久久久国色αv免费观看| 视频在线观看青青99国产| 亚洲 欧美 综合 91| 超碰天天操| 国产日产欧产美韩系列麻豆免费| 日本淫色网| 综合97亚洲| 91女优在线观看| 看看日B真人视频| 老司机福利社视频在线观看| 日韩毛片9| 操国产逼| 亚洲天堂中文字| 嗯啊不要啊在线| 青苹果影院男人的天堂| 日韩在线视频1234| 国产又大又粗又色生活片亚洲国产精品成人久久久综合免费 | 亚洲激情天堂网| 蜜桃精品视频一区二区三区| 久久亚洲一区女同性恋中文字幕| 亚洲激情视频| 日本五十路熟女一区二区| A一区片| 日韩无码专区| 闷骚老熟女15P| 极品出轨视频网站| 97国产精品视频| 日本熟妇人妻中出视频| 中文字幕人乱码中文字的预防方法| 欧美嫩性色| 亚洲91大片| 91大神精品长腿在线观看网站| 欧美日韩精品一区二区三区高清| 亚洲国男人的天堂| www被窝色com| 操迟操逼在巾线Fre看| 99操逼| 日本精品九九九| 久久五十路熟女人妻| 青青青操| 肉动漫无遮挡h在线观看| 操人无码| 一本久久久精品| 自拍大香蕉乱插| 好看的久久不射无码影视影院| 欧差乱伦二三| 少妇蜜汁| 97碰碰日本乱偷人妻中文的| 99热在线观看| 久久国产性爱| av片在线观看免费播放| 我想要啊 啊 啊| 丰满美女一级毛片在线播放| 中文字幕乱碼在线| 97超碰超碰| 久久国99999| 在线观看不卡一区二区三区| 91 丝袜在线| 国产对白刺激视频| 国产乱码精品久久久久久| 日韩人成网站在线播放| 久久精品电影| 丁香五月影院| 在线午夜成人无码视频| 屌妞视频久久久久久久久久久久| 尤物视频一区| 东京男人天堂| 香一区二区三区| 久久狠狠色噜噜狠狠狠狠97| 欧美91丝袜| www色婷婷| 中字幕人妻一区二区三区| 国产二区三区粉嫩在线| 亚洲精品日韩国产欧美| 亲子敌伦对白在线播放| 日本丝袜美腿人妻九九| 中文字幕日韩人妻视频| 97射欧美| 天天影视激情欧美| 亚州AV无码国产精品| 中文字幕99999| 少妇99| 亚洲男人bt天堂| 日本狂喷奶水在线播放212| 少妇的嫩逼图片| 国内操逼视频二区| 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 欧美伦乱爱| 黄色欧美性爱视频| 91亚洲人| 国产自偷| 美女91av| 99精品伊人| 五月天开心网| 亚洲色图欧美视频| 97免费在线观看| 久久这里只精品| 精品美女人人干| 久久做97| 九九热AV| 浓厚中出中文字幕在线| 精品视频一二三中文| 亚洲在线综合| 嗯嗯啊啊好疼| 懂色综合久久久| 91精品久久久久久综合五月天| 天堂无码精品国产久| 1区2区3区视频| 97在线免费看视频| 夜夜国自区| 伊人性在线视频| 一本色道久久综合狠狠操| 久久人体一区二区| 超碰在线1234区| av橘色网站| 久久久精品一区二区| 激情小说亚洲图片| 欧美日韩美女精品久草一区二区三区| 91超碰碰在线| 欧美亚洲清纯| 亚洲在钱| 好色综合| 欧美日韩97| CCYY草草影院地址入口| 国产美女裸体秘 永久无遮挡| 熟女这里只有精品6| 操逼视频亚洲| 免费看美国人人爽,人人操| www.操| 91男人天堂网| 色欲久久99国产精品久久久久久| 亚洲一区中文精品| 亚洲砖码砖专无区2023| 欧美色三级片91| 日本九九久久99| 中国AV美女| 成人黑料社久久| 九九九九日本| 啊啊啊啊好疼| 黑人精品成人一区二区三区| 九九热九九热| 夜夜国自区| 亚洲成aⅴ人片不卡无码| 国内精品伊人久久久久影院会| 99热免费| 欧美色亚洲色| 中文字幕五月婷婷免费| 人人人人人人少妇| 97欧美色| 尤物黄色在线观看网站| 免费看毛片操穴| 九九热三级片| 五月丁香影视| 日产精品久久久一区二区| 国产探花精品在线| 第二页中文字幕| 欧成人精品H无码| 看一级黄色视频| 久久精品六区| 日本三级大片| 91热| 91大胆欧美| 色五月av| 东京日日夜夜| 蜜臀久久99精品久久久久久| 久久久久免费少妇| 深夜国产福利| 大香蕉十区| 久96热在线观看视频| 欧美亚洲美少妇一区二区| 久久国语| 性影在线视频| 青娱乐手机日韩在线视频| 亚洲国产午夜真人一级片中文字幕精品黄网站 | 啊啊啊想要| 中文字日本乱码| 亚洲AV成人精品网站在AV| 久久久穴999| 先锋激情∨在线视频播放| 亚洲91大片| www成人啪啪18秘 免费| 青青草这里只有精品| 激情图片伦理国产一区二区日韩| 丰满人妻一区二区三区性色| 亚洲日本大香蕉1| 日韩AV电影网站| 强奸乱伦大香蕉| 91岛国动作片| 久久99精品国产| 欧美在线视频99| 日韩免费大片一级播放| 久久加勒比| a人片中文字幕一区二区| 蜜臀久久99精品久久综合| 日逼逼免费看| 草草草草视频| 加勒比五月天| 你草精品在线视频| 亚洲最新Av| 欧美综合另类| 亚洲成人在线资源| 久久精品夜色国产亚洲AV| 激情综合五月天| 亚洲无码AV九九九| 亚洲中文国际强奸字幕| 国产无码成人无码| 久久精品国产亚洲av水密被窝| 亚洲色资源| 欧美精品丝袜久久久中文字幕| 粉嫩不卡一区二区性爱| 凹凸视频特色日本特黄| 久久系列| 91人妻人人澡人人爽人人精品| 亚洲情色1区| 96久久精品一二三区色欲| 97干在线视频| 曰韩少妇无码| 精品96久久| 国产乱码久久| 国产又爽又黄| 久久精品99| 3571色综合一区二区二区| 国产成自自拍在线观看| 天天操天天日天天干| 国产成人自拍视频在线| 亚洲中文字幕av | 97超碰久久色| 青娱乐久久艹| 激情婷婷| 久久久艹艹艹| 婷婷五月天激情四射| 最新中文字幕在线亚洲| 中文字幕av亚洲精品| 日本精品久久久久久久| 人妻人人澡人人爽人人| 日韩免费人妻色情网站| 亚洲成人久久美女| 欧美激情片一区二区| 九九碰九九爱97超| 欧美熟妇亚洲版| 九九热最新| 不卡av在线中文字幕| 欧美日韩美女精品久草一区二区三区| 日本三级一区二区 在线| 久久精品国产97欧美精品亚洲| 素人美腿视频网站| 91在线无码精品秘 软件| 在线人人人人人人精品超 | 99热亚洲天堂| 99在线免费视频| 大香蕉在线视频15| 黄色二级片网站| 欧美一区二区三区大综合| 五月丁香六月婷| 99re只有精品| 嗯嗯嗯啊啊啊在线免费观看| 91日韩在线| 欧美日韩成人在线| 中文字暮97| 国产人妻一区二区三区欧美毛片| 三级网站超变态精品| 人妻色情天天操| 精品少妇999| 精品丝袜无码一区二区三APP| 囯产精品久久久久久久久久二区三区| 亚洲欧美天| 老司机福利社视频在线观看| 天美传媒在线一区| 婷婷激情五月综合| 玖玖综合视频| 100啪啪视频大全| 精品免费1| 欧美大波激情xxxx| 又大又白奶子| 国产精品久久久鸭无码的功能| 国产精品99精品视频网站| 日本最新1区2区3区| 久久久久久久 九九九九九九九| 在线播放中文字幕| 8050午夜少妇无码| 亚洲av综合色区无码一| 色哟哟 日韩精品| 色五月大香蕉| 一区二区三区在线日韩影院观看| 欧美在线大香999| 一区二区三区 日韩欧美| 天天综合影院91| 精品人妻一区二区蜜桃视频| 国产女s强制榨精视频| 婷婷成人久久久精品| 999色欧美中文字幕| 国产最火爆久久国产网站网站| 免费看污网站| 亚洲97在线观看| 亚洲精品国产av天美传媒| 91中文精品日韩欧美在线 | 水滴偷拍| 91n处女在线观看| 天天欧美欧美亚洲网| 看一级黄色视频| 超碰在线国产| 超碰在线99| 日日干日日| 丁香五月天激情| 中出91| 九九碰九九爱97超碰| 狠狠操综合| 十八禁啪啦拍视频无遮挡| 久久婷五月| 久久久精品日本一道| 日韩一级二级在线| 日本九九久久99播| 丰满人妻一区二区三区在线| 久久超碰亚洲人| 国产乱人妻精品入口| 超碰日韩美妻| 四虎国产成人精品免费一女五男| 91女在线观看| 精品九九九九九九九| 在线情色电影 91大| 中日韩久久久免费看| 青青青草原| 国产精品乱码久久| 婷婷干黄色| 欧美性爱无码一区二区三区| 亚洲成人日韩小说| 日本视频在线观看污污污| 激情丁香婷婷| 男人的天堂2018.| 制服中出中文人人精品| 射丝袜高跟鞋99| 国产超碰| 国产精品老熟女一区二区| 国产精品香蕉热久久新品| 久久久久成人亚洲国产| 91操操| 大香蕉手机在线视频| 欧美综合网1| 熟妇艹鸡八| 六月丁丁香| 免费在线黄片视频| 欧美青青草视频| AV丝袜东京热| 91激情网| AV天天综合| 婷婷五月综合在线|