亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實戰(zhàn)洞察。

t3code重構(gòu)實錄:用漸進(jìn)式改造救活80萬行遺留系統(tǒng)

t3code重構(gòu)實錄:用漸進(jìn)式改造救活80萬行遺留系統(tǒng) 接手一個代號叫 t3code 的舊項目是我這幾年做過最耗時也最有收獲的一件事。項目名里的 t3其實是當(dāng)初團(tuán)隊里一位老前輩隨手起的內(nèi)部代號——取的是 Third Try 的意思也就是第三次推倒重來的版本。可諷刺的是等我真正開始梳理這套代碼的時候它已經(jīng)歷了至少四次局部重寫代碼庫里同時躺著三套風(fēng)格完全不同的命名規(guī)范核心業(yè)務(wù)鏈路里還有一份寫了五年卻沒人敢動的祖?zhèn)髋渲媚K。這篇文章不是什么理論教學(xué)而是把 t3code 從病入膏肓到恢復(fù)正常迭代速度的完整過程記錄下來的里面包含了我踩過的坑、用過的工具、以及最終沉淀下來的判斷標(biāo)準(zhǔn)。如果你手頭也有一坨不敢碰的老代碼或者正準(zhǔn)備對現(xiàn)有系統(tǒng)做一次大規(guī)模重構(gòu)這篇文章值得你花點(diǎn)時間讀完。先說結(jié)論t3code 這個項目最終沒有選擇推到重寫而是走了一條漸進(jìn)式重構(gòu) 局部重寫的混合路線。整個過程耗時大約四個月核心模塊的接口響應(yīng)時間從平均 1200ms 降到了 380ms線上故障率降低了大約 70%更重要的是團(tuán)隊里新來的兩個同事可以在兩周內(nèi)獨(dú)立完成從前需要老員工帶著看一個月才能搞定的需求改動。下面我會按照實際操作順序把從代碼體檢、風(fēng)險判斷、分階段重構(gòu)到最終沉淀檢查清單的完整鏈路逐步拆開來講。1. t3code 項目起因攢了三四年的技術(shù)債到了不得不還的時候1.1 為什么這個代號叫 t3——它到底經(jīng)歷了什么t3code 最早是一個企業(yè)內(nèi)部的數(shù)據(jù)統(tǒng)計系統(tǒng)最初是一個工程師用一周時間寫出來的臨時腳本集合用來每天跑幾張報表。后來業(yè)務(wù)擴(kuò)張腳本變成了 Web 服務(wù)服務(wù)拆出了微服務(wù)微服務(wù)又引入了消息隊列。等到我接手的時候這個系統(tǒng)的代碼量已經(jīng)膨脹到將近 80 萬行其中有大約 30% 的代碼邏輯屬于看著有用但沒人說得清是否還有調(diào)用方。說病入膏肓一點(diǎn)不過分。那段時間系統(tǒng)幾乎每周都會出一次線上事故要么是某個定時任務(wù)突然卡死要么是某個接口偶發(fā)超時。每次排查到最后問題都指向同一批代碼——那些由不同時期不同人寫下的、相互交織的模塊。最折磨人的不是代碼本身的復(fù)雜度而是那份薛定諤的文檔文檔上寫了某個模塊負(fù)責(zé) A 功能但實際代碼里它還悄悄改了 B 表的數(shù)據(jù)而這個副作用只有 2019 年某個深夜加班的同事知道那位同事在留言里寫了一句不要再動這段邏輯之后就離職了。促使我正式把 t3code 作為重構(gòu)項目立項的導(dǎo)火索是一次持續(xù)了六個小時的線上故障。凌晨兩點(diǎn)某個核心報表的數(shù)據(jù)出現(xiàn)大面積偏差我們花了四個小時定位到原因——一個看似人畜無害的配置項在六年前被某個已離職的同事寫死在了代碼里而前一周另一位同事順手給配置中心加了個默認(rèn)值于是新邏輯和舊邏輯同時生效數(shù)據(jù)被疊加計算了一遍。那一次之后領(lǐng)導(dǎo)和團(tuán)隊達(dá)成了一致這筆技術(shù)債不能再拖了。1.2 項目啟動前我先整理了這樣一份問題清單接到重構(gòu)任務(wù)之后我沒有立刻打開編輯器開始改代碼。相反我用三天時間做了一次系統(tǒng)性的問題盤點(diǎn)最后輸出了一份讓整個團(tuán)隊都沉默的清單。這份清單分成四類死代碼與不可達(dá)邏輯通過靜態(tài)分析和運(yùn)行時日志交叉比對確認(rèn)大約有 12% 的代碼在過去一年里從未被執(zhí)行過。這些代碼不算致命但它們在每次全局搜索和代碼審查中都會消耗注意力。共享可變狀態(tài)有多個模塊通過同一個全局緩存實例讀寫數(shù)據(jù)而且沒有統(tǒng)一的版本控制任何一邊改了數(shù)據(jù)結(jié)構(gòu)另一邊都會在毫無提示的情況下拿到損壞的數(shù)據(jù)。隱式耦合一個最典型的例子是 A 模塊的日志里會順帶打印 B 模塊的錯誤信息導(dǎo)致日志監(jiān)控系統(tǒng)把 B 的故障歸因到 A 上每次排查都會走彎路。不可測試的上帝函數(shù)某個核心計算函數(shù)有六百多行內(nèi)部直接操作數(shù)據(jù)庫連接、緩存、消息隊列和外部 HTTP 調(diào)用參數(shù)有十一個其中五個是布爾標(biāo)記位。這個函數(shù)是整個系統(tǒng)最脆弱的部分因為沒人敢給它寫單元測試。這份清單的價值不在于發(fā)現(xiàn)了多少問題而在于讓我們明確了重構(gòu)的邊界。不可能一次解決所有問題但如果不知道問題在哪任何所謂的技術(shù)方案都是在賭運(yùn)氣。后來團(tuán)隊內(nèi)部形成了一個共識任何重構(gòu)項目的前兩周只做診斷和盤點(diǎn)不允許動業(yè)務(wù)代碼。誰動了誰請全組喝咖啡。2. 代碼體檢先看清全局再動手開刀2.1 繪制模塊依賴圖找到真正的核心鏈路正式動手之前我給團(tuán)隊立了一個規(guī)矩沒有依賴圖的項目重構(gòu)就是閉著眼在雷區(qū)里跳舞。t3code 的模塊關(guān)系已經(jīng)亂到無法靠人腦梳理所以我們借助工具先給系統(tǒng)畫了一張完整的依賴拓?fù)鋱D。我用的工具組合是jdepend配合Structure101前者負(fù)責(zé)做包級別的依賴分析輸出每個模塊之間的依賴關(guān)系后者負(fù)責(zé)把依賴關(guān)系可視化成圖并且標(biāo)出環(huán)的存在——多個模塊相互依賴形成的循環(huán)引用。這一步做完之后整個系統(tǒng)的病灶就像 X 光片一樣清晰了。依賴圖讓我看清了三件用眼睛看代碼根本發(fā)現(xiàn)不了的事有一個審計日志模塊順著依賴箭頭查下來居然間接依賴了幾乎所有的業(yè)務(wù)模塊。也就是說每一次寫審計日志的操作都可能觸發(fā)一長串初始化邏輯這就是為什么某些寫操作莫名其妙地慢。名義上的三層架構(gòu)表現(xiàn)層、服務(wù)層、數(shù)據(jù)層早就名存實亡服務(wù)層里有大量直接操作數(shù)據(jù)庫表的代碼數(shù)據(jù)層里反而藏著業(yè)務(wù)判斷邏輯。核心鏈路其實只有一條但為了照顧十幾種邊緣場景代碼里塞了二十多個 if 分支其中有六個分支從未被任何已知請求觸發(fā)過。依賴圖不光幫我們找到了問題更重要的是幫我們定下了重構(gòu)的順序。規(guī)則很簡單從依賴關(guān)系圖的底層開始改先改那些被依賴最多、但自身不依賴別人的模塊。這樣做的好處是每次改動的影響半徑是可控的不會出現(xiàn)改了一個底層工具類結(jié)果三天后才發(fā)現(xiàn)遠(yuǎn)端的某個服務(wù)被牽連的情況。這里我想多提一句很多人覺得畫依賴圖是浪費(fèi)時間有這個功夫不如直接開改。但我的親身體會是依賴圖上花掉的一周時間在后期至少省出了三周以上的聯(lián)調(diào)時間。尤其是當(dāng)你需要向老板或者甲方解釋為什么重構(gòu)需要四個月的時候一張清晰的依賴圖比任何 PPT 都有說服力。2.2 用靜態(tài)分析工具量化壞味道讓問題變得可以討論畫完依賴圖之后下一步是對每個模塊的代碼質(zhì)量做量化評估。這個階段我用的是SonarQube加eslint針對項目里的 JavaScript 部分和pylint針對 Python 部分。t3code 是典型的多語言混雜項目核心服務(wù)用 Java有個輔助腳本模塊用 Python前端管理后臺混著老舊的 jQuery 和新版的 React。量化指標(biāo)我只關(guān)注四個圈復(fù)雜度函數(shù)的圈復(fù)雜度超過 15 的一律列入重構(gòu)觀察名單。圈復(fù)雜度超過 30 的直接標(biāo)紅列為最高優(yōu)先級。這個指標(biāo)能在一定程度上代表代碼的可理解成本——復(fù)雜度越高越?jīng)]人敢動。重復(fù)代碼率用 SonarQube 自帶的重復(fù)代碼檢測跑了一遍結(jié)果觸目驚心有將近 18% 的代碼屬于重復(fù)片段。最離譜的是同一個日期區(qū)間校驗的邏輯在項目里被復(fù)制粘貼了十一份其中三份有 Bug三份又是修過的版本還有五份完全一致。這種重復(fù)帶來的問題不只是維護(hù)代價高而是你壓根不知道哪個副本是對的。注釋與代碼的匹配度這個需要人工抽查。我隨機(jī)抽了 50 個函數(shù)發(fā)現(xiàn)有 12 個函數(shù)的注釋描述的內(nèi)容和實際邏輯是矛盾的。這種會撒謊的注釋比沒有注釋更危險因為后人會相信注釋然后用錯誤的理解去改正確的代碼。測試覆蓋率整個項目的核心模塊測試覆蓋率不到 25%而且很多測試是光跑不斷言的空殼測試。這種情況下的覆蓋率數(shù)字完全沒有參考價值它只代表了代碼被執(zhí)行過不代表代碼被驗證過。我把這些量化結(jié)果整理成了一份報告并且按模塊給出了紅黃綠三個等級的評分。這份報告在項目組里引起了不少討論——有些同事一開始覺得評分不公平但當(dāng)他們看到自己的模塊被標(biāo)紅的具體原因時大多還是認(rèn)賬的。量化的意義在于把我覺得這里寫得差變成了這里有 37 處重復(fù)代碼段和 14 處圈復(fù)雜度超標(biāo)的函數(shù)后者才是能推動決策的語言。2.3 確定邊界哪些該重構(gòu)哪些該重寫哪些該原地凍結(jié)代碼體檢做完之后團(tuán)隊內(nèi)部開了一次整整一天的評審會主題只有一個對每一塊代碼分類決定是重構(gòu)、重寫、還是凍結(jié)。當(dāng)時我們定的分類標(biāo)準(zhǔn)是這樣的分類判斷標(biāo)準(zhǔn)t3code 里的實際占比保留并重構(gòu)邏輯仍在活躍使用結(jié)構(gòu)問題可控約 45%整體重寫邏輯復(fù)雜、使用頻率高、且被判定為不可維護(hù)約 20%原地凍結(jié)仍有調(diào)用方但極少變更風(fēng)險高約 18%刪除已無調(diào)用方確認(rèn)死亡代碼約 12%待進(jìn)一步確認(rèn)調(diào)用方不明確需要運(yùn)行時追蹤約 5%這個分類最大的作用是讓團(tuán)隊停止在垃圾堆里蓋新房的無意義努力。之前總有人試圖在某個亂成一團(tuán)的函數(shù)內(nèi)部繼續(xù)加功能現(xiàn)在分類明確后那些代碼要么等重寫要么被凍結(jié)誰都不許再往里加邏輯。新增需求一律走新的替代模塊這就是后來我們常說的新舊隔離策略。3. 重構(gòu)執(zhí)行的三個關(guān)鍵階段安全網(wǎng)、主干替換、數(shù)據(jù)遷移3.1 第一階段先織一張不會讓人摔死的安全網(wǎng)重構(gòu)任何遺留代碼之前最忌諱的事情就是直接動手改代碼。你根本不知道現(xiàn)有邏輯里哪些行為是特性還是Bug——很多業(yè)務(wù)依賴的恰恰是那套錯誤的行為。比如 t3code 里有一個對賬模塊邏輯上要求金額精確到分但舊代碼里有個浮點(diǎn)數(shù)直接比較的 Bug導(dǎo)致有些小數(shù)位后四位的偏差被正確地吞掉了。如果重構(gòu)時把這個 Bug 修掉反而會打破下游對賬系統(tǒng)的預(yù)期。所以第一階段的任務(wù)是給核心鏈路建立特征測試Characterization Test。這個想法來自 Michael Feathers 的那本《修改代碼的藝術(shù)》核心做法很樸素用代碼把當(dāng)前系統(tǒng)的行為原原本本地固定下來不管它是對的還是錯的。我們選了一個數(shù)據(jù)流最復(fù)雜的核心模塊——訂單匯總計算鏈針對它的外部輸入輸出寫了幾百個特征用例。每一個用例的做法是從生產(chǎn)環(huán)境的流量錄制工具我們用的GoReplay抓取真實的請求和響應(yīng)。把請求-響應(yīng)對作為一條測試用例固化到自動化測試?yán)?。這些用例的意義不是驗證功能正確而是確保重構(gòu)過程中任何行為偏差都能立刻被發(fā)現(xiàn)。也就是說重構(gòu)前和重構(gòu)后同一個請求必須得到完全相同的響應(yīng)哪怕這個響應(yīng)在你看來是不合理的。如果有差異測試就會紅我們就得停下來分析為什么。這套安全網(wǎng)在一開始跑的時候每天都會紅一片因為很多依賴的初始化順序是隱性的稍微調(diào)整一下模塊加載順序某些數(shù)據(jù)的計算結(jié)果就變了。但正是這些紅讓我們知道哪些改動是有副作用的。我強(qiáng)烈建議所有做重構(gòu)項目的朋友把特征測試放在第一步。哪怕你手頭的時間再緊這個步驟不能省。它就像高空作業(yè)時系在身上的那根安全繩——你會希望它永遠(yuǎn)用不上但沒有它你根本不敢往下跳。3.2 第二階段按照依賴圖優(yōu)先級逐層替換主干模塊安全網(wǎng)鋪好之后我們開始按依賴圖的優(yōu)先級從底層往上層逐層替換。這個階段的順序非常關(guān)鍵。我們的原則是每一輪替換都只動一個模塊替換完成后跑全量特征測試同時灰度發(fā)布給一部分真實流量觀察對比新舊邏輯的輸出差異確認(rèn)一致后再進(jìn)行下一輪。拿最典型的訂單匯總模塊來說替換過程分為四步第一步在新代碼目錄里建立同名模塊框架先把舊的輸入輸出接口原樣拷貝過來保持簽名完全一致。這一步的目的不是為了實現(xiàn)新邏輯而是為了讓新模塊能插拔到舊系統(tǒng)里而不破壞編譯和啟動。第二步把舊模塊里那六百多行的上帝函數(shù)按職責(zé)拆成五個邏輯片段參數(shù)解析、數(shù)據(jù)查詢、業(yè)務(wù)計算、組裝結(jié)果、記錄日志。每一段都用獨(dú)立的函數(shù)封裝并且在此期間不改變?nèi)魏斡嬎氵壿嬛蛔鼋Y(jié)構(gòu)拆分。第三步把拆分后的新模塊接入主干跑特征測試。這一步通常會暴露很多問題比如舊代碼里有些副作用發(fā)生在函數(shù)中間而拆分后這些副作用的位置變了導(dǎo)致后續(xù)邏輯讀數(shù)異常。遇到這種情況要回到舊代碼里精確定位副作用的觸發(fā)時機(jī)然后在新的拆分結(jié)構(gòu)里用顯式調(diào)用來模擬而不是靠巧合。第四步灰度對比。我們在生產(chǎn)環(huán)境把 5% 的流量切到新模塊同時把新舊模塊處理同一批請求的結(jié)果做字段級對比持續(xù)觀察三天。直到對比結(jié)果零差異才把流量逐步提升到 50%、100%。這個階段最需要耐心。平均下來我們每替換一個核心模塊需要一到兩周的時間。中間也會遇到讓人抓狂的問題比如新舊模塊的并發(fā)行為不一致——舊模塊是單線程按順序處理新模塊用線程池并發(fā)處理結(jié)果某些共享數(shù)據(jù)被重復(fù)初始化導(dǎo)致偶發(fā)錯亂。這類問題只有灰度流量放大到足夠大時才能暴露出來所以每一輪的灰度觀察期都不能壓縮。3.3 第三階段數(shù)據(jù)層遷移與雙寫校驗這是最容易翻車的一步前端模塊替換得七七八八之后最硬核的部分來了數(shù)據(jù)層遷移。t3code 的舊庫用了大量存儲過程完成業(yè)務(wù)邏輯有些表的結(jié)構(gòu)設(shè)計根本不符合當(dāng)下業(yè)務(wù)的需求比如把標(biāo)簽直接拼在人名字段里用逗號分隔。這種設(shè)計在查詢特定標(biāo)簽的用戶時只能靠LIKE %tag%去掃全表。數(shù)據(jù)遷移我們采用了比較保守的雙寫方案新表結(jié)構(gòu)設(shè)計完成后在遷移窗口開啟前建立新舊兩張表之間的同步管道。業(yè)務(wù)寫入操作同時寫舊表和新表讀取操作暫時仍全部走舊表。同步管道跑一周確保新表的數(shù)據(jù)和舊表完全一致。這一周我們每天跑對賬任務(wù)對比關(guān)鍵字段的數(shù)量和校驗和有差異就立即暫停雙寫并排查原因。確認(rèn)數(shù)據(jù)一致后把讀取操作切換到新表觀察一周。此時舊表仍然在寫入但沒人再讀了。最后將寫入操作切到新表舊表徹底降級為只讀備份再保留兩個月后下線。雙寫階段看起來簡單實際上處處是坑。我印象最深的是兩張表的字段映射關(guān)系里有一個枚舉值含義發(fā)生了變化——舊表里status2表示已取消但在新表里status2表示已退款。這個映射錯誤在數(shù)據(jù)一致性對賬中被抓住了但如果不是提前設(shè)計了字段級校驗而不是全表行數(shù)校驗這個問題會在切換讀操作之后才暴露那時候排查成本會翻好幾倍。數(shù)據(jù)遷移給我的教訓(xùn)是永遠(yuǎn)不要相信人眼比對數(shù)據(jù)。哪怕你覺得自己看得很仔細(xì)幾百條數(shù)據(jù)或許還能看出來到了幾十萬條量級必須依靠腳本做自動化逐字段對比。我們用 Python 寫了一個簡單的對賬腳本跑一次只需要幾分鐘但它成了整個遷移過程中最讓人安心的工具。4. 重構(gòu)過程中真實踩過的坑以及對應(yīng)的規(guī)避方案4.1 坑一過度抽象導(dǎo)致的第二次泥潭重構(gòu)進(jìn)行了大約六周之后我們犯了一個當(dāng)時覺得挺合理、事后追悔莫及的錯誤。有一位同事提出既然這么多模塊都要做類似的日志記錄和權(quán)限校驗不如抽一個通用基礎(chǔ)組件出來統(tǒng)一管理這些橫切邏輯。聽起來很對對吧我同意了。結(jié)果這個通用基礎(chǔ)組件在兩個星期之內(nèi)收到了來自七個不同模塊的定制化需求每個模塊都要求它支持自己特有的配置項。為了兼容這些需求組件內(nèi)部塞滿了 if-else 和可配置開關(guān)接口參數(shù)從一開始的三個膨脹到九個。到了第三周這個組件的復(fù)雜度已經(jīng)超過了它想取代的那些分散代碼的總和。后來我們痛定思痛把這個組件直接拆掉退回每個模塊自帶輕量實現(xiàn)。拆掉之后系統(tǒng)反而更清爽了。這個教訓(xùn)我記到今天重構(gòu)中的抽象必須源于至少三個以上的真實調(diào)用場景而不是基于將來可能有需要的預(yù)判。在代碼里預(yù)防未來大多數(shù)時候只是在制造現(xiàn)在的復(fù)雜度。與其用一個過度設(shè)計的通用組件不如允許暫時的重復(fù)等真正看到重復(fù)的規(guī)律時再做抽象。4.2 坑二并行發(fā)布時新舊邏輯的偶發(fā)錯亂第二坑發(fā)生在數(shù)據(jù)遷移接近尾聲的時候。由于新舊兩套邏輯在線上并行運(yùn)行我們需要在代碼里通過配置開關(guān)來控制流量切換。有一天晚上配置中心推送了一個新配置同一個服務(wù)實例里新舊兩個模塊同時收到了配置更新事件結(jié)果其中一個模塊按照新配置走了新邏輯另一個模塊還沒來得及更新仍在跑舊邏輯——兩套邏輯同時對同一批數(shù)據(jù)動了手險些造成線上數(shù)據(jù)污染。排查原因后發(fā)現(xiàn)這不是配置中心的問題而是我們自己的代碼在切換邏輯時沒有做原子化處理。正確的做法應(yīng)該是在每次請求進(jìn)來的時候根據(jù)請求的唯一 ID 計算一個 hash確定它走舊邏輯還是新邏輯并且在整個請求生命周期內(nèi)保持一致。我們最初用的是全局開關(guān)配額的切換無法保證同一請求的前半段和后半段讀到一致的開關(guān)狀態(tài)。這個問題的規(guī)避方案其實不復(fù)雜任何灰度切換都必須做到請求級一致性而不是配置級一致性。一個請求一旦被標(biāo)記為走新邏輯那么它內(nèi)部涉及的所有子調(diào)用、數(shù)據(jù)庫讀寫、消息投遞都必須遵循新邏輯的規(guī)則不允許在中間某個環(huán)節(jié)因為配置更新而跳到舊邏輯去。4.3 坑三人員交接期知識斷層如何彌補(bǔ)重構(gòu)進(jìn)行到一半的時候團(tuán)隊里最熟悉舊系統(tǒng)的兩位老同事之一提出了離職。這件事一度讓項目陷入停滯因為很多舊邏輯的知識只存在他的腦子里而文檔和代碼都沒有完整記錄。這件事讓我意識到重構(gòu)項目里最脆弱的資產(chǎn)不是代碼而是活的知識。從那之后我們強(qiáng)制推行了兩條制度第一任何模塊的重構(gòu)都必須由兩個人共同負(fù)責(zé)一個熟悉舊邏輯一個擅長新代碼。兩個人的組合不能是一個純新手配一個純專家必須有交叉。這樣即使走了一個人另一個人也能在兩周內(nèi)把關(guān)鍵知識傳給接手者。第二每周必須開一次行為差異評審會在評審會上負(fù)責(zé)每個模塊的人要用大白話講解這個模塊重構(gòu)前和重構(gòu)后的行為差異包括那些沒有在代碼里體現(xiàn)的隱性規(guī)則。這些講解被錄音并整理成筆記存到了項目知識庫里。這套機(jī)制沒辦法讓知識 100% 傳承但它把依賴某個人的記憶變成了依賴團(tuán)隊的過程。后來項目過了危機(jī)期我們回頭看這可能是比技術(shù)重構(gòu)本身更有價值的制度建設(shè)。5. 從 t3code 沉淀出的可復(fù)用清單留給以后的自己5.1 重構(gòu)成本評估表什么時候該重構(gòu)什么時候該重寫經(jīng)歷 t3code 之后我最大的收獲是不是所有爛代碼都值得重構(gòu)。有些代碼爛到了骨頭里重構(gòu)的成本比推倒重寫還要高。為了快速做這個判斷我整理出了下面這張評估表后續(xù)每遇到類似項目都會先過一遍評估維度傾向重構(gòu)傾向重寫代碼調(diào)用范圍核心鏈路的一部分被使用幾乎所有模塊都在依賴它行為確定性有明確的輸入輸出規(guī)格行為模糊沒人說清所有副作用測試基礎(chǔ)已有部分可用測試或能快速補(bǔ)充幾乎沒有測試且代碼不可測試數(shù)據(jù)結(jié)構(gòu)復(fù)雜度數(shù)據(jù)結(jié)構(gòu)穩(wěn)定字段少有變化表結(jié)構(gòu)疾病纏身字段語義混亂業(yè)務(wù)價值業(yè)務(wù)邏輯仍然清晰且活躍業(yè)務(wù)已被邊緣化邏輯無人理解如果評估結(jié)果是重寫那就不要猶豫不要嘗試在舊代碼上面修修補(bǔ)補(bǔ)。如果評估結(jié)果是重構(gòu)那就嚴(yán)格按照安全網(wǎng)、依賴圖、分層替換的節(jié)奏來推進(jìn)。最怕的就是既不重構(gòu)也不重寫只靠打補(bǔ)丁度日——那是真正的慢性死亡。5.2 團(tuán)隊協(xié)作層面的節(jié)奏控制重構(gòu)項目的失敗很多時候不是因為技術(shù)難而是因為節(jié)奏失控。t3code 項目里我們定了幾條紀(jì)律每條都來源于一次或多次真實的教訓(xùn)每兩周必須有一個可演示的成果。不管這個小成果是拆分了一個函數(shù)、減少了一個隱式耦合還是新建了一個能跑的模塊。可演示的成果能讓團(tuán)隊保持信心也能讓管理層看到進(jìn)展。每一次代碼評審重構(gòu)項目必須使用比平時更嚴(yán)格的審查標(biāo)準(zhǔn)。不是只是能跑就行而是要求每個新函數(shù)不超過 40 行、每個模塊不允許出現(xiàn)循環(huán)依賴、每個公共接口必須有真實調(diào)用方。允許犯錯的預(yù)算要提前劃定。我們當(dāng)時規(guī)定重構(gòu)期間允許出現(xiàn)最多兩次需要回滾的嚴(yán)重事故超過這個次數(shù)就必須暫停重新評估進(jìn)度和方案。給意外留出預(yù)期意外真的來了才不會把團(tuán)隊心理防線擊穿。5.3 重構(gòu)完成之后觀測體系才算真正的驗收很多人以為重構(gòu)上線就算完了其實恰恰相反重構(gòu)上線的那一刻監(jiān)控和觀測才真正變得重要。t3code 重構(gòu)完成后的前兩個月我們搭建了一套完整的觀測體系用來持續(xù)驗證重構(gòu)的成果。核心指標(biāo)有三類穩(wěn)定性指標(biāo)接口錯誤率、超時率、熔斷次數(shù)。重構(gòu)后的系統(tǒng)如果穩(wěn)定性不升反降說明還有隱藏問題。性能指標(biāo)TP50、TP95、TP99 響應(yīng)時間。重構(gòu)不能只是代碼好看了必須體現(xiàn)在關(guān)鍵業(yè)務(wù)鏈路的響應(yīng)速度上。交付效率指標(biāo)從需求到上線平均耗時、線上缺陷數(shù)。這個指標(biāo)最能反映開發(fā)體驗的真實改善——如果重構(gòu)只是代碼結(jié)構(gòu)變好但團(tuán)隊交付速度沒變那這個重構(gòu)的商業(yè)價值就需要重新審視。我們還專門搭了一個重構(gòu)前后對比看板把上述指標(biāo)按時間軸放在一起展示。在重構(gòu)完第一個月的時候TP99 還有一些抖動因為某些舊的定時任務(wù)仍然在跑和新的數(shù)據(jù)管道產(chǎn)生了資源競爭。我們順著看板上的異常點(diǎn)往下排查最終清掉了幾條已經(jīng)不再需要的定時任務(wù)系統(tǒng)才真正穩(wěn)定下來。這個看板直到項目結(jié)束后的半年都還在持續(xù)運(yùn)行因為它已經(jīng)變成了團(tuán)隊日常巡檢的默認(rèn)工具。關(guān)于 t3code 這個項目我能寫出來的經(jīng)驗大概就是這些。最后再補(bǔ)充一句事后復(fù)盤的時候團(tuán)隊里很多人都在感慨如果當(dāng)時沒有堅持先做診斷、再定邊界、然后織安全網(wǎng)這三步而是直接拿著 IDE 沖進(jìn)代碼里開改結(jié)局很可能是把一套還能勉強(qiáng)運(yùn)轉(zhuǎn)的系統(tǒng)攪成一鍋更稠的粥。重構(gòu)這門手藝慢就是快、穩(wěn)就是快這是我在這四個月里最深的體會。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
麻豆人妻精品一区二区| 骚鸭AV| 中文字幕精品资源在线| 九九九九热| 色香综合天天影视综合| 少妇天堂网络| 97亚洲综合电影| 久久美女国产| 夜夜草天天| 人妻另类| 色悠久久久av| 91真人天天在线| 亚洲午夜免费狠狠干| 久久亚洲AV成人精品无码| 欧美在线啊啊| 色综91| 少妇熟女视频一区二区三区| 久久综合久色欧美综合狠狠 | 激情看片网站| 黄色电影观看久久9| 另类欧美色| 五月天精品| 激情综合网激情综合| 亚洲在线A| 欧美色天堂网在线视频| 91模特在线观看| 色综和网| 午夜福利在线视频1000| 后入人妻一区| 九九精品美女高溯喷水| www.狠狠干.coom | 极品极品色影院| 九九热超碰| 高清在线偷拍自拍视频| 性爱1区| 亚洲 欧美日韩 另类| 亚洲精品乱码线路中文字幕| 国产一进一出视频网站| 久草网站免费在线观看| 操逼1区| 大香蕉一区二区在线观看.| 97日韩| 欧美日本成人一区二区| 被窝影院午夜看片无码| 亚洲精品影视老司机| AV一区观看| 欧美日韩亚洲一区二区在线观看 | 中国熟女网站| 人人操人人操人妻人| 天天干天天狼在线视频| 日韩欧美视频青青| www老逼91| 江都AV在线| 天天做天天爱天天爽AV| 97就爱干| 一二三区精品视频| 中文字幕一区二区三区四区在线视频| 欧美性生活免费网| 色综合网1| 六十路日本| 久久性爱视频| 啊啊啊啊啊在线视频| 国产精品suv一区| 精品综合久久久久久97| 4虎在线观看| 国产强奸乱伦第1页| 中文字幕精品一区欧美| 女人被添高潮免费视频| 麻豆国产原创AV色哟哟| 久久日韩肥臀| 日韩无码视频黄色| www色色com| 亚洲天堂色图| 精品十八在线观看| 精品久久久久久AV无码| 综合久久婷婷| 久久神马影院| 91一区二匹| 色就色综合| 婷婷五月综合在线| 我中文字幕6区| 久久精品店| 91成人久久 | 精品一二三区女同| 欧美v日韩v亚洲v最新在线| 亚洲精品人妻在线| 国产又粗又又黄又猛| 97色色,97综合| 天久久久噜噜噜久久国产精品爽爽 | 97在线视频网站| 久操凹凸视频| 久久综合18p| 天天射夜夜| 91无遮挡| 在线 制服丝袜中出 人妻| 国产乱弄免费在线视频。| 久久亚洲一区女同性恋中文字幕| 国产精品久久天天干| 大香蕉五月天婷婷| 久久精品成人一区二区三区蜜臀| 伊人网免费视频| 99ri在线视频| 尤物视频偷拍免费| 欧美久久伊人| 国内一级精品| 日本中文字幕在线视频| 久久久久久久久久久久九| 精品人妻一区二区三区日产乱码| 色狠狠色| 日韩无码第3页| 精品夜夜澡人妻无码| 夜夜嗷嗷一区二区| 九九综合网| 欧美精品99久久久**| 亚洲色图在线视频| 超碰成人人人爽人人爽| 六月激情网| 综合亚洲欧美| 青青草原人妻| 精品无码一区二区三区色欲| 久久久99久9| 亚洲熟妇A V黑人| 色婷婷综合久久久久中文国产精品一区中文字幕,国产福利电影一区二区三区 | 天天综合91入口| 牛牛aV| 国产精品色| 国产一区二区三三视频| 亚州色图欧美| 日本五十路熟女一区二区| 欧美日韩青操| 日本精品不卡一二三区| 国产精品一区二区三区四区五区| 色婷婷aV一区二区三区麻豆综合| 尤物网站91| 天堂九九九九九九九九九| 欧美色网络| 五月丁香狠狠爱| 天天色综合影视网| 欧美黑人与女人91~| 大肥女高潮bbwbbwhd视频| 夜夜爽妓女| 视频国产成人精品日本亚洲18| 久久久艹艹艹| 国产精品永久免费10000| a片亚洲一本通视频| 久久五十路熟女人妻| A啊啊在线观看| 性色生活片久久毛片婬片免费放女人一级毛片 | 屁股久久久久久久久| 久久夜黄色无码A级大片| 国产久久男人天堂| 日韩欧美女优电影| 国产成年女人免费视频播放a| 九九九九一级| 国产超碰国产97| 国产一区二区成人av在线播放| 日韩精品三级片长长久久| www.av在线观看| 91精品91久久久中77777| 欧美少妇一区二区三区| 日韩人妻 中文字幕| 日韩大香蕉AV影片| 91高跟美女在线播放| 欧美日韩激情无码专区| 超碰在线人妻中文字幕| 91亚洲欧美| 视频二区熟女人妻| 精品久久在线区一区| 国产av波波国产精品| 日日爽熟女| 亚洲情色婷婷五月天| 91在线超高颜值国产| 欧美高清91| 精品9区| 日韩人妻少妇 一区二区三区| 日本人妻伦在线中文字幕| 国产精品色| 精品人妻一区二区免费蜜桃| 五月丁香激情综合网| 蜜乳AV一区| 97爱爱爱| 啊啊啊啊啊啊好多水| 欧美亚洲清纯| 亚洲激情色片| 女同性恋一区二区三区精品视频| 日韩偷拍色图| 亚洲人精| 97九色人妻| 自慰白浆在线观看| 日本精品无码三级网站| 欧美亚洲国产91在线| 亚春色色| 综合网少妇| 97一区二压| 男人的天堂激情| 大香蕉免费中文| 国模精品一区二区三区苹果色戒| 久久精品三级影视| 久精品无码av一区二免费国产在线观看 | 久久激情四射婷婷丁香五月天| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 欧美色图综合| 啊啊啊想要| 亚洲色宗合| 欧美 亚洲 第一页 | 国产视频一区二区免费| 激情久久av一区av二区av| 中国一级特黄大片护士| 欧美黑人精品在线播放| 午夜啪啪片| 欧美日韩日产免费网站看| 亚洲人体视频在线观看| 高清无码久操视频| 99视频这有这里有精品| 74成人在线| 日韩欧美操逼xxx| 日韩欧美操逼xxx| 亚洲欧美高清无码| 性影在线视频| 婷婷丁香五月天亚洲天堂网| 免费黄色视频网址| 中文字幕在线观看丝袜| 999久久久久久久精| 女人的久久久| 亚洲视频,小说| 操B久久| 日本大香蕉| 亚洲熟女乱色一区二区三区久久久| 另类av综合久久| 日韩电影天堂视频一区二区| 熟妇国产免费一区| 久久久96| 26uuu性物| 九九av| 欧美精品成人亚洲| 日韩人妻精品中文字幕| 亚州一区二区| 国产精品女久久久久av爽| 精品国产精品一区二区| 日韩在线视频1234| 天美传媒Av在线| 美女91网址| 一本久道久久综合狠狠爱一密臀精 | 秋霞免费无码视频日韩A片| 国产一区二区免费福利片| 久久五月天婷婷丁香中文字幕| 国产精品视频白浆免费| 东京成人一区| 欧美激情在线观看视频| 国产精品一级毛片不卡视| 99无码精品| 欧美日韩一干二干| 日韩97在线| 国内毛片国产欧美拍| 91三级理论片播放器| 99色在线| 后入式999| 日日夜夜精品视频| 蜜臀操逼黄色视频操的好爽| 小草精彩毛片| 日韩97P| 男女激情黄色网址| 69综合网| 一区在线精品中文字幕| 久操精品网| 传媒免费一区二区三区| 人人搞人人插人人操| 在线看片国产精品每日更新| 91精品人妻一区二区三区蜜桃臀| 欧成人在线| 国产极品精品美女视频| 日产中文字幕2020| 91欧美综合| 岛园激情| 91M一社| 欧美一级久久久久久久大片动画| 色老汉色| 天天操天天射天天日| 天天欧美色| 97伊人超碰| 亚洲中文一区二区三区| 天天天乱色综合全| 欧美巨大性舒爽顶到了| 日韩一级二级在线| 日产操逼| 日本久久综合| 波多野结衣一级视频| 男人的天堂,欧美亚洲另类国产日韩,日本高清一区二区 | 在线强奷到舒服的无码视频| 91美女在线视频| 国产强奸乱伦无码视频| 婷婷亚洲中文字幕在线| 日韩熟女精一区二区三区不卡| 国产又色又爽又舒服的三级视频| 极品出轨视频网站| 五月综合婷婷久久网站| 夜夜爽爽夜夜精品视频| 久久社区一区二区三区| 日韩中文字幕宗合在线| 亚洲图片婷婷五月天| 97色色色综合网站| 久操网无码在线| 亚洲一区二区 麻豆传媒| 欧美一级黄色免费专区| 亚洲视频,小说| 人人 操人人 操人人| 少妇三P| 日本精品无码三级网站| 色97干| oumeisetu综合| 久久九色| 久久大精品乱码视频人妻熟女| 久久五十路熟女人妻| 色香在线| 99色在线视频| 内射小黄片| 国产成人主播| 大地资源在线观看中文第二页| 一本大道久| 成年女人一区| 亚洲一区二区精品福利| 91天堂| 亚洲国产欧美日韩精品一区二区三区,国产一区二区三区在线看片,欧美性猛交 XXX | 好爽,再快点啊哈嗯嗯嗯嗯| 伊人网青青| 久久人爽| 97视频观看| 久久久久人妻二区精品叶可怜| 黄色一区三区| 综合色图区| 综合激情二| 久久精品人妻一区二区三区| 啊啊啊啊一区| 无码逼| 97免费视频在线| 天天日日本| 亚洲av总站| 国语av最新自产拍在线观看| 超碰95| 先锋音影AV| 97色婷| 日韩免费福利在线观看| 蜜桃视频啊啊啊啊| 色婷婷综合久久久久中文一区二区| 18禁中文字幕| 探花视频免费观看国产专区| 激情文学小说一区二区 | 欧美一区二区三区成人性生活| 91久热| 亚洲va有码在线天堂| 国产精品噜噜噜日日日| 偷拍2020| 国产一区二区三区,在线观看观看| 色色激情五月天| 欧美aa一级片| 天天看天天日天天操| 久久久久96| 天天日天天舔东京热| 大香蕉九九| 无码日韩人妻av一| 99re免费视频精品全部| 大JI巴好深好爽又大又粗视频| 亚洲国产中文字幕| 色天堂综合| 九久久九精品视频| 熟妇在线视频一区二区| 日本日皮视频逼| 精品人妻av在线播放| 中文字幕欧美日韩三级| 欧在线一二区| 水滴偷拍| 超碰色97| 欧美热图99| 中文字幕精品专区搜索结果91| 在线视频五十市| 日韩欧亚太美不卡| 日本一区二区电影网站| 国产精品久久发布| 精品国产嫩穴视频| 天天干2019| 国产人妻精品久久久一区二区三区| 男人的天堂一区三区| 中文字幕交换人妻| 艹比视频国产精品| 精品无码人妻一区二区免费蜜桃| 嗯阿好爽好紧| 久久精品视频28| 99re不伦| 99精品伊人| 久久这里| 国产乱不卡| 久久风骚城市人| 啊啊啊在线看| 亚洲精品欧洲色| 亚洲一区二区AV| 久久精品国产亚洲AV先锋| 欧美色就是色| 免费看黄片现成| 久久久一区二区三区三州| 色婷婷六月丁香七月婷婷| 影音先锋日本一区二区| 日韩国产成人自拍视频| 伊人久久艹| 青娱乐av在线| 久久久久9999妇女| 亚洲国产蜜臀系列在线观看| 日1区2区3区2020| 熟妇女伦乱视频| 欧洲性爱无码区| 久久直播国产| 久久久爆乳翘臀一线天伦理视频| 欧美九九爱| 激情亚洲天堂| 91天美免费| 国产又黄又爽| 色一色综合网| 蜜桃精品一区二区三区ww| 欧亚不卡| 91天天综合日韩欧美| 操逼网站网站| 亚洲日韩国产欧美综合v| 大香蕉九九| 啊啊啊97视频| 久久久啊啊啊| 高清成年美女黄网站免费大全 | 加勒比五月天| 一中国女人毛片水真多| 日本人人操人人操| 婷婷国产精品九区| 91色欧美| 国产h片在线观看视频| 色玖玖| 亚洲男人的天堂网| 一区二区三区国产在线播放| 日韩性爱电影一区| 另类av综合久久| 日本Suv精品一区二区| 国产强奸乱伦xd| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | 久久久久久久六六 | 中文字幕一区二区三区蜜臀| 91精品国产长腿丝袜美女| 麻豆国产精品午夜视频| 天天干天天插| 精品一区99999| 人人干人人操人人爱| 亚洲欧美激情在线视频| 亚洲吊色| 日本性爱欧美性爱| 91在线视频免费中出| 伊人欧美大香蕉视频| 人人操人人插人人摸人人干| 97欧美精品综合| 天天干18禁| 中文字幕av乱伦| 91麻豆一二三区| 成人午夜高潮av猛片| 丁香五月久久| 易易A毛视频| 亚洲图片偷拍视频区| 狠狠躁天天躁日日躁| 国产呦精品系列在线观看| 久久婷婷精品| 中文字幕一区二区三区四五区| 中文字幕一区二区韩| a人欧美综合天堂麻豆| 2023天天操夜夜操| 东京成人一区| 免费日韩黄片| 操B久久| 国产精品久久久无码aV去| 麻豆天美国美国产| 91视频综合| 91xingse| 青娱乐二区免费| 夜夜爽妓女| 香蕉国产精品麻豆亚洲欧美日韩| 天天干一区二区| 蜜臀无码视频在线观看| caopeng97人妻| 夜夜操青青草| 尤物视频网 刘玥| 美国aaaaa一级黄片| 亚洲国产亚洲天堂| 丁香五月性| 色欧美亚洲| 久久久99久9| 岛国毛片在线观看免费| 国产精品97超碰| 99在线精品观看99| 亚洲日韩国产精品| 禁十八久久| 国产午夜无码片在线观看影视| 久久偷偷色综合蜜桃| 亚洲精品aa久久伊人| 久草色在线观看| h在线看免费版在线看| 亚洲激情视频| 超碰碰激情97+久| 午夜理论片在线观看免费| 亚洲双插| 精品久一区免费| 人人操人人摸人人看人人干| 国产91丝袜 在线播放| 97干日韩| 99久久久久久久久| 思思热国产高清| 久久大精品乱码视频人妻熟女| 神马影院午夜福利久久久| 国产黄色在线播放观看| 91碰碰| 精品久久久久久久| 青青草色情网站视频| 18禁的网站在线| 亚洲性猛| 亚洲精品xxx| 亚洲小电影免费涩涩成人在线高清| 免费看毛片操穴| 99热这里只有精品9| 国产美女高潮| 人妻少妇久久中文| 欧美熟妇乱码在线一区| 国产 v乱码一区二| 翔田千里无码中出中文字幕| 青草精品视频-日本久久久久网站| 色91综合网| 久久草在线综合视频| 伊人网免费视频| 成人区人妻精品一| 情侣操 逼视频99| 亚洲天堂综合AV| 女人喷水视频在线观看| 国产精品成久久久久午夜午夜| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 91在线/欧洲| 亚洲人成色9999精品久久| 国产福利影视| 国产 无码 一区二区| 人人弄人人摸| 亚洲日韩国产精品| 天堂亚洲欧美| 青青草原成人| 亚洲国产亚洲天堂| 亚洲污污网站| 青青草成人视频在线观看二区| 天无日色综合| 男人的天堂网免费| 丁香五月激情啪啪| 亚洲操操| 熟女精品一区二区三区| 九月丁香婷婷| 欧美国产日韩清纯唯美| 五月婷婷色| 天天爽天天干| 性色一线| 久久久久国产亚洲一区欧美色图日韩 | 性爱乱伦网址| 亚洲 国产 精品一区| 成人麻豆av电影网站| 免费少妇一区二区| 97超碰色屌| 国产青一二三| 婷婷色香| 干B| 蜜桃精品一区二区三区久在线| 大香蕉欧美国产日韩高潮| 欧美日韩精品国产91| 黄色十八禁网站| 亚洲情色在线| 色妇91| 97在线观看免费| 亚洲影视高清三级-草1024榴社区入口-品爱AV| 一区超碰一区| 色淫网站优优视频| 91综合色噜噜| 欧美精品成人在线播放| 久久AV无码网址| 97婷婷色| 色盈盈影院| 色老牛| 久久久999国产精品| 亚洲欧美洲综合| 97在线观看| 久久首页| 日本一级黄色电影| 天天综合有色网| 色综合20p| 97久久超碰亚洲| 日本精品一区二区三区四区的功能| 美女被啪到深处抽搐视频| 国产精品嫩草影院午夜两性| 亚欧性爱ab| 亚洲中文字幕噜噜噜久久久| 99re在线观看| 精品人妻一区二区三区视频在线| A级国产欧美激情在线| 精品一区二区综合熟妇| 免费观看欧美日韩操逼视频| 精久久久91| 青青草中出视频| 日韩欧美加勒比| 国产99精品一区二区三区免费| 免费综合亚洲中文| 中文字幕乱碼在线| 九七超碰人人乐| 亚洲高清无毛一区二区| 91啪啪视频| 欧美熟女妇同| 欧美九九九九九| 无码精品人妻一区二区三区妖精 | 久久久久久九九九九九| 久久欧洲| 日本欧美不卡| 免费啪啪一级视频| 一区二区精品更新提醒| 上床啊啊啊| 99精品视频在线观看免费| 91N欧美| 欧美丰满少妇交换91欧美精品| 亚洲 欧美 日韩 国产一区二区| 91超碰人人操| 色网综合网| CCYY草草影院地址入口| 蜜臀av在线播放一区二区三区| 少妇第一页| 亚洲春色欧美激情自拍| 色噜噜综合在线| 少妇大屁屁| 97摸视频| 亚洲。天堂。日本在线观看| 6080YYY午夜理论片在线观看| 久草精品热视| 亚洲天天操| 色噜噜婷婷| 羞答答AV中文字| 亚洲系列第一页| 超碰这里只有精品| 草莓精品视频在线免费观看| 国产白嫩精品久久| 亚洲欧美综合| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 精品人妻一区二区三区视频| 日日操免费视频| 性色高清在线| 在线亚洲 欧美 日本专区| 玖玖97综合 | 两性综合网| 超碰 国产熟女精品一区| 无码逼| 最新9久久久9免费视频| 国产aⅴ无码片毛片一级网站| 久日91在线| 自怕偷自怕亚洲精品| 久久做97| 精品人体无圣光凹凸| 欧美激情久久久久| 伊人女女资源在线观看| 亚洲综人网| 色婷五月| 国产强奸乱伦第1页| 熟妇人妻一区二区| 中文字幕精品一区欧美| 欧美日韩青操| 大香蕉乱伦视频网| 一起草视频在线| 精品人妻一区二区三区-国产| 亚洲 无码 偷拍| 中文字幕十五区| 91动漫操逼视频| 男女啊啊啊| 中文字幕艹艹| 国产精品干干干| 久久风骚城市人| 91美女视屏| 欧美另类精品xxxx| 九九九国产| 国产夜夜艹| 性色av蜜臀av色欲aV| 桑老女人九区| 在现视频女上位好爽| 人人人摸人人| 亚洲双插| 1234区中文字幕在线观看_青青草国产在线_日韩一区二区 | 国产精品网站免费| av凤凰久久久| 又大又大又大又粗爽高潮观看| 另类亚洲图色| a级理论午夜日本| 久久精品| 在线色资源| 97色冈| 伊人影院综合是一个与深夜成人在线 | 中文字幕AV乱伦| 夜夜嗨TV| 日本精品国产视频| 美女自卫慰黄网站免费| 91国产操逼视频| 玖玖综合视频| 麻豆天美制片厂网站视频| 免费一级毛片在线视频观看| 国产精品午夜福利亚洲综合网| 搡老女人老91妇女熟女| 在线女人91| 亚洲欧美日韩综合在线尤物| 婷婷在线视频在线观看| 日本大香蕉综合网| 中文字幕一区二区三四五区日日骚| 日韩一区二区精品视频| 国产亚洲精品农村妇女| 亚洲色婷婷久久91| 操一对老熟妇爽上天视频| 久久久中文版| 内射日韩大臀美女| 欧美色色色| 國產尤物AV尤物在線觀看| 最新日本中文字幕| 女优大全 - 91n| 九九超碰综合网| 免费成人在线熟妇网| 97亚洲一区| 激情丁香五月| 欧美日韩999| 操我无码| 嫩草一区二区在线观看| av一区二区三区四区| 97超碰超碰| 欧美色另类| 欧日韩一二三f区| 欧美色图在线视频少妇| 99色日| 久插综合| 色色99| 国产精品人妻免费精品| 91第一页| 91天堂| 97干在线视频| 中文 人妻 制服| 国产伊人精品在线| 97在线观看视频| 密臀成人视频久久久| 91欧美丝袜| 免费国产| 草B在线| 97ai亚洲| 91天堂网| 久久激情婷婷| 久久久久国产精品久久久| 国产精品一区二区三区免费视频| 久久精品无码一区二区三区| 一区二区视频在看| 夜夜爽夜夜操| 免费一二区| 一级片视频啪啪| 国产亚洲精品A在线观看下载| 青青青国产手线观看视频2| 免费看黄片现成| 国产亚洲精品农村妇女| 极品尤物女神在线观看| 日韩在线观看中文字幕视频| 亚洲av乱伦色图网站| 日本三级中国三级99人妇网站| 曰韩精品九九无码 | 日韩欧无码一区二区三区免费不卡| 91bbb| 欧美日韩午夜精品一区二区三区| 亚洲性爱免费电影| 牛牛aV| 99丝袜福利在线播放| n1038 一二三区| www被窝色com| 国产精品伦理| 热思思免费视频| 亚洲 一区二区 自拍| 亚洲日韩成人性爱视频| 奸色色 男人天堂 天天射| 99xav| 久久久天堂| 天天看天天日天天操| 乱伦图av| 亚洲一区二区麻豆影院| 97天天操天天干| 强乱老妇中文字幕| 黄色免费网| 欧亚在线视频| 99.色网| 啊啊啊啊,啊啊好多水| 操碰97| 欧美日韩国产色图在线| 人妻久热在线| 97在线日韩中文字幕| 97在线免费| 欧美特大黄一级片片免费| 91丝袜美女| 97爱爱官网| 无码国产Av| 情侣开房子拍 日韩无码 女的很漂亮| 91天天c| 欧美日韩夜夜| 日本免费一区二区不卡| 蜜臀99久久精品久久久懂爱| 国产99久久99热这里只有精品15| av优播| 黑白配性爱AV成| 精品国产一区二区三区四区在线看| 九九色精品| 国产99999久久精品| 日韩免费在线观看不卡| 91九色网| 亚洲区限制级 99| 国产精品无码成人精品| 九九在线视频| 校园春色 亚洲| 日本高清有码网址视频| 综合干干干av久久久综合网| 久久啊啊| 99操视频| 国产精品69久久久久久久| 免费一级a毛片久久久久久鸭绿欲| 成年女人一区| 中国91AV| 99热自拍| 揉揉揉夜夜| 久久无码电影| 国产精品午夜福利视频| 久久久久人妻二区精品叶可怜| xxx亚洲午夜天堂| 精品九九九九| 九九无码久久精品视频| 91五十路| 天堂精品在线| 2017天天操| 91人妻爽爽人人做人人澡| 青青草在线视频播放器| 999岛国大片| 欧洲自拍第一页| 思思热免费视频观看| 加勒比综合a∨| 亚洲超碰AV| 精彩久久中文| 中文字幕av乱伦| 国产美女91| 亚洲欧洲偷拍一区| 91肉丝| 台湾佬中文娱乐自偷自拍| 亚洲国产精品久久AV| 免费看污网站| 影音先锋少妇| 国产99999久久精品| 日本www操操操| 国产中文字幕在线观看| 99久久久久| 蜜臀久久99精品久久久电影| 中文字幕在线观看AV| 国产福利电影| 国产视频小说| 91丨九色丨大屁股| 日本成人在线不卡一区二区三区| 高树玛利亚无码流出| 日本操逼视频不卡直接放| 青青草字幕AV| 亚洲aV性爱| 天天爱天天操| 日本999精品视频| 日韩欧美tv一区二区在线观看| 不卡六六在线91| www.99色| 午夜视频久久久久一区| 91艹| 夜夜操2028| 日韩无码操逼片| 久久久久久无码人妻中文字幕| 另类小说五月天| 91国产操逼视频| 久久精品中文| 天天爱天天操| 国产一级内射无挡观看| 骚熟女AV网| 日本九九久久99播| 免费强奸av| 色99999| 劲爆欧美人妖三区91| 色九月婷婷| 国产亚洲精品久久久久小| 97超色| 操我啊啊啊啊啊| 国产吞精a级片激情电影| 东北女人无套内谢视频| 成人一区二区三区四区| 99热这里只有精品8| 男人天堂黄片| 九九AV| 熟女熟妇伦久久影院毛片一区二区| 天美国产三级传媒| 国产精品岛国片在线观看| 亚洲一区日韩精品中文字幕| 超碰综合97在线| 精品久久久久黄少妇| 亚洲夜夜欢无码一区二区 | 亚洲男人天堂2019| 人人操人人操草草| 秋霞操逼片| 99热在线播放| 一区二区播放| 国产成人主播| 一区二区三区网站日日骚| 欧美精品1区2区3区| 伊人久久综合影院精品久久久| 欧美亚洲首页| 97综合久第一页| 四季AV一区二区凹凸精品小说| 口爆综合网| 综合色色网| 日本成人电影资源网| 强奸乱伦免费网站| 欧美少妇色图| 97Ai亚洲| 亚洲综合在线91| 东京热99999| 爱爱久久| 欧美72网页| 欧美亚综合色图| 日韩成人色图| www.狠狠干.coom | 午夜视频久久久久一区| 超碰色综合| 69精品| 91色婷婷综合久久中文字幕二区| 在线啊啊啊| 亚洲97网站| 日本天堂在线播放| 风月影院男女十八禁| 天美精品一区二区三区四区在线观看 | 在线电影亚洲色图| 亭亭在线资源| 大香蕉色欲AV| 欧美激情精品久久久| 香蕉av一区二区三区| 91丝袜美腿片| 啊啊啊啊啊啊啊啊要喷了| 欧美亚洲se91| 91精品免费| 欧美亚洲韩国视频十五区 | 国产亚洲99久久精品熟| 蜜臀无码视频在线观看| 亚洲国产美女久久久久 | 大香蕉欧美伊| 亚州春色| 欧美一品道| 天美传媒精品久久视频| 九九热re99re6在线精品| 欧美激情内射| 亚州综合网| 欧美性爱第一页久久| 成人AV超碰免费在线| 成人av影院在线观看| 综合 欧美 亚洲 日本| 精品一啪| 六月丁香啪啪| 裸体女人草逼视频播放一区,二区,三区,四区,五区 | 4虎在线视频| 极品少妇久久久久| 天美传媒AV在线播放| 翔田千里爆乳巨臀无码| 国产一级特黄大片处女| 成人免费不卡在线视频| 午夜丁香婷婷| 操美女人妻| 人人摸人人舔一区二区| 欧美日韩狠狠爱| 麻豆国产精品午夜视频| 国产自产一区视频在线| 精品国产片亚洲一区| 中文高清一区二区的| 美国久久一二三四| 欧美久久人体| 秋霞网无码| 性爱乱伦一区| 强上我不卡卡| 欧美草草| 日韩成人高清一区二区| 人人操人人uiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiii | 欧美日韩大香蕉| 国产精品自在线发布| 大奶啊啊好爽| 老司机午夜福利视频一区二区| 久久久一区二区三区麻豆| 国产美女在线精品免费看| 日本性爱少妇| 真实高潮91| 亚洲综合色图欧美| 国产成人自拍视频视频| 久碰视频| 九九九九九九视频| 中文字幕一区二区视频在线观看| 九月丁香综合网| 色月天AV导航| 超碰97国产欧美| 久久精品毛片免费不卡| 91久热这里只有精品| 97超色| 国产精品盗摄 偷窥盗摄| 色色色热| 9ⅰ久久久天天| 国产一区免费午夜视频| 2020视频1区2区3区| 职场同事知名国产国产精品久久欧美日韩| 欧美91在线| 亚洲精品成人| 97在线资源| 日韩视频精品在线观看| 久久久一区二区三区四曲免费听 | 欧美A片中文字幕| 蜜臀久久99精品久久久老,,| 偷拍亚洲情色| 欧美一级久久久久久久大片动画| AV色天香在线| 色色九区| 91性高潮久久久久久久久| 是还免费视频1727我| 日本一区二区三区免费观看| 国产欧美精品日韩区二区麻豆天美| 激情文学亚洲| 日韩欧美成人性爱在线| 91精品成人| 视频国产成人精品日本亚洲18| 大香蕉宗合网在线| 97超碰精品图片| 人妻熟女av国产网站| 色在线69堂| 国产精品毛片?v一区二区三区 | 国产精品久久久 | 国产一二三福利视频网| 一区二区三区精品久久| 99re热| 国产97视频免费观看| 激情四射五月天| 人干人人人操人人摸| 国产精品视频在线播放| 九月丁香婷婷色| 久久久久网站-538在线视频-欧美永久乱码| 国产强奸乱伦欧美| 亚洲不卡av在线| 国产精品午夜福利亚洲综合网| 中文字幕av久久爽Av| 蜜乳成人AV| 久久亚洲熟妇在线视频| 高潮的A片激情扒开一区| 欧美视频激情久久久久久| 岛国毛片在线观看免费| 亚洲涩涩| 草莓精品视频| yazhououmeizongya| 五月婷色| 乱伦熟女论坛| 日韩久久艹| 国产女人操逼视频| 综合网少妇| 国产黄a三级三级三级av在线看| 三上悠亚在线毛片91| 免费人人搞97| 大香网站| sewuyueav| 久久久久久大| 亚洲 自拍偷拍 欧美| 精品人妻视频一区二区在线播放| 操人无码| 亚洲巨爆乳一区二区三区四季网| surenchaopeng| 午夜黄色免费在线观看| 91性网| 精品视频97| 丝袜熟女一区二区三区| 久久尹人大香焦视| 日少妇亚洲版| 国产懂色精品国产av| 中文字幕在线免费观看 | 超碰78| 91久久国外网| 色婷婷电影网| 伊人一区二区在线播放| 美国三级日本三级久久99| 人妻熟女一区在| 嫩呦国产一区二区三区AV| 欧美另类天堂| 亚洲国产剧情少妇激情| 99精品久久久久久久婷婷| 综合色一区三区二区| 伊人久久大香线综合无码| 91free福利| 亚欧毛片基地国产毛片基地| 久久天堂网| 久久国产精品,久久国产| 777奇米影视777四色| 青青操网| 亚洲欧洲日韩中文字幕一区| 国产欧美日韩臀 | 超碰97亚洲| 欧美美女后入| 蜜色网色哟哟| 丁香婷婷九月| 夜夜操青青草| 97超碰欧美| 欧美 日韩第一性色| 91麻豆天美国产| 色五月网址| 伊人五月天激情| 三级日韩一区二区三区| 中韩中文字幕在线观看| 欧美青青视频| 日韩精彩免费| 激情五月婷| 久久99午夜精品一区人妻| 一本色道综合久久欧美| 91成人久久| 国产精品伦理| 玖玖草久草99蜜月一区二区三区| 日本特黄f c2| 欧美自拍偷拍免费观看| 国产多人在线观看视频| 中文乱码字幕观看| 国产乱码久久久| 色偷偷超碰亚洲| 久久色一区二区| 亚洲男人天堂2012| 免费看美国人人爽,人人操 | 国产后入清纯| 日韩丝袜高跟制服在线观看| 嗯啊不要啊啊在线观看视频| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | 色优久久| 亚洲欧美精品福利在线| 亚洲最新av无码成人精品区| 久久久久久久九九九九九九| 亚洲学生妹高清av| 99热在线播放| 综合 亚洲 欧美| 九九九九九九九九九国产精品 | 曰本人妻人人澡人人夹| 老司机天天操| 日韩黄色av中文字幕| 午夜亚洲WWW湿好大| 青娱乐休闲视频在线观看| 亚州综合色| 天天射夜夜操| 男人午夜天堂| 高清有码一区二区| 国内毛片热久久思思热| 中国操逼无码| 在线岛| 亚洲天堂一区二区久久| 亚洲色系另类精品国产| 激情抓乳插进去啪啪啪日韩| 亚洲成人日韩小说| 日本操嫩b网| 免费一级毛片在线视频观看| 日韩精品中文字幕二区| 超碰久热| 天天淫人人妻日日色| 精品国产一区二区三区久久久蜜臀 | 96AV久久久|