亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Cortex-M HardFault定位實戰(zhàn):從異常模型到現(xiàn)場追蹤

Cortex-M HardFault定位實戰(zhàn):從異常模型到現(xiàn)場追蹤 最近一直被HardFault折騰得頭皮發(fā)麻的兄弟或者剛接觸Cortex-M系列芯片、對異常處理機制還有點懵的新手這篇文章就是給你寫的。做嵌入式開發(fā)尤其是基于Cortex-M內核的MCU開發(fā)幾乎沒人能繞開HardFault這個坎。它不像普通邏輯Bug那樣能靠肉眼掃代碼看出來往往是程序跑著跑著突然就掉進一個死循環(huán)調試器一停PC指針指到一個莫名其妙的地址看門狗又跟著湊熱鬧整個系統(tǒng)直接癱瘓。我最早被HardFault支配的時候項目工期緊板子還只有一塊只能靠復位大法續(xù)命后來踩的坑多了才慢慢摸清楚這套異常處理機制的脾性。其實Cortex-M的異常和中斷處理是一個非常精巧的系統(tǒng)你把它搞明白了HardFault定位就是一道送分題。這篇文章不聊虛的直接從內核異常模型講起把HardFault的根因、Cortex-M異常處理流程、借助Keil MDK進行現(xiàn)場追蹤和調試的完整套路都掰開揉碎講清楚。無論你是用STM32、GD32還是其他Cortex-M內核的國產MCU這套方法論全部通用保證你下次再遇到HardFault能少掉一大半頭發(fā)。1. 先吃透Cortex-M異常處理模型1.1 異常和中斷的底層關系很多初學者會把“異?!焙汀爸袛唷碑敵梢换厥缕鋵嵲贑ortex-M內核里這兩個概念有明確的層級關系。從ARM官方手冊的定義來看異常Exception是所有打斷CPU正常執(zhí)行流程事件的統(tǒng)稱而中斷Interrupt只是異常的一個子集專指由外部引腳或內部外設觸發(fā)的那一類。Cortex-M3/M4內核把異常源按編號排了一張表編號越小優(yōu)先級越高這里說的優(yōu)先級是數(shù)字大小和實際優(yōu)先級高低相反。0號是棧頂?shù)刂?號是復位異常2號是NMI不可屏蔽中斷3號是硬故障HardFault4到10號分別是MemManage、BusFault、UsageFault以及幾個保留項11號是SVCall14號是PendSV15號是SysTick再往后就是外部中斷IRQ了也就是我們平時在STM32里配置的EXTI、UART、TIM等中斷。為什么要先講這張表因為HardFault在異常向量表里的位置是固定的3號它的優(yōu)先級默認是-1比除NMI和復位之外的所有異常都要高。這就意味著一旦觸發(fā)HardFault除了NMI能插一腳其他任何中斷都沒法搶占它處理器會立刻跳轉到HardFault_Handler。反過來如果某個異常的處理程序在執(zhí)行過程中出了問題而它的優(yōu)先級又比HardFault低那么就會被HardFault吞掉不會再報原來的錯誤。這里有個非常容易踩的坑很多人在寫中斷服務函數(shù)的時候發(fā)現(xiàn)程序跑飛了但調試器彈出來的窗口指向的是HardFault_Handler于是就開始在HardFault里找原因。其實真正的錯誤源頭很可能是你的某個外設中斷里干了不合法的事HardFault只是被拉來“背鍋”的。所以定位HardFault的第一步是搞清楚它是主動觸發(fā)還是被動吞掉。1.2 異常處理的硬件自動壓棧機制Cortex-M在處理異常時有一個和傳統(tǒng)MCU內核比如51、AVR完全不同的特點硬件自動壓棧。也就是說當異常發(fā)生時CPU會自動把xPSR、PC、LR、R12、R3-R0這8個寄存器壓入當前使用的??臻g這個過程不需要軟件干預是在異常入口處由硬件完成的一整套流水線操作。壓棧之后處理器會做什么它會從向量表中取出對應異常的處理函數(shù)地址跳轉過去執(zhí)行。這個過程叫異常返回準備硬件會把LR設置成一個特殊的值叫做EXC_RETURN這個值不是一個真實的內存地址而是一個帶有特殊含義的標記。比如0xFFFFFFF9表示從線程模式使用主棧指針MSP返回0xFFFFFFFD表示從線程模式使用進程棧指針PSP返回0xFFFFFFF1表示從處理模式返回。如果你用了FPU比如Cortex-M4F還會看到0xFFFFFFE9和0xFFFFFFED這類帶FPU擴展位標記的值。理解這個機制對HardFault調試至關重要。因為當你停在HardFault_Handler里時當前棧頂保存的就是觸發(fā)異常那一刻的“案發(fā)現(xiàn)場”——那8個寄存器的值。只要能正確解讀這些值就能還原出CPU在異常發(fā)生前到底在執(zhí)行什么代碼PC指針指到哪個函數(shù)LR是哪個調用者以及R0-R3傳了什么參數(shù)。這套方法在后面我會詳細演示。1.3 為什么要理解異常模型而不是背流程有人可能會說我知道了HardFault的向量號是3也知道了硬件壓棧但這些對我的實際調試有什么幫助有而且?guī)椭艽?。舉個實際例子。我曾經(jīng)調一個電機驅動板現(xiàn)象是運行幾十秒后系統(tǒng)死機復位后又能跑一會兒。一開始我以為是看門狗問題關了看門狗再跑還是會死。后來我把硬件壓棧的知識用上在HardFault_Handler里把當前棧指針的值讀出來然后按8個字32位系統(tǒng)一個字是4字節(jié)的偏移找到異常發(fā)生前的PC值再在反匯編窗口里定位到這個PC對應的代碼位置結果發(fā)現(xiàn)是在一個電機電流采樣的DMA中斷里代碼試圖訪問一個已經(jīng)關閉了時鐘的外設寄存器。問題的根源是時鐘門控配置順序錯了導致中斷觸發(fā)時外設時鐘被關掉了總線訪問直接觸發(fā)BusFault又被HardFault吞掉。如果我不懂異常模型和壓棧機制單靠肉眼一行行看代碼這種隨機死機的問題可能要排查好幾天。但有了這套底層知識半小時不到就能鎖定肇事代碼。這就是我為什么堅持先講原理再講實戰(zhàn)的原因原理通了所有所謂的“疑難雜癥”都會變得有跡可循。2. HardFault根因大盤點到底是哪些場景最容易觸發(fā)2.1 存儲訪問類異常越界、未對齊、非法地址Cortex-M內核的存儲系統(tǒng)有一個特點它把存儲訪問錯誤細分為好幾類在System Control BlockSCB里有三個非常關鍵的故障狀態(tài)寄存器分別是可配置故障狀態(tài)寄存器CFSR、硬故障狀態(tài)寄存器HFSR和故障地址寄存器MMFAR/BFAR。CFSR又拆成三個子區(qū)域內存管理故障狀態(tài)寄存器MMFSR、總線故障狀態(tài)寄存器BFSR、用法故障狀態(tài)寄存器UFSR。實際調試里最常見的HardFault觸發(fā)原因匯總下來大概有這么幾類野指針訪問指針未初始化或者指向已經(jīng)釋放的內存讀寫的時候直接踩到非法地址。數(shù)組越界尤其是寫入越界覆蓋了相鄰變量或者棧上的關鍵數(shù)據(jù)導致返回地址被破壞PC跳飛。棧溢出任務棧分配太小調用層級一深或者局部變量一多棧指針直接頂穿棧底寫到了不可訪問的區(qū)域。未對齊訪問Cortex-M3及以上內核雖然支持部分非對齊訪問但對某些指令比如LDRD/STRD、LDM/STM以及訪問外設寄存器時非對齊會直接觸發(fā)UsageFault或者BusFault。訪問不存在的地址映射了外設的區(qū)域但外設時鐘沒開或者地址本身超出MCU的地址空間。前面兩類是新手最容易踩的也是面試官最愛問的因為它們能反映一個人對內存布局的理解程度。我見過太多這樣的代碼定義一個全局數(shù)組存數(shù)據(jù)然后根據(jù)某個變量對數(shù)組進行寫入變量算出來是負數(shù)直接越界寫到了數(shù)組前面的內存。在Cortex-M上這種越界寫有時候不會立刻觸發(fā)HardFault而是靜默地破壞了相鄰變量的值等程序邏輯表現(xiàn)出來的時候離真正的錯誤點已經(jīng)很遠了。2.2 異常嵌套與優(yōu)先級配置的經(jīng)典坑Cortex-M內置了嵌套向量中斷控制器NVIC它允許高優(yōu)先級中斷搶占低優(yōu)先級中斷。這個機制本身是好的但如果你在中斷服務函數(shù)里做了不該做的事就會引發(fā)連鎖反應。最常見的幾個坑第一中斷服務函數(shù)里調用printf。printf內部涉及文件系統(tǒng)級別的緩沖操作有些庫實現(xiàn)里不是可重入的。低優(yōu)先級中斷正在執(zhí)行printf的過程中被打斷高優(yōu)先級中斷里又調用了printf兩個printf的上下文互相踩踏棧上的返回地址被破壞程序直接HardFault。這個問題在帶RTOS的環(huán)境里更明顯因為每個任務的棧是獨立分配的但中斷棧在裸機環(huán)境下就是主棧大家共用。第二中斷里操作浮點寄存器。Cortex-M4F有FPUFPU的寄存器保存是惰性的默認情況下中斷不保存FPU上下文只有真正用到浮點指令時才觸發(fā)自動保存。如果你在主程序里用了FPU又在中斷里用了FPU而RTOS的任務切換沒處理好FPU上下文就會出現(xiàn)FPU狀態(tài)寄存器值錯亂導致計算結果完全不對甚至觸發(fā)UsageFault。第三優(yōu)先級分組不一致。NVIC優(yōu)先級分組寄存器AIRCR可以配置優(yōu)先級的分組方式比如是“搶占優(yōu)先級4位子優(yōu)先級0位”還是“搶占優(yōu)先級3位子優(yōu)先級1位”。如果代碼里不同模塊分別在初始化時往AIRCR里寫分組配置后寫的會覆蓋先寫的整個系統(tǒng)的優(yōu)先級設定就會被攪亂某些原本應該被屏蔽的低優(yōu)先級中斷突然搶占了高優(yōu)先級中斷時序錯亂最終可能引發(fā)HardFault。2.3 指令執(zhí)行類異常未定義指令、除零、狀態(tài)切換失誤還有一類HardFault是從指令執(zhí)行層面觸發(fā)的這類問題在啟用優(yōu)化等級之后尤其難以復現(xiàn)。典型場景包括函數(shù)指針調用錯誤函數(shù)指針被寫入了一個非法地址跳轉過去之后取到的指令全是不合法編碼觸發(fā)UsageFault。跳轉到Thumb/ARM狀態(tài)混亂Cortex-M只支持Thumb指令集如果某個函數(shù)指針的最低位置0了表示ARM狀態(tài)處理器在取指時就會出錯。這個在C代碼里很難遇到但在匯編或者從應用里跳轉到Bootloader的時候容易出問題。除零操作Cortex-M默認情況下整數(shù)除零不觸發(fā)異常但如果軟件里開啟了DIV_0_TRP位除零就會觸發(fā)UsageFault進而被HardFault吞掉。未對齊的棧操作比如SP指針沒有保持8字節(jié)對齊在某些需要對齊訪問的LDRD/STRD指令上會直接觸發(fā)異常。這些場景有一個共同特點它們在正常代碼流程上是不會出現(xiàn)的往往是因為某個內存被破壞導致PC跳到了錯誤的位置執(zhí)行了錯誤的指令。所以當你發(fā)現(xiàn)HardFault是因為取到了一個未定義指令不要急著去查這條指令在哪里而應該去查是誰把PC弄過去的——大部分情況是函數(shù)返回地址被篡改少部分是函數(shù)指針被污染。3. 調試實戰(zhàn)一套可復制的HardFault定位方法論3.1 現(xiàn)場恢復從Keil5中提取異常前PC值很多人遇到HardFault的第一反應是直接在HardFault_Handler里打斷點然后點Run讓它停在斷點處。這個思路有一半是對的但如果你只在HardFault_Handler里打斷點你會發(fā)現(xiàn)一個尷尬的問題程序每次復位跑進HardFault_Handler停下來的位置幾乎永遠是同一個地方那就是HardFault_Handler的第一行匯編指令。這個信息量太少了你根本不知道是誰觸發(fā)它的。正確的做法是當程序停在HardFault_Handler時先從寄存器窗口讀取當前的SP值。關鍵點來了怎么知道這個SP是MSP還是PSP看LR寄存器如果LR的值是0xFFFFFFF9說明當前在處理模式用的是MSP如果LR的值是0xFFFFFFED說明異常返回目標是線程模式且使用PSP那當前用的棧指針需要從進程棧指針寄存器里單獨讀取。拿到SP之后從SP指向的地址開始向上讀取內存前8個字就是異常發(fā)生前硬件自動壓棧的現(xiàn)場偏移0是R0偏移4是R1偏移8是R2偏移12是R3偏移16是R12偏移20是LR偏移24是PC偏移28是xPSR。在Keil的Memory窗口里輸入SP地址直接就能把這8個值讀出來。其中最重要的是偏移24處的PC它就是異常發(fā)生那一刻CPU正在執(zhí)行的指令地址。這個步驟在Keil5里操作非常簡單程序停在HardFault_Handler后打開View菜單里的Registers窗口找到SP再打開Memory窗口輸入SP的值回車就能看到一長串數(shù)據(jù)。把偏移24個字處即地址SP0x18的數(shù)值取出來這個就是我們要找的PC。然后在Disassembly窗口里輸入這個PC地址回車就能看到對應的匯編指令再對照源代碼窗口基本就能定位到肇事代碼行。3.2 深入理解EXC_RETURN別被LR騙了在HardFault現(xiàn)場讀取寄存器時有一個細節(jié)容易讓人迷惑在壓棧數(shù)據(jù)偏移20處確實有一個LR但它不是異常發(fā)生前的調用者LR。這個LR是CPU在進入異常時自動壓棧的它保存的是觸發(fā)異常那一條指令的“返回地址”準確說是觸發(fā)異常的指令地址加上一定偏移可能指向BL指令的下一條指令地址也就是調用者真正要返回去執(zhí)行的地方。而CPU當前的LR寄存器里保存的是一個EXC_RETURN它根本不是一個真實地址。我見過很多人在HardFault調試時看到寄存器窗口里LR的值是0xFFFFFFF9然后把它當作調用鏈里的一個函數(shù)地址拿來查結果在反匯編窗口里輸入這個地址之后發(fā)現(xiàn)根本查不到有效代碼——因為0xFFFFFFF9就不是一個地址。所以一定要記住異?,F(xiàn)場的調用關系要看壓棧數(shù)據(jù)里的舊LR而不是當前的LR寄存器。當前LR寄存器里那個0xFFFFFFF9/0xFFFFFFED是用來告訴硬件“異常返回時用什么模式、用哪個棧指針”的。如果你用的是帶FPU的Cortex-M4F或M7壓棧的數(shù)據(jù)結構會不一樣。當異常發(fā)生時硬件檢測到當前上下文使用了FPU會自動多壓18個字16個FPU寄存器S0-S15加FPSCR加一個保留字。這種情況下SP指向的第一組8個字仍然是R0-R3、R12、LR、PC、xPSR但在這組數(shù)據(jù)之后緊接著的是FPU寄存器區(qū)。判斷是否發(fā)生了FPU壓??碋XC_RETURN的最后一位如果是1表示有FPU壓棧。比如0xFFFFFFED這個值最后一位已經(jīng)無法直接區(qū)分但對照寄存器窗口的EXC_RETURN位或者直接看壓棧數(shù)據(jù)的長度都能確認。3.3 借助CFSR、HFSR和BFAR/MMFAR縮小故障范圍光拿到PC還不夠我們需要知道HardFault為什么被觸發(fā)。前文提到過的故障狀態(tài)寄存器此刻就是最重要的證據(jù)來源。在Keil5里通過Peripherals菜單下的Core Peripherals、Fault Reports窗口能看到一份易讀的故障信息匯總。這個窗口會把CFSR里的每一位解析成人話比如“Instruction Bus Error”“Data Bus Error”“Unaligned Access”等還會顯示HFSR里的FORCED位是否置1以及保存了觸發(fā)總線故障或內存管理故障的具體地址的BFAR、MMFAR。如果你不想開圖形窗口也可以在Watch窗口手動添加寄存器表達式(volatile unsigned long)0xE000ED28就是CFSR的地址0xE000ED2C是HFSR0xE000ED38是BFAR0xE000ED34是MMFAR。我自己調試時有一套固定流程先讀HFSR看FORCED位是不是1。如果是說明下面肯定有一個具體的可配置異常被觸發(fā)過繼續(xù)讀CFSR對應子區(qū)域。如果CFSR里的MMFSR有置位說明是內存管理故障結合MMFAR的值看是訪問了哪個地址。如果BFSR有置位說明是總線故障結合BFAR看地址。如果UFSR有置位比如UNALIGNED位為1說明是未對齊訪問結合PC反匯編看具體是哪條指令。這里有一個值得注意的點如果BFAR/MMFAR的值是0并不意味著沒有訪問故障而是意味著CPU沒有捕獲到有效的故障地址。這種情況經(jīng)常發(fā)生在指令預取階段也就是CPU去取一條非法指令時發(fā)生了總線錯誤這時候不會更新BFAR。所以要結合PC一起判斷不能只看地址寄存器。3.4 基于LR的調用?;厮菁记赡玫疆惓G暗腜C和舊LR之后我們其實已經(jīng)能確定是哪個函數(shù)里出的問題。但如果PC落在一個比較靠后的工具函數(shù)里比如memcpy或一個數(shù)學庫函數(shù)內部光是看到PC還不夠——我們需要知道是誰調用了這個函數(shù)才能理解整個觸發(fā)鏈路。這個時候就要用到調用?;厮?。手動回溯的原理是棧指針SP指向的壓棧數(shù)據(jù)里偏移20處保存的是進入異常前的LR它指向調用者的下一條指令沿著這個“函數(shù)返回地址”的鏈條再往上追一級需要知道當前函數(shù)的棧幀是怎么建立的。Cortex-M的AAPCS過程調用標準規(guī)定函數(shù)入口處通常會有PUSH {r4, lr}這樣的指令也就是把被調用者保存寄存器R4-R11和鏈接寄存器LR都壓到棧上。如果我們在異常前的PC處往回看幾條指令能確認這個函數(shù)確實有PUSH {lr}操作那么當前SP加上壓棧偏移再往里找就能找到上一層函數(shù)的LR以此類推能還原出完整調用鏈。在Keil5里更簡單的方案是直接使用Call Stack窗口。當程序停在HardFault_Handler時打開View—Call Stack WindowKeil會根據(jù)當前棧內容自動解析調用鏈。但注意自動解析有時候依賴調試信息如果你開啟了較高的優(yōu)化等級比如-O2/-O3很多棧幀信息被優(yōu)化掉了Keil解析出來的調用關系可能不準甚至會報錯。這種情況下手動從壓棧數(shù)據(jù)里讀PC和LR是唯一可靠的方法這也是我把手工回溯放在這里重點講的原因。3.5 Keil5中的高效輔助調試手段除了上面這些偏底層的分析方法Keil5本身還提供了一些非常實用的輔助功能用好了能大幅提升定位效率。第一個是硬件斷點和數(shù)據(jù)斷點。如果HardFault的觸發(fā)和某個特定變量的寫入相關可以在Keil里給這個變量打數(shù)據(jù)斷點Data Breakpoint這樣當代碼試圖修改這個變量時CPU會立刻停下來調用棧就是完整的調用者信息。這在排查棧溢出和數(shù)組越界寫時特別有效。數(shù)據(jù)斷點數(shù)量有限Cortex-M3/M4一般支持4個但用來盯一兩個關鍵變量足夠了。第二個是異常窗口Fault Reports結合邏輯分析儀。Keil5的Fault Reports不僅能顯示CFSR/HFSR的解析結果還能顯示是哪個異常號觸發(fā)的。配合邏輯分析儀窗口觀察若干GPIO電平可以判斷異常發(fā)生的時間和外部事件的時序關系。比如之前排查一個通信模塊隨機死機的問題我用GPIO在中斷入口和出口各翻轉一次然后用邏輯分析儀抓異常發(fā)生時刻附近的引腳電平很快發(fā)現(xiàn)是兩路中斷的優(yōu)先級配置反了導致高優(yōu)先級中斷在低優(yōu)先級中斷的臨界區(qū)里被觸發(fā)破壞了協(xié)議棧的狀態(tài)機。第三個是棧使用量檢測。在Options for Target—Target窗口里勾選“Use MicroLIB”并在Linker頁面勾選“Use Memory Layout from Target Dialog”然后在代碼里調用__get_MSP()和__get_PSP()讀取當前棧指針比對棧底地址就能計算出剩余??臻g。配合Keil的“Stack Usage”分析編譯后從View—Analysis Window—Stack Usage看可以評估每個函數(shù)的棧消耗。這個功能在排查棧溢出HardFault時非常直觀基本能把問題縮小到具體任務。4. 常見問題與排查技巧實錄4.1 一個典型問題no cortex-m sw device found結合熱搜詞里出現(xiàn)頻率很高的一個問題“no cortex-m sw device found”這類問題雖然不算HardFault本身但和HardFault調試強相關。最簡單的情形是程序跑飛后進入HardFault然后你點Keil的Debug按鈕結果彈出“no cortex-m sw device found”根本連不上調試器。這通常不是調試器壞了而是目標芯片在死機狀態(tài)下把SWJ調試端口占用了或者時鐘配置被改掉了調試器復位之后握不上手。解決辦法分兩種。如果目標芯片還在響應復位可以在Keil的Debug—Settings里把Reset and Run選項打開或者在連接失敗時按住目標板上的復位鍵然后點擊Debug在松開的瞬間讓它握上SWD握手信號。更穩(wěn)妥的方案是用一個腳本文件在調試器初始化時先讓芯片保持在復位狀態(tài)配置好SWD速度后再釋放復位。對于STM32系列有些型號還支持通過BOOT0拉高進入系統(tǒng)Bootloader模式此時內核運行在出廠固件上SWD端口必然是釋放的連接成功后把BOOT0拉回低電平就能正常刷固件和調試了。如果你用的是國產MCU比如GD32、AT32這些SWD連接失敗的原因還要多排查一個讀保護。很多國產芯片默認出廠時讀保護是使能的或者你在調試過程中不小心開啟了讀保護級別1這會導致調試器無法通過SWD訪問內核。解決辦法是用對應的燒錄工具執(zhí)行全片擦除解除讀保護。我在一次GD32的調試中就遇到過程序跑到某處觸發(fā)了HardFault但重置之后居然連不上調試器最后發(fā)現(xiàn)是代碼里某段錯誤的存儲區(qū)寫操作意外修改了選項字節(jié)把讀保護打開了。4.2 HardFault發(fā)生的時機隨機如何復現(xiàn)和抓取HardFault最折磨人的一點是它有時候不是100%復現(xiàn)的。你在調試器下跑幾十次都好好的一上電裸跑可能幾分鐘就死一次。這類“幽靈式”死機通常有幾種原因時序相關的資源競爭中斷和主循環(huán)同時訪問共享變量、堆棧踩踏發(fā)生在特定函數(shù)調用組合下、以及硬件外設的偶發(fā)錯誤狀態(tài)。我的經(jīng)驗是先開啟MPU內存保護單元來構造一個隔離環(huán)境。Cortex-M3及以上內核幾乎都帶MPU配置它可以給不同內存區(qū)域設置訪問權限。比如把棧區(qū)所在的內存塊設置為只讀的一旦發(fā)生棧越界寫入MemeManage異常會立刻觸發(fā)——這個異??梢酝ㄟ^中斷向量直接跳轉配合調試器的斷點能精準捕獲到越界寫入的第一現(xiàn)場。這個技巧對排查棧溢出簡直不要太爽不用靠猜直接讓硬件替你盯著。如果復現(xiàn)是隨機的還可以利用Cortex-M內核的異常返回機制做“二次觸發(fā)”設計。簡單說在HardFault_Handler里不直接死循環(huán)而是把MSP的值修正為初始值然后重新跳轉到復位向量讓系統(tǒng)軟復位。這樣雖然程序重啟了但在重啟前把故障現(xiàn)場的關鍵寄存器PC、LR、CFSR、BFAR通過一個保留內存區(qū)域保存下來系統(tǒng)恢復后可以通過串口打印或者調試器查看。這種方式在生產環(huán)境下是終端產品的一個保底方案正常運行時不打斷業(yè)務故障出現(xiàn)時能把現(xiàn)場留給工程師。4.3 Keil5里遇HardFault的幾條高效操作口訣我把自己多年Debug開發(fā)過程里驗證過的操作整理成了幾條口訣式清單配合上面講的方法論使用定位HardFault基本能控制在幾分鐘內一是“一定位、二看壓、三讀故障”。所謂一定位是讓程序停在HardFault_Handler時先別慌通過寄存器窗口和棧信息定位當前SP二看壓是讀取壓棧的8個字拿到異常發(fā)生前的PC和LR三讀故障是看CFSR/HFSR的解析結果確認屬于哪類故障并抓住BFAR/MMFAR。二是“先棧后碼”。排查HardFault時優(yōu)先檢查棧的完整性看SP地址是否落在合法區(qū)間內壓棧內容里PC是否指向一個合理代碼地址比如ROM范圍內LR是否指向一個有效的調用者。很多時候棧已經(jīng)被踩得面目全非PC指向的是一個類似于0x0800xxxx的保留地址說明返回地址被覆蓋了這時候與其去分析那條非法PC不如順著棧底往上找看哪個區(qū)域被寫入了不該寫的數(shù)據(jù)往往能揪出越界寫和緩沖區(qū)溢出。三是“優(yōu)化等級降一降”。HardFault和編譯器優(yōu)化等級的關系非常密切。很多代碼在高優(yōu)化等級-O2以上下行為和-O0完全不同因為編譯器可能會省去一些邊界檢查、重排表達式、把局部變量直接映射到寄存器。當你用-O0能跑通、用-O2就HardFault時先別懷疑芯片也別盲目加volatile——先看反匯編確認是不是優(yōu)化導致了某個變量在你預期的時間點還沒被寫回內存或者某個中斷里讀取的共享標志被優(yōu)化成了寄存器緩存。實在不行對可疑模塊單獨關閉優(yōu)化這是最直接的止損手段。四是“多路檢查不迷信單點現(xiàn)象”。舉個例子有些HardFault彈窗時當前PC停在HardFault_Handler函數(shù)調用棧窗口里顯示的都是HardFault_Handler附近的信息僅憑這個現(xiàn)象你可能會以為是HardFault_Handler自己的代碼問題。其實不然因為編譯器把故障代碼編進了同一個文件調試器展示的調用棧信息是“物理上等價”的。正確做法是回到現(xiàn)場數(shù)據(jù)層面以壓棧PC和CFSR為準不要被調試器的可視化結果帶偏。4.4 從HardFault再往前一步寫一個故障記錄模塊追著HardFault打補丁是被動的我更推薦每個項目在開發(fā)階段就內置一個故障記錄模塊代碼量不大但能在后續(xù)所有調試中節(jié)省大量時間。這個模塊的核心就兩件事第一在HardFault_Handler里把現(xiàn)場數(shù)據(jù)PC、LR、SP、CFSR、HFSR、BFAR/MMFAR、R0-R3、R12、xPSR保存到一個固定的內存區(qū)域第二把保存的現(xiàn)場數(shù)據(jù)在系統(tǒng)重啟后通過串口或者調試信息輸出出來。存儲區(qū)域的位置需要動一點腦筋。如果直接定義一個全局結構體變量那么它會被編譯器分配到RAM的某個位置如果RAM的初始化過程出問題現(xiàn)場數(shù)據(jù)可能被覆蓋掉。更穩(wěn)妥的方案是用鏈接腳本手動指定一個保留區(qū)域放在棧頂?shù)刂分盎蛘咄ㄟ^__attribute__((section(.noinit)))標記到不掉電的SRAM段。這樣即使系統(tǒng)重啟了只要不掉電現(xiàn)場數(shù)據(jù)還能讀到。串口打印的時候建議用十六進制原始格式不要做太復雜的格式化因為故障模式下堆棧狀態(tài)可能不穩(wěn)定用太復雜的庫反而容易二次故障。我習慣的格式是FAULT_INFO PC0x08001234 LR0x08004567 SP0x20000ABC CFSR0x00008200 HFSR0x40000000 BFAR0x00000000 MMFAR0x20000000 R00x00000001 R10x00000000 ...打印完之后再根據(jù)PC地址去工程里定位具體代碼位置配合反匯編基本就能鎖定問題。這個模塊建議在項目初期就加上成本極低但收益巨大。順便說一句如果你的項目用了RTOS故障記錄模塊里最好也保存當前任務句柄或任務名信息因為很多HardFault和任務切換相關知道是哪個任務出事的排查范圍能縮小很多。4.5 常見問題速查表現(xiàn)象可能原因排查要點解決建議HardFault_Handler里PC指向非法地址棧溢出或返回地址被篡改檢查棧頂和SP差值、壓棧區(qū)的PC值增大棧空間檢查緩沖區(qū)越界CFSR的BFSR位置位BFAR不為0數(shù)據(jù)訪問觸發(fā)了總線故障看BFAR訪問的是哪個地址檢查外設時鐘、地址空間合法性CFSR的UNALIGNED位置位開啟了對未對齊訪問的陷阱定位到具體訪問指令檢查數(shù)據(jù)結構對齊或關閉該陷阱HFSR的FORCED位置位CFSR全0嵌套異常導致無法上報檢查異常返回和棧狀態(tài)減小中斷里復雜操作增加棧深度出現(xiàn)HardFault后連不上調試器SWD接口被占用或讀保護開啟按復位鍵連接檢查選項字節(jié)短接NRST或使用Bootloader模式優(yōu)化后才能復現(xiàn)HardFault編譯優(yōu)化引入了時序/內存差異反匯編關鍵函數(shù)對比-O0和-O2局部關優(yōu)化或重寫臨界區(qū)邏輯HardFault伴隨FPU相關異常FPU上下文保存不完整檢查RTOS任務切換對FPU的處理開啟FPU惰性壓?;騿⒂萌蝿占塅PU保存表格里列出的這幾種情況基本覆蓋了我日常開發(fā)中九成的HardFault問題。尤其是第一條“返回地址被篡改”我再單獨多說一句它在棧回溯時表現(xiàn)特別迷惑因為PC壞得很徹底反匯編窗口跳到一片空白或保留區(qū)域。遇到這種情況不要死磕PC回到棧區(qū)往上找看棧里有沒有出現(xiàn)“很規(guī)律”的填充數(shù)據(jù)比如0xA5A5A5A5或全0這種填充數(shù)據(jù)往往是緩沖區(qū)沒有初始化或者棧保護魔數(shù)從它們被破壞的位置就能反推是哪一段越界寫導致的。5. 寫在最后的心得跟HardFault打了這么多年交道我最大的體會是它不是一個“玄學問題”而是有一套固定邏輯鏈路的工程問題。你越是靠運氣去復位、重試它就越折磨你你越是把異常模型、壓棧機制、故障狀態(tài)寄存器這些底層知識吃透它反而越聽話甚至能變成你定位內存問題、時序問題的一把利器。最后再分享一個我每次都會檢查的細節(jié)在寫中斷服務函數(shù)時盡量讓代碼保持短小精悍不在中斷里做printf、malloc、延時這類操作每個中斷都加上對參數(shù)合法性的檢查對共享變量加上保護。這些老生常談的規(guī)則每一條背后其實都是HardFault的血淚教訓。認真去執(zhí)行你開發(fā)中遇到的HardFault概率至少能降一半。剩下的一半用前面講的那套方法也能快速定位、體面收場。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久 亚洲 日韩 人妻| 在线观看高清AV| 午夜丁香婷婷| 粉嫩av平台| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 日韩天美| 国产熟女完整版中字| 中出在线视频| 果冻传媒一区二区三区| 国产丝袜美女诱惑| 久久久久国产一区二| 97爱亚洲| 91亚.色| 精品国产污一区二区三区| 日韩AC| 午夜舔阴达高潮视频免费看| 蜜臀AV一区二区三区| 国产亚卅97| 中文字幕成人| 无码操逼网| 一级一性爱免费视频| 97视频在线免费播放| 日日日日日| 日韩A优精品在线观看| 日日夜夜免费| 久久精品无码熟妇一区二区三区视频导航| 欧美色图私拍91| 日本99视频| 精品日韩中文在线| 天天上日日上日韩精品| 夜夜爽夜夜操| 久久精品区| 一区二区三区四区久久视1| 国产亚洲综合欧美一区| 五月天偷拍| 金莲网址| 在线看片国产精品每日更新| 日韩无码三级影院| 久久国产逼| 97久久国产精品女不卡| 天天天做天天天爱天天天爽| 校园激情狠狠四射| 91操熟妇| 国产成人主播| 超碰97久| 91宗合网| 日韩操啪| 久久黄片国产一区二区| 日本欧美一区二区三区视频麻豆| 青青久久手机线视频| 99色网| 超碰97人人乐| 综合五月天| 四虎在线视频| 欧洲精品一级二级精品综合视频综合 | 猛交交| 91狠狠综合久久久| 美女操逼福利视频| 国产呦精品一区二区三区下载 | 午夜精品久久久久久久男人的天堂| 无码精品一区二区三区潘金莲| 八戒无码国产午夜福利| 久久专区| 国产成人亚洲精品无码古代早漏男| 亚洲免费成人在线高清无码视频| 亚洲啪AⅤ永久无码| 国产在线视频二区| 大香蕉伊人色偷偷在线| 久操视频免费在线观看| 日本九九久久99| 操老熟女AV| 四虎国产成人精品免费一女五男| 老鸭窝黄色视频网站| 人人操人人射人人干| 国产精品国产| 蜜臀99久久精品久久久久久| 97亚洲欧美| 又大又大又大又粗爽高潮观看 | 97这里都是精品| 三级网站超变态精品| 亚州男人的天堂| 麻豆人妻偷人精品无码视频| 色阁阁AV综合网| 91美女视频电影| 欧美瑟综合| 青草地一本线一区二区三区| 中文字幕日韩精品久久| 操99| 欧美国产视频| 久区视频| 9久在线视频只有精品| 亚洲第一精品在线视频| 1024亚洲中文字幕久在线看片你懂的 | 国产精品久久久久久久久AV大片| 18一区二区三区| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 超碰95| 国产女人与拘做受视频免费| 五月丁香| 91亚洲网站| 成人免费看吃奶视频网站| 午夜欧美女人操逼| 综合97亚洲| 亚洲视频精选| 去干网最新版| 日本媚薬中文字幕在线| 啪啪AV导航| 精品国产嫩穴视频| 成人草草视频| 国产不卡免费在线视频| 级品肉射| 乱伦强奸区日韩| 色情综合| 日本布卡一区二三区| 日韩免费a级毛片无码a∨| 天天草天天干天天日| 亚洲人成色9999精品久久| 中文字幕人乱码中文字的预防方法 | 99www.bibizy香蕉资源国产一区二区三区高清 | 日韩天天综合| 夜夜嗨AV一区天天| 麻豆区久久久久亚| 中文字幕丰满子伦无码专区在线视频最新 | 操逼日韩无码| 青青草原av| 婷婷在线视频在线观看| 国产后入精品| 极品国产内射| 少妇被玩视频二三区| 加勒比海人人操超碰在线| 福利在线观看一区二区| 亚洲AV资源| 日韩一二三区| 高清无码国产亚洲| 日日AAvv| 日本高清_区二区三区| 国精综合一二三区影视| 老子午夜伦不卡影院| 国产后入精品| A片大香蕉在线| 97久久超碰| 噜噜噜亚洲精品| 久久一区二区蜜桃| a男人的天堂| 亚洲有码视频二区| 青娱乐淫乱1314| ai欧美亚洲小说| 国产十八禁视频| 天天夜夜rb| 久久国产熟女影院| 性爱综合网| 欧美综合狠| 另类TS人妖一区二区三区| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 欧美综合综合| 色图综合| 欧美日韩在线国产在线| 爱丝福利| 97人妻色| 国人欧美精品一区二区| 欧美性爱精品七区| 最新国产亚洲精品精品国产亚洲综合| 高清不卡国产| 116美女午夜| 欧美日韩啪啪电影| 亚洲欧美一区二区三区一猛片| 午夜精品久久久久久久第一页按摩| 日夜尻逼网| 欧美亚洲激情一二三| 91搞逼视频| 91麻豆一二三区| 成人三一级一片aaa| 一区二区偷拍拍视频| 中文 人妻 制服| 欧美综合骚| 亚洲色人| 男插女青青影院| 91丨国产丨白浆秘 洗澡动漫| 噜噜噜无码AV一级一级久久影院| 九七人妻在线| 精精夜夜| 女人午夜视频777| 国产真实子伦对白| 色哟哟AV| 97久久久精品| 中文字幕国产精品1区| 黄色片一区二区三区四区五区| 清纯唯美综合亚洲| 又黄又粗又硬又长又大| 日韩一级二级| 五月天色色网站| 亚洲图片日本AⅤ欧美在线| 欧美 色 亚洲| 日韩人妻丝袜美腿中文| 天堂精品小草| 久久久久久久久久久久久9999| 亚洲国产精品无码AV在线| 人妻性爱一区二区| 色5月婷婷| 日韩亚洲美州欧洲综三区一品在线| 东北女人高潮视频| AV一二区| 中文人妻av高清一区| 亚洲av噜噜噜噜噜噜| 亚洲精品黄码久久久久| 久久线上视频免费看| 日韩少妇无码| 欧美久久草熟女| 日韩精品永久在线观看| 隔壁邻居波多野结衣中文字幕| 久热一区二区| 欧美视频一| 少妇一区二区三区| 久操97| 欧美96在线|欧| 日本幼女18+| 国产诱惑| 亚洲成人贴图| 精品人妻免费观看| {男男暴菊gay无套网站| 在线免费观看日韩一区| xxxx网站亚洲精品| 韩日无码在线观看| 欧美在线干| 亚洲色五月| 国产馆极品诱惑| 亚洲淫乱骚妇AV| 99在线视频播放| 中文字幕视频免费| 日日嗷| 久久久啊啊啊| 一本色道无码DVD中文字幕| 日本人妻中文字幕精品| 在线看片国产精品每日更新| 自偷自拍的亚洲视频| 中文字幕第页| 天天享受天天看| 欧美大片天天看| 精品二区三四区五电影 | 久久久工口| 久久久久久91香蕉国产| 亚洲欧美校园| 人人操人人爽人人操人人| 草草影院日本第一页| 黄色av一区二区在线| 九九热精品| 91人妻视频| 物业黑人 AV一区| 97久久久久| ,成人免费啪啪视频| 岛园激情| 亚洲影院小综合| 久久网亚洲| 亚洲精品九九九| 又大又长又粗又爽又黄| 亚洲色五月| 人人超碰在线观看黄| 超碰欧美97资源| 操逼操2| 色综合av男人天堂| 一区=区三区视频| 欧美偷偷网| 大香蕉综合网| 欧美一级做a爰片免费视频| 好吊色在线观看| 大干人妻| 欧美强奸一区二区诱惑| 国产熟女一区二区丰满| 欧美 色 亚洲| 国产一区二区欧美日本| 99xav| 97欧美日韩| h无码动漫在线观看| 欧美日韩黄色片一区二区三区四区人与兽做爱| 亚洲熟女人妻中文字幕一区二区| 欧美色性爱| 亚洲另类色图片| 亚洲男人在线观看天堂| 天天干夜夜一操| 欧美白嫩女HD| 一级AV性爱| 九九九九九九九精品视频| 日本免费一区二区不卡 | 亚洲青色欧美| 探花视频免费观看国产专区| 天天爽爽爽爽| 亚洲一区二区AV| 久久久久成人亚洲国产| 91伊人久久在线| 樱花蜜乳av| 亚洲熟妇熟在线电影视频| 久久精品一区二区| 91久久久久久久久久久| 99re超碰| 好湿好紧好爽 视频| 亚洲欧美97| 五月香婷婷| 97美日韩视频| 97超级久久强资源| 欧美资源| 日本一区二区三区精品| 亚洲欧美国产中文视频| 97爱b| 中文字幕中文字幕一区二区| 欧美日韩天堂| 极品色www影院| 深夜激情 | 伊人久久亚洲中文字幕不卡| 日韩卡一卡二卡三在线| 中文字幕一区二区三区蜜桃视频| 一区二区娱乐网站| 色欧美亚洲| 亚洲情色五月天 | 欧美强奸乱| 日本中文字幕一区| 妺妺跟我一起洗澡没忍住| 中字一区| 九一综合精品视品av| www国产无码| 爽爽爽免费视频| 黄色区免费观看中文字幕| 日韩中文字幕宗合在线| 欧美激情五月天| 91狠狠| 亚洲色图欧美另类在线| www.99在线| 成人国产视频在线观看| 嗯嗯啊好大| 日韩精品中文字幕二区| 亚洲九九九| 久久伦理视频久久大香蕉视频| 亚洲古典另类欧美在线| 97视频在线| 久操影视| 亚洲97P| 果冻国产精品麻豆成人av| 91丝袜在线播放| 国产盗摄美女如厕大神作品在线观看 | 久操精品网| 欧美夜夜草视频| 啊啊啊在线看| 欧美爆操91| 日韩探花精品在线视频| 人妻少妇精品久久久久久久| 日韩色女精品| AV丝袜少妇| 亚洲色五月| 久草国产在线视频| 欧美成年人性爱视频免费观看| 天天在线91| 欧美内射少妇| 狠狠干综合| 啪啪啪东京| 热99re69精品8在线播放| 91精品又粗又猛又爽| 欧美日韩超碰在线| 亚洲AV无码乱码在线观看性色| 久久精品国产亚洲AV清纯| 欧美日韩精品久久久久东北老熟妇| 人人手机欧洲亚洲国产人妻| 男女一级A片大黄,一进一出| 蜜乳AV一区| 一级性爱视频免费在线| 亚州色综合| 久久久久久免费电影| 夜夜嗨绯色| 欧美色图中文字幕| 白丝AV网站| 69超碰综合| 女人高潮大叫一级毛片| 人妻人人做人人澡人人爽欧美一区| 97九色| 人妻一区二区三区熟女| 躁躁躁日日躁2020| 肥佬影院91| 97在线/亚洲| 色女免费在线观看视频网址| 欧美在线 亚洲| 啊啊啊啊啊啊啊啊啊啊在线观看| 97se综合网| 观看免费区二区三区二| 久久手机视直播| 天天爽爽爽爽| 中文字幕视频2区| 精品射1999| 国产久久视频| 免费9 1久久| 第45页一区二区| 国产传媒美日韩av| 96国产污污污丝袜| 欧美大干日韩| 天天综合站| 日本2020一区二区| 成人性交免费视频| 国产女同在线观看视频| 在线播放成人高清免费视频| 欧美18 在线观看| 伊人黄色片| 精品九九国产无码| 巨爆乳肉感一区二区三区竹菊影视| 乱伦系列一区二区| 狠狠综合网| 中文高清一区二区的| 黑丝少妇麻豆| 99re这里| 精精品人妻一区二区三区| 色妇综合网| 精品无码一区二区三区| 欧美性爱十八禁| 婷婷久久网| 澳门人妻久久| 91男同| 另类小说欧美激情校园春色| 26uuu久久| 女人 A一级| 激情丁香五月婷婷| 和协影院中文字幕三区| 欧美自拍网| 人人干人人操人人爱| 色欲蜜臀AV| 久热9| 激情文学欧美| 天天影视91看看| 搡老熟女免费视频 | 无码九九九九| 无码一区免费在线不卡| 懂色AV蜜臀无码精品APP| 天美麻豆精品视频99| 国产熟女二区| 国产精品96久久久久久| 久久毛卡| 久久视网78| 久久久久久999| 久久中文字幕一区不卡| 中文字幕高清20页视频| 男人天堂久久精品不卡| av一区二区三区不卡| 国产精品久久久久av| 亚洲狼狼干综合1| 亚洲国产福利视频| 国产一区二区三区白丝| 久久亚洲不卡| 欧洲视频在线| 黄色视频特级毛片| 九一精品牛牛一区二区| 精品在线蜜臀| 噜噜噜狠狠色综合| 天天搞欧美| 国产亚洲精品激情| 久久99手机免费视频| 亚州性色| 九九色精品| 蜜桃臀一区二区三区久久| 欧美视频一| 日产狠狠干| 91精品操美女| 无码人妻丰满热妇又大又粗| 久久鲁夜| jk白丝没脱就开始啪啪| 韩日巨乳美女免费视频在线观看| 综合久久久久久久久91| 青青国产精品在线| 亚洲色图欧美一区二区不卡| 志村玲子视频一区二区| 亚洲深夜福利| 麻豆国产尤物AV| 98超碰欧美| 国内自拍 日韩激情 99| 96精品久久久| 婷婷色综合| 日韩一级二级三级| 亚洲男人bt天堂| 青草成人免费视频一COm| 亚洲成人网站在线观看| 南澳成人一级片在线播放| 婷婷影院入口| 97在线观看视频| 大香蕉乱伦视频网| 校园春色 亚洲| 99久久亚洲精品无码毛片潘甜甜 | 91蜜臀人妻中文字幕在线| 在线观看AV片| 亚洲高清男人天堂| 色丁香久久| 日韩精品亚洲一二三| 婷婷中文网| 日本亚欧爱爱| 激情开心五月天| 成人性交午夜免费片| 一区二区三区在线资源| 在线97视频| 国产无遮挡| 国产三级在线现体验区| 超碰97欧美日韩| 国产在线视视频有精品| 人人妻人人澡人人爽久久av| 人妻碰碰碰碰碰碰| 极品欧美一区二区三区| 中出后入| 蜜桃久久综合视频| 亚洲春色欧美激情自拍| 尤物视频偷拍免费| 日韩天美| A 在线网址| 国产9区| 午夜九九| 麻豆 美女 丝袜 人妻 中文| 嗯啊不要在线观看嗯啊| 成年无码动漫av片无尽在线| 伊人久久国产免费观看视频| 美女国产一区二区久久| 日本色日夜干| www.高清无码诱惑一区.com | 亚洲色宗合| 91新在线欧美| 你懂得91| 亚欧毛片基地国产毛片基地| 亚洲女人毛茸茸91| 97九色人妻| 99re公开精品免费视频 | 人妻激情偷乱视三区频一区二区| 深夜国产福利| 日本黄页视频在线观看| 95精品在线| 岛国网址国产 | 欧美精品xxxwww| 偷偷人人精品女女久久| 国产久久久久久| 9超碰免费| 91久久久久久| 国产毛片在线| 国产美女高潮| 夜夜夜爽www精品视频| 97大色网| 亚洲熟妇自偷自拍另欧美| 亚洲免费成人在线高清无码视频 | 天天操天天舔| 日韩无码视频黄色| 日逼97| 91精品婷婷国产综合久久竹菊| 激情小说五月天| 国产久久成人| 91春色| 18+91网站| 福利天堂| 99热精品国产| 欧美日韩国第一区| 91精品电影18| 五月天婷婷久久| 96精品久久久久久久久| 国产精品不卡少妇白| 舔舔啊| 97天天弄| 免费网色网站| 欧美性暴力猛交XXXX| 久久这里都是精品| 视频二区美腿丝袜制服人妻欧美| 99色色网| 天天综合网站| 狠狠操狠狠插| 国产999精品久久久久久| 日本综合久久| 水野优香在线观看| 中文字幕啊啊啊在线观看视频| 国产精品亚洲免费| 99综合| 日本三级韩三级99久久| 亚洲1区| 色噜噜婷婷| 色婷婷久久| 婷婷综合在线| 精品超碰中文在线| 日韩伦理久 久久 清纯| 97色爱| 有码色中文字幕在线观看| 另类亚洲图色| 国产精品久久久久久久免牛肉蒲团| 老熟妇一区二区三区啪啪| 精彩久久中文| 亚洲精品黄码久久久久| 日韩精品人妻| 亚洲色图尤物视频| 久久久久九九九| 另类天堂| 亚洲视频,小说| 操老熟女AV| 欧美性夜| 情趣丝袜无码操逼视频| 国产精品免费美女视频| 国产女人高潮视频| 色 亚洲 91| 色亚洲欧美| 国内毛片热久久思思热| 色久桃花影院在线观看| 日本天天操| 操b网站亚洲无码| 欧洲色综合| 蜜臀无码视频在线观看| 亚洲AV成人无码久久精品播放| 欧美性爱五月天| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 国产夜夜操| 男人天堂综合| 97亚洲欧美| 视频在线观看免费一区二区三区| 五月花婷婷| 色网综合网| 久夜视频| 日本日皮视频逼| 色老汉色| 唯美清纯 妖精视频| 天天操夜夜嗨| 中文字幕一区 二 区 三 四 五 区日 日 骚| 蜜屁Av| 中文字幕蜜乳av| 亚洲色诱惑| www.男人天堂| 国产精品第一区第一页| 日韩三级一区 | 欧美色图99| 操逼片国产| 日韩美一区| 超碰欧美97资源| 先锋激情∨在线视频播放| 欧美久久九九| 老司机香蕉| 男人a天堂手机在线版| 青青草视频爽一爽| 99无码| 色噜噜狠狠色综合日日| 97草草| AV不卡在线| 噜噜噜久久亚洲精品色情| 日本色色色网站免费看不卡| 狠狠操天天干| 78m啪啪啪| www色色色com| 亚洲人妻色图| AV电影在线播放| 91美女高潮| 玖玖爱免费观看视频| 欧美性生活内射| 人人操人人操人人人操| 青青草啪啪网| 高清国产性猛交xxxx乱大交| 成人网欧美风情| 美女天天干| 欧美性战999| A级在线视频| 99热精品青草在线| 中国操逼无码| 欧美国产一区二区三区麻豆传媒 | 亚洲色图在线视频| 蜜臀久久99精品久久久久久无删减 | 亚洲成人无码影院| 成人一级二级| 激情看片网站| 久艹日日日| 天无日色综合| a片久久久久久久久久久久 | 欧美亚洲韩国视频十五区| 99热只有这里有精品| 色偷偷综合91久久噜噜| 婷婷综合激情| 亚洲国产精品成人久久蜜臀| 91 国产丝袜在线放观看| 亚洲熟伦熟妇AV无码春色| 亚洲欧美日韩偷拍色图| 欧美日日夜夜| 亚洲啪啪视频一区二区| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 蜜臀久久99精品久久久电影| 爱欲AV| 伊人网综合在线视频| 亚洲极品| 蜜臀久久一区二区| 最新av网站在线观看| 夜夜 中文视频rt| 六月色色| 久久精品国内Av熟女高清| 2019午夜福利视频| 黑操B| 高清国产精品无码| 99这里只有精品| 男人下部插入女人下部| 免费的很黄很污的全部视频| 欧美色图另类图片| 另类亚洲图色| 欧美一级黄片免费播放| 亚洲中文字幕熟女| 久久精品99| 国产精品久久发布| 伊欧美综合视频| av三级电影在线播放| 日韩中文字幕宗合在线| 韩日精品四区| av无码av无码专区| 亚洲天天在线| 久9久9久9久9久9久9| 中日无幕一二三四区| 操逼操逼逼操操逼91| 七月丁香婷婷| 成人草草视频| 久久啊啊啊视频| 久久久久13| 日本性爱少妇| 秋霞一级A片黄色视频| 97人人爱人人乐| 裸体美女久久久| 丰满少妇人妻久久久久久| 麻豆国产96在线| 91久久九九精品国产综合| 色九九久九九| 亚洲区限制级 99| 日韩av色图综合| 五月丁香影院| 人人操人人摸人| 日韩欧美大力操| 日韩免费a级毛片无码a∨| 97资源站国产精品| 亚洲男人天堂视频| 久久久禁| 色色综合97| 日欧美色| 夜夜爽妓女| 欧美九9 9 9| 欧美精品999| 成人性爱电影一区二区| 嫩草一区二区在线观看| 无码 黑人一区二区三区| 思思热一热婷婷热一热| 色五月综合| 免费一级毛片在线视频观看| 亚洲国产尤物yw在线观看| 美日韩男女操屄视频| 九九九九精品| 91丨人妻丨国产丨丝袜| 熟女人妻精品一区二区视频| 91A欧美电影网站| 97亚洲色图| 深夜激情无码| 久热香蕉精品在线视频| 国产AV精久久| 人人插人人摸人人| 日韩黄色一区二区三区| 久久久久久精品免费看A级| 韩国午夜理伦三级好看| 天天视频综合在线观看视频| 亚洲二区精品在线观看| 探花一区在线| 天天插天天操| 九九内射在线| 无码99| 亚洲色图加勒比| 伊人久久久日韩一区| 天天综合网AV91| 青青青草伊人精品| 国产激情在线| 亚洲色图 欧美| 日本羞羞的视频在线播放| 国产欧美日本亚洲精品| h4610国产人妻| 视频分类 国内精品| 这里只有精品视频在线| 久极品在线观看| 伊人伊人LD| 亚洲区限制级 99| 伊香蕉综合久久久久久久噜噜噜| 欧美色图综合| 日本不卡高清视频| 欧美国产日韩高清在线| 97精品一二区| 色欧洲97| 97久操| 乱伦一二三区| 日韩不卡a级视频专区| 日韩三级一区| 日本淫穴在线| 91丰满| 最新av网站在线观看| 亚洲 欧美 手机在线观看| 一区二区 韩日AV| 中出789在线视频| 精品成人久久久人人亚洲| 狠狠婷婷亚洲中文综合久久| 国产高清成人mv在线观看| 99热思思| 青青伊人这里只有精品| 欧美高清第一页| 视频国产精品未满十八禁止在线观看| 91五月天| 日韩资源网| 久久久久久精| 亚洲欧美国产日本一区二区三区| 麻豆国产av网| 欧美草草高清日韩视频| 色黄污美女啪啪啪免费网站| 超碰av在线| 男人把坤坤插入女人的下体| 91制服丝袜中文字幕| 国产精品婬乱一级毛片彝族| 精品人人| 91bbbbbb| 亚州少妇| 亚州黄站| 白嫩国模丰满一二三区| 东京成人一区| 干超碰碰熟女| 乱老女人一区二区视频| 99re99视频在线免费观看| 91狠狠综合| 久热伊人| 成人夜夜| 日本Xx性爱| 青青国产在线拍揄自揄拍| 欧美性暴力| 激情av| 黄站在线免费观看| 成人八戒网站| 亚洲有码第一页| 无码精品久久| 九九热超碰97亚洲最新香蕉 | 91三级理论片播放器| 精品人妻视频一区二区三区蜜桃视频| 国产精品熟女一区二区三区| 婷婷九月| 大茄子熟女AV导航| 国产一区二区三区精品观看啪| 欧美青青视频| 又大又长又粗又爽又黄| 97se综合网| 欧美成年人性爱视频免费观看| 九九操久久国产免费视频| 亚洲欧美综合区自拍另类| 99www.bibizy香蕉资源国产一区二区三区高清 | 日韩精品视频在线观看一卡二卡| 天天内射| 一区二区三区四区免费视频| 日韩亚洲97| 强奸乱伦大香蕉网| 精品白丝一区| 亚洲夜夜欢无码一区二区 | 一级做a爰片性色毛片久久| 97免费在线视频在线观看| 久久久97| 亚洲国产一级中文综合久久天堂在线免费观看 | 九九九九九九综合| 午夜大香蕉| 嗯嗯啊啊操我| 超碰午夜在线| 操逼天美3区| 国产后入清纯| 久久久婷婷| 亚洲成人贴图| 97玖玖超碰| 久久精品高清AV| 青青草综合在线| 人人乐大香蕉| 免费看黄片现成| 综合91网| 成人午夜无码视频| 啊啊啊好想要| 成人精品一区二区三区| 精品v日韩欧美国产| 欧美综合中文| 热天堂一区二区| 亚洲国产婷婷在线播放| 欧美色图99| 九九久久首页| 久久夜黄色无码A级大片| 久久精品国产97欧美精品亚洲 | 国产91丝袜在线播放蜜月| 丁香五月天堂网| 亚洲欧美日韩制服另类| 亚洲国产中文字幕| 亚洲日产专区| 欧美性爱日韩性爱| 中国少妇啪啪视频| 1204av韩国| 丁香五月天啪啪| 人人操人人色人人摸| 骚货 中文字幕 av| 综精品久久久aaaa| 亚洲欧美日韩精品久久久一区二区| 蜜臀网 一区| 九九九九九九九九九五码| 丁香六月激情综合| 天天操夜夜操狠很操| 深夜视频| 在线情色电影 91大 | 大香蕉 222| www成人啪啪18秘 免费| 欧美v日韩v亚洲v最新在线| 色踪合AV| 亚洲一区二区三区麻豆传媒| aaa一级黄片| 日韩操逼性鲍| 中文乱码字幕观看视频| 国产精品乱码久久久久久| 亚洲情色婷婷五月天| 色香色欲天天综合网天天来吧| 一起草三级AV电影在线观看 | 怡红院亚洲怡春院av| 亚洲综合在线高清| 色婷婷狠狠| 强奸乱伦动态污图免费| 亚洲一卡二卡在线免费| 婷婷色香伊人| 国产97/欧美| 精品一区二区三区四区外站| 九九热免费国产视频婷婷伊人五月 | 三级日韩一区二区三区| 久久粉色| 老司机福利社视频在线观看| 金典av| 色狠人在线99| 后入国产| 玖色av| 欧洲精品欧洲精品| 亚洲欧美setu| 人人操天天爽| 欧美少妇大量自拍视频在线观看| 大香蕉综合| 日本理论在线| 人人操人人大香蕉| 日本一区二区三区四区免费观看| 国产亚洲精品无码三区| 日本潮催一卡操| 亚洲av青草久久一区二区| 日本男人天堂| 亚洲无码日韩电影| 亚洲深夜福利| 97综合激情| 久久国产精品m码| 欧美天天综合在线| 色图四区| 97干在线视频| 国产久久久久久| 欧美高清第一页| 男人天堂网站| 日本淫乱女一区二区三区视频| 天天日天天干少妇日| 精品九九九九九九| 91 丝袜在线播放| 久久超碰网| 国产精品人妻免费精品| 亚洲第一页第二页激情| 人妻9117c| 久久天天艹| 乱伦Av网| 啊视频在线| 日本高清电影欧美色图| 大香蕉免| 亚洲熟女一区| 久久久青草青青国产亚洲免观精品高清完整版_97久久综合区小说区图片区,国精品 | 无码视频一区二区| 亚洲电影91| 四虎影视国产精品| 久久精品国产亚洲av水密被窝| 91色花堂| 国产亚洲精品精AV.| 精品人妻av在线播放| 怡红院一区二区熟女人妻| 五月天婷婷色色| 炮色五月| 色男人色天堂东京热| 深夜激情| 国产在线观看一区二区三区| 亚洲国产ⅴ高清在线观看| 亚洲 欧美日韩 另类| 亚州伊人色综台| 九九成人精品| 九九热午夜欧亚国产视频| 91第一页| 日韩性爱人人爱人人操| 久久综合激情| 欧美一区二区在线资源| 加勒比少妇AV婷婷六月天超碰超碰| 久久久久久人| 精品人妻视频入口| 亚洲免费人妻在| 亚洲人精品久久久喷水| 天海翼久久| 老熟女网站| 色乱二区| 久久久久9久久久久| 成人黄页| 精品国产乱码久久| α√在线| 日韩AV中文字幕电影| 国产欧美日产一区二区三区 - 国产欧美日 | 青青操在线亚洲视频观看欧美在线 | 人妻天天夜夜爽一区二区| 欧美视频激情久久久久久| 91丝袜人妻| 亚洲 日本 国产 综合| 狠狠综合网| 久久久久斤小| 翔田千里A片一区二区| 亚洲四虎熟女精品| 国产青视频| 国产精品操| 国产AV久久久蜜爱影集| 欧美性爱一区二区三区四区| 懂色Av一区二区三区| 黑人嘿嘿嘿超爽免费视频| 天天摸夜夜摸| 欧美92| 在线人人人人人人精品超 | av网站在线看| 六月丁香啪啪| 日韩人妻精品| 99国产精品视频尤物| 欧洲天天在线| 一级啊性爱在线视频| 欧美色图天堂网m| 日夜伊人网| 色播丁香| 欧美久久人体| 顶级丝袜熟女一区二区三区| 欧美视频第二页| 立川理惠被中出无码| 91丝袜美女国产| 亚洲少妇综合| 久久一区二区三区入口| 亚洲情色一区二区三区| 日产欧美电影一区二区三区| 又大又黄国产| 精品久| 丝袜六区| 香蕉视频精品亚洲一区二区三区在线播| 亚洲日韩国产欧美综合v| 超碰无码五月97| 精品人妻一区| 99国内熟女露脸视频| 麻花豆传媒剧国产MV出差| 97色色国产视频| av在线播放国产一区| 久久超碰、| 综合国产影视三级| 最新中文字幕av| 久久久久久久九九九九九九| 青青草国产亚洲精品久久 | 97免费视频网| 91深夜夜| 精品人妻无码一区二区三区不卡-精品人妻无码一区二区...|精品少妇一区二区三 | 91殴美大片| 免费日韩黄片| 九九国产| 秋霞免费AV| 91日韩网站| 欧美夜夜狠| 无码高清操逼| 国精综合一二三区影视| 综合久久久久久久综合网| 色悠久久久av| 日本3级一区二区免费| 黄色工厂这里只有精品| 婷婷香蕉欧美在线一区二区三区| 97久久超碰| 欧美白嫩在线放| 免费作爱一级视频| 国产美女91| 另类图片五月| 欧洲综合无码| 后入式999| 亚洲黑丝在线| 亚洲男人久久综合天堂| 欧美日韩人妻少妇 一区二区三区| 久久精品国产亚洲AV成人直播| 深喉吞精| 欧美亚综合色图| AAAAAAAAA黄片| 蜜屁av| 91国产大片| 激情啪啪拍91| 99re9| 亚洲熟女乱色一区二区三区久久久| 乱伦熟女区| 亚洲巨爆乳一区二区三区四季网| 久久日本熟妇熟色高清| 曰韩av中文字幕专区| 91色色网站| 日韩精品大香蕉伊人在线| 久久草大香蕉| 26uuu欧美日韩| 九九热精品视频六| 久久有碼| 久久婷婷五月综合| 天天色天天干天天爱| 91白虎| 欧美成人综合| 蜜臀av一区二区三区免费观看| 国产久久成人| 九九九九9999| 精品一区二区久久| 欧美亚洲国产自久久| 国产自偷自拍一区| 91精品亚洲内射孕妇| 日本2020一区二区| 97超碰久| 欧美人妻精品| 爱做久久久久久| 国产乱伦性爱区| 国产97亚洲| 啊啊啊轻点在线观看| 中文字幕av久久爽Av| 伊人色综合网| 在线观看精品国产免费| 久久久国产av美女私房| 密臀在线一区尤物| 欧美第一页| 97色色国产视频| 久久久久精| www久久久| 亚洲一区二区中文字幕| 国产美女裸体秘 永久无遮挡| 日韩97P| 亚洲激情欧美色图 | 国产精品又黄又猛又粗| 欧美丝袜91| 久久久精品视频欧州站| 日夜干射色啊| 嗯嗯啊啊操死我| 色噜噜综合在线| 婷婷五月成人| 十八禁啪啦拍视频无遮挡| 激情国产乱伦Av| 天堂а√在线最新版在线| 国产成人亚洲精品无码最新在线| 色与欲影视| 97久久超碰日韩精品| 日本高清视频在线观看黄已三辽| 成人欧美日超碰| 久久久∴| 久久久久久久久久久久黄色| 中文字幕丝袜美腿| 久久女人视频| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 亚洲色图第一页| 久久久神马影院| 人人摸人人舔一区二区| 91精品久久久久久77777| 亚洲日产专区婷婷| 久久大精品乱码视频人妻熟女| 日本不卡二三区| 天操天操夜操夜月月年年操操| 国产 热久久久久国产精品| 欧美性生活男人的天堂| 一区二区三区在线资源| 90后性网国产欧美| 中文字幕一区二区三区视频播放| 亚洲中文字母在线播放| 人人透人人操| 91精品久久久久久综合五月天| 色人久久| 婷婷色一区| 国产久久一区二区三区野外在线| 国产精品成人无码av无码免费| 久久久久久久少妇|