亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

嵌入式外設(shè)不確定性排查:PSRAM、NOR Flash與USB實戰(zhàn)經(jīng)驗

嵌入式外設(shè)不確定性排查:PSRAM、NOR Flash與USB實戰(zhàn)經(jīng)驗 做嵌入式這幾年P(guān)SRAM、NOR Flash、USB這三個名字我?guī)缀跆焯齑蚪坏馈R粋€是內(nèi)存擴展一個是代碼與參數(shù)的存放地一個是和外部世界通信的接口——聽起來都是再標準不過的外設(shè)??烧嬲阉鼈兘M合在一個系統(tǒng)里跑穩(wěn)定尤其是要在量產(chǎn)線上批量復(fù)現(xiàn)時你會發(fā)現(xiàn)不確定性這三個字幾乎無處不在。同一顆芯片、同一份代碼有的板子一次過有的板子偶發(fā)枚舉失敗有的設(shè)備低溫下代碼加載直接卡死。這不是玄學(xué)而是這三類器件在物理層和協(xié)議層本身就帶著一批說不準的行為工程上如果不去理解這些不確定性就會在排障時走很多彎路。這篇文章把我這些年調(diào)PSRAM、NOR Flash、USB時踩過的坑、驗證過的方法和最終沉淀下來的排查套路一次性整理出來適合正在做MCU/嵌入式Linux產(chǎn)品方案的工程師也適合剛?cè)胧諷TM32、ESP32等平臺、被外設(shè)穩(wěn)定性問題折磨的新手。內(nèi)容不追求面面俱到重點是把為什么會出現(xiàn)不確定性和怎么把它管住講透看完你至少能少熬夜調(diào)幾個Bug。1. 一個翻車現(xiàn)場引出的三個不確定性1.1 項目背景PSRAM、NOR Flash、USB為什么會湊到一起先還原一下我經(jīng)歷過的一個典型場景。某款帶屏的IoT產(chǎn)品主控選了帶PSRAM擴展的MCU方案PSRAM用來跑UI緩沖和音頻緩沖固件放在一顆8MB的NOR Flash里上電后由Bootloader從Flash搬運到內(nèi)部SRAM/PSRAM執(zhí)行同時設(shè)備通過USB Device接口連接電腦既要做USB虛擬串口CDC做日志輸出還要支持DFU固件升級。這個組合在今天其實非常常見。PSRAM解決內(nèi)存不夠用NOR Flash解決代碼和參數(shù)怎么可靠存放USB解決怎么跟PC交互。三者看似各管一攤但在實際調(diào)試中它們會互相作用USB枚舉瞬間的電流波動能干擾PSRAM的供電NOR Flash擦除時被USB的中斷打斷可能導(dǎo)致擦除流程異常PSRAM初始化沒完成時USB描述符中斷來了系統(tǒng)直接死機。要理清這些就得先把每一類器件的不確定性單獨拿出來看。1.2 所謂不確定性到底指的是什么我理解的不確定性不是量子力學(xué)那種真隨機而是指器件的某個行為在datasheet的典型條件下是確定的但在真實系統(tǒng)里因為供電、溫度、時序、代碼順序、總線復(fù)用等原因結(jié)果變得難以預(yù)測。具體分四類時序不確定性上電穩(wěn)定時間、指令間隔、擦寫完成時間都有最小/最大范圍超時和欠時都可能出錯。電氣不確定性信號沿的抖動、電源紋波、PCB寄生參數(shù)、線纜阻抗等會讓數(shù)據(jù)采樣點在臨界區(qū)浮動。協(xié)議狀態(tài)不確定性USB枚舉、Flash狀態(tài)機、PSRAM刷新等都有內(nèi)部狀態(tài)外部事件如中斷、掉電切入時狀態(tài)機會落在不可預(yù)期的位置。上下文不確定性同樣的代碼在不同主頻、不同編譯器優(yōu)化等級、不同GPIO初始化順序下行為不同。這類最坑因為復(fù)現(xiàn)困難。這四類不確定性的背后是物理和協(xié)議的復(fù)雜機制。后面三章我會逐個拆解并且給出實操層面的管住它們的辦法。2. PSRAM的藏著掖著刷新與時序的不確定性2.1 先說原理PSRAM為什么叫偽SRAMPSRAMPseudo SRAM偽靜態(tài)隨機存儲器的存儲核心其實是DRAM只是外部接口做成了SRAM的樣子。你不需要像用SDRAM那樣去管理行激活、預(yù)充電、刷新這些細節(jié)直接像SRAM一樣讀寫就行。代價是芯片內(nèi)部有一個隱藏的刷新邏輯它會周期性對存儲單元做刷新。這個刷新過程對使用者來說是不可見的但它會對總線的可用帶寬產(chǎn)生影響。某些時候你讀一個地址正好碰上內(nèi)部刷新周期返回數(shù)據(jù)的延遲就會比平時大一點。這就是PSRAM第一個不確定性的來源——訪問延遲不是恒定值。另一個層面SPI接口的PSRAM比如APS6404、LY68L6400、IPS6404在MCU項目里用得越來越多。它的好處是引腳少、布線簡單但代價是協(xié)議里引入了等待周期Latency的概念。讀操作發(fā)出命令后數(shù)據(jù)并不會立刻出現(xiàn)在MOSI上而是要等若干個dummy cycle。這個dummy cycle的數(shù)量又跟工作頻率、指令模式、芯片配置有關(guān)。配置錯了要么讀到全0要么數(shù)據(jù)錯位而且不同廠家的芯片行為還不完全一樣非常容易出問題。2.2 初始化與讀寫時最容易踩的時序坑SPI PSRAM的初始化一般分幾步上電等待VCC穩(wěn)定至少幾百微秒到1ms具體看型號、發(fā)送復(fù)位命令、發(fā)送設(shè)置命令比如設(shè)置Quad模式、設(shè)置延遲、設(shè)置驅(qū)動強度、讀取設(shè)備ID確認芯片在線、然后才能正常讀寫。很多人在上電后立刻讀寫PSRAM結(jié)果讀回的ID是錯的或者讀到的數(shù)據(jù)偶發(fā)錯誤就是因為上電穩(wěn)定時間不夠芯片內(nèi)部狀態(tài)還沒準備好。讀寫時序上最容易被忽略的是寫使能機制。PSRAM和Flash一樣寫操作前通常需要發(fā)送Write Enable0x06命令然后才能執(zhí)行Page Program等寫命令。如果你在代碼里漏了這一步或者中斷在寫使能之后、寫命令之前插入導(dǎo)致時序被拉長某些芯片會判定操作非法數(shù)據(jù)就沒寫進去。實測中這類問題在SPI時鐘開得越高時越明顯因為時序裕量變小了。還有一個坑是刷新與DMA的配合。SPI PSRAM內(nèi)部刷新時會暫緩來自外部總線的訪問這在單次CPU讀寫上感覺不到但如果你用DMA做大批量傳輸而且DMA的超時設(shè)置比較緊就可能偶發(fā)超時。別問我怎么踩到的——調(diào)試一塊PSRAM上的攝像頭圖像緩沖區(qū)時圖像正常了99%但每隔幾秒就閃一幀花屏最后查到DMA配置里把PSRAM讀寫超時設(shè)成了實時性要求更高的數(shù)值放寬后問題消失。2.3 實測幾個典型的PSRAM翻車場景場景一低溫下初始化失敗。有一批板子在常溫實驗室一切正常放到-20℃環(huán)境做老化測試大概有3%的板子啟動后內(nèi)存檢測失敗。排查發(fā)現(xiàn)是PSRAM上電穩(wěn)定時間在低溫下變長了固件里固定的延時不夠。把初始化前的等待從500μs加到了2ms并增加了讀取ID后校驗的邏輯失敗率歸零。這里要注意datasheet給的是典型值工程上要做覆蓋全溫區(qū)的裕量設(shè)計。場景二Quad模式讀出來是亂的。當(dāng)時為了提升刷新率把PSRAM切到Quad I/O模式結(jié)果屏幕開始出馬賽克。檢查發(fā)現(xiàn)是切換模式后后續(xù)所有訪問命令都要帶上模式位Mode Bit但代碼里只有部分路徑寫了模式位另一條DMA訪問路徑?jīng)]帶導(dǎo)致芯片一直在不同模式間橫跳。這類問題最好的排查方法就是抓SPI波形逐個命令比對不要猜。場景三PSRAM和外部Flash共享SPI總線的沖突。某些低成本方案會讓PSRAM和SPI NOR Flash掛在同一個SPI控制器上用片選分開。如果片選切換之間沒有留足夠的時間一般要求CS拉高再拉低之間至少有個小延時兩條總線上的設(shè)備可能被對方的殘余信號干擾。我一般至少留250ns~500ns。實測某些芯片對CS釋放后的保持時間非常敏感少了它偶爾就會出現(xiàn)Flash寫入失敗或PSRAM數(shù)據(jù)錯亂。3. NOR Flash的慢性子擦寫壽命與掉電的不確定性3.1 NOR和NAND別再傻傻分不清討論NOR Flash之前先回應(yīng)很多新手朋友問過的問題NAND Flash和NOR Flash到底有什么區(qū)別簡單版回答NOR可以按字節(jié)/字隨機讀取讀得快、可靠性高適合直接XIP執(zhí)行代碼但寫和擦除很慢容量做大之后成本高NAND按頁讀寫寫入擦除快、容量大、成本低但隨機讀取延遲高、壞塊多、需要文件系統(tǒng)層做壞塊管理和ECC不適合直接執(zhí)行代碼。所以產(chǎn)品里通常拿NOR放Bootloader和固件拿NAND或eMMC放文件系統(tǒng)和大塊數(shù)據(jù)。但要說清不確定性必須補充一個深層區(qū)別NOR Flash的存儲單元是浮柵晶體管擦除操作靠Fowler-Nordheim隧穿把電子從浮柵里拉出來編程操作則往浮柵里注入電子。隧穿和注入都是概率性物理過程所以擦除和編程時間天然有浮動。datasheet里會給出典型值和最大值比如Sector Erase典型值45ms最大值400ms這個最大不是隨隨便便寫的你不等夠狀態(tài)機就可能沒走完。3.2 上電、擦寫、復(fù)位里那些說不準的環(huán)節(jié)NOR Flash在上電時有一段Power-On Reset時間期間器件對命令不響應(yīng)。如果你在上電后立即發(fā)JEDEC ID讀取命令0x9F很多芯片會返回垃圾數(shù)據(jù)或者直接不拉低MISO。我見過一堆代碼在Bootloader里讀Flash ID來校驗硬件版本結(jié)果因為延時不夠讀回0xFFFFFFFF就誤報硬件錯誤。解決方法是上電后至少延時幾十毫秒再訪問Flash并且對ID做多重校驗。擦寫流程里最容易被坑的是狀態(tài)寄存器的寫保護位。SPI NOR Flash為了保證可靠性默認會對狀態(tài)寄存器做非易失寫保護Status Register ProtectSRP位。很多人拿到新片直接發(fā)擦除命令結(jié)果怎么擦都擦不動因為WP#引腳被拉高時寫保護生效。不同的芯片默認保護級別也不同比如W25Q系列默認BP位為0、不保護主存儲區(qū)但某些國產(chǎn)芯片出廠BP位是設(shè)置好的所以兼容性測試一定要做讀取狀態(tài)寄存器這步。這個我在后面速查表里還會提。還有一個經(jīng)常被忽略的點4字節(jié)地址模式。容量超過16MB的Flash默認上電大多在3字節(jié)地址模式訪問高16MB地址時必須發(fā)命令切換到4字節(jié)地址模式B7h有些芯片是帶Entry/Exit的。切換命令本身是非易失的還是易失的芯片間也有差異。如果你用的是類似MX25L25645G這樣的芯片一定要查清楚上電后的默認地址模式否則燒錄地址超過16MB時數(shù)據(jù)會寫到錯誤的位置。3.3 量產(chǎn)燒錄與掉電保護的實操要點量產(chǎn)場景下NOR Flash不確定性最典型的表現(xiàn)是燒錄中途掉電固件變成磚。對此我的做法是固件里設(shè)計A/B雙分區(qū)加啟動標志位新固件先寫到B區(qū)全部寫完并校驗通過后再更新啟動標志指向B區(qū)如果中途掉電Bootloader檢測到標志無效自動回退到A區(qū)。這套流程看起來多占一倍的Flash空間但換來的是現(xiàn)場幾乎不再出現(xiàn)救磚任務(wù)。對于沒有雙分區(qū)空間的低成本產(chǎn)品至少要保證先擦后寫過程中意外掉電后Bootloader能檢測到固件區(qū)校驗失敗并進入DFU等待狀態(tài)而不是直接跳到空代碼區(qū)執(zhí)行。此外擦除/編程的超時處理一定要用輪詢WIP位 最大超時兜底的方式。WIPWrite In Progress位在狀態(tài)寄存器1的最低位bit 0每次發(fā)0x05命令讀狀態(tài)寄存器bit 0為1表示忙輪詢到0表示操作完成。很多工程師只做一次性等待固定延時這在溫度漂移和芯片批次差異面前早晚會翻車。輪詢邏輯本身很簡單但要注意輪詢間隔一般建議100μs左右防抖次數(shù)按datasheet最大值的1.5~2倍來設(shè)這樣既不會過早超時報錯也不會卡死系統(tǒng)。4. USB的社交枚舉、驅(qū)動與協(xié)議的不確定性4.1 枚舉一次連接本質(zhì)上是一場握手談判要理解USB的不確定性先要理解它的本質(zhì)USB是一種主機主動、設(shè)備被動響應(yīng)的協(xié)議。設(shè)備插入后主機通過D/D-電平變化檢測到設(shè)備連接然后對設(shè)備地址0發(fā)起一系列控制傳輸Get Device Descriptor、Set Address、Get Configuration Descriptor等這個過程叫枚舉。枚舉的成功與否取決于設(shè)備能否在150ms左右的時間窗口內(nèi)按照主機期望的節(jié)奏響應(yīng)每一個請求。不確定性就藏在這個過程里。任何一個環(huán)節(jié)慢了、錯了、超時了主機就會認為設(shè)備異常要么報告無法識別的USB設(shè)備要么設(shè)備在設(shè)備管理器里反復(fù)嘆號。更要命的是不同主機控制器Intel、AMD、ASMedia、瑞薩對時序的嚴格程度不一樣同一臺設(shè)備在A電腦上插入即用在B電腦上就是不穩(wěn)定。這也是USB調(diào)試最磨人的地方——你沒法保證用戶手上的電腦形態(tài)。4.2 設(shè)備端常見枚舉失敗硬件、描述符、時鐘設(shè)備端導(dǎo)致枚舉失敗的原因按我踩坑的頻率排序D/D-上拉電阻不對全速設(shè)備Full Speed 12Mbps需要在D上拉1.5kΩ到3.3V低速設(shè)備在D-上拉。如果用MCU內(nèi)部上拉阻值偏差會導(dǎo)致主機檢測不到連接。很多MCU比如STM32系列內(nèi)部集成了這個上拉但需要軟件在檢測到VBUS后再使能順序錯了設(shè)備就不出現(xiàn)在總線上。時鐘精度不夠USB全速要求源時鐘誤差在±0.25%以內(nèi)高速更是要到±0.05%。這個精度直接決定位時間對不對很多低成本MCU用內(nèi)部RC振蕩器跑USB會偶發(fā)枚舉失敗換外部晶振后就好了。我遇到過一批板子用內(nèi)部HSI跑STM32F407的USB虛擬串口90%能枚舉成功10%需要拔插兩次才行最后全部改成外部25MHz晶振問題消失。描述符錯誤描述符里任何一個長度、端點地址、接口數(shù)量不匹配主機都可能拒絕設(shè)備。尤其是CDC虛擬串口需要類特殊描述符Union Functional Descriptor、Call Management Functional Descriptor等少一個或者順序不對Windows會直接報告該設(shè)備無法啟動Code 10。排查這類問題最有效的是用USB協(xié)議分析儀或抓包軟件下面細說。供電不足設(shè)備從USB口取電如果板載外圍太多、瞬間電流超過500mAUSB 2.0標準主機端口會過流保護。這個屬于電氣不確定性但復(fù)現(xiàn)率不低、誤判率也高排查時先量一下設(shè)備實際功耗。4.3 主機端驅(qū)動與工具從FT232R到Wireshark主機端最常見的不確定性來自驅(qū)動。USB轉(zhuǎn)串口芯片F(xiàn)T232R、FT231X、CP2102N、CH340這些本身很成熟但驅(qū)動安裝不上、版本沖突、簽名問題能讓人折騰半天。我自己處理這類問題的小技巧優(yōu)先用官方驅(qū)動不要用第三方萬能驅(qū)動。FTDI的驅(qū)動對FT232R/FT231X支持很完善Silicon Labs的CP2102N驅(qū)動也比較干凈。裝了驅(qū)動后在設(shè)備管理器里看端口號是否出現(xiàn)、驅(qū)動版本是否匹配。如果設(shè)備在設(shè)備管理器里顯示未知設(shè)備先用USB Device Tree Viewer去看設(shè)備到底有沒有成功枚舉——它能顯示設(shè)備處于什么狀態(tài)、拿到了什么地址、配置描述符解析是否正常。如果是枚舉成功了但驅(qū)動沒加載那是驅(qū)動問題如果連配置都沒有那是設(shè)備端問題。抓包分析用Wireshark加USBPcap。很多人以為Wireshark只能抓網(wǎng)絡(luò)包其實它配合USBPcap可以抓USB總線上的URBUSB Request Block能看到主機發(fā)了什么請求、設(shè)備回了什么數(shù)據(jù)。排查枚舉失敗時非常有用。我舉一個真實的排查案例一塊板子的USB虛擬串口在Windows 10上穩(wěn)定但升級到Windows 11后偶發(fā)斷連。用Wireshark抓包發(fā)現(xiàn)新系統(tǒng)會周期性發(fā)送Get Status請求設(shè)備端響應(yīng)偶爾超過150ms超時于是主機把設(shè)備斷開重枚舉。最后定位是USB中斷服務(wù)函數(shù)里有一個耗時很長的Flash擦除操作擦除期間USB中斷被屏蔽了請求得不到及時響應(yīng)。把Flash擦除拆成多段、每段之間開中斷問題解決。這個案例正好能說明USB的不確定性很多時候不是USB本身的問題而是系統(tǒng)里其他設(shè)備的時序問題傳染給了USB。4.4 Host、Device、OTG三模式的區(qū)別與選擇關(guān)于USB Host模式、Device模式和OTG很多新手容易混淆。直接說結(jié)論Host模式負責(zé)供電、管理枚舉類似電腦那端接口用A型口Device模式是被動響應(yīng)類似U盤、手機那端接口用B型口或Micro-BOTG則在一條線纜上通過ID引腳識別自己是Host還是Device適合手機、平板這種需要角色動態(tài)切換的設(shè)備。嵌入式產(chǎn)品選型時如果只是給PC當(dāng)外設(shè)用Device模式即可STM32F407這類MCU的USB模塊做虛擬串口非常方便。如果需要直接插U盤、鍵鼠就得用Host模式這時候要考慮VBUS供電能力、根集線器開銷和驅(qū)動棧復(fù)雜度會上升一個量級。OTG模式適合既想連PC又想插U盤的產(chǎn)品但要注意ID引腳的檢測邏輯以及角色切換時總線的重新枚舉處理不好會出現(xiàn)插上電腦沒反應(yīng)、反插又不能用的怪問題。量產(chǎn)時我通常建議固定角色的產(chǎn)品不要用OTG直接按Host或Device設(shè)計能省掉一半的疑難雜癥。5. 三個子系統(tǒng)聯(lián)動時的不確定性傳染5.1 USB OTG燒寫Flash量產(chǎn)場景下的鏈路梳理搜索熱詞里有一條USB OTG燒寫NAND Flash這確實是量產(chǎn)和售后經(jīng)常會用到的形式主機通過USB把固件發(fā)給設(shè)備設(shè)備里的Bootloader再把固件寫入NOR/NAND Flash。這里面每一環(huán)都帶著前面幾章講到的不確定性很容易做個所謂燒錄成功率99%的上位機結(jié)果現(xiàn)場就是不停有人燒錄失敗。我建議把整條鏈路梳理成可觀測的環(huán)節(jié)再設(shè)計容錯USB枚舉是否成功、設(shè)備是否收到完整固件包CRC校驗、Flash擦寫是否完成WIP輪詢、寫入后回讀校驗是否通過。任何一個環(huán)節(jié)失敗都要有明確反饋和重試機制。我還習(xí)慣在燒錄協(xié)議里加入分塊序號CRC設(shè)計單塊失敗則重傳單塊而不是整包重傳Flash擦除采用按扇區(qū)擦除而不是整片擦除這樣即使掉電已傳完的分區(qū)還能保留支持斷點續(xù)傳。這套方案在代工廠和售后現(xiàn)場用下來燒錄失敗率從千分之一級別降到了幾乎不可見。5.2 共享SPI總線與電源域時的彼此干擾很多中型MCU只有1~2個SPI外設(shè)PSRAM和NOR Flash共用同一SPI總線、用不同CS片選的情況非常常見。這種方案省引腳但換來的是時序耦合。最大的坑是兩個設(shè)備對片選釋放后的保持時間要求不同PSRAM往往要求CS拉高后至少幾十納秒才能再次拉低而某些NOR Flash要求更長。如果你在寫完P(guān)SRAM后立刻切到Flash操作系統(tǒng)里又有其他中斷插入CS之間的間隔就可能不夠?qū)е翭lash識別到異常的SPI通信偶發(fā)地錯誤寫入或狀態(tài)寄存器被改。另外PSRAM是DRAM核心刷新期間對供電紋波比較敏感NOR Flash擦除時電流會突然沖高如果兩個器件共用一個LDO擦除瞬間的電流尖峰會把PSRAM的供電電壓拉低輕則刷新失敗丟數(shù)據(jù)重則系統(tǒng)復(fù)位。我通常會給它們分別配LDO或至少加大Bulk電容并在PCB布局上讓PSRAM的退耦電容盡量靠近電源引腳。5.3 一次USB枚舉把系統(tǒng)搞崩的排查實錄最后分享一個印象很深的聯(lián)調(diào)事故。設(shè)備上電后如果先讓PSRAM完成初始化再開USB一切正常但如果USB先被主機檢測到、枚舉中斷先來了而PSRAM還沒初始化完系統(tǒng)就會在USB中斷服務(wù)里訪問未初始化的PSRAM觸發(fā)總線錯誤直接HardFault。排查時一開始完全沒頭緒現(xiàn)象是偶發(fā)死機且發(fā)生在插拔USB時。后來在HardFault中斷里打印出出錯地址發(fā)現(xiàn)出錯地址落在PSRAM映射區(qū)域內(nèi)才把矛頭指向初始化順序。修復(fù)方案有兩種要么在PSRAM初始化完成前不使能USB中斷要么在USB中斷處理里加一個PSRAM就緒標志的保護。我最后選了第二種因為對系統(tǒng)啟動時間更友好。同時還加了一個調(diào)試開關(guān)可以在初始化階段通過串口打印每個外設(shè)的就緒狀態(tài)避免再次出現(xiàn)這種無聲無息的初始化順序問題。這個案例很能說明三個子系統(tǒng)單獨看都沒問題湊在一起就會出現(xiàn)不確定性傳染。排障的時候不要只盯著USB協(xié)議棧也要看它調(diào)用的資源內(nèi)存、Flash、時鐘是不是還沒準備好。6. 排查方法論與避坑速查表6.1 把玄學(xué)變成科學(xué)的四個步驟這類多外設(shè)聯(lián)動的不確定性問題最忌憑感覺改代碼。我總結(jié)了一套流程按順序執(zhí)行大部分問題都能收斂。第一步固定現(xiàn)場。復(fù)現(xiàn)異常時記錄供電電壓、環(huán)境溫度、固件版本、操作序列最好能截圖或錄屏。不能復(fù)現(xiàn)的問題先不要動代碼先想清楚當(dāng)時的輸入條件。第二步分層隔離。把系統(tǒng)切成獨立模塊逐層驗證。USB枚舉失敗先查設(shè)備端能否單獨枚舉成功再查驅(qū)動再查協(xié)議Flash擦寫異常先單獨驗證Flash讀寫再驗證文件系統(tǒng)層不要一上來就懷疑某一層。第三步加觀測點。在代碼里加日志、狀態(tài)寄存器快照、錯誤計數(shù)。很多偶發(fā)問題其實是狀態(tài)被覆蓋了加上觀測點后能看到真正出錯的位置。觀測點要盡量輕量不要改變原有時序否則可能測不出來。第四步做對照實驗。改一個變量跑一批測試統(tǒng)計成功率。改兩個以上變量結(jié)果就很難歸因了。比如懷疑是PSRAM刷新問題還是USB驅(qū)動問題就分別做只跑PSRAM壓測和只跑USB枚舉測試對比數(shù)據(jù)。6.2 問題速查表癥狀、原因、排查手段下面這個表是我在項目群里經(jīng)常貼出來的基本覆蓋了這三個子系統(tǒng)的常見問題癥狀可能的不確定性來源建議排查手段上電后Flash ID讀錯或全F上電復(fù)位時間不夠、供電不穩(wěn)加大上電延時讀ID前先發(fā)復(fù)位指令校驗IDFlash擦除不成功寫不進去狀態(tài)寄存器寫保護SRP/BP位、WP#引腳被拉高讀狀態(tài)寄存器按需發(fā)解鎖命令檢查WP#硬件Flash擦寫偶發(fā)失敗系統(tǒng)死機擦寫時間超過預(yù)置延時、共享SPI總線沖突改成WIP輪詢最大超時兜底檢查CS切換間隔16MB以上Flash地址錯亂3字節(jié)/4字節(jié)地址模式切換遺漏確認芯片上電默認模式按芯片手冊發(fā)模式切換命令PSRAM初始化失敗/數(shù)據(jù)錯誤上電穩(wěn)定時間不足、Latency配置錯、模式位漏設(shè)增大穩(wěn)定延時讀ID校驗抓SPI波形比對命令序列PSRAM偶發(fā)花屏/數(shù)據(jù)錯亂DMA超時設(shè)置較短、共享總線干擾、電源紋波放寬DMA超時CS間隔加長檢查供電退耦USB枚舉偶爾失敗時鐘精度不足、D上拉時序不對、線纜過長換外部晶振檢查上拉使能時機換短線測試USB在Windows上嘆號描述符錯誤、驅(qū)動異常、供電不足用USB Device Tree Viewer查狀態(tài)抓Wireshark包量電流USB虛擬串口偶發(fā)斷連USB中斷響應(yīng)超時、系統(tǒng)其他任務(wù)占用時間過長檢查中斷服務(wù)耗時拆分長任務(wù)調(diào)整中斷優(yōu)先級USB OTG燒錄Flash失敗鏈路中未做CRC/分塊斷點、Flash擦寫沒確認上位機和固件都加CRC分塊重傳機制輪詢WIP確認6.3 我這些年用下來最順手的工具與習(xí)慣工具方面硬件上我建議備常用的邏輯分析儀至少16通道、100MHz以上、USB協(xié)議分析儀預(yù)算不足可以先用WiresharkUSBPcap替代、支持模擬/數(shù)字雙通道的示波器。軟件上USB Device Tree Viewer、Wireshark、總線抓取工具、串口調(diào)試助手這幾個常備。Flash和PSRAM排障時邏輯分析儀抓SPI波形基本一抓一個準比盲改代碼高效太多。習(xí)慣上我有幾個一直堅持的做法。第一所有外設(shè)初始化代碼都做成可配置、可打印狀態(tài)的調(diào)試接口跑起來后先看狀態(tài)再看現(xiàn)象。第二關(guān)鍵行為Flash擦寫、USB枚舉、PSRAM初始化都加超時監(jiān)控和錯誤上報寧可多打印幾行日志也不要讓錯誤被吞掉。第三凡是涉及延時的地方全部都寫成宏或配置文件方便做全溫區(qū)、全電壓測試時批量調(diào)整。最后也是最重要的遇到玄學(xué)問題先忍住不亂改按上面四步走絕大多數(shù)問題都能在一個小時內(nèi)定位到物理層面或協(xié)議層面的真實原因。我個人這幾年的體會是PSRAM、NOR Flash、USB這類標準外設(shè)之所以還讓人頭疼不是因為它們本身有多復(fù)雜而是因為它們各自的不確定性疊加在一起時會呈現(xiàn)出系統(tǒng)級的詭異現(xiàn)象。把每個子系統(tǒng)的物理原理、時序邊界吃透再配合結(jié)構(gòu)化的排查方法那些看似隨機的問題其實都能收斂成確定的Bug。最后再分享一個小技巧在所有涉及等待外設(shè)就緒的代碼里我都會留一個帶時間戳的日志把每個階段的等待時間打印出來。這樣在復(fù)現(xiàn)故障時只要看一眼日志就能知道到底是哪個環(huán)節(jié)的時間裕量不夠比抓瞎式排查快得多。希望這篇內(nèi)容能幫你在下個項目里少踩幾個坑。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久一级无码精品毛片6| 中文?日韩?免费?精品| 亚州色站 日韩电影| 亚洲鸥美色图| 欧美aaaaaaa| 国产视频三区四区| 天天拍夜夜| 日本精品网站在线中文| 国产久久一区二区午夜| 欧美色图99| 操屄日韩| 色婷婷影院| 天天舔天天 | 一本久久精品中文字| 在线天堂资源亚洲| 久久男女激情视频网站| 超碰97人人乐| 99热精品在线| 欧美一级在线观看成人| 91碰碰| 天堂精品一区| 成人性爱全视频观看| 99青青草国产视频| 久久精品人人做人人看| 人妻在线臀日韩| 日日夜夜骑| 国产精品视频精品一二| 午夜久久久| 中文字幕奈奈美被公侵犯| 欧美不卡在线美女| 超碰97亚洲| 五月丁香色婷婷| 本道综合精品| 五月婷婷hd| 亚洲自拍97| 99热伊人| 伊人久久AV诱惑悠悠| 探花一区二区三| 怡红院成人av| 人人操人人操人人人操| 日本天天干天天搞一区| 国产精品亚洲天堂网址| julia ann久久| 操99| 99re免费| 国产美女91视频| 妇女性内射冈站HDWWWCOM| 成人资源中文字幕在线观看天天| 激情文学88| 暖暖精品二区三区观看| 五月丁香激情综合| 91福利网在线观看| 夜夜爽爽夜夜精品视频| 狠狠色色| 天天懆天天日| 欧美 综合 亚洲| 在线观看成人性爱免费小视频| 女人天堂AV五区在线| 久久精品一区二区三区四区五区| 久久免费精品96| 色官网色综合| 亚洲同性aV综合| 日本一本一区二区三区四区五区欧美日韩中文字幕| 亚洲欧美天| 久久五月丁香| 国产精品4p在线观看| 艳美熟妇先锋一二三区| 香蕉久久AⅤ...| 亚洲性综合| 国内三级自拍小视频在线观看 | 97色综合中文网| www.99热| 国产最新小视频在线播放下载| 校园春色中文字幕AV| 国产精品宅男免费| 12一15性XXXX粉嫩国产| 精品日韩产品在线,日韩在线不卡视频,欧美日韩免费专区/久, | 日日骚网站| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 女生自91网站| 色9999日韩国产| 欧美日韩黄片精品在线| 欧美天天综合网版| 色在线69堂| 久悠悠av| 国产精品亚洲免费| 欧美精品一区二区少妇免费A片| 国产精品一区二区后入| 夫妻四区五区六区| 天天综合精品| 久久精品国产亚洲AV高级北京| 欧美日本不卡在线| 日韩少妇在线视频| 蜜桃视频精品一区二区三区| 人妻激情另类| 国产 亚洲 丝袜 制服| 久久国产乱子伦精品免费女,网站| 蜜色网色哟哟| 日产国产精品中文久久婷婷| 九九久久99| 国产亚洲性生活视频播放| 四虎在线视频| 精品人妻一区二区三区视频在线| 日日日大屁股骚女人精品| 人妻夜夜爽天天爽麻豆三区网站 | 大干人妻| 天天综合网AV91| 欧美中文字幕男人天堂久久精品| 久久久com| 91人妻精华帖| 久久黄色性爱视频| 人妻精品免费一二三区| 日韩三级伊人| 乱性AV| 色妺妺AⅤ| 激情文学小说一区二区| 亚洲资源网| 久久伊人青青草| 国产大片精久久久久久| 囯产精品一区二区三区线|亚洲人成无码网WWW动漫|国产精品免费一级... | 97ai亚洲| 久草草一二三四区久久| 久久精品视频久久久| 天天爽天天操| 东京热男人的天堂网| 欧美色色色| 人人妻人人狠人人| 高清无码 国产精品| 国产高清自拍视频| 亚洲国产精品成人久久蜜臀| 秋霞操逼片| se吧提供国产乱老熟视频胖女人 | 91美女精品| 欧美色网| 国产亚洲女v在线观看| 精品国产一区二区三区香蕉欧美| 手机在线视频国内精品| 深田咏美亚洲精品福利社| 激情五月天丁香| 色妺妺在线视频| 97久久超碰国产网站| 欧美A√综合网| 超碰久草| 人妻三级在线中文字幕| 99性视频| 啊啊啊好疼| 欧美色图20P| 翔田千里A片一区二区| 激情五月天插| 大香蕉久久| 白丝AV网站| 欧美日韩人妻婷婷一区| 久热最新在线杭州| 日韩人妻制服丝袜av| 久久亚洲婷婷| 精品人妻一区二区乱码一区二区| 九九九精品美女| 一区二区三区黄色片a| 日本精品不卡一二三区| 亚州乱码中文字幕综合久久久| 91处女在线视频| 人人妻人人爽| 国产宅男宅女在线观看| 91麻豆天美国产欧美日| 男人的天堂VA| 无码精品一区二区三区潘金莲| 成人欧美一区二区三区黑人一| 91成人在线| 久久精品操| 偷拍三区| 久久久久密| 91精品操美女| 国产精品一区二区 尿失禁| 黄色大片一区二区密桃丝袜| 91老司机在线| 欧美黄片视频在线观看免费 | 青青爽| 久久精品国产97欧美精品亚洲| 日韩欧美操逼xxx| 亚洲欧美精品一区天堂久久 | 国产精品大屁股999| 明星性猛交ⅹxxx乱大交| 欧美性爱五月天| 97精品国产精品免费观看| 91一区二匹| 亚洲精品a人片在线观看视| 日韩一区二区熟女| 情趣丝袜无码操逼视频| 一区二区偷拍拍视频| 综合天天。| 国产精品熟女九色九色蜜臀| 91色图片| 亚洲人体视频在线观看| 天堂蜜桃无码视频一区二区| 78精品| 极品色www影院| 舔舔啊| 探花熟女,姿勢到位,體驗感也到位| 91伊人影视综合| 精品人妻一区二区三区日产| 黄色污污污污污污网站| 91少妇人妻| 超碰国产在线| 人人操人人肉久久精品| 国产亚洲人妻综合日韩 久久| 密臀在线视频| 91精品久久久久久综合五月天| 色97国产69香蕉| 日韩精品黄片免费观看| 欧美后入视频| 操逼操网| 麻豆av一区二区| 久久伊人五月天| 亚洲男人的天堂va亚洲男人社| 毛片电影一区二区三区| 国产品精品自在在线午夜免费| 欧美制服另类丝袜| 欧美亚洲素人制服精品| 天天天天做夜夜夜夜做| 欧美日韩岛国大片在线观看| 高清无码91| 中文字幕第页| 男女日B国产| 欧美亚洲美少妇一区二区| 黄色视频60分钟| 少妇高潮喷水无套久久久久久| 久久国产免费激情视频| 久艹视频在线| 97干日韩| 国产黄色av大片网站| 日韩无码人妻中字久久三区四区| 色婷五月天| 国产色产精品在线观看| 日本欧美色| 日本高清有码网址视频| 夜夜躁狠狠躁日日躁av| 蜜臀99999| 在线观看色视频| 日本ZZ高免费A级视频| 96久久科窝| av爱爱爱| 欧美亚洲首页| 亚洲熟久久| 91操人| 亚洲无码成人精品| 麻豆色99999| 亚洲熟女乱色| 十八禁啪啦拍视频无遮挡| 欧美亚洲| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 欧美成97爱| 日韩无码嘿咻黑热久| 久久久亚洲Av| 天天影视色香欲综合网小说| 国产日产欧产美韩系列麻豆免费| ,国产乱人伦精品一区二区三区| 中国国产精品一区视频| 香港澳门日本三级网站| 日日干日日摸| 欧美日韩一干二干| 厕所偷拍在线| 亚洲色五月| 国产精品久久久无码AV网站| 成人毛片免费| 综合久久99| 超碰一区二区| 激情黄色五月天| 97干色天堂| 色区久久| 婷婷五月天社区| 一区二区影院| 欧美综合娱乐久久| 久久这里只精品免费福利| 欧中美三级一区二区三区| 97超碰巨乳| 精品国产一区二区三区久久久蜜臀| 色99视频| 日韩成人免费电影| 欧美黄片视频在线观看免费| 日韩免费看黄片| 岛国免费黄色网址| 日本操逼aaaaa| 亚洲综合999| 亚洲欧洲日韩中文字幕一区| 久久中文字幕女同性恋一区| 男人把坤坤插入女人的下体| av草草在线电影| 超碰夫妻97| 91视频观看网站| 国模一区二区三区| 女同亚洲欧美一二三区久久电影| 九九av| 久操热线| 9久精品| 婷婷综合久久| 精品视频久久久久九九九九9999| 久久久久久久少妇| 手机久操欧美综合色码| 97国产色图 | 欧美色婷婷| 超碰人人色| 一级免费啪啪片| 成人乱码一区二区三少妇| 国产精品嫩草影院免费| 久久激情亚洲精品无码?V| 久久五十路熟女人妻| 中文字幕日韩电影人妻| 美国人人操人人操| 无码精品蜜桃一区二区三区ww| 约操熟妇| 午夜黄色免费在线观看| 大香蕉人妻| 五月婷婷六月丁香| 二区熟妇韩日| 久久宗合亚洲| 久久蜜桃一区二区| 久久男人天堂| 欧美日韩在线国产在线| 天天干夜夜一操| 韩国一级做A片免费的| 无遮挡猛进视频免费无限观看| 国产农村一一级特黄毛片| 久久五月综合| 大吊色| 九区国产| 91日韩国产欧美亚洲另类精盘州至城都| 亚洲综合网91| 欧美性爱第一页久久| av网站在线观看了| 色人久久| 欧美综合色站| 大茄子熟女AV导航| 偷拍三区| 91操人| 天天做天天爱天天爽AV| 理论久久婷婷网8| 日韩无码人妻| 国产一级做a爰大片免费久久| 激情综合网激情五月天| 五月天伊人| 美女丝袜激情小说| 日韩亚洲欧美中文字幕| 狠日操| 丁香五月社区| 成人欧美日超碰| 色区97| 国产亚洲精品久久久久小| 黄片www.| 2000亚洲男人天堂| 97超碰碰| 国产成人综合网| 日韩图区| 99无码狠狠久久| 色一色综合网| 自拍欧美| 久久神马| 欧美性爱97超碰| 国产视频小说| 日韩精品资源专区二区| 欧美熟爽综合| 中文字幕第2页| 国产亚洲精品美女久久久久久2021| 六月天婷婷| 久久熟女久| 中文字幕在线免费观看2| 国产精品久久成人免费| 91天天爱| 翔田千里AⅤHD无码| 九九碰九九爱97超碰| 九九av| 免费视频在线一区二区不卡| 国产精品一区二区在钱播放| 啪啪视频免费在线观看| 免费观看成人www精品视频| 日韩乱伦AⅤ| 天天爽天天| 日韩中文字幕精品一二三事国产精品| 亚洲AV秘无码一区..| 99色在线| 在线洲亚线| 亚洲午夜福利视频| 激情五月天校园春色网| 黄色人人| 岛国人妻少妇av在线观看| 亚洲综合20p| 噜噜吧,噜噜色,噜噜| 国产自产22区| 欧美性巨大╳╳╳╳╳高跟鞋| 开心六月色| 人妻三级在线中文字幕| 丝袜AV一二三区| 91欧美综合| 久久久婷婷| 极品少妇久久久| 国产精品久久伊人| 大香蕉草草| 久久丁香五月婷婷| 欧美人妻制服| 国内精品不卡无毒99999| 天美传媒AV在线播放| 五月天色综合| 91精品国产91久久青草| 午夜欧美J进J出白浆流出久久久| 超碰在线人妻中文字幕| 亚洲宗合网| 人人插人人摸人人| 男人的天堂久久| 五月丁香婷婷综合| 久操视频在线观看| 欧美97视频| 亚洲色色探花| 欧美97av| 色哟哟国产精品免费网址| 无码久久国产| 欧美青青草视频| 激情五月婷婷综合| 三级日韩一区二区三区| 青青伊人久久| 亚洲午夜AV| 天美传媒精品一区二区| 久久久久久久久久久久黄色| 超碰成人最新最好看| 超碰色大香蕉| 久久精品视频久久久| 黄色视频60分钟| 欧美在线大香999| 加勒比无码一区二区三区| 午夜国产成人精品视频| 欧美综合 站| 亚洲五月天激情| 日韩精品资源专区二区| 91伊人久久在线| 精品一区二区三区蜜桃臀赵总| 1769一区| 综合大香蕉美。| 久久99国产综合精品女同| 老司机深夜18禁污污网站| 狠狠干妹子| 97超碰69| 人人扣人人操| 国产美女自拍AV| 偷拍导航视频网站| 色九九九综合| 亚码激情| 妺妺跟我一起洗澡没忍住| 人人爱人人乐人人操| 台湾佬中文娱乐网久久久久久久久久com | 日本性爱网址| 国产91福利小视频在线观看| 男女香蕉一区二区| 九九热超碰97亚洲最新香蕉| 亚洲操操| 一区二区三区免费岛国片| 男人在线天堂| 九九九九一区| 欧美综合在线91| 亚洲午夜免费狠狠干| 高清无码 国产精品| 国产操逼网站亚洲一级黄色| 5252色欧美在线男人的天堂| 国内97干免费看| 99久久这里只有精品| 精品黑人一区二区| 久久精品中文字幕观看| 精品久久久久久无码| 国产精品农村妇女| 欧美色爱综合| 看看日B真人视频| 久久久不卡区一区二区三区久久久| 天天干天天插| 超碰在线99| 亚洲中文字幕三级在线| 日韩Va亚洲va欧美Ⅴa久久| a片久久久久久久久久久久 | 国产精品成人无码a v毛片| 丰满熟女一区二区三区在线播放| 美女十八禁| 欧美手机在线综合| 激情视频图片| AV在线播放网址| 91 亚洲情侣偷拍 久久| 精品9区| 欧美熟女妇同| 歐美性天天| 日韩中文字幕av在线播放| 人妻夜夜爽天天爽麻豆三区网站| 欧洲天天在线| 欧美亚男人的天堂| 人妻在线中出视频| 熟女一区二区| 男人 天堂 日 亚洲| 蜜桃臀 后入 一区 二区 三区 在线| 亚洲AV无码天美传媒一区| 99热这里都是精品| 久久久爆乳翘臀一线天伦理视频| 亚洲 日本 一 二 三| www.天天干| 日韩另类色图| 婷婷五月天久久精品视频一区二区三区| 91视频国品一二三区| 91美女中出| 欧美极品少妇交| 麻豆天美久久91| 96AV久久久| 夜夜国产一区| 美女黄色91| 熟妇色99| 操操吧亚洲乱伦视频| 色翁荡息又大又硬又粗又爽| 中文字幕精品区先锋资源| 十八禁啪啦拍视频无遮挡| 丁香五月激情综合| 欧美最婬乱婬爆婬性视频 | 亚洲区 欧美区| 啊啊啊啊啊好多水| 飘花国产午夜精品不卡| 久久精品国产72国产精品福利| 亚洲成?V人片在线观看福利| 大香交伊人网| 伊人久久亚洲中文字幕不卡| 亚洲欧美综合图片| 精品人妻免费观看| 欧美不卡二区| 成人欧美一区二区三区黑人一| 强上我不卡卡| 九一国产精品| 97视频在线看| 一区二区影院| 久久精品欧美一区蜜桃| 91美女视频在线免费观看| 欧美色图片欧美色图| 色姑娘综合网| 91干熟女| 成人日韩中文字幕| 精品人妻丰满熟妇一区二区三| 国产精品人妻无码久久久老鸭窝| 中文字幕亚韩| 亚欧美天堂在线| 天天天操天天天爱| 人人妻碰人人免费| 在线99热| 在线中文AV| 人人搞人人插人人操| 国产精品无码在线| 91夜色chaopeng| 久久久一二三四区| 亚洲h片在线免费观看| 午夜婷婷| 精品综合久久久久久97| 久久成年片色大黄全免费网站| av天堂手机版追回| 久热久操| 91P0RNY大屁股人妻| 欧美在线视频99| 九一综合网| 亚洲成a人v欧美综合天堂下载 | Sekablack无码一区| 9999久久久久| 另类欧美| 天天操夜夜操狠很操| 青青操97| 欧美色就是色| 欧美男人一区| 综合五月天| 男男H黄动漫啪啪无遮挡网站| 制服少妇欧美| 国产日韩手机视频在线| 97精品一二区| 亚洲欧美日韩中文播放| 五月天开心网| 精品传媒在线一区| 亚洲高清无码免费观看视频| 精品无码一区二区人妻久久蜜桃| 色五天伊人| 久操 高清| 日本在线观看网址| 少妇诱惑视频| 成人性爱免费播放| 国产精品肉丝自拍| 中国AAAAAA黄色片| 97爱爱影院| 超碰免费人妻人人| 久久精品72| 夜夜草我| 欧美日韩国产电影| 午夜乱轮操逼视频免费看| 国产精品 午夜福利| 亚洲影院365| 极品内射| 国产 日韩 欧美 中文 另类,国产 欧美 另类 制服 变态,高清 日韩 欧美 中文,高 | 91人人臊| 怡春院久久| 99成人| 国产精品国产精品国产| 欧美九九爱| 一区二区三区美女超清| 97这里都是精品| 一本精品日本在线视频精品 | 久久久一级| 日韩三级伊人| 99国产精品免费| 日本丝袜人妻内射| 久久宗合97| 五月色综合| 一级性爱网| 超碰97最新人妻| 日韩不卡在线一区二区| 欧中美三级一区二区三区| 日韩有码一区三区| 青青免费在线视频一区| 久久久久久久9最新免费视频观看| a级理论午夜日本| 亚洲男人天堂手机版| 九九玖玖精品| 91爆操视频| 综合亚洲欧美| 做爱福利视频一区二区| 色综合色欲色综合色综合色综合| 骚女天天综合网| 97久久久精品| 亚洲激情AV| 精品国产三级av韩国在线| 人妻超碰青青草98| 毛片中心9视频99| 国产日韩在线播放av| 久久久精品,3| 久久精品老司| 91chinese在线| 国产日韩色综合| 高颜值美女口爆高潮浪叫| 丝袜制服字幕在线| 天天精品| 欧美精品久久久久久久丰满| 黑人精品欧美一区二区蜜桃| 精品国产污一区二区三区| 国产成人无码高清| 高清国产无码av| 国产深喉| 国产第二页| 久久天天摸| av日韩在线观看电影| 国产精品人妻无码久久久老鸭窝| 熟女91网| 国产25页| juliaann精品熟女一区| 日本福利二区视频| 国产av波波国产精品| 久久久久久久97| 曰本特级特黄特色黄色A级网站高清在线免费看| 校园春色 男人天堂| 熟女字幕| 美国精品国产精品| 亚洲啪啪综合?v一区综合精品区| 97国产精品久久久久| 久久大线蕉一区| 夜夜操天| 黄色AV影视| 秋霞欧美性爰视频| 日韩性爱免费视频在线网站| 日欧操屄| 欧美一区二区三区不卡高清视频| 999国产精品999久久久久久| 午夜精品久久久久久久| 欧美人妻色| 2019天天操天天爽天天拍| 精品久久一区二区三区四区五区| 亚洲国产欧美中日韩成人综合视频| 家庭乱伦国产| 日本国产亚洲一区在线观看| 射久久| 91岛国动作片| 色爱天堂| suv精产一二三区| 精品国产乱码久久久影院| 亚洲s色图| 中国黄色特级精品一区二区三区片| 青青草在线视频欧美| 亚洲日韩av一区二区三区百合| 日韩有码一区三区| 97精品国产97久久久久久| 99这里有精品视频| 俺去也婷婷| 亚洲五月天激情| 韩国久久97| 天天淫人人妻日日色| 97操97色| 欧美白嫩在线放| 国产美女激情| 亚洲综合一| 久艹99| 蜜区区视频79 | 欧美性五月| 亚洲蜜臀精品视频久久| 深喉吞精| 东京热天堂网| 色哟哟综合| 曰本人妻人人澡人人夹| 色青青久久影视| 国产无马av| 亚洲日韩AV视色| 91精品人妻一区二区-全集完整版免费正片国语-B02AV | 午夜国产成人福利视频| 9色在线| 99热精品在线| 亚洲熟妇熟在线电影视频| 欧美视频第二页| 九九九精品一区二区无码| 伦理日韩国产久久| 无码二级三级| 成·人免费午夜在线观看| 中文字幕日韩电影人妻| 91小视频| 91精品电影18| 中文字幕人乱码中文字的预防方法| 日本国产二线女色| 成人怡红院| 亚洲精品毛片在线观看| 亚洲AV成人无码一区二区三区在线观看| 婷色五月天| 亚洲人妻熟妇三十三区| 后入日本1234| 超碰欧美| 国产 日韩 欧美 中文 另类,国产 欧美 另类 制服 变态,高清 日韩 欧美 中文,高 | 免费观看的av| 97色97好| 中文字幕丝袜| 两女互慰AV高潮喷水在线观看| 亚洲美女自拍偷拍视频| 国产伊人自拍| 亚洲天天精品| 国产精品精品系列在线观看| 老司机深夜影院18未满| 欧美制服另类丝袜| 少妇久久久免费| 欧美组图日韩亚洲中文字幕| 粉嫩在线一区二区懂色| 亚洲最大黄网| 偷窥自拍亚洲| 亚洲密乳AV| 久久久精品国产亚洲伊人| 97伪v| 日日爱99| 色婷婷丁香| 中国小夫妻勾搭露脸淫荡对白 | 国产1727欧美| 欧美v日韩v亚洲v最新在线| 国产99久久99热这里只有精品15| 色性荡荡荡荡视频| 女人18精品一区二区三区| 乱伦日本中文自拍| 婷婷久久综合| 97国产精品在线观看| 精品美女久久久久| 精品精品精品| 久久久女人| 丁香五月综合| 黄资源| 99婷婷一区二区| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴| 亚洲 欧美 另类 日韩 人妻一区| 天天做天天爱| 五月丁香六月婷| 久久超碰天天| 国产美女mm131爽爽爽爽| 国产乱弄免费在线视频。| 无码少妇精品一区二区60岁老人| 欧美经典一区二区三区 | 黄色av播放免不| 麻豆一区二区AV天美| 超碰在线一区二区三区| 夜夜草我| 国产1769在线| 女同在线视频一区| 麻豆性爱视频在线播放| 999九九九九国产动| 久草这里只有精品| 福利天天都操| 日韩三A大片在线观看| 亚洲狼狼干综合1| 亚洲一区二区三区春色| 亚洲情色1区| 看全色黄大色大片免费视频| 欧美中文字幕男人天堂久久精品| 91麻豆天美| 毛片视频白嫩| 欧美人与动性人交a| 英伦大奶子熟妇吊带| 亚洲中文字幕在现观看| 九九热精品免费视频| av网站在线看| 欧洲中文字幕| 尤物视频一区| a片亚洲一本通视频| 国产亚洲精品美女久久久久久2021| 欧美色图成人网一区二区| 91精品微拍福利| 久久久久久9999| 黄色网址在线免费观看| 一二三卡欧美日韩人妻免费精品| 操逼视频免费日韩无码| 精品在线78| 久热免费视频| 四虎国产精品永久在线囯在线| 国产一级久久久| 亚洲国产一区二区入口| 天天干1区2区在线| 欧美一级色| 国产成年女黄特黄| 日韩精品9999| 欧美系列在线一区二区| 欧美亚洲自拍另类人妻| 精品97久久综合| A片 AV一级在线播放观看免费| 伊人在线大香蕉视频久久| 亚洲色久| 日本人妻伦在线中文字幕| 人妻无码久久一区二区三区免费| 69精品久久久久中文字幕| 清纯唯美综合| 一区二区三区四区五区高清无码永久视频 | 亚洲国产一级中文综合久久天堂在线免费观看| 2017人人操,人人摸| 欧美性五月| 黑操B| 一类无码操逼视频| 久热伊人| 日本一区99| 久操精品网| 久久精品国产欧美日韩亚洲欧美日韩中文久久国产一区 | 亚洲日韩熟女人妻高清在线| 国产亚洲色婷婷久久99精品91| 日本久久女同性恋视频| 日韩中文9| 国产精品一区二区三| 国产一区二区三区视频在线看| 欧美日韩222| www.av家庭乱伦| 久草综合京东| 日本操逼视频免费| 亚洲天堂色图| 91免费看一区二区三区| 国产视频一区二区在线| 国产精品人妻免费精品| 九九热男人天堂| 国产午夜在线观看| 97超碰无码网| 三级AV入口| 国产视频小说| 手机在线观看不卡无码av| 91精品操美女| 中出91| 精品人成视频在线观看| 91天天综合网,天天综合网| 精品亚洲成人免费在线| 久久久久久久久久久久久久久久9| 在线免费观看日韩一区| 色在线69堂| 久久久国产三级黄色片| 久久久不卡| 99999久久久久9国产精品| 可以免费看黄片的视频| 色婷婷久久综合超碰| 一级A片女人高潮叫床| 97超碰伊人| 欧美性猛交美女自慰91| 亚洲av无码国产精品字幕| 人妻爽爽啪视频| 日本123区操B视频| 亚洲综合999| 刺激精品视频| 亚洲另类电影| 久久久久久99AV无码免费网站| 久久亚洲熟妇在线视频| 国产热RE99久久6国产精品首| 啊啊啊好多水| 天堂伊人久久| 婷婷亚洲天堂| 黄色片A级一区二区三区| 东北老女人的激情视频| 在线观看免费视频国产| 欲色综合| 人人综合| 婷婷色影院| 韩国三级一线观看久| 精品中文日韩字幕视频| 日韩精品区二区三区不卡| 国产视频一区二区三区在线免费观看| 国产后入清纯| 嗯嗯啊啊用力视频免费| 色婷婷激一区二区三区| 国产精品农村妇女| 日韩欧美资源| 四虎永久在线精品免费网址| 日本高清视频xxxx| 国产欧美另类久久久精品课程| 欧美精品双插| 日本三级久| 99精品成人免费看| 91搡老女人老妇女老熟女歌词翻译| 玖玖爱一区在线| 久久极品一区二区| 亚洲欧洲日韩国产自在线| 97精品在线| 99∨VTV| 欧美亚洲另类在线蜜桃| 欧美v亚洲v综合v国产v妖精| 欧美—性—交—色| 亚av顶级裸体一区二区三区四区五区 | 日韩淫色网| 日本不卡码黄色| 思思热在线视频精品| 毛片麻豆91糖心精品毛情片| 日韩一999精品| 国产超碰在线| 黄aaaaaaaaaaaaaaaaaa色网站| 国产亚洲精品A在线观看下载| 校园春色 亚洲| 呦女网站| 91爱欧美| 一区二区三区成人| 亚洲 se图 欧美电影| 亚洲欧美中文日韩视频中国语| 天天操人人操狠狠插| 婷婷五月天无码 | 午夜福利区| 久久这里精品国产99丫e6| 午夜天堂精品久久久久91| 上海一级黄片| 国产在线视频二区| 欧美日韩国产成人高清| 天天干夜夜肏| 欧美日韩另类字幕中文| 99热精品在线| 婷婷久久久| 国产伦乱91| 国产粉嫩出水在线播放| 国产成人欧美一区二区三区的国产| 色吧91| 97色碰| 欧美天天射| 欧美人妻少妇| 狠狠干91| 3PAV乱伦视频| 搡老女人911熟妇老熟女| 国产自产22区| 久久风骚城市| 欧美碰碰综合色| 亚洲少妇视频| 99夜夜操| 91东北熟女| 欧美91精品国产自产| 日本韩高清无砖码22o| 中文字幕在线免费观看 | 99re69| 高清肉丝中文无码| 天操老女人| 久久久91福利姬| 十八禁电影伊人网| 国产激情在线| 日本操逼无码| 天天操夜夜操| 中文字幕一区二区三区人妻少妇在线| 免费伦费视频在线观看| 亚洲精品不卡一二三区| 区一二区日韩亚洲乱码av电影| 美女自卫慰黄网站免费| 免费伦费视频在线观看| 日韩一级成人毛片免费观看| AV乱伦专区| 亚洲精品一区二区精品| 久久99综合| 2020中文字幕在线| 热热色中文无码| 国产激情片在线观看| 欧美v日韩欧亚洲电影天堂色诱,国产传媒| 欧美日本天堂| 被窝影院午夜看片无码| 婷婷亚洲综合| 色偷偷色偷偷欧美日韩| yiqicaoav| 口爆综合网| 亚洲AV不卡在线观看| 亚洲精品毛片在线观看| 69视频福利导航| 9118禁| 狠狠综合网| 国产丰满熟夫69mpp| 麻豆成人影音在线| 蜜桃臀av在线观看| 国精综合一二三区影视| 国产老太乱伦一区| 大香蕉97久久| 日韩成人小视频| 免费强奸av| 狠狠干妹子| 伊人久久大香线蕉无码| 99国产在线绯色一区| 亚洲美女av无码| 亚洲色五月| 91制服丝袜| 狠狠干狠狠色| 精品美女少妇一区二区| 人人射人人操人人摸| 亚洲丝袜制服国产91_国语字幕免费观看完整版下载第5集_ | 国产午夜福利专区综合| 久久这里精品国产99丫e6| 91天堂| 欧美美女自慰一区二区三区| 国产97av| 狠狠色综合网| 九九亚洲| 欧洲乱码一区二区| 欧美18老人禁| 天天日天天操VV| 日韩精品色呦呦| 黄色十八禁网站| 99热99在线播放激情| 青青草在线视频美女| 久久riav中文精品| 国产91专区| 五月天开心网| 女人香蕉久久毛毛片精品| 韩日精品四区| 在线观看一级α片刺激高潮视频| 韩日精品四区| 91综合色| 超碰在线97国产| 岛国片国产成人亚洲播放| 天天草AV| 中文字幕精品一区二区精品| 超碰九7免费| 97综合在线观看| 成年人三级黄色片视频| 欧美日韩天堂| 丁香六月婷婷久久综合| 玖玖爱影院| 熟啊v色欧美热| 国产午夜无码片在线观看影视 | 欧美国产成人在线| 探花激情视频| 天天做天天爱| 成人十八禁日韩欧美一二三| 日韩在线观看中文字幕视频| 午夜九九| 黄色二级片网站| 成人免费在线网站| 久操视频免费观看| 欧美色婷婷| 国产日韩欧美操逼视频| 亚洲图片视频小说| 国产乱码久久| 中文字幕日韩人妻视频一区二区三区| 天天综合网~91| 澳门人妻久久| 精品国产久热在线观看| 在线日韩日本亚洲国产| 九九九九九九视频| 91色综| 国产乱码精品一区二区三区四川| 国产外初女出血视频| 激情第四色| 亚洲一级性爱视频免费看| 青青草中出视频 | 色色五月婷| 另类亚洲一区二区三区| 999久久芭蕾| 97精品视频免费| 爱媛媛久久国产福利| 999久久久免费精品国产牛牛| 色香网| 超碰79人人乐| 日韩 欧美 另类 人妻| 亚洲美女av无码| 婷婷探花久久精品一区| 4141514逼喷水三级片| 色播综合| 91精品啪在线观看国产城中村| 日韩97P| 国内毛片四区| 97欧美色综合| 国内操逼视频二区| 久久精品老司| 伊人97| 伊蕉97蜜桃97狠狠综合干| 999久久久精品国产| 九九干| 性夜影院爽黄A爽免费动漫| 四虎av在线| 国产精品亚洲日韩骚欢乐谷最新地址发布页huanieguty性屋娱乐妖精视频 | 放黄片放3级黄片没穿衣服| 中文字幕欧美精品亚洲日韩蜜臀| 亚洲夜色在线| 5278欧美一区二区三区| 脫衣舞一区二区三区| 97干97色| 91欧美www| 密臀国产在线| 校园春色中文字幕AV| 高清不卡视频| 青娱乐导航AV| 97超碰美国| 色九月婷婷| A 天堂在线观看视频| 亚洲AV噜噜狠狠网址蜜桃动漫| 中文字幕乱码人妻二区三区| 97视频在线免费观看| 日本精品一区二区三区四区的功能| 欧美性爱一区二区三区| 四虎免费视频| 日韩无码AB| 操91| 激情四射婷婷六月天| 2017大香蕉国产精品久久| 亚洲永久永久永久永久一级一级一级精品| 美腿色图| 性爱综合网| www.99在线| 六月丁丁香| 91美女视屏| 99爱精品| 色色热| 精品久久久九九九孕妇| 91女人的网站| 麻豆久久视频在线地址| 亚洲 中文 女同| 日韩av色图综合| 午夜福利在线视频1000| 蜜臀久久99精品久久久久免费观| 99国产在线绯色一区| 97国产色图| 热久久91婷婷| 好好的日:com久久九九| 欧美在线中M| 51一区二区三区| 欧美人妻熟女在线| 素人伊尹大香蕉免费下载视频| chaopen97久久| 99色热| 久久系列| 男人天堂网站| 亚洲成成熟女人综合一区二区| 色爽——AV| 日日日大屁股骚女人精品| 伊人四虎综合| 日本在线15p| 啊啊啊啊好大好硬啊啊啊啊啊| 久久九九久精品国产尤物|国产精品爽黄69天堂A片潘金莲,国产亚洲精品第一综合 | 99在线啪| 国产精品乱码久久久| 午夜福利国产欧美日韩夜夜| 成人午夜高潮av猛片| 中文字幕日韩专区精品系列| 国产成人亚洲精品无码古代早漏男| 亚洲激情在线一区二区| 狠狠综合网| 国产suv精品一区二区四| 日韩电影天堂视频一区二区| 亚洲色图欧美色18直播在线| 日1区2区3区2020| 九九九九免费|