亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

eMMC BKOPS機(jī)制深度解析:從MMC協(xié)議到閃存后臺維護(hù)

eMMC BKOPS機(jī)制深度解析:從MMC協(xié)議到閃存后臺維護(hù) “MMC”這個詞我第一次認(rèn)真對待是在一次遠(yuǎn)程排查Android開發(fā)板卡頓的時候。設(shè)備連續(xù)寫了幾十GB日志界面開始間歇性掉幀dmesg里全是timeout重試SSH偏偏又能連上。同事丟過來一句“看看mmc bkops是不是在忙?!边@一句話把我從文件系統(tǒng)層直接按到了存儲芯片層。翻完eMMC 5.1規(guī)范才意識到這顆不起眼的黑色BGA芯片牽扯的是閃存介質(zhì)、控制器固件、內(nèi)核驅(qū)動三層協(xié)作的一整套邏輯。這也是為什么現(xiàn)在搜“MMC”相關(guān)熱詞幾乎都會帶著bkops一起出現(xiàn)——它就像eMMC的“加班時間表”平時看不見一出現(xiàn)就影響著設(shè)備性能。這篇就把這條線從頭捋一遍從MMC的起源講到eMMC內(nèi)部原理再拆開bkops這個關(guān)鍵詞最后落到工程實踐里的避坑經(jīng)驗。1. 三個字母MMC在不同圈子里各指什么1.1 先把最容易混淆的三樣?xùn)|西分清楚MMC這個縮寫在不同領(lǐng)域里各有歸宿。Windows運維那邊CLI里敲mmc打開的是微軟管理控制臺攝影圈老玩家口中的MMC是九十年代末的多媒體存儲卡而在嵌入式、手機(jī)、平板、工控設(shè)備領(lǐng)域我們說的MMC幾乎都指向eMMC——embedded MultiMediaCard嵌入式多媒體卡。如果你拆過一臺老安卓手機(jī)的主板會看到存儲部分是一顆焊死的黑色方形芯片絲印上可能有“eMMC”“Toshiba”“Samsung”之類的字樣它就是eMMC。這里有個容易混的點MMC插卡、SD卡、eMMC三者是“血緣關(guān)系”但不是同一物種。MMC卡MultiMediaCard1997年由SanDisk和西門子推出的可拆卸存儲卡外形比SD卡略厚今天的新設(shè)備基本見不到了。SD卡從MMC演進(jìn)而來兼容MMC協(xié)議但增加了安全認(rèn)證與版權(quán)保護(hù)機(jī)制外形更薄后來統(tǒng)治了相機(jī)和開發(fā)板市場。eMMC在MMC協(xié)議基礎(chǔ)上為嵌入式場景重度改造直接焊在板上不可拆卸內(nèi)部自帶控制器整個存儲系統(tǒng)被封裝成一顆標(biāo)準(zhǔn)芯片。這三者的關(guān)系可以這樣記eMMC是“焊死的SSD思維產(chǎn)物”SD卡是“能拔下來的MMC后代”。但它們在命令協(xié)議層面共享了大量設(shè)計基因。1.2 一條時間線從可拆卸卡到手機(jī)標(biāo)配MMC的歷史起點是1997年MMCAMultiMediaCard Association成立。之后MMC標(biāo)準(zhǔn)歷經(jīng)1.0、2.0、3.0幾個版本數(shù)據(jù)線從1位擴(kuò)展到8位速度從2.5MB/s爬升到幾十MB/s。1999年前后SD卡從MMC分支出去SD卡在消費市場上反超了MMC但MMC協(xié)議本身沒有死而是換了一條賽道活著。2004年前后MMCA并入JEDEC固態(tài)技術(shù)協(xié)會eMMC標(biāo)準(zhǔn)體系正式建立。此后JEDEC連續(xù)發(fā)布多個大版本eMMC 4.3引入Boot分區(qū)、RPMB重放保護(hù)內(nèi)存塊、可靠寫等能力這階段eMMC開始成為智能手機(jī)存儲標(biāo)配。eMMC 4.4 / 4.41完善系統(tǒng)喚醒、分區(qū)切換邏輯老設(shè)備上常見。eMMC 4.5加入緩存、Sanitize徹底擦除和本文重點的BKOPS機(jī)制。eMMC 5.0引入HS400模式理論帶寬達(dá)到400MB/s同時支持增強(qiáng)類可配置分區(qū)。eMMC 5.1修正了一批生產(chǎn)制造和可靠性細(xì)節(jié)是目前最后也是使用最廣的eMMC版本。后來UFSUniversal Flash Storage在中高端手機(jī)上逐步取代eMMC但eMMC沒有因此消失——它憑借低成本和成熟生態(tài)在平板、電視盒子、車載、工業(yè)設(shè)備、網(wǎng)絡(luò)設(shè)備里依然是海量存在?!皬S商還在大批量采購eMMC”這件事本身就說明這個標(biāo)準(zhǔn)依然有很強(qiáng)的工程價值。1.3 為什么廠商愿意為“標(biāo)準(zhǔn)化的閃存管理”買單早年用裸NAND做產(chǎn)品是件痛苦的事。三星、海力士、閃迪、東芝各家的顆粒接口不同、壞塊策略不同、ECC算法不同即使同一家廠商不同制程的顆粒行為也天差地別系統(tǒng)軟件得為每顆顆粒單獨適配開發(fā)周期和故障率都居高不下。eMMC的意義在于把NAND顆粒、控制器、FTL固件Firmware Translation Layer全部封裝進(jìn)一顆標(biāo)準(zhǔn)芯片對外暴露一套統(tǒng)一、穩(wěn)定的MMC命令接口。主控端不再需要關(guān)心底層顆粒是SLC、MLC還是TLC也不需要知道壞塊管理怎么實現(xiàn)更不用糾結(jié)磨損均衡算法是否有坑。系統(tǒng)只需要會發(fā)MMC命令、處理響應(yīng)就能穩(wěn)定使用任意供應(yīng)商的eMMC芯片。這種“標(biāo)準(zhǔn)化封裝”對產(chǎn)品研發(fā)來說省掉了大量底層適配工作對供應(yīng)鏈來說則意味著可以靈活切換多家顆粒供應(yīng)商而無需修改主板和驅(qū)動。用一句工程上的話總結(jié)eMMC把閃存管理的復(fù)雜度從系統(tǒng)軟件轉(zhuǎn)移到了芯片內(nèi)部代價是性能和靈活性稍打折扣但換來的是極大的通用性。2. 拆開一枚eMMC芯片BGA封裝里的三個角色2.1 引腳與物理接口CLK、CMD、DAT[7:0]和那些電源拿到一顆eMMC芯片最直觀的是它的BGA封裝常見球數(shù)在153、169、186等規(guī)格。引腳里最重要的幾組是CLK時鐘線主機(jī)提供決定傳輸速率。HS400模式下時鐘頻率可達(dá)200MHz。CMD雙向命令/響應(yīng)線主機(jī)發(fā)命令、設(shè)備回響應(yīng)都走這一條線。這里注意CMD線只有一根所以命令交互是半雙工的。DAT[7:0]8位雙向數(shù)據(jù)線實際支持1/4/8位三種總線寬度。位數(shù)越高一次吞吐越大。RST_n硬件復(fù)位低電平有效。這個引腳能讓eMMC在系統(tǒng)異常時快速回到初始狀態(tài)省掉軟件復(fù)位流程。VCC、VCCQ等電源引腳VCC供給主閃存核心VCCQ供給信號接口和控制器邏輯。不同速率模式對VCCQ的電壓要求也不同HS400通常要求1.8V。值得一提是eMMC的數(shù)據(jù)線是可配置的。系統(tǒng)上電后默認(rèn)工作在1位模式軟件讀取EXT_CSD了解設(shè)備能力后再通過SWITCH命令切換到4位或8位模式。如果驅(qū)動在初始化階段沒有正確配置總線寬度你會發(fā)現(xiàn)eMMC讀寫的吞吐低得可疑但并不會報錯——這就是那種“查了半天參數(shù)最后發(fā)現(xiàn)總線在8位模式下沒切過去”的問題。2.2 MMC協(xié)議的工作邏輯命令、響應(yīng)與塊傳輸MMC協(xié)議是典型的主從架構(gòu)。主機(jī)是唯一的發(fā)起方設(shè)備只能被動響應(yīng)。所有操作都由主機(jī)發(fā)送命令開始設(shè)備在完成命令后返回一個或多個響應(yīng)字。說人話就是主機(jī)問一句設(shè)備答一句全程不允許設(shè)備主動開口。初始化流程大概是這樣的CMD0GO_TO_IDLE把所有設(shè)備都拉到空閑態(tài)。CMD1SEND_OP_COND主機(jī)探測設(shè)備電壓范圍和工作條件直到設(shè)備返回“上電完成”。CMD2ALL_SEND_CID讓設(shè)備上報自己的身份信息CID包括廠商ID、產(chǎn)品名、序列號等信息。CMD3SET_RELATIVE_ADDR給設(shè)備分配一個短地址RCA之后的操作都用這個地址尋址。CMD9/CMD7等讀取CSD選定當(dāng)前操作的設(shè)備。CMD6SWITCH讀取或?qū)慐XT_CSD寄存器這是后續(xù)配置分區(qū)、總線寬度、DDR模式、bkops的關(guān)鍵命令。讀寫數(shù)據(jù)的流程則更直接主機(jī)發(fā)CMD17讀單塊或CMD18讀多塊再發(fā)CMD24寫單塊或CMD25寫多塊。多塊寫之前還可以用CMD23指定塊數(shù)避免由于邊界不確定導(dǎo)致跨塊寫被設(shè)備放大。這里要理解一個關(guān)鍵點MMC設(shè)備暴露給主機(jī)的地址空間是線性的、邏輯的。主機(jī)眼里這是一個又一個4KB的塊但設(shè)備內(nèi)部把這些邏輯塊映射到物理頁。這種“主機(jī)只管邏輯地址”的設(shè)計大大降低了上層軟件復(fù)雜度代價是每次寫放大、垃圾回收的實際情況主機(jī)并不能實時完全掌握。2.3 控制器和固件的三件大事映射、回收、磨損均衡eMMC內(nèi)部負(fù)責(zé)存儲管理的是一個微型“SSD主控”它內(nèi)置了FTL固件負(fù)責(zé)把上層邏輯地址翻譯成閃存物理地址。為什么要這套機(jī)制因為NAND閃存有兩條物理鐵律必須先擦除才能寫入而且擦的最小單位是塊Block一般大小為幾MB。寫的單位是頁Page一般4KB或8KB但寫入量小于一頁時也會占掉整頁多余空間稱為“寫放大”。因此如果主機(jī)要覆蓋寫某個邏輯頁里的幾個字節(jié)FTL不會真的去覆蓋那塊物理頁而是把新數(shù)據(jù)寫入一個空閑物理頁再把邏輯到物理的映射表更新過去。原來那個物理頁就變成了“無效頁”等這一塊里無效頁攢多了控制器會觸發(fā)垃圾回收把仍有效的頁搬家到別的空閑塊然后整塊擦除。磨損均衡也在這里做文章。垃圾回收會讓有些塊被反復(fù)擦寫有些塊卻幾乎沒動過。FTL要做的是讓所有物理塊的擦寫次數(shù)盡量接近否則個別塊提前到壽命上限整個設(shè)備的可用容量就會縮水。動態(tài)磨損均衡處理頻繁更新的熱數(shù)據(jù)塊靜態(tài)磨損均衡則會把長期不動的靜態(tài)數(shù)據(jù)搬去磨損較少的塊讓那些低頻塊也參與消耗。這三件事全部由控制器在芯片內(nèi)部悄悄完成不占用主機(jī)CPU。這也是為什么eMMC“只是個存儲芯片”但對系統(tǒng)體驗的影響卻可以很大——控制器內(nèi)部一旦忙碌外面的命令就會排隊等待表現(xiàn)在應(yīng)用層就是I/O延遲波動。3. bkops這條熱搜詞背后閃存為什么要“偷偷加班”3.1 閃存不自律數(shù)據(jù)保持、讀干擾和擦寫不對稱如果你只看FTL的日常似乎只要GC和磨損均衡做好就夠了。但閃存還有一些更陰間的物理特性需要在“沒事做”的時候定期維護(hù)這類維護(hù)操作就是Background Operations簡稱BKOPS。第一個問題叫數(shù)據(jù)保持。NAND閃存里的電荷會隨時間慢慢泄漏尤其是TLC和QLC顆粒電荷窗口小泄漏風(fēng)險高。一顆eMMC設(shè)備可能出廠后放在倉庫里半年再上電讀取時發(fā)現(xiàn)某頁的比特翻轉(zhuǎn)已經(jīng)超出ECC糾錯能力。設(shè)備內(nèi)部的讀刷新Read Refresh機(jī)制要把那些快要失效的物理頁讀出來重新編程一遍防止靜默數(shù)據(jù)損壞。第二個問題叫讀干擾。頻繁讀同一個塊會讓相鄰塊里的浮柵電荷受到影響久而久之也會出現(xiàn)位錯誤??刂破餍枰ㄆ趻呙枘切┳x密集的區(qū)域把內(nèi)容搬到新位置并擦掉被“讀亂”的原始塊。第三個問題是磨損均衡的滯后性。FTL的靜態(tài)磨損均衡不會每次寫入都立即執(zhí)行因為頻繁搬動靜態(tài)數(shù)據(jù)反而會造成額外寫放大??刂破鲿鹊较到y(tǒng)有一定空閑資源時分批次地調(diào)整那些磨損不均的塊。這些維護(hù)操作必須在設(shè)備上電后、主機(jī)發(fā)命令的間隙完成因為eMMC不知道下一秒會不會掉電。如果它永遠(yuǎn)等不到“空閑”就會在主機(jī)的下一次讀寫時強(qiáng)行插隊表現(xiàn)出來就是突發(fā)延遲。3.2 Manual BKOPS與Auto BKOPS兩種觸發(fā)方式的門道eMMC 4.5開始JEDEC正式把BKOPS機(jī)制寫進(jìn)規(guī)范。大體分為Manual BKOPS和Auto BKOPS兩種。Manual BKOPS手動后臺操作邏輯如下主機(jī)在合適的時候執(zhí)行SWITCH命令去讀EXT_CSD里的BKOPS_STATUS字段。該字段會給出一個狀態(tài)常見狀態(tài)包括無需操作No BKOPS、需要操作BKOPS Needed、緊急操作BKOPS Urgent。如果狀態(tài)顯示需要或緊急主機(jī)通過SWITCH寫入BKOPS_START告訴設(shè)備“你可以執(zhí)行后臺維護(hù)了”。設(shè)備開始內(nèi)部維護(hù)期間主機(jī)依然可以發(fā)其他命令但性能必然受影響。設(shè)備維護(hù)完成后再把BKOPS_STATUS清回No BKOPS狀態(tài)。Auto BKOPS則更進(jìn)一步。如果主機(jī)在EXT_CSD的BKOPS_EN字段里寫入使能值設(shè)備就可以在內(nèi)部自己判斷時機(jī)在命令間隙自動啟動后臺維護(hù)不必每次都等主機(jī)來“催”。問題恰恰出在這里Auto BKOPS會讓設(shè)備更積極地做維護(hù)但也更不可控。你沒法精確知道它什么時候在“偷偷加班”某次大數(shù)據(jù)量寫入撞上它內(nèi)部GCI/O延遲就可能突然抬升。Manual BKOPS雖然可預(yù)期卻要求驅(qū)動和系統(tǒng)設(shè)計者配合好在空閑窗口主動觸發(fā)如果一直不觸發(fā)設(shè)備只能被迫在工作時刻占用帶寬體驗更差。內(nèi)核里對這兩種模式的取舍標(biāo)準(zhǔn)概括起來就是Devices with poor random write performance often benefit from enabling BKOPS。這句話翻譯成人話就是顆粒越差越需要系統(tǒng)主動幫它安排“加班時間”。3.3 一個真實卡頓案例持續(xù)寫入后性能為什么會崩我在調(diào)試那臺開發(fā)板時復(fù)現(xiàn)性能問題的方式很簡單用dd做幾百兆的持續(xù)寫入同時監(jiān)控iostat。正常前幾秒寫吞吐能到幾十MB/s。持續(xù)寫入幾十秒后吞吐會掉到個位數(shù)并且伴隨明顯的RTO波動。iostat里w_await從十幾毫秒飆到幾百毫秒甚至上秒。這時候查dmesg能看到mmc0: Timeout waiting for hardware interrupt這就是典型的設(shè)備內(nèi)部正在做維護(hù)而主機(jī)等不到響應(yīng)。繼續(xù)用mmc-utils的extcsd讀取可以看到BKOPS_STATUS已經(jīng)處于非No BKOPS狀態(tài)說明設(shè)備覺得自己“有事要做”但主機(jī)沒有及時給它維護(hù)窗口。這個案例復(fù)盤時問題不是設(shè)備壞了而是系統(tǒng)里IO調(diào)度策略太激進(jìn)。我們把所有線程都壓著寫沒有給eMMC留下任何空閑間隙設(shè)備找不到機(jī)會執(zhí)行內(nèi)部GC只能在下一次命令時強(qiáng)行“插隊”把性能波動放大給了每一個上層應(yīng)用。3.4 實操觀測在Linux下查看bkops狀態(tài)與壽命信息想驗證eMMC有沒有在忙后臺操作Linux下最直接的路徑是sysfs和mmc-utils。查看設(shè)備基本信息和壽命估算cat /sys/block/mmcblk0/device/life_time cat /sys/block/mmcblk0/device/pre_eol_infolife_time文件的格式通常是兩個十六進(jìn)制數(shù)分別對應(yīng)類型A和類型B的壽命估算。值越小越好例如0x01通常表示壽命消耗在10%以內(nèi)。pre_eol_info正常值是0x1對應(yīng)“Normal”如果出現(xiàn)0x2Warning甚至0x3Urgent說明保留塊耗盡程度已經(jīng)到了警告線。用mmc-utils看EXT_CSDmmc extcsd read /dev/mmcblk0在輸出里重點找這些字段BKOPS_EN0x01表示Auto BKOPS已使能。BKOPS_STATUS0x00表示當(dāng)前無需后臺操作非0則表示有維護(hù)需求。PRE_EOL_INFO生命周期預(yù)警信息。DEVICE_LIFE_TIME_EST_TYP_A / TYPE_B類型A/B的壽命估算。生產(chǎn)環(huán)境下建議把這些信息接入告警平臺定期記錄壽命消耗曲線。如果一臺設(shè)備life_time在很短時間從0x01跳到0x06不要猶豫優(yōu)先查散熱、掉電次數(shù)和寫入壓力大概率是環(huán)境或配置出了問題。4. 從手機(jī)到工業(yè)設(shè)備eMMC的真實應(yīng)用圖景4.1 手機(jī)上的eMMC存量巨大、體驗寬窄不一手機(jī)是eMMC最經(jīng)典的戰(zhàn)場。安卓早期到中期的存儲幾乎全靠eMMC從eMMC 4.3到5.1每一代升級都在解決體驗問題。后來UFS憑借全雙工、命令隊列等特性把順序讀速度拉到了千兆級別成為旗艦機(jī)首選。但定位入門機(jī)和低端平板的設(shè)備到今天仍在大量使用eMMC。eMMC在手機(jī)里的運行方式簡單直觀Boot1分區(qū)存放引導(dǎo)加載器Boot2分區(qū)常用來放恢復(fù)系統(tǒng)RPMB分區(qū)存密鑰、防回滾計數(shù)器等安全數(shù)據(jù)用戶數(shù)據(jù)區(qū)則被分區(qū)成system、vendor、data等。啟動過程中ROM先讀Boot1拉起bootloaderbootloader再通過MMC命令讀取用戶分區(qū)的system鏡像逐步加載內(nèi)核和文件系統(tǒng)。由于eMMC內(nèi)部沒有命令隊列同一時刻只能有一個命令在跑所以多線程隨機(jī)讀寫很容易排隊。這就是為什么低端機(jī)玩一會兒微信就覺得卡——大量小文件隨機(jī)寫擠在一條命令隊列里吞吐自然上不去。UFS引入命令隊列后這個瓶頸被解除了但成本也上去了。4.2 工業(yè)與車載場景對壽命、溫度和確定性的苛刻要求消費級eMMC已經(jīng)很成熟但工業(yè)和車載場景對存儲的要求要嚴(yán)苛得多。溫度是第一個分水嶺。普通消費級eMMC工作溫度通常在-25°C到85°C工業(yè)級可以做到-40°C到85°C有些車規(guī)級產(chǎn)品甚至要求-40°C到105°C。溫度對NAND電荷保持的影響是指數(shù)級的高溫加速泄漏低溫又影響寫入穩(wěn)定。選型時一定要看顆粒供應(yīng)商明確標(biāo)注的溫度等級別拿消費級片子冒充工業(yè)級用。壽命是第二個問題。車載設(shè)備往往要服役7到10年行車記錄儀一類設(shè)備會持續(xù)寫入視頻流。選TLC還是MLC、留多少OPOver-Provisioning空間、控制器固件的磨損均衡策略是否激進(jìn)這些直接決定幾年后設(shè)備是否突然“變磚”。經(jīng)驗上長時間連續(xù)寫入的場景盡量選壽命余量更大的顆粒類型或更高等級eMMC并配合溫度管理措施散熱片不是可選項。RPMB在工業(yè)和車載里也扮演重要角色。安全啟動的密鑰、設(shè)備唯一ID、防止固件回滾的計數(shù)器都存放在RPMB里利用HMAC-SHA256做訪問認(rèn)證能有效防止冷數(shù)據(jù)被惡意重放。如果新板卡連RPMB的基礎(chǔ)讀寫都調(diào)不通基本是密鑰管理流程和驅(qū)動配合沒做好。4.3 選型決策eMMC、UFS、SD卡還是裸NAND選存儲方案不要只迷信參數(shù)表先看你的系統(tǒng)軟件棧、成本約束和生命周期再決定接口。維度eMMCUFSSD卡裸NAND接口8位并行半雙工M-PHY串行全雙工SD協(xié)議/SPI自定義最高理論速度400MB/sHS400830MB/s起幾十到200MB/s取決于主機(jī)實現(xiàn)命令隊列無有無無軟件復(fù)雜度低中低高壞塊/磨損管理芯片內(nèi)部處理芯片內(nèi)部處理設(shè)備端主機(jī)必須自己做使用場景手機(jī)/平板/工業(yè)/車載旗艦手機(jī)/筆記本/高性能嵌入式相機(jī)/樹莓派/消費電子定制SSD/極簡系統(tǒng)裸NAND看著便宜但把FTL、壞塊管理、ECC全交給主機(jī)端開發(fā)周期和風(fēng)險會顯著拉高不適合大多數(shù)產(chǎn)品團(tuán)隊。SD卡接口簡單但可靠性、溫度范圍和固定安裝方式都不如焊接式方案。UFS性能最好但成本高而且啟動流程、固件適配相對復(fù)雜。對絕大多數(shù)中低端嵌入式產(chǎn)品來說eMMC仍然是性價比和可靠性最平衡的選項。5. 工程落地避坑記錄對齊、掉電與壽命監(jiān)控5.1 分區(qū)對齊一個小設(shè)置影響整盤GC效率eMMC內(nèi)部光看邏輯塊地址好像很規(guī)律但物理頁、物理塊之間有固定對齊關(guān)系。如果系統(tǒng)給eMMC分區(qū)時起始扇區(qū)不是整數(shù)倍塊邊界對齊比如一個4KB塊被分成兩個分區(qū)跨邊界的寫入就會被FTL拆成多次內(nèi)部操作垃圾回收復(fù)雜度上升寫放大系數(shù)跟著惡化。排查方法很簡單parted /dev/mmcblk0 align-check optimal 1如果顯示不理想重新分區(qū)時讓起始扇區(qū)為8192的整數(shù)倍對應(yīng)4MB對齊這是一個兼顧性能和兼容性的常用做法。很多量產(chǎn)腳本里用fdisk時默認(rèn)起始扇區(qū)是2048在eMMC上雖然也能用但并不是所有顆粒的最優(yōu)選擇。別嫌這步麻煩分區(qū)對齊不對齊在長期運行后的壽命和性能差異是能測出來的。5.2 掉電保護(hù)別以為eMMC能扛住一切eMMC控制器有緩存和內(nèi)部映射表掉電瞬間正在寫入的數(shù)據(jù)不一定落盤。雖然大多數(shù)eMMC有掉電恢復(fù)機(jī)制能保證已經(jīng)返回“寫成功”的數(shù)據(jù)不丟但如果系統(tǒng)沒有正確使用刷新命令數(shù)據(jù)可靠性還是打折扣。Linux下常見的坑是文件系統(tǒng)雖然掛在ext4上但沒明確開啟barrier或者上層應(yīng)用不關(guān)心fsync。壓力測試時大文件寫入看著完成了實際上數(shù)據(jù)還躺在內(nèi)存頁緩存里一斷電就丟。更隱蔽的是控制器內(nèi)部的寫緩存需要發(fā)送FLUSH_CACHE命令才能真正落盤。做掉電測試時我的做法是準(zhǔn)備一套循環(huán)腳本交替寫入隨機(jī)數(shù)據(jù)和校驗數(shù)據(jù)。每次寫完固定大小數(shù)據(jù)后調(diào)用fsync并記錄數(shù)據(jù)位置。隨機(jī)時間點切斷電源。重新上電后掛載文件系統(tǒng)并校驗已記錄的數(shù)據(jù)內(nèi)容。反復(fù)跑幾十輪才能對板子的掉電可靠性有底。只做一次冷啟動驗證根本不叫測試。5.3 用sysfs和mmc-utils做壽命監(jiān)控eMMC的壽命不會突然歸零它有明確的“提前量”。定期讀取下面這些信息能幫你預(yù)判設(shè)備剩余壽命。mmc extcsd read /dev/mmcblk0 | grep -E PRE_EOL|LIFE_TIME|BKOPS把每次讀取的結(jié)果記錄下來配合時間戳形成趨勢圖。如果看到pre_eol_info從Normal變成Warning就要開始規(guī)劃設(shè)備輪換或減少寫入了。如果BKOPS_EN一直處于未使能狀態(tài)而設(shè)備又頻繁出現(xiàn)性能抖動可以嘗試在系統(tǒng)啟動早期啟用Auto BKOPS再觀察延遲曲線。有些設(shè)備的壽命信息只能在“可編程區(qū)域”里讀少量廠商還會故意隱藏部分字段。遇到這種情況先確認(rèn)你使用的mmc-utils版本和內(nèi)核版本是否較新再查廠商手冊是否有專有命令。5.4 三個真實踩坑記錄坑一某批次設(shè)備使用半年后壽命估算數(shù)據(jù)異常偏高。排查鏈路是先看dmesg有無異常ECC錯誤再看life_time并配合寫入量估算最后發(fā)現(xiàn)是量產(chǎn)階段的持續(xù)寫入壓力測試次數(shù)過多導(dǎo)致顆粒磨損集中。解決方法是調(diào)整產(chǎn)測流程將全盤寫測試從每臺多次改為抽檢并加軟件升級階段白名單避免每臺機(jī)器都重復(fù)整盤刷寫。坑二開發(fā)板在做持續(xù)數(shù)小時的日志寫入測試時出現(xiàn)周期性卡頓。我一度以為是文件系統(tǒng)問題后來抓取iostat發(fā)現(xiàn)w_await周期性飆升再讀BKOPS_STATUS確認(rèn)是有后臺操作發(fā)生。解決方式是調(diào)整測試腳本每寫一段數(shù)據(jù)后主動追加sleep間隙同時在內(nèi)核配置里打開Auto BKOPS讓設(shè)備提前利用這些間隙做維護(hù)卡頓現(xiàn)象明顯緩解??尤彻た卦O(shè)備在高溫老化工序后上報的啟動時間變長。排查發(fā)現(xiàn)是高溫箱內(nèi)溫度達(dá)到85°C以上NAND讀干擾和電荷泄漏加重FTL頻繁做讀刷新和重試。解決方案是把老化溫度上限調(diào)低到70°C并在老化后的開機(jī)流程里增加文件系統(tǒng)自檢同時加入溫度降額控制邏輯高溫環(huán)境下主動限制寫入頻率。這三個坑有一個共同點都不是eMMC芯片“壞了”而是系統(tǒng)沒有充分理解存儲介質(zhì)的工作方式。對齊、掉電、溫度、維護(hù)窗口這些詞看起來是參數(shù)手冊里的小字實際卻是決定產(chǎn)品長期可靠性的關(guān)鍵?;氐介_頭那個問題“mmc bkops”為什么會被反復(fù)搜索因為它代表了eMMC性能世界里最不可預(yù)測的那部分。對普通開發(fā)者來說建議不要只停留在“性能變差就換芯片”的層面先學(xué)會看BKOPS_STATUS、壽命字段和寫放大數(shù)據(jù)很多時候優(yōu)化一個后臺操作的窗口比整體更換存儲方案更有效。我現(xiàn)在做新板卡選型時都會把BKOPS機(jī)制是否可調(diào)、壽命監(jiān)控是否有標(biāo)準(zhǔn)接口放進(jìn)評估表。存儲這行沒有玄學(xué)所有看似突然的故障翻開手冊都能找到源頭。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
深夜国产福利| 东京热毛片177b2viP| 强奸乱伦av电影| 色悠悠伊人网五月天| 久久一区无码| 日韩人妻精品久久久久| 在线人妻熟女一区二区三区四区五区| 少妇滛荡视频| 日韩免费性爱视频在线观看| 欧美激情性久久久久久| 日本熟女不卡视频| 青青久久艹| 超碰97欧美日韩| 欧美日韩国第一区| 久久丁香| 深田咏美亚洲精品福利社| 久久精品国产亚洲妲己影视| 熟妇女伦乱视频| 自拍亚洲综合| 91在线视频国产网站| 天美传媒av一区二区| 欧美亚洲国产自久久| 久久久人妻| 自拍偷拍2025在线观看| 青青操综合网| 在线观看岛国有码| 激情av| 在线国产一区二区av| 亚洲精品尤物yw在线影院| 欧美色棕合| 俺去啦自拍| 色色色热| 人妻天堂综合网| 亚洲精品a人片在线观看视| 男女啪啪啪18禁网站| 精品无码少妇| 校园春色五月天| 亚洲少妇自拍中文字幕懂色| 欧亚 另类 久| 91精品人妻五十路| 亚洲美腿丝袜香蕉影视欧美成人| 视频在线观看青青99国产| 熟女高潮合集-永久久久-成人AV | 久久综合中文国产| 夜夜操老骚逼视频网站| 清清草影| 黑丝制服中文字幕| 96精品久久| 99久久免费看精品国产一区| 99热在线播放| 97超碰磁| 久久夜黄色无码A级大片| 婷婷在线视频在线观看| 国产91久久九九免费精品无码| 91精品国产日韩欧美综合| 眼镜人妻101.com| 日韩操p| 蜜乳av首页| 午夜丁香婷婷| 男人下部插入女人下部| 夜草欧美| 亚洲熟妇白浆无码AV| 少妇九九九九| 日韩激情无码影院| 97久久久| 久久超碰大香蕉| 丝袜天堂网| 天天看片青娱乐| 精品九九九九九| 国产成人超碰在线| 婷婷激情五月天小说网| 日韩99神马视频播放片在线播放| 国产亚卅97| 狠狠躁伊人中文字幕| 91天天综合日韩欧美| 亚洲午夜未满十八勿入网站日本又色又爽又黄 | 动漫区日韩区欧美区| 精品国产久久乱码| 亚洲天天操| 五十路六十路七十路熟婆| 亚洲午夜福利在线影院| 91亚州日韩高清| 色综合99999| 狠狠爱夜夜| 日婷婷| 亚洲精品视频在线播放| 亚洲天天精品| 无码区蜜乳| 亚洲第一页色| 久九九九九九九九热| 亚洲精品一二牛牛| Av色五月| BBBBB97COM| 国产精品久久久无码AV网站| 五月久久HDAV| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 天天射影院| 二对二中文字幕。| 香港澳门日本三级网站| www.99热| 91老熟女91老女人| 国产精品亚洲一级av第二区| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 亚洲一区二区久久久久| 超碰97资源大奶| 成人小电影网站tex| ji熟女.com| 欧美亚洲丝袜人妻制服99| 天天日美女的B| 天天看天天日天天操| 婷婷五月激情综合| 91熟女网| 在现视频女上位好爽| 国产后入清纯| 日日操丁香五月天| 亚洲无限观看| 亚欧性爱无码| 中出20p| 午夜福利视频在线一区| 久久久久久久久久精| 男女猛烈无遮掩视频免费软件| 91狠狠综合久久| 日本高清一本二本免费不卡| 成人免费不卡在线视频| 狠狠躁日日躁夜夜躁A| 日韩一级性爱无码| 蜜臀久久99精品| 日韩啊V| 亚欧美天堂在线| 操逼操2| 99热精品在线观看| 久久久人妻| 丁香五月成人| 日韩免费a级毛片无码a∨| 免费观看欧美日韩操逼视频| 国产精品96| 吻戏激情性巴克| 人人妻人人澡人人爽人人精品浪潮| 久久久成人国产精品无码| 青青青草伊人精品| 亚洲天天艹| 亚州综合| 中出后入| 日本日逼视频网| 亚洲加勒比| 亚洲国产精品久久久男人的天堂| 国产又操| 色激情综合网站| 北条麻妃99精品青青久久| 中文AV制服乱伦| 60秒免费小视频| 秋霞无码av鲁丝片一区| 91人妻人人澡人人爽人人精品| 91九九| 亚洲一卡二卡在线免费| 超碰97首页| 午夜男女爽爽爽在线视频| 男人天堂毛片| 金典av| 亚洲中文字幕av| 久久性爱视频99| 青青草狠狠撸| 欧美性色综合网| 啪啪资源网| 懂色Av一区二区三区| 欲色影视综合吧| 国产欧美日韩精品中文| 懂色av一区二区三区天美传媒| 欧洲乱码一区二区| 亚洲无码99| 91伊人久| 国产精品扒开腿做爽爽爽视频| 国产精品久久久久绯色| 91九色网| 333kkkk·亚洲com久久| 久久六六| 伊人性在线视频| 久久综合精品一区二区三区| 操逼日韩无码| 午夜爽爽爽在线观看永久入口姬片| 九九热av| 五十路熟女在线不卡观看一区二区| 韩日男人的天堂| 户外裸露刺激视频第一区| 欧美国产精品久久九九| 日韩三级av片| 五月天AV资源| 熟女网站最新| 国产乱人妻精品入口| 中文字幕黄色片| 黄色AAAAA欧美| 色综合久久av| 国产无码三级视频在线观看| 91熟女视频| julia国产在线| 春色综合免费| 亚洲天天影视色综合| 久久久久国产亚洲一区欧美色图日韩 | 欧美综合骚| 深田咏美亚洲精品福利社 | 久久大陆| 久9久精品视频| 超碰在线974| 婷婷在线播放| 精品超碰中文在线| 久久久久久久久久久六六| 亚洲黑丝在线| 丝袜喷水在线| 内射黑人| 超碰人妻中文在线| 日韩内| 国产91丝袜 在线播放| 999999精品| 亚洲se91| 2024年最新色情网站在线观看| 免费精品无码一级毛片牛牛影视 | 日本在线一二| 日韩性色b| 天天干天天做| 骚女高跟AV在线| 久久久久斤小| 人妻精品一区二区| 国产精品无码成人精品| 黄色香蕉视频网站一区| 欧美五十路熟| 天天干天天狼在线视频| 另类在线| 欧美三级一级| 日本大香蕉| 亚洲熟女乱色一区二区三区久久久| 久久伊人青青草| 成人精品欧洲亚洲| 97se亚洲综合自| 九九九久久久| 人人操人人插人人摸人人干| 丁香六月婷婷| 97色妞| 超碰日韩美妻| 92一区二区| 中国一级特黄大片护士| 全球成人中文在线| 99热精品国产| 欧美综合色图网| 夜夜骑夜夜操| 日韩丝袜二区| 久久男人网| 超碰97综合网| 国产www色在线观看| 精品亚洲国产成人AV制服丝袜| 欧美躁死她一区二区| 精品乱子一区二区三区99| 亚洲老司机123专区| 女人18精品一区二区三区| 中文有码9| 四虎影视永久在线免费| 久久一二三四五六七八九区区区| 女人的天堂大香蕉网| 国产免费内射视频| 精品国产一区二区三区香蕉欧美| 一区二区激情国产熟女 | 国产精品熟女九色九色蜜臀| 偷拍欧美综合| 精品高清牛人盗摄一区二区三区中文字幕A片免费在线观看 | 国产又粗又大硬免费色网视频| 欧美综合娱乐久久| 97亚洲综合电影| 天天插天天操天天摸天天射天天看| 网友自拍第1页| 国产第25页在线观看| 爱爱动态120秒| 男人天堂综合| 日韩操逼性鲍| 91原创在线观看| 黑人粗大V S日韩女优视频| a片偷拍视频| 依人大香蕉| 国产精品第二页| 精品无码久久久久久久久果冻糖心 | www久久久| 亚洲性综合| 91在线精品一区二区三区| 亚洲欧洲网站免费观看| rivers-china.com| 丁香五月久久| 亚洲AV不卡在线观看| 午夜a成v人电影| 91neishe| 舔足天天操天天射| 黑丝少妇| 亚洲中字幕日本一区二区三区| 亚洲天堂男人在线| 中文乱码字字幕在线第5页| 97在线精品| 国产怡红院在线| 青青操轻轻| 91国产伊人大香蕉| 丁香五月婷婷色| 久伊人网78| 免费看一级a性色生活片久久无| 日韩美女高潮喷水视频| 黑人嘿嘿嘿超爽免费视频| 九九九久久久久| 人人操 欧美| 蜜桃视频精品一区二区三区| 18禁免费视频| 中文字幕精品亚洲熟女| 色欲色香天天天综合网www-亚洲综合国| 色综合一区二区三区| 天天弄天天操| 绯色一区二区三区不卡少妇| 精久久久91| 国产一级特黄大片处女| 蜜桃狠狠色伊人亚洲综合 | 婷婷情色综合网| 青青草中文字幕| 天天日天天操心| 97操| 伊人嫩草| 爱干爱射网啊啊啊| 免费精品人妻一区二区三| 蜜桃一区二区三区| 自偷自拍的亚洲视频| 凹凸 69堂 在线播放| 人人爱操| 久久中文字幕一区不卡| 伊人少妇久久久| 久久激情五月| 日本羞羞的视频在线播放| 日韩ab网 | 欧美日韩制服| 亚洲 se图 欧美电影| 色网在线视频观看免费| 亚州男人天堂| 加勒比少妇AV婷婷六月天超碰超碰| 亚洲色图亚洲无码强奸乱伦| 久草午夜| 久草老司机| 亚洲天堂性爱| 特级毛片特黄久久免费看 | 偷拍网站久久男女男| 伊人久久综合影院| 男人的天堂va在线| 欧美淫乱视频| se,,,亚洲欧美| 国产成人网站在线观看| 成人26uuu| 91美女高潮| 日韩丝袜人妻AV| 国产高清26uuu| 久久97精品久久久久久久不卡| 99国产精品免费| 日本3级一区二区免费| 国产精品第一区第一页| 欧美激情1区| 亚洲drav色图| 裸模AV女优| 亚洲无码99| 亚洲无吗在线视频| 日韩激情无码影院| 91黑丝在线| 一本大道青青| 久久超碰天天| 啊啊啊啊好大好硬啊啊啊啊啊| AV色天香在线| 六九九九| 一道本久久棕合爱| 97久久视频| 蜜臀AV网站| 乱伦一区二区三区‘| 人人操人人色网| 这里只有97精品| julia ann久久| 国产日韩人人| 亚射在线| 亚洲吊色| 五十路二区在线| 色婷婷综合久久中文字幕雪峰| 欧美成人精品A片免费一区99| av午夜影院在线播放| 影视综合无码少妇| 亚洲成人日韩小说| 日韩乱伦影音先锋| 国产白嫩漂亮KTV在线| 国产三级在线现体验区| 青娱乐福利99| 狠狠色伊人亚洲综合网站色| 翔田千里AⅤHD无码| WWW操逼| 久久精品久久久久久久久| 成人免费视瓶| 国内精品a| 性爱乱伦视频免费| 极品色www影院| 午夜福利视频在线一区| 国模精品一区二区三区苹果色戒 | 色五月av| 全免费a敌肛交毛片免费| 97资源免费视频| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 午夜精品久久久久久久99蜜桃一| 久久夜黄色无码A级大片| 色欲av一区二区三区蜜芽| 午夜福利1区2区3区| 极品销魂美女一区二区| 国产性爱乱伦AV| 中文字幕亚洲在线一区| 99热精品在线观看| 人妻插插人妻人| 亚洲情色在线| 性欧美999| 懂色Av| 粉嫩av平台| 日本成人A片免费看| 亚洲欧美一区二区三区一猛片| 中文字幕 国产 精品| 五月天开心网| 欧美在线色| 国产精品久久久久9999小说| 亚欧高清| 人人做人人妻人人夜视频| 99综合视频| 草b在线 | 草莓精品视频| 99国内精品| 东北操逼| 国产一级内射高清视频| 久久久久久国产精品免费网站| 性一交一乱一交A片久久四色| 旡码电影特区| 久9久9久9久9久9久9 | 欧美熟妇精品黑人巨大一二三区| 啊啊啊啊啊,啊啊啊啊好舒服,操我舒服啊啊啊| 这里只有97精品| 精品久久久久久AV无码| www.狠狠| 美女爽爽爽刺痛洞洞| 七月婷婷综合| 成人片在线播放| 99蜜桃臀亚洲成人在线观看| 91欧美亚洲| 久久久久久AⅤ无码免费肉站| 99re6久热只有精品6在线直播 | 色官网色综合| 蜜臀人妻少妇久久在线观看| 老熟乱一区二区三区四区| 超碰精品国产无码| 性站| 婷婷人妻激情| 全免费a敌肛交毛片免费| 国产精品久久发布| 人妻丝袜日本| 国产欧美一区激情交| 美日韩一二三区| 日产操逼| 色女网日韩| 天天日天天看| 大香蕉黄色一区| 日日噜噜夜夜久久亚洲一区二区 | 久久xxxx| 国产9熟妇视频网站| 五月婷网站| 精品无吗久久| 久艾草在线精品视频在线观看| 黄污污污污| 青青草原香蕉日本Ap| 探花熟女,姿勢到位,體驗感也到位| 精品久一区免费| 日韩猛交| 九九视品黄色| 天天综合网网欲色| 大香蕉综合| 欧美精品三级黄片| 粉嫩国产精品久久久| 秋霞 色色| 91久久国产综合久久| 久久久久久九九九| 伊色综合天堂色97| 一二三区操逼国产91| 1024亚洲中文字幕久在线看片你懂的 | 日韩丨制服丨中文|在线| 亚洲一区二区三区中文字幕| 人人搡人人肉久久精品| 逼逼逼逼操操操操操操操操操午夜剧场| 操b网站亚洲无码| 亚洲 日本 国产 综合| 91nbbbbbb| 国产中文字幕曰本毛片| 深爱伊人影院| 久久久久13| 超碰免费97| 欧美 日韩 另类 亚洲| 人妻中文字幕精品无码 | 国人欧美精品一区二区| 黑人性暴力毛片| 日韩AV电影网站| 在线日韩精品一区二区三区| 2026国产精品视频| 激情综合色| 蜜臀在线视频| 2017超碰| 色五月婷婷麻豆在| 影音先锋每日最新资源在线观看| 啊啊啊啊啊啊啊好爽不要| 国产亚洲精品农村妇女| 午夜精品久久久久久久第一页按摩| 日本大片日本一区二区免费高清| 黄色香蕉视频网站一区| 插B在线观看| 91女人的网站| 成年人一级黄色毛片大全在线观看| 男同专区一区二区三区在线| 日日黄色三级网站| 97人人草| 国产一级不卡在线观看| 亚洲熟女人妻中文字幕一区二区| 天天日天天舔东京热| 国产成人无码网站在线视频| 欧洲性爱无码区| 国产麻豆一区二三区| 久久久九97| 天天色,天天干,天天干| 精品国产乱码久久久久久蜜臀| 久热久操| 江都AV在线| 18禁超污无遮挡无码免费网| 日本潮催一卡操| 日本免费二区三区| 亭亭在线资源| 超碰夫妻97| 亚洲男人天堂2019| 3p国产色噜噜一区| 亚洲第一免费视频| 搡老女人老91妇女老熟女| 久久久久深夜无码| 久草精品视频| 麻豆黄四叶草网站| 水澄无码AV| 人人操人人大香蕉| 国产高清26uuu| 日韩免费av片高清无码| 精品免费视频国产一区| 夜夜久久久| 国模91| 揉揉揉夜夜| 好吊爽好吊爽在线视频,中文字幕精品一区二区日本,国产良妇出轨视频在线观看, | 按摩中文字幕| 婷婷五月天影院| 久久露脸国产老熟女| 日美免费黄片| 婷婷影院入口| 睡产熟女乱伦| 国产又粗又长又爽又色| 天堂中文资源在线bt| 成人精品一区二区91毛片不卡| 人妻9117c| 被操高清无码视频| 蜜乳AV.COM| 操人人| 国产美女裸体秘 永久无遮挡| 一区二区乱码福利| 无码高清操逼| 99亚洲精品| A 在线网址| 在线观看AV片| 色综合尤物| 日本午夜久久电影| 亚洲色五月| 91在线色综合| 97se综合网| 国产精品suv一区| 日韩美女,国产传媒,视频一区| 青青草色情网站视频| 日韩ab网| 天操天操夜操夜月月年年操操| 情色五月天就去干| 久9无限国产| 欧美精品三级黄片| 亚洲小电影免费涩涩成人在线高清| 高清无码在线播放网站| 一级黄色牲爱A级片| 天天精品| 好淫网一二三视区| 伊人久久亚洲中文字幕不卡| 曰本特级特黄特色黄色A级网站高清在线免费看 | 91性情| 亚洲一区二区三区在线激情| 日韩av不卡在线看| 91久久久久久久久18| 婷婷久草一区二区三区| 狠狠热这里都是精品| 五毛骚逼极品美女怕怕| 欧美美女视频| 国产Av超碰| 国产成人精品日本亚洲语言 | 亚洲欧美电影| 国产AV激情无码久久无码 | 啊啊啊好大好深| 日产操逼| 欧美性爱系列| 啊啊啊不要好疼视频| 狠狠夜色午夜久久综合在线| 亚洲熟妇综合久久久久久| 色噜噜狠狠色综无码久久合欧美| 老熟女乱伦一区| 久久久精品国产亚洲AV无码| 精品.99999| 91中文字幕在线观看| 综合色好色| 久久无码电影| 四虎影库国产精品免费| 9久精品视频在线观看| 亚洲欧美黄| 天天操夜夜嗨| 精品无吗久久| 欧美亚洲中文字幕| 蜜乳AV一区| 超碰av人人人| 加勒比色综合| 亚洲好看强奸乱伦| AA丁香综合激情| 啊啊啊好疼| 亚洲av噜噜噜噜噜噜| 亚洲日韩久久精品一区| 先锋女优在线观看视频| 国产大学生口爆吞精合集| 97亚洲一区| 久久中久文96| 日韩探花精品在线视频| 久久久99久9| 成人性交午夜免费片| 韩国一级婬片A片无码天美| 五月丁香综合| 夜夜嗨一区二区三区直播内容| 女同女同恋久久级三级| 天天综合AV| 一区二区三区高清| 日韩av在线播放不卡| 啊啊啊好大好湿| 日韩国产精品人妻无码久久久| 午夜色婷婷| 午夜综合在线| 丝袜美腿亚洲| 狠狠狠狠狠干| 人妻色情天天操| 国产亚洲精品第一最新| 欧美人妻中出| 东京热男人的天堂精品| 日本 免费 一区二区三区 久久香蕉| 久操精品| ′ !γ}丶。。久久精品欧美一区二区三区| 97超碰色中文字幕| 日本日逼视频网| 亚洲国产福利视频| 伊人久久艹| rivers-china.com| www.久久99| 玖玖无码超碰| 狠狠中文字幕| 一区二区高清视频| 亚洲欧洲小说图片视频| 看日韩黄片| 97青青操视频| 国产精品永久免费10000| 91色噜噜狠狠| 综合免费无码中文| 免费97视频| 亚洲av乱伦色图网站| 伊人性在线视频| 激情五月天色色| 97超碰碰| 青青青青草av在线观看| 亚洲一欧洲中文字幕在线| 亚洲综合69| 超碰99在线| 大奶的诱惑| www.高清无码诱惑一区.com| 乱伦a片视频| 国产尤物在线三区| 亚洲老熟妇xxx| 91色色网站| 国外91| 午夜天堂啪啪| 日韩福利综合一区| 亚洲天堂美臀在线| 亚洲日韩AV视色| 成人自拍三级在线观看| 97欧美色| 伊色综合天堂色97| 伊人久操| 色五月AV| wuyechaopeng| 精彩视频日韩| 亚洲欧美综合| 男人天堂无码| 97久久久久久久精| 婷婷中文网| 欧成人精品H无码| 欧洲精品欧洲精品| 色哟哟的毛片| 蜜乳AV网址| 羞涩视频| 啊啊在线| 久久99手机免费视频| 欧美精品1区2区3区| 久久久久久九九九| 国产精品97超碰| 国产原创精品| 精品久热| 自拍视频一区在线观看| 97在线免费| 久久精品日韩专区免费观看| 久久超碰97中文字幕| 看一级黄色视频| 亚洲日韩美国人妻| 超碰免费97| 天堂性色| 久热大香蕉网站| 97天天操天天干| 九九黄色视频在线观看| 日欧操屄| 日本精品一区二区三| 91偷拍欧美亚洲| AV九九| 日韩欧美经典在线观看| 俄罗斯一区二区视频在线观看 | 丰满岳乱妇一区二区三区| 五十路熟女人妻一区二区在线观看| 美美91成人国产精品欧美精品久久久久久久 | 97人人草| 亚洲欧美激情在线视频| 免费伦费视频在线观看| 无码不卡亚洲成?人片| 91熟女丨老女人| 自拍第一页| 欧美在线综合| 日本男人插女人的逼黄色| 青苹果影院男人的天堂| 天无日色综合| 暖暖精品二区三区观看| 六月丁香网| 中文字幕第页| 天天天天干| 亚洲五月丁香花狠狠干一区二区三区 | 中国AAAAAA黄色片| 免费精品无码一级毛片牛牛影视 | 国产传媒av天美传媒在线| 91成人亚洲色图| 清纯唯美综合亚洲| 日韩欧美中文字亚洲慕| 东京热伊久| 97国产精品久久久久| 性高潮久久久| 91操熟女视频| 大香蕉78| 91欧洲国产成人久久精品网站| 九九碰九九爱97超碰| 亚洲天堂男人网| 国产AB视频| 久夜操| 天天伊人| 韩三级a视频在线观看| 蜜乳中文字幕a在线| 亚洲,日韩,欧美,成人播放| 五月天久久综合网| 午夜久久无码1000合集| 亚洲国产高清福利视频| 五月婷婷六月丁香| 蜜桃视频精品一区二区| 中美日韩毛片| 欧美亚洲AN| 国内外毛片在线观看| 熟女熟妇一区二区三区视频| 日韩大香蕉AV影片| 91天天综合日韩欧美| 欧美一二三级精品在线| 天天草夜夜草高潮片| 怡红院一区二区熟女人妻| 欧美精品日韩一区二区| 又大又长又爽| 亚洲色悠悠久久88| 操熟女91| 国产丝袜欧美在线视频| 俺去俺来也在线www| 婷婷视频网| 青青国产在线拍揄自揄拍| 豆1无夜无码| 国产熟女精品一区二区| 欧美日产国产在线成人第一区| 狼人久草| 久久e6只有精品| 抽插一区二区视频| 凹凸视频在线一区二区| 在线强奷到舒服的无码视频 | 日韩在线电影| 亚洲欧洲成人在线电影| 男女性感激情网站| 六月婷婷综合| 国厂麻豆77q4| 久久久成人免费av电影| 亚洲欧美黄| 男人天堂网站| 国产极品美女高潮无套在线观看| 超碰97爽| 精品白丝一区| 涩涩这里只有精品视频| 亚洲丁香花色| 97爱啪| 一级片视频啪啪| 九九亚洲视频| 久久国99999| 操国产高清| 亚洲AV秘无码一区..| 91丝袜美女国产| 午夜九九| 日本三级A片网站com| 操人妻丝袜高跟| 999久久芭蕾| 日本天天操| 夜夜爽妓女| 97香蕉网| 99婷婷| 亚洲日精品| 国产亚洲精品农村妇女| 69精品人人人人| 欧美宗合色| 午夜天堂精品久久久久91| oumeizonghese,www| 黄色免费网| 天天摸天天插天天日| 女生91网站| 五月综合久久| 狠狠爱夜夜| 一二三区在线| 超碰人人干天天射| 丁香六月啪| 久久偷偷色综合蜜桃| 亚一综合久久久久久久久久| 九九久久一区二区三区| 无码一区免费在线不卡| 亚洲av夫妻操穴网| 女生91网站| www.色婷婷.com| 日韩十八禁| 丁香六月啪啪| 97国产人人| 丰满人妻-区二区三区免费| 欧美激情在线观看视频| 亚洲天堂中文字| 欧美最大综合网| 亚卅熟女乱色| 欧美色老汉| 高清无码网址| 亚洲无码日韩电影| 精品夜夜澡人妻无码| 一起草视频在线| 久久久久9久久久久| 91一区二匹| 亚洲免费日韩在线一区二区| 中国熟女老妇仑乱一区二区三区| 麻豆婷婷成人一二三| 欧美黑人精品在线播放| 亚洲性少妇| 激情色色| 精品999999| 97视频620| 岛国大片在线观看网站入口| 亚洲色图欧美色图综合| 久久久久9| 97超碰磁| 骚女高跟AV在线| 97最新在线播放视频| 97视频网站| 久久99手机免费视频| 日韩AV一起草| 欧美翘臀视频网站一区二区三区| 色婷婷综合久久久久中文一区二区| 亚洲 小说 欧美 激情 另类| 欧美亚洲厕所精品偷拍91| 狠狠色噜噜狠狠狠狠狠色综合久久 | 蜜臀中文无码午夜| 男人的天堂啪啪| 青娱乐欧美激情一区二区| 激情人妻另类| 综合色图,成人综合网| 亚欧无码线免费观看视频| 青操影院| 亚洲日本韩国极品一区二区| 黄色AAAAA欧美| 亚洲国产综合图区中文字幕 | 久久尹人大香焦视| 欧美亚洲日韩16色| 97精品国产97久久久| 中文字幕精品一区欧美| 四虎精品一区二区| 欧美中字二区| 9/A片| 看黄片视频免费| 立川理惠被中出无码| 欧美日韩亚洲国产中文永久天天看| 97人人射| 国产精品欧美日韩久久| 清纯唯美亚洲综合| 国产超碰欧美| 一个人在线看的黄色电影网站| 伊人色综合网电影| 熟女熟妇一区二区三四区| 欧美熟妇操操视频| 99热这里只有精| 男人的天堂一区三区| 免费观看性欧美一级| 18精品一二区| 欧美激情亚洲情色| 亚洲性综合9| 午夜激情成人在线观看| 91成人久久| 蜜臀网址在线| 亚拍在线| 亚洲男人天堂网久久| 亚洲人妻av| ?亚洲伊人伊成久久人综合网| 国产综合色精品在线观看| 欧日韩一二三f区| 国产精品视频播放| 射欧美综合| 亚洲中文字幕噜噜噜久久久| 国产亚洲国产超碰| 无码精品蜜桃一区二区三区ww| 国产呦精品系列在线观看| 性91| 有码专区最新中文字幕有码| 亚洲熟女一区二区| 东京热男人的天堂网| 激情久久久| 91Chinese在线| 亚洲乱码国产乱码精网站| 天天色,天天干,天天干| 日本在线观看网址| 国产综合日韩伦理| 精品国产乱码久久久A| 春色综合免费| 97久久国产亚洲精品超碰热| 91网站18在线观看| 伦伦成年午夜免费视频| A片A5445444| AAAA级日本片免费视频| 97超碰人人操人人操| 97碰久久| 一起草三级AV电影在线观看 | 久久久久久久少妇| 厕所偷拍在线| 电影69乱码96| 精爱久久| 久久久一区二区三区四曲免费听| 97色色视频| 玖玖97综合| 国产日本熟女顶级一区二区三区视频| 日韩人妻精品久久久久| 九九Av| 成人AV素股で擦久久| 97资源欧美| 久久精品老司| 欧美天堂亚洲电影院一区在线播放| 亚洲欧美setu| 欧美淫乱视频| 啊啊啊免费视频| 精品国产Av无码久久久伦古装| 国产又粗又大硬免费色网视频| 人人操人人色网| 2020中文在线一区二区三区| 欧美真人抽搐一进一出gif| 午夜亚洲WWW湿好大| 无码av永久免费专区网站| 日本午夜操逼| 久久久蜜桃一区二区三区| 肥臀熟女福利视频一区二区| 裸模AV女优| 插B在线观看| 欲香欲色综合天天伊人| 欧美日韩大香蕉| 亚洲人妻中文高清| 国产男女无套视频免费观看| 欧美亚洲丝袜人妻制服99| 德国一二三不卡| 91女优在线观看| 久久久久国产精品久久久| 黄色操人| 97人人超| 欧美精品在线观看| 欧美综合传媒| 亚洲性爱成人| 黄色av片三级三级三级免费看| 黑操B| 欧美亚洲日韩16色| 麻豆 美女 丝袜 人妻 中文| 人妻丰满熟妇一区二区三| 久久久久久久久成人av解说| 91超碰人人| 久久亚州大香蕉| 精品九九九九| 综合色99| 婷婷色香| 2020中文字幕在线观看| 精品人体无圣光凹凸| 久久婷婷伊人| 秋霞福利网| 日本阿v天堂在线观看| 欧美亚洲| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 97日视频| 国产精品九九九| 丁香五月电影| 国产精品午夜精品| 强奸国产精品视频| 中文字幕在线观看网页| 亚洲欧美97| 天美麻花大全视频| 我爱搞逼综合网| 啪啪性爱免费视频| 依人大香蕉| 欧美激情黑人| 最新中文字幕精品在线| 亚洲不卡不卡中文字幕不卡| 夜夜高潮夜夜爽夜夜爱爱一区| 极品尤物自安慰| 人妻出轨一区二区三区| 久久久久久9| 欧美日韩操逼嗦吊| 丰满欧美放荡少妇在线| 嫩草影院在线观看精品| 天美一二三在线观看Av| 国产精品视频内谢女人| 水澄无码AV| 色九色久| 中文字幕jul-617人妻熟女| 欧美日韩黄色片一区二区三区四区人与兽做爱| 欧美综合色| 精品-91人妻子系列| 色网在线| 中文字幕精品日韩中文字幕| 大香蕉综合久久| 人妻性爱一区二区| 怡红院怡春院| 午夜视频黄| 9久久9综合| 韩国三级一线观看久| 日韩内射视频| 青春草莓视频在线观看网址| 熟妇最新先锋一二三区| 久射吧| 日本一本道A级黄色毛片试看60分钟| 欧美精品91| 亚洲精品国产精品成人| 亚州成人a∨| 欧美日韩午夜精品一区二区三区| 亚洲AV乱码专区国产噜噜亚洲| 人妻铁牛TV| 美女高潮视频91| 国产成人一级av88| 国产一区二区久久| 国产九九九九九九九九| 亚洲猛交| 操人无码| 狠狠操使劲操| 久久国产对白激情浪潮 | 熟女色图在线| 先锋影音av先锋一区| 狠狠2050在线观看| 人妻熟女av国产网站| 国产热av| 伊人久久88国产女| A级片日韩欧美国产欧美视频精选观看 | 91久久伊人婷婷青青草| 制度丝袜99| 超碰久超碰久| 人妻加勒比东京热| 99精品国产户外露出| 久久久久国产| 伊人久久综合精品欧美| 人妻天天爽| 可以免费观看的av| 亚州性色| 91色图片| 国产精品亚洲一区二区三区四区| 大香蕉日韩| 日韩一级二级在线| 一级黄色视频网| 91久| 丝袜狠狠草尤物人妻av91| 自拍偷拍 高清无码| 天天综合色图| 色欲人妻一区二区在线| 日本肉体xxxx裸交| 欧美gv在线观看| 亚洲熟妇综合久久久久久| 精品超碰中文在线| 国产AV久久野战精品| 久久亚洲一区女同性恋中文字幕| 亚洲欧美日韩有码| 欧美精品999| 婷婷伊人五月| 午夜啊啊| 天天摸夜夜操视频| 久久婷色| av网页一区二区三区| 伊人操| 久久久久久久久久精| 99热这里只有精品9| 国产精品96久久久久久| 亚州综合色图| 婷婷99狠狠躁天天躁| 欧美精品成人一区二区在线观看 | 俺去久久| 亚洲αv一区二区三区| 亚洲精品97| 久久人体一区二区| 人妻熟女一区二区三区在线| 艳美熟妇先锋一二三区| 亚洲高清无码AAA久久久精品| 黄人人操人人操| 96精品久久久久久久久久| 99热日| 久操在97| 日韩精品9999| 激情专区综合| 懂色AV蜜臀无码精品APP| 人妻夜夜爽天天爽麻豆三区网站| 日本精品性生活久久久| 水野优香在线观看| 日韩在线观看中文字幕视频| 日韩精品 视频一区二区| 日本操逼视频在线| 人妻少妇精品| 天天日夜干| 欧美成人精品一区二区男人蜜臀| 无码人妻精品一区二区三区九九| 黑人中出21连凳花野真衣| 97色婷婷| 丁香六月激情| 992这里有精品| 少妇超碰在线| 国产亚州精品美女久久久免费| 免费一级特黄特色大片在线观看看| 蜜乳视频网站| 校园春色综合网| 国产午夜在线观看| 色欲天天综合久久久无码网中文| 人妻熟女一区二区| 成人精品视频| 色眯眯av| 日韩人人精品| 国产精品午夜福利视频| 中文字幕在线2| 97超碰色中文字幕| 日韩天天本| 久久精品高清无码一区| 天天干1区2区在线| 老熟女综合网| 日日骚一区二区三区| 精品欧美乱码久| 小说区 图片区色 综合区|