亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Zephyr內(nèi)核時鐘詳解:節(jié)拍、周期計數(shù)與Tickless機(jī)制

Zephyr內(nèi)核時鐘詳解:節(jié)拍、周期計數(shù)與Tickless機(jī)制 Zephyr的時鐘體系初看起來無非就是“一個內(nèi)核節(jié)拍加幾個API”但真正去讀源碼、寫驅(qū)動、調(diào)調(diào)度延遲的時候才知道這一層?xùn)|西有多繞。尤其是“Kernel Clocks”這個標(biāo)題它指的并不是你在設(shè)備樹里配的那個外設(shè)總線時鐘而是系統(tǒng)級的時間底座——內(nèi)核拿它來做什么時間維護(hù)、調(diào)度器切換、超時管理。我最初也以為這東西不過是定時器封裝直到親手在三四個不同硬件上碰過壁才摸清里面的門道。這篇就把內(nèi)核時鐘講透適合已經(jīng)開始用Zephyr、想知道節(jié)拍怎么觸發(fā)、超時為什么有時候差幾個毫秒、以及如何準(zhǔn)確拿到運行周期的開發(fā)者。1 內(nèi)核時鐘的整體框架1.1 系統(tǒng)時鐘與硬件時鐘的區(qū)別Zephyr里“Clock”這個詞其實有兩個完全不同層次的含義。硬件時鐘指單片機(jī)內(nèi)部實實在在的定時器外設(shè)、計數(shù)器外設(shè)比如常見的32位定時器、系統(tǒng)節(jié)拍定時器甚至是低功耗定時器。它們由晶振或PLL驅(qū)動在真實世界里產(chǎn)生脈沖。內(nèi)核時鐘則是建立在硬件計數(shù)器之上的邏輯概念——內(nèi)核并不直接關(guān)心硬件的每一次脈沖而是通過驅(qū)動層維護(hù)一個“當(dāng)前運行到第幾個節(jié)拍”的整數(shù)這個整數(shù)是調(diào)度器安排任務(wù)、處理超時、記錄啟動時長的根據(jù)。我當(dāng)時理解不深就犯過大錯直接在應(yīng)用層調(diào)用驅(qū)動讀硬件計數(shù)器然后換算成毫秒再拿來跟k_uptime_get()返回的值作比較。兩者有時差幾個毫秒我一開始以為是bug最后才發(fā)現(xiàn)硬件計數(shù)器是底層真實時間內(nèi)核節(jié)拍是經(jīng)過驅(qū)動處理和累積的“邏輯時間”這兩者之間有一個同步過程和量化誤差不是隨隨便便能畫等號的。用一個生活類比硬件時鐘是心跳每一次跳動都真實存在內(nèi)核時鐘是日歷它基于心跳次數(shù)累加出“今天是幾號”但日歷不會因為心跳偶爾快慢而立刻體現(xiàn)它只在每個節(jié)拍對齊點更新。真正理解這一點后面很多看似奇怪的現(xiàn)象就容易解釋了。1.2 時鐘在調(diào)度和超時中的角色Zephyr調(diào)度器依賴內(nèi)核時鐘完成兩件核心事情任務(wù)切換時機(jī)和超時判定。以搶占式調(diào)度為例當(dāng)高優(yōu)先級線程就緒且低優(yōu)先級線程正在運行時調(diào)度器并不需要時鐘介入直接觸發(fā)切換。但如果是時間片輪轉(zhuǎn)那么每個線程能跑多久由節(jié)拍計數(shù)決定——時間片到了調(diào)度器才強(qiáng)占。超時機(jī)制是另一個大塊。所有等待操作比如信號量獲取、隊列接收、線程sleep都需要一個超時參數(shù)。內(nèi)核把這些超時請求掛在一個“超時隊列”里隊列按到期節(jié)拍數(shù)排序。當(dāng)內(nèi)核時鐘推進(jìn)到某個節(jié)拍對應(yīng)等待線程被喚醒并重新參與調(diào)度。這個過程看似簡單但設(shè)計上有幾個關(guān)鍵決策誰負(fù)責(zé)檢查超時是每個節(jié)拍中斷都掃描隊列還是等隊列頭部到期再處理Zephyr用的是后者配合tickless機(jī)制平時中斷極少超時精準(zhǔn)觸發(fā)。1.3 時鐘約定對多核場景的影響如果你用的是多核系統(tǒng)比如某些雙核芯片內(nèi)核時鐘的維護(hù)又不一樣了。Zephyr在SMP場景下會有“錨定核”的概念——通常由主核負(fù)責(zé)維護(hù)全局節(jié)拍計數(shù)次核發(fā)生超時后被喚醒但節(jié)拍累加操作只在主核的中斷上下文執(zhí)行。這么做是為了免去鎖競爭次核讀取節(jié)拍計數(shù)時不需要禁中斷但代價是次核上的超時判斷可能晚一個節(jié)拍。多核調(diào)試時鐘問題時最容易遇到的坑是你在次核上跑一個精度要求高的任務(wù)以為k_uptime_get()足夠準(zhǔn)結(jié)果發(fā)現(xiàn)存在持續(xù)的、穩(wěn)定的偏差。這不是內(nèi)核時鐘跑慢了而是由于跨核同步開銷次核看到的時間更新時機(jī)略滯后。類似的系統(tǒng)間差異需要結(jié)合具體的SoC架構(gòu)來調(diào)整調(diào)度策略而不是簡單改個頻率值就能解決。2 核心概念與關(guān)鍵API2.1 節(jié)拍、周期、超時的換算內(nèi)核時鐘里有三個關(guān)鍵單位周期、節(jié)拍、時間毫秒。周期指的是硬件計數(shù)器的一次計數(shù)它的頻率是CONFIG_SYS_CLOCK_HW_CYCLES_PER_SEC節(jié)拍是內(nèi)核累加的基礎(chǔ)單位每CONFIG_SYS_CLOCK_TICKS_PER_SEC個節(jié)拍對應(yīng)一秒也就是說每個節(jié)拍間隔是1000/ticks_per_sec毫秒毫秒就是應(yīng)用最常用的時間單位。換算關(guān)系看上去簡單ms ticks * 1000 / ticks_per_sec。但實際實現(xiàn)不是用浮點除法而是做了很多整數(shù)優(yōu)化和預(yù)計算。以常見的ticks_per_sec 100為例一個節(jié)拍是10毫秒。k_uptime_get()返回毫秒數(shù)內(nèi)核不是每毫秒更新一次而是每10毫秒整段更新所以這個函數(shù)的精度天然受限于節(jié)拍大小。如果你調(diào)用k_uptime_get()兩次間隔不到一個節(jié)拍結(jié)果可能完全一樣。真正高精度的“當(dāng)前時刻”由k_cycle_get_32()獲得它直接讀硬件周期計數(shù)器精度取決于計數(shù)器頻率。假設(shè)計數(shù)器跑在32MHz那就比10毫秒的節(jié)拍精細(xì)得多。我在日常開發(fā)里凡是對時間精度有要求的測量一律用周期計數(shù)不用節(jié)拍毫秒。2.2 必用API和它們的用途Zephyr為內(nèi)核時鐘提供了幾組API應(yīng)用層開發(fā)者最常用的有這么幾個k_uptime_get()返回內(nèi)核啟動以來的毫秒數(shù)32位約49天溢出k_uptime_get_32()只取32位性能和存儲更優(yōu)k_uptime_get_64()返回64位毫秒數(shù)適合長時間運行統(tǒng)計k_uptime_ticks()返回原始的節(jié)拍計數(shù)不換算成毫秒k_cycle_get_32()返回硬件周期計數(shù)用于精確時間戳k_cycle_get_64()底層支持64位計數(shù)器時可用能避免32位翻轉(zhuǎn)問題k_timeout_t是各種等待接口的超時參數(shù)類型支持毫秒、節(jié)拍、周期三種換算在設(shè)置超時時通常用K_MSEC(100)表示100毫秒也支持K_TICKS(10)、K_CYCLE(320000)等構(gòu)造。這些宏看著簡單背后其實做了溢出檢查和類型轉(zhuǎn)換。習(xí)慣用法是能描述業(yè)務(wù)時間用K_MSEC需要精確對齊節(jié)拍邊界用K_TICKS需要跟硬件事件精確同步則用K_CYCLE。2.3 24位/32位/64位計數(shù)器的差異不同SoC上的硬件計數(shù)器寬度差異很大這是很多人低估的坑。一種典型的低功耗計數(shù)器只有24位跑在32.768kHz外部晶振下每秒計數(shù)32768次那么24位計數(shù)器在約512秒后就會翻轉(zhuǎn)歸零。內(nèi)核需要處理這種翻轉(zhuǎn)驅(qū)動層要判斷“計數(shù)變小是因為翻轉(zhuǎn)還是真的回退”這涉及符號差值運算一旦驅(qū)動沒處理好時間會時不時出現(xiàn)跳變。32位計數(shù)器是最常見的比如以1MHz運行的計數(shù)器約71分鐘后翻轉(zhuǎn)一次。k_cycle_get_32()直接用無符號減法計算時間差因此即使發(fā)生翻轉(zhuǎn)差值依然正確。但如果你把兩次k_cycle_get_32()的結(jié)果直接相減而不轉(zhuǎn)成有符號差超過2的31次方就會出現(xiàn)符號錯誤所以業(yè)務(wù)上測量短間隔時問題不大測量長間隔就得小心。64位計數(shù)器是少數(shù)高端SoC或外擴(kuò)定時器才有的。Zephyr提供k_cycle_get_64()同時配置項CONFIG_TIMER_HAS_64BIT_CYCLE_COUNTER會告知內(nèi)核這個能力。64位計數(shù)器幾乎不可能翻轉(zhuǎn)用于長期性能統(tǒng)計非常友好唯一的缺點是部分場景下讀取高32位和低32位需要額外處理可能引入短暫的讀取不一致硬件級鎖存可以解決但軟件驅(qū)動得正確使用鎖存寄存器。下面是三種情況的對比計數(shù)器寬度典型頻率翻轉(zhuǎn)周期常見問題推薦用法24位32.768kHz約512秒頻繁翻轉(zhuǎn)、驅(qū)動需補(bǔ)償?shù)凸膯拘?、粗略計?shù)32位1MHz約71分鐘差值計算需注意符號常規(guī)性能測量、超時換算64位數(shù)十MHz數(shù)百年讀取一致性長期統(tǒng)計、精確UTC對表2.4 時間戳的實現(xiàn)細(xì)節(jié)實際拿到精確時間戳的方式并不是直接調(diào)用一個現(xiàn)成的“獲取當(dāng)前時間戳”函數(shù)而是利用周期計數(shù)器組合節(jié)拍。常見做法是先用k_uptime_ticks()拿到當(dāng)前節(jié)拍再用k_cycle_get_32()拿到當(dāng)前周期位置兩者結(jié)合得到一個精度遠(yuǎn)高于節(jié)拍的近似時間。Zephyr內(nèi)部某些驅(qū)動就是這么干的比如網(wǎng)絡(luò)子系統(tǒng)打時間戳、協(xié)議棧統(tǒng)計往返延遲。但這里有個坑節(jié)拍和周期計數(shù)不是一個時刻采樣的數(shù)據(jù)它們之間存在微小偏移。普通場景可以忽略但做確定性驗證時需要在同一個臨界區(qū)里讀取這兩個值甚至要在讀取周期計數(shù)前后各讀一次節(jié)拍判斷中間是否發(fā)生了節(jié)拍更新。我自己的做法是用一個短臨界區(qū)先取節(jié)拍再取周期然后看周期讀取后有沒有跨越節(jié)拍邊界若跨越則修正一拍的偏移。3 配置層面怎么展開3.1 關(guān)鍵Kconfig選項內(nèi)核時鐘的配置項看起來不多但每個都對系統(tǒng)行為有很大影響。重點說這么幾個CONFIG_SYS_CLOCK_TICKS_PER_SEC每秒多少個節(jié)拍默認(rèn)通常是100CONFIG_SYS_CLOCK_HW_CYCLES_PER_SEC底層硬件計數(shù)器的頻率這個值必須跟硬件匹配不匹配會導(dǎo)致?lián)Q算錯誤CONFIG_SYS_CLOCK_EXISTS指示系統(tǒng)時鐘是否存在一般默認(rèn)yCONFIG_TIMER_HAS_64BIT_CYCLE_COUNTER底層是否支持64位周期計數(shù)CONFIG_TICKLESS_KERNEL啟用tickless模式空閑時停止周期中斷CONFIG_TIMER_NO_WAIT低功耗場景下不等待定時器硬件就緒其中CONFIG_SYS_CLOCK_HW_CYCLES_PER_SEC最容易配錯。它不是一個指定“你想要多快”的選項而是一個描述“實際硬件跑多快”的事實選項。如果這個值設(shè)錯所有從周期到毫秒的換算都會偏差而內(nèi)核節(jié)拍卻可能看起來正常——因為節(jié)拍是靠定時器中斷驅(qū)動的跟這個值沒有直接關(guān)系。我踩過一次板子的外部晶振實際是32.768kHz但配置里寫成了32768分頻后內(nèi)核節(jié)拍是100表面上完全正常但周期換算出來的延遲數(shù)據(jù)普遍多了3%左右。排查很久才定位到是晶振實際頻率在溫度和電壓變化下略有偏移而配置寫死導(dǎo)致?lián)Q算比例失真。3.2 節(jié)拍率到底選多少節(jié)拍率直接決定系統(tǒng)的響應(yīng)粒度和開銷。CONFIG_SYS_CLOCK_TICKS_PER_SEC設(shè)為100就是每10毫秒中斷一次設(shè)為1000就是每1毫秒中斷一次。中斷越多處理器越頻繁喚醒功耗越高但調(diào)度響應(yīng)更快。實際項目里怎么選我的經(jīng)驗是分場景低功耗電池設(shè)備選50或100中斷少省電代價是毫秒級任務(wù)響應(yīng)會慢交互式設(shè)備選1000觸摸、按鍵響應(yīng)用戶感知不出來延遲高性能音頻或電機(jī)控制不只靠內(nèi)核節(jié)拍還要用周期計數(shù)的PWM或?qū)S枚〞r器內(nèi)核節(jié)拍只做輔助調(diào)度特別提醒不要為了“提高精度”而無限提高節(jié)拍率。當(dāng)節(jié)拍率超過某個閾值中斷上下文切換的耗時可能超過有效工作時間況且內(nèi)核節(jié)拍本來有量化誤差——即使節(jié)拍率1000也仍然只能精確到1毫秒的整數(shù)倍真正的亞毫秒精度必須靠周期計數(shù)器。3.3 與底層counter驅(qū)動協(xié)作內(nèi)核時鐘并不直接操作寄存器它調(diào)用一個定時器驅(qū)動接口。這個驅(qū)動通常注冊在drivers/timer/目錄下對應(yīng)SoC的硬件定時器。從接口看驅(qū)動需要提供timer_start、timer_stop、timer_read等函數(shù)并負(fù)責(zé)在硬件中斷里調(diào)用sys_clock_announce()來告知內(nèi)核有多少節(jié)拍經(jīng)過。底層還可以是Zephyr的計數(shù)器Counter設(shè)備通過counter API封裝一層比如counter_start、counter_get_value、counter_set_alarm。定時器驅(qū)動調(diào)用counter API時中斷由counter設(shè)備觸發(fā)counter的回調(diào)再轉(zhuǎn)到內(nèi)核時鐘層。多一層封裝增加靈活性但也意味著要確認(rèn)驅(qū)動和counter中斷優(yōu)先級配合是否恰當(dāng)。如果定時器中斷被更高優(yōu)先級中斷頻繁搶占節(jié)拍延遲會累積導(dǎo)致系統(tǒng)時間越來越偏。我在某塊SoC上遇到過默認(rèn)配置下一個串口DMA中斷優(yōu)先級比系統(tǒng)節(jié)拍高且DMA中斷處理耗時較長導(dǎo)致節(jié)拍中斷被延遲幾個毫秒。表面現(xiàn)象是任務(wù)調(diào)度偶爾抖動深挖發(fā)現(xiàn)是中斷優(yōu)先級沒設(shè)計好。解決方式很簡單將定時器中斷設(shè)成比DMA中斷更高的優(yōu)先級或者將DMA中斷處理拆成短臨界區(qū)加底半部。3.4 設(shè)備樹與時鐘頻率的關(guān)系內(nèi)核時鐘與設(shè)備樹里的時鐘頻率設(shè)置也有關(guān)聯(lián)尤其是在SoC內(nèi)部定時器外設(shè)的時鐘源可能由某個總線時鐘分頻而來。設(shè)備樹里通常只指定時鐘驅(qū)動和時鐘頻率而最終喂給定時器的實際頻率由硬件時鐘控制驅(qū)動計算后配置。如果設(shè)備樹里標(biāo)注的總線頻率和真實PLL配置不一致定時器實際計數(shù)頻率就和你預(yù)想的不同。做硬件抽象時別在應(yīng)用代碼里寫死定時器頻率一定要通過DEVICE_DT_GET和對應(yīng)的clock_control_get_rate或者直接從設(shè)備樹屬性拿頻率值再換算成周期。否則換個板子、換個PLL配置所有時間換算都錯。4 實操驅(qū)動和超時實現(xiàn)4.1 從定時器驅(qū)動到內(nèi)核的對接如果自己寫一個定時器驅(qū)動對接內(nèi)核時鐘的流程可以這樣拆解第一步驅(qū)動初始化時配置硬件計數(shù)器頻率和中斷然后調(diào)用sys_clock_set_phase()建立一個初始相位對齊。第二步硬件中斷觸發(fā)后讀取當(dāng)前計數(shù)器的值計算距離上一次中斷經(jīng)過了多少個計數(shù)再換算成節(jié)拍數(shù)調(diào)用sys_clock_announce(ticks)。如果啟用tickless驅(qū)動還應(yīng)支持動態(tài)設(shè)置下一個報警點而不是固定周期性中斷。第三步驅(qū)動實現(xiàn)k_cycle_get_32()對應(yīng)的周期讀取函數(shù)返回當(dāng)前硬件計數(shù)值。第四步驅(qū)動需要處理暫停、恢復(fù)和低功耗切換保證掛起期間丟失的節(jié)拍在恢復(fù)后補(bǔ)上。核心代碼如下#include zephyr/kernel.h #include zephyr/drivers/timer/system_timer.h #include zephyr/sys_clock.h #define HW_FREQ CONFIG_SYS_CLOCK_HW_CYCLES_PER_SEC #define TICK_FREQ CONFIG_SYS_CLOCK_TICKS_PER_SEC static uint32_t last_count; void timer_isr(void *arg) { uint32_t now timer_hw_read_count(); uint32_t elapsed now - last_count; uint64_t ticks (elapsed * TICK_FREQ) / HW_FREQ; last_count now; sys_clock_announce((uint32_t)ticks); } uint32_t z_timer_cycle_get_32(void) { return timer_hw_read_count(); } void z_timer_init(void) { last_count timer_hw_read_count(); timer_hw_set_irq_callback(timer_isr, NULL); timer_hw_start(); sys_clock_set_phase(0); }這個例子里關(guān)鍵的坑是elapsed的計算——直接用無符號減法天然處理了計數(shù)器翻轉(zhuǎn)。但如果計數(shù)器寬度不是32位比如24位就要在每次讀取后做掩碼操作否則差值可能巨大。4.2 tickless模式與單次報警機(jī)制傳統(tǒng)內(nèi)核每節(jié)拍喚醒一次系統(tǒng)空閑時也在白白耗電。tickless內(nèi)核在空閑時關(guān)閉周期性中斷只在下一個已知超時點設(shè)置單次報警。這個機(jī)制能大幅降低功耗但也引入兩個需要注意的問題。第一個問題是“錯過的節(jié)拍”。系統(tǒng)從空閑中醒來時實際經(jīng)過的時間可能比預(yù)定報警點多出幾個節(jié)拍驅(qū)動必須在中斷里算出“實際經(jīng)過了多少節(jié)拍”調(diào)用一次sys_clock_announce()來彌補(bǔ)。第二個問題是“精度漂移”報警點設(shè)定用的是硬件周期換算成節(jié)拍時會有整除余數(shù)這些余數(shù)如果一直忽略長時間跑下來時間會越來越偏。Zephyr底層的sys_clock_set_phase()和剩余周期補(bǔ)償機(jī)制就是為處理這個誤差而存在的。以低功耗系統(tǒng)的實際表現(xiàn)為例某個項目里設(shè)備大部分時間處于睡眠偶爾醒來處理事件。如果報警點補(bǔ)償做得好k_uptime_get()長期誤差能控制在幾十毫秒如果驅(qū)動只是簡單地丟棄余數(shù)跑一天可能偏出一兩分鐘。4.3 應(yīng)用層的超時和定時器在內(nèi)核時鐘之上應(yīng)用最常用的是k_timer。它的接口非常直觀static void my_timeout_handler(struct k_timer *timer) { printk(timer expired, current uptime: %lld ms\n, k_uptime_get_64()); } void app_main(void) { struct k_timer my_timer; k_timer_init(my_timer, my_timeout_handler, NULL); k_timer_start(my_timer, K_MSEC(500), K_SECONDS(1)); }這里K_MSEC(500)是首次超時時間K_SECONDS(1)是后續(xù)周期。重點說一下超時參數(shù)的實際含義K_MSEC(500)在內(nèi)部會換算成節(jié)拍數(shù)由于節(jié)拍率可能是100那么500毫秒正好是50個節(jié)拍沒有量化損失但如果傳K_MSEC(501)換算結(jié)果可能是50或51個節(jié)拍取決于向上還是向下取整。需要精確控制的場景直接傳K_TICKS(50)最穩(wěn)妥。k_timer_start會更新底層報警點。如果你頻繁啟停一個周期很短的定時器注意底層硬件是否支持不斷重新編程下一個報警點。某些計數(shù)器硬件只能在當(dāng)前報警觸發(fā)后設(shè)置新值做不到“無縫更新”。這種情況下Zephyr會在驅(qū)動層做補(bǔ)償——先停掉舊報警再立刻設(shè)置新報警但這之間會損失極短時間窗口。對大多數(shù)業(yè)務(wù)來說無所謂但做精準(zhǔn)PWM或同步采樣就要考慮。4.4 測量內(nèi)核時鐘是否準(zhǔn)確判斷系統(tǒng)時間是否準(zhǔn)確我常用的辦法是在基準(zhǔn)GPIO上輸出秒脈沖用示波器或者外部高精度定時器對比。代碼層面直接讀k_uptime_get_64()的前后差值來驗證節(jié)拍推進(jìn)是否均勻。兩個方法結(jié)合能快速定位是驅(qū)動層計時錯誤還是應(yīng)用層換算錯誤。具體做法是啟動一個高優(yōu)先級線程死循環(huán)記錄k_uptime_get_64()和k_cycle_get_32()打印每次差值。如果節(jié)拍推進(jìn)均勻每次間隔應(yīng)該是嚴(yán)格的節(jié)拍間隔整數(shù)倍如果出現(xiàn)“偶爾多了一拍”或者“漏了一拍”問題基本出在中斷搶占或驅(qū)動補(bǔ)償邏輯。另外還有一個簡單方法利用k_uptime_get_64()和底層RTC時間做對比。睡十分鐘醒來后比較內(nèi)核節(jié)拍和RTC的差值如果偏差超過預(yù)期就去查驅(qū)動。RTC一般有自己的晶振精確度更高可以作為系統(tǒng)時間漂移的參照。這樣做有個前提內(nèi)核時鐘和RTC用的是同一個系統(tǒng)時間基準(zhǔn)Zephyr可能通過外部時間同步服務(wù)校準(zhǔn)需要確認(rèn)是否啟用了自動NTP類的同步機(jī)制。5 常見問題與排查技巧5.1 節(jié)拍精度和漂移最常見的現(xiàn)象是“系統(tǒng)時間比真實時間慢”或“快”排除硬件晶振本身誤差后要檢查幾點第一驅(qū)動里有沒有正確處理計數(shù)器翻轉(zhuǎn)。24位計數(shù)器頻繁翻符號運算稍不留神就會導(dǎo)致時間倒退一大截。第二中斷處理時是否讀取了正確的計數(shù)值。有些硬件定時器讀取會引入額外等待周期要確認(rèn)讀數(shù)沒有因為總線訪問延遲而失真。第三tickless模式下報警補(bǔ)償代碼有沒有真的執(zhí)行。有些驅(qū)動只做了周期性中斷的適配沒做單次報警補(bǔ)償表面能用實際時間越偏越離譜。我習(xí)慣在調(diào)試階段把CONFIG_TICKLESS_KERNEL臨時關(guān)掉用固定節(jié)拍中斷做對照。如果固定中斷模式下時間準(zhǔn)確開tickless后不準(zhǔn)就可以確定是報警補(bǔ)償邏輯問題而不是硬件計數(shù)器本身的問題。5.2 低功耗和暫停時鐘的影響進(jìn)入深度睡眠時很多SoC會直接停掉系統(tǒng)定時器時鐘或CPU時鐘。Zephyr的電源管理模塊會調(diào)用定時器驅(qū)動的暫停/恢復(fù)接口讓驅(qū)動記錄暫停前計數(shù)、暫停后重新對齊。如果驅(qū)動沒有實現(xiàn)這套邏輯睡眠喚醒后節(jié)拍計數(shù)會出現(xiàn)跳變或倒退直接表現(xiàn)為應(yīng)用層定時器全部錯亂。還有一類特殊場景CPU睡眠但定時器仍在跑或者反過來定時器停了但CPU還在跑。兩者都會造成內(nèi)核時間和真實時間的偏差。要確認(rèn)具體行為最直接的辦法是讀芯片手冊中關(guān)于定時器在低功耗模式下是否可用的描述在設(shè)備樹或驅(qū)動里根據(jù)這個行為做對應(yīng)處理。我見過一個板子默認(rèn)配置下CPU睡眠會連帶停掉系統(tǒng)定時器導(dǎo)致每次喚醒后k_uptime_get()像是“凍結(jié)”在睡眠前的時間業(yè)務(wù)上很多程序都受此影響。后來在配置里選了一個獨立的低頻時鐘源作為定時器時鐘問題才解決。5.3 幾個排查手段排查時鐘問題我先說排查順序再用表格整理。排查順序是先確認(rèn)硬件計數(shù)器的頻率讀數(shù)是否正確再確認(rèn)中斷是否按時觸發(fā)再確認(rèn)sys_clock_announce()傳入的節(jié)拍數(shù)是否準(zhǔn)確最后才懷疑應(yīng)用層換算。現(xiàn)象可能原因驗證手段時間均勻偏慢硬件頻率配置偏高對比RTC一段時間誤差時間均勻偏快硬件頻率配置偏低或丟失計數(shù)對比RTC或用秒脈沖抓GPIO偶發(fā)跳變計數(shù)器翻轉(zhuǎn)處理錯誤長時間跑打印每次差值睡眠喚醒后時間異常低功耗時鐘暫停/恢復(fù)未處理開關(guān)睡眠測試對比喚醒后時間中斷頻繁抖動中斷優(yōu)先級搶占定時器中斷優(yōu)先級調(diào)整后對比調(diào)試時最實用的一個手段是啟用內(nèi)核的時鐘統(tǒng)計功能通過查看sys_clock_elapsed()或相關(guān)宏來確認(rèn)當(dāng)前節(jié)拍數(shù)。另外直接閱讀arch/arch/core/下與時鐘相關(guān)的匯編代碼也有幫助不過那是比較內(nèi)核底層的活了一般在查中斷路徑時會用到。5.4 經(jīng)驗中斷上下文的節(jié)拍處理我在寫驅(qū)動時最深刻的經(jīng)驗是不要在高于定時器中斷優(yōu)先級的中斷里調(diào)用任何可能觸發(fā)調(diào)度的API。內(nèi)核時鐘的推進(jìn)依賴定時器中斷里調(diào)用sys_clock_announce()如果這個中斷被更高優(yōu)先級中斷長期擋住調(diào)度器無法及時處理超時系統(tǒng)的實時性指標(biāo)會瞬間崩壞。合理的做法是把高優(yōu)先級中斷里要做的事壓縮到極致只讀取必要寄存器、置標(biāo)志或往一個無鎖隊列里丟數(shù)據(jù)然后立刻退出。真正的時間敏感任務(wù)交給普通優(yōu)先級線程去處理。很多實時性問題的根子就在這里而不是調(diào)度器算法本身。另一個經(jīng)驗是精確測量中斷響應(yīng)時間這類業(yè)務(wù)不要依賴k_uptime_get()更不要依賴k_cycle_get_32()的差值去推算中斷發(fā)生點因為中斷入口本身和調(diào)用讀取API之間也有延遲。精確做法是讓中斷在入口處立即讀周期計數(shù)器并記錄到專用變量之后再在業(yè)務(wù)線程里讀取這個專用變量。這一下差別可能就有幾十到上百個周期在高速系統(tǒng)里已經(jīng)非??捎^了。6 結(jié)合項目經(jīng)驗談幾個細(xì)節(jié)6.1 一個實際的時基設(shè)計例子我參與過一個某設(shè)備的同步控制項目要求所有節(jié)點基于同一個時間基準(zhǔn)協(xié)同動作。我們沒用內(nèi)核默認(rèn)的節(jié)拍作為控制基準(zhǔn)而是引入了一個獨立的高精度計數(shù)器外設(shè)用它做周期計數(shù)通過周期中斷驅(qū)動控制循環(huán)。內(nèi)核時鐘依然存在但只用來做調(diào)度和管理面的超時。這樣設(shè)計的好處是隔離控制循環(huán)的時間基準(zhǔn)完全不受內(nèi)核調(diào)度延遲影響而管理面的超時又能方便地利用內(nèi)核定時器。壞處是必須自己維護(hù)兩個時間源的同步。我們最后在驅(qū)動里實現(xiàn)了一個校準(zhǔn)函數(shù)每秒鐘讀取內(nèi)核周期計數(shù)和外部計數(shù)器的計數(shù)做一次差值校正。這個方案跑了一段時間時間一致性能控制在微秒級而單靠內(nèi)核節(jié)拍絕對做不到。這種場景也說明Zephyr的“Kernel Clocks”并沒有覆蓋所有時間需求。做高精度控制或測量時你要深入理解它能給什么以及它和底層硬件的邊界在哪里。這不是Zephyr的不足而是嵌入式系統(tǒng)設(shè)計里本來就存在的層次問題。6.2 時間片輪轉(zhuǎn)的時間片與節(jié)拍關(guān)系用時間片輪轉(zhuǎn)調(diào)度時時間片長度通常用CONFIG_TIMESLICE_SIZE_MS或CONFIG_TIMESLICE_PRIORITY配置。這里要注意時間片是用節(jié)拍數(shù)實現(xiàn)的不是用周期計數(shù)實現(xiàn)的。如果你設(shè)置時間片為5毫秒而節(jié)拍率是100那么實際生效的時間片可能是10毫秒或5毫秒取決于內(nèi)核節(jié)拍邊界的對齊。所以讓時間片長度等于節(jié)拍間隔的整數(shù)倍是最穩(wěn)妥的。我曾經(jīng)把時間片設(shè)成7毫秒期望幾種線程均勻輪流執(zhí)行結(jié)果實際表現(xiàn)出現(xiàn)明顯不均。后來查代碼發(fā)現(xiàn)時間片到期判定是基于“節(jié)拍計數(shù)是否跨越了超時點”7毫秒并不是10毫秒整數(shù)倍導(dǎo)致每個線程的時間片長度在一個和兩個節(jié)拍之間來回波動。改成10毫秒后一切正常。6.3 關(guān)于相位校準(zhǔn)和紀(jì)元同步如果系統(tǒng)需要和其他設(shè)備保持時間同步比如通過無線電對時或者分布式節(jié)點同步那么內(nèi)核時鐘需要支持“調(diào)整”而不是“跳變”。Zephyr的sys_clock_set_phase()允許驅(qū)動校準(zhǔn)周期與節(jié)拍之間的比例而k_uptime_get_64()返回的是單調(diào)遞增時間外部同步后可以疊加一個偏移量實現(xiàn)邏輯時間校正避免時間倒退導(dǎo)致各種定時器混亂。工程實現(xiàn)上我一般不會直接修改內(nèi)核節(jié)拍計數(shù)而是把外部同步的時間源封裝成一個獨立模塊內(nèi)部維護(hù)一個偏差值在讀取時加上去。這樣內(nèi)核時鐘仍然保持單調(diào)外部業(yè)務(wù)時間能夠跟隨標(biāo)準(zhǔn)時間源。如果強(qiáng)行改內(nèi)核計數(shù)所有正在等待的超時隊列都可能產(chǎn)生連鎖反應(yīng)輕則跑飛重則死鎖。這是我的血淚教訓(xùn)。6.4 如何閱讀定時器驅(qū)動源碼想深挖某個平臺的時鐘實現(xiàn)閱讀源碼路徑很有講究。定時器驅(qū)動一般在drivers/timer/下面文件名與具體SoC相關(guān)。找到驅(qū)動后優(yōu)先看三個部分初始化函數(shù)如何處理中斷優(yōu)先級和頻率配置周期讀取函數(shù)z_timer_cycle_get_32有沒有做掩碼或鎖存sys_clock_announce()的調(diào)用路徑是否涉及多核上的全局變量同步。讀懂這三個部分基本就能判斷這個平臺補(bǔ)了哪些坑、還有哪些隱患。比如我看到過某個驅(qū)動的sys_clock_announce()是在中斷里加鎖的這在單核沒問題但在SMP下會導(dǎo)致次核在等待鎖的時候錯過后續(xù)中斷。這種隱患通常不會在功能測試?yán)锉┞兜谥刎?fù)載和高頻率下會周期性造成延遲尖刺。7 從實戰(zhàn)角度聊聊我對內(nèi)核時鐘的使用建議7.1 默認(rèn)配置能用但別迷信Zephyr項目用默認(rèn)配置跑起來90%的場景不會出大問題??烧嬲霎a(chǎn)品默認(rèn)的節(jié)拍率、時鐘源選擇、中斷優(yōu)先級配置往往不是最優(yōu)解。我的建議是產(chǎn)品定義階段就要明確時間精度要求然后倒推需要什么樣的硬件計數(shù)器、多大頻率、是否支持tickless、低功耗模式下時鐘是否保持。如果這個環(huán)節(jié)沒做后面出現(xiàn)時間問題再優(yōu)化往往要動驅(qū)動層或者硬件選型代價比一開始做設(shè)計大得多。7.2 周期計數(shù)是嵌入式時間測量的一等公民內(nèi)核節(jié)拍專注調(diào)度和超時周期計數(shù)則負(fù)責(zé)“真實時間”。一個熟練的嵌入式開發(fā)者應(yīng)該在所有涉及性能測量、精確同步、事件標(biāo)記的場景里習(xí)慣性使用k_cycle_get_32()或者底層周期計數(shù)API而不是毫秒級的k_uptime_get()。周期計數(shù)和節(jié)拍之間的轉(zhuǎn)換用k_ms_to_cyc_floor32()、k_cyc_to_ms_floor64()這類函數(shù)處理不要自己寫除法因為這些函數(shù)會處理溢出和取整規(guī)則。自己寫的換算代碼在邊界條件下很容易因為溢出或舍入方向不符合預(yù)期而出錯。7.3 內(nèi)核時鐘的擴(kuò)展方向后續(xù)做系統(tǒng)時你可以在這個基礎(chǔ)上擴(kuò)展的內(nèi)容包括周期計數(shù)器與外部時間源的對齊校準(zhǔn)、跨核共享時鐘的同步優(yōu)化、基于多個計數(shù)器的無縫切換機(jī)制。這些都是內(nèi)核時鐘概念的延伸Zephyr本身提供了一些基礎(chǔ)設(shè)施但具體策略需要根據(jù)產(chǎn)品需求定制。理解了最底層的節(jié)拍、周期、超時三者如何聯(lián)動這些問題自然就有了入手點。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
国产h小视频在线观看免费| JuliaAnn丝袜熟女系列| 久久97| 日欧操屄视频| 欧美亚洲色的图| 日日噜噜夜夜狠狠视频无| 夜夜操av亚洲一区二区| 91在线免费精品视频| 久久久国产三级黄色片| 天操天操夜操夜月操月年年操操| 熟女色综合久久| 午夜福利在线合集| 中文字幕丝袜国产第一页不卡| 少妇同性| 一类av片在线看| 60秒试看最爽10分钟网站| 国内偷拍精品一区二区| 后入人妻一区| 国产尤物AV尤物在线观看不卡| 一二三四视频在线社区中文字幕| 交换娇妻呻吟声不停中文字幕| 最新亚洲风情电影| 欧洲综合无码| 老熟乱一区二区三区四区| av天堂手机版追回| 九热久| 九月丁香婷婷| 国产v亚洲v日韩v欧美v片另类| 欧美大香蕉卡久久| 欧美黄色大片在线观看| 超碰在97| 久久国产三区| 精品无码久久久久久国产浪潮| 欧美久久婷婷| 国产AV毛片| 亚洲午夜蜜臀| 国产有码一区| 乱伦3P视频| 91美| 国产成人AV麻豆| 亚洲欧洲无码bt精品合集| 久啪| 五月天婷婷欧美三区| av中亚| 精品射1999| 情趣丝袜无码操逼视频| 亚洲交换| 啊啊啊 在线观看| 在线播放成人高清免费视频| 激情欧美97| 亚洲国产尤物yw在线观看| 国产精品在线一区二区| 六月婷婷五月丁香| 天天躁日日躁AAAAXXXX国产| 欧美精品欧美精品系列| 口爆综合网| 亚洲欧洲日本精品中文a∨| 99热日| 五月婷婷AV| 久久精品熟女亚洲AV麻豆软件| 色偷偷色偷偷欧美日韩| 狠狠操综合| 国产高清成人免费视频| 四虎在线观看网站| 91N欧美| 可以免费看黄片的视频| 91丝袜| 天天色怡春院| 亚洲色图激情小说| 亚洲国产麻豆一区二区三区| 国产 日韩,欧美 自拍| 亚洲欧洲第二视频在线观看色图| 婷婷五月天小说| 丁香九月 婷婷| 综合色区偷拍| 欧美 综合 亚洲| 又黄又爽在线观看视频| 免费的黄片wwwwww| 国产A v无码专区| 熟妇女伦乱视频| 天天拍天| 人妻酒店出差被中出免费在线播放| 亚洲午夜av| 欧美十八禁视频| 欧美激情在线观看视频| 亚洲黄色| 男人的天堂Va| 午夜精品人妻二区三区| 99啪啪| 综合网,亚洲,欧美| 夜夜中出国产| 噜噜在线| 色欧美天天| 欧美成人一区二区三区在线播放 | 岛国黄片网站| 香蕉视频欧美一卡二卡| 9久9久| 1024手机看片欧美日韩| oumeizonghese,www| 婷婷五月天激情网| 久久手机好看网站| 射 色综合| 丁香五月婷婷啪啪| 色五月婷婷久久| 九月丁香综合网| 国产男女边吃边摸视频网站| 久久黄色性爱视频| 性久久| 人人操 欧美| 久久大黄片| 国产97视频| 丰满少妇精品一区二区| 欧美,亚洲,日韩,v,天堂,手机在线观看 | 久久成人东京热人妻| 很很很很操| 神马久久久久久久久久久久| 蜜臀AV成人精品蜜臀AV久久| 久久97资源 网| 欧美日日夜夜| 岛国人妻少妇av在线观看| 成人女人国产| 欧美日韩亚洲电影| 四虎影视国产精品| 久久久精选| 国产又粗又长的视频| 欧美一区二区三熟女剧情| 动漫av中文| 黑人精品久久97| 蜜臀久久精品久久久久视频| 四虎影视永久在线观看精品免费网站 | 欧美日韩免费性爱| 播播亚洲小说亚洲| 色婷婷99| 色欲人妻一区二区在线| 东北操逼| 蜜臀中文无码午夜| 国产伦精品| 蜜臀久久99精品久久久久久无删减 | 亚欧美色图| 一区超碰一区| 国产精品夜夜| 日婷婷| 国产精品自拍xxxx| 中文字幕在线高清男人的天堂| 97国产成人精品免费视频| 国内三级自拍小视频在线观看| 大香蕉五月天婷婷| 欧美日韩国产中文精品字幕自在自线, | 天堂男人网| 亚洲色图一区二区三区| 伊人五月天婷婷| 国产亚洲女v在线观看| 国产精品无码在线| 99re69| 欧美美女后入| 久久久久白虎| 高潮毛片无遮挡高清免费| 久草网站免费在线观看| 99久久网站| 欧美少妇大量自拍视频在线观看| 另类图片亚洲加勒比另类图片亚洲加勒比另类图片亚洲加勒比 | 加勒比日本在线| 97亚洲国产| 亚洲97在线| 亚洲国产成人7777| 日韩性爱小视频在线观看| 五月天色图影视| 少妇被玩视频二三区| 欧美久久人妻少妇一区二区| 人人妻人人玩人人澡人人爽| 国产精品嫩草久久久久| 国产乱码久久| 男人成人黄色视频在线观看免费下载| 色香天天| 99精品久久久久久久婷婷| 亚洲男人的天堂亚洲| 日本久久综合| 国产9 9在线 | 亚洲| 欧亚性爱啪啪| 欧美天天谢综合网| 大鸡巴久久| 三级激情网站| 中文字幕一区 二 区 三 四 五 区日 日 骚 | 成人无码在线视频网站| 久操大香蕉手机视频在线看| 亚洲青色欧美| 中文字幕av亚洲精品| 久久无码电影| 午夜啊啊啊| 夜夜欧美 | 国产在线视频午夜精华在| 久久久久久久国产视频| 99r九九| 韩日欧亚a级| 午夜偷拍久久熟女| 欧美暴力猛交| 色哟哟 日韩精品| 五月婷婷久久综合| 精品9999| 亚洲av综合色区无码一| 日韩欧美偷拍美女视频| AV和黑人在线播放| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 上海一级黄片| 亚洲少妇激情视频| 后入美女国产| 国产精品另类| 久久婷婷五月天| chaopen97久久| 免费在线观看国内色片网站网址| 人妻少妇色综合| 亚洲一级黄色毛片| 97爱爱影院| 久久久久久久9| www.超碰在线| 日曰骚久久精品| 屁屁影院一区二区三区国产| 足交视频老司机| 岛国大片国产| 欧美91精彩| 翔田千里一区二区三区奶水| 97在线欧洲| 亚洲性爱成人| 日韩美女久久一区二区三区| 九九九九精品九九九九| www.狠狠干.coom| 后入国产| 超碰人人妻| 欧美激情内射| 婷婷五月天补不补| 99re这里只有精品9| 五月婷婷激情综合| 91精品国产综合久久久蜜臀酒店| 情侣开房子拍 日韩无码 女的很漂亮| 国产久久久久久| 久久天堂婷婷网| 久久久久久久| 一区,二区,三区网站| 欧美性xxxxx狂欢| 97天天爽| 91人精品妻入口| 91精品人妻一区二区-全集完整版免费正片国语-B02AV | 岛国毛片在线观看免费| 98超碰日本| 久久这里只精品99re66图| 蜜臀久久99精品久久久久电影| 伊人色综合网电影| 亚洲狠| 97操97色| 18禁免费视频| 精品免费囯产一区二区三区 | 青青国产精品在线| av无线看| 欧美图片色五月天| 人人操天天爽| 久久久精品视频免费观看| 欧美日韩97在线| 九九aV| 熟妇一区二区| 免费看污网站| 玖玖爱免费观看视频| 日韩AV噜噜噜一区二区三区四区| www鬼畜国产男人的天堂| 襙一襙| 久久噜| 亚洲精品视频在线播放| 懂色中文一区二区三区| 呻吟 欧美 日本 中出| 激情五月综合网| 美女天天干| 四虎在线免费视频| 91久久精品国产| 日本日逼高清| 欧美少妇人妻| 视频二区熟女人妻| 330Dv国产女人终合视频极品人与兽| AV网站高清无码在线观看| 91欧美情色| 男人的天堂激情| 黑人嘿嘿嘿超爽免费视频| 欧美色图电影| 日韩精品大香蕉伊人在线| 亚洲九区| 人人操人人插人人摸人人干| 91在线免费精品视频| 操逼逼一区视频| 国产精品电| 嗯嗯嗯嗯啊啊啊好紧好大| 黄片com.| 亚洲 中文字幕 精品| 欧洲自拍第一页| 亚洲熟女国产综合另类| 日本亚洲熟女视频| 91人妻最真实刺激绿帽| 欧美 亚洲精品首页| 欧美日动态视频| 麻豆国产尤物AV| 色黄色美女大长腿午夜视频| 淫荡网址| 91情色在线| 伊人久久蜜月| 性色高清在线| 蜜桃久久一区二区三区| 欧美中出1| 亚洲色图尤物视频| 加勒比伊人| 97国产精选| 97精品综合久久网| 亚洲欧洲色情高清| 丰满少妇人妻久久久久久| 色婷婷aV一区二区三区麻豆综合| 欧美成人精品欧美一级乱黄一区二…| 午夜精品人妻二区三区| 好吊爽好吊爽在线视频,中文字幕精品一区二区日本,国产良妇出轨视频在线观看, | 久久久久久久久久久免费精品| 加勒比伊人| 9999久久久| 99无码| 人妻少妇久久中文字幕一区二区 麻豆 | 久久精品亚洲婷婷| 国产精品熟女AV中文字幕在线播放| 欧美激情综合色综合啪啪五月| 亚洲日本韩国在线| 婷婷激情五月| 男人的天堂2018.| 嗯……啊…嗯嗯…啊…好舒服| 18禁久久| 亚洲精品九九九九九九| 东北熟女91| 97超碰人人操人人操| 五月天久久综合网| 久久国产热视频97电影| 国内精品伊人久久久久影院会| 青青草天天亲夜夜操网| 亚欧精品久久久久久久久久久| 黄总AV色图| 久久久久久少妇| 亚洲欧美97| 亚洲熟女精品| 中文字幕 码 自拍 视频 区| AV高清一区| 欧美综合色图片| 无遮挡又黄又刺激的视频| 免费在线黄片视频| 骚货人妻偷情自拍在线视频| 操少妞在线视频| 99re免费| 狼人久草| 999熟女精品| 懂色av一区二区三区天美传媒| 天堂а√在线最新版在线| 色婷五月| 久久久久久久久9| 99e久久国产精品| 超碰人人乐97| 97这里有精品| 日韩在线观看中文字幕视频| 91成人社区| 亚洲人体视频在线观看| 碰碰在线视频| 久久 精品| 欧亚免费视频| 搞中出久久| 国产在线76页| 久热这里只有精品9| 亚洲精品xxx| 亚洲色图加勒比| 97超碰香蕉| 伊人成人中文字幕久久网| 国产后入清纯| 久久亚洲精品成人av| 伊人一区二区三区| 欧美真人抽搐一进一出gif| 日本三级黄页| 亚洲日韩天堂| 成人综合网 欧美| 天天看夜夜看日日干| 精品超碰中文在线| 日本乱人伦片中文三区| 91啪9色| 黄色AV免费| 天天弄欧美| 国产丝袜欧美在线视频| av资源在线播放天堂| 丝袜美腿诱惑亚洲欧美视频在线观看 | 国产丝袜啪啪| 亚洲三区视频| 99色日| 国产亚洲精品美女久久久久久2021| 青青草在线视频人人想人人上| 91丝袜在线观看| 九九精品美女高溯喷水 | 玖玖爱一区在线| 色爱欲亚洲| 日韩兔费看黄片| 好爽,再快点啊哈嗯嗯嗯嗯| 国产狂喷潮在线精品| 啊啊啊水好多| 91狠狠色丁香婷婷综合久久精品| 国产主播福利| 超碰久久综合| 精品人妻二区三区| 中文字幕亚洲永久精品| 天天综合网在线观看| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 欧美熟女丝袜| 麻豆人妻精品一区二区| 欧美日韩不卡a片| 欧美自拍网| 天天看片麻豆| 一道本久久棕合爱| 亚洲国产一级精品毛一级精品看免费视频 | 久久老子无码午夜伦不卡| 色综合一本| 男人的天堂Va| 天美传媒av一区二区| 天天操女人| 综合激情婷婷| 日韩欧美俄罗斯A片| 中文?日韩?免费?精品| 安微少妇操BBB| 91高跟美女在线播放| 六月丁香五月婷婷| www.人人cao| 大香蕉www.超碰| 色色毛片| 2024黄色视频| 国产精品免费久久久久久久久久| 欧美自拍网| 伊人久久亚洲色欲综合网站 | 色阁阁AV综合网| 97高清啪啪| 一区二区三区精品黑丝白丝酒店对鸡 | 精品久久久久久AV无码| 黑人娇小av在线播放| 国产麻豆91欧美一区二区久久婷婷国产精品 | 精品日韩产品在线,日韩在线不卡视频,欧美日韩免费专区/久, | 超碰97COm中文| 91欧美www| 97操碰| 51一区二区三区| 人人妻人人爽人人精品| 日韩精品 欧美激情| 天堂性色| 熟女激情综合网| 日韩黄片视频试看| 亚洲成?V人片在线观看福利| 男男H黄动漫啪啪无遮挡网站| 成人三级片无码| 天堂种子在线www网资源| 九九热AV| 人妻在线臀日韩| 久操大香蕉超碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰 | 欧美中文字幕一区| 精品二999| 欧美丝袜中文字幕07在线| 欧美日韩中文字幕人妻| 亚洲无码一区成人免费午夜| 84YTCOM性无码| 欧美一级黄片视频在线| 欧美在线观看综合国产| 午夜精品久久久久久久男人的天堂| 青青国产精品在线| 嫩草 我啊~嗯~在线| 啊啊啊啊免费视频| 国产h片在线观看视频| 69精品人人人人| 成人无码专区精品视频| 国内外激情在线| 成人午夜高潮av猛片| 丰满的三级少妇欧美久久久| 久久伊人网视频一区二区三区| 玖玖爱综合网| 成人无码电影在线观看网| 亚洲欧美精品福利在线| 啊啊啊啊二区好大| 极品色| 99re国产中文字幕| 亚洲综合一| 国产精品分类在线观看| 色99久草| 国产精品嫩草影院午夜两性 | 黄色成人网久久久久久| 发朗少妇买婬全视频中文| 中文幕97| 牛牛操视频逼| 综合97亚洲| 精品性爱无码在线播放| 极品极品色影院| 精品人妻一区春色| www.zbzhongsen.com| 嫩呦国产一区二区三区AV| 丁香五月影院| 夜夜国自区| A 在线网址| 99精品丰满人妻无| 性91| 欧美日本中字另类在线| 日本一级真人黄色性爱视频| 亚洲成人在线播放| 久热网| 国产三区免费在线观看| 人妻熟女一区二区| 日韩一区二区高清在线观看的| 天天综合网久久ww| 日语五十路和六十路亚洲国产精品| 婷婷五月天影院| 国产欧美另类久久久精品课程| 国产福利av精彩对白| 久久噜| 韩国一级婬片A片AAAAA| 欧美日韩制服| 欧美男女午夜啪啪| 国产无马在线| 亚洲国产精品久久久久婷婷老年| 欧美视频一区二区在线| 91 亚欧| 欧美第一页性| 人人操人人操人人人操| 国产精品动态一区二区三区四四| 日本操BAV| 欧美美女视频| 国产超碰在线一区| 色乱二区| 亚洲av成人精品一区| 欧美人妻色| 视频分类 国内精品| 91亚洲影视| 蜜臀AV成人精品蜜臀| 中文字幕精品资源在线| 97chaopengongkai| renqi久久久久久久久久久久| 黄色AV免费| 玖玖超碰熟| 欧美制服另类丝袜| 国产成人手机视频激情| 欧美黑人熟妇精品91| 夜夜人妻爽| www.天天干| 丰满少妇乱子伦精品无| 欧美人黑A片无码免视费| 熟女高潮合集-永久久久-成人AV| 狠狠操天天干| 粉嫩在线一区二区懂色| 日日干天天干夜夜爽| 欧美性高潮在线| www.AV有限公司一区| 成年女人一区| 丁香成人五月天| 不卡一区二区日本视频| 一级岛国大片| 色综合一区二区三区| 在线色资源| 97se综合| 中文字幕人乱码中文字的预防方法| 少妇二级| 99热在线播放| 91日本在线观看| 中国探花熟女| 不卡一区二区日本视频| 久久久久久久国产视频| 午夜视频好爽啊| 370p日韩欧美亚洲精品| 思思热在线视频在线| 成人怡红院| 夜夜躁狠狠躁日日躁av| 91性网| 大香蕉中文网| 日本大香蕉综合网| 欧美亚洲高清| 亚洲熟伦熟妇AV无码春色| 国产精品无套内谢| 高清有码一区二区| 干我久操| 韩国黄片aaaa| 国产精品久久久久综合| 偷窥自拍亚洲天堂网爆| 亚洲第一综合| 96AV精品| 97 超碰 人人做 人人爱| 蜜臀AV成人精品蜜臀| 久久鲁夜| 久久精品无码不卡| 精品传媒在线一区| 91福利网在线观看| 亚洲天堂人妻熟妇视频| 91精品人妻电影| 婷婷综合在线| 日本少妇va7777| jiujiujiujingpin| 熟女熟妇一区二区三区视频| 欧美综合色,www| 精品视频在线观看精品| 乱伦av.com| 欧美有码激情视频一区二区三区| 欧美久久婷| 日本精品一区二区三| 风韵犹存大大大大香蕉 | 99999国产精品| 日婷婷| 美国一区二区免费视频| 五月丁香亭亭| 97精品国产手机| 欧美成97爱| 伦激情人妻另类人妻| 亚洲高清无码AAA久久久精品| 日韩亚洲美州欧洲综三区一品在线| 成人久久精品| 一区二区三| 免费看一级a性色生活片久久无| 蜜桃精品一区二区三区ww| 日日干夜夜欢| 曰韩精品视频一区二区| 97干日韩| 强奸乱伦中文字幕AV| 色情成人五月天| 天堂亚洲精品久久老牛| 强奸乱伦免费网站| 97天天摸天天碰| 9 1果冻精品视频| 郑州宾馆老熟女露脸啪啪| 中文字幕乱碼在线| 99热| 熟女一区二区| 丁香色狠狠色综合久久小说| 在线 制服丝袜中出 人妻| 精品大全99999| 久久久久国产精品久久久| 操人妻逼91| 狼狼色丁香久久婷婷综合五月| 成人青青草原伊人| 99日视频在线免费| 日操粉逼逼| 国产后入清纯| 日本少妇va7777| 综合久久欧美| 国产成人精品必看| 夜夜躁狠狠躁日日躁av| 99热日| 精品无码一区二区| 亚洲超碰在线| α√在线| 午夜福利无毒不卡| 亚洲国产成人综合碰碰三级经典| 日本久久999| 欧美日韩电影一区二区| 综合日本女人伊人| 日本女人操逼| 太久视频| 精品中文字幕第一页| 大JI巴好深好爽又大又粗视频| 偷拍新久久| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 日韩性爱视频在线免费观看| 啊啊嗯嗯好爽| 欧美性性性| 91九色丰满高潮| 中文字幕97色| 日韩在线女优天天干| 日韩成人电影AV| 丰满人妻一区二区三区大胸懂色 | 色五月AV| 国产精品久久久久久久久久久久久久吹 | 欧美性区| 久艹伊人精品综合在线| 欧美美女自慰一区二区三区| 激情综合五月婷婷| 91久久久久久久| av资源在线播放天堂| 欧美激情中文字幕另类小说| xxx0国产在线播放| 欧美一区二区三区入口| 精品无码久久久久久国产浪潮| 精品人妻一区二区三区四区石在线| 亚洲熟妇A V黑人| 久久久久久久| 91亚洲综合| 国产一区二区二区按摩精品啪视频| 亚洲色阁| 国产吞精a级片激情电影| 99久久婷婷丁香| 综合在线导航一区| 国产精品自在自拍视频| 爆操无码| 国内三级自拍小视频在线观看| 五月天玖玖资源站| 久久精品性| 性吧在线视频| 成人影 天天操 亚洲| 亚洲熟妇乱女区二区三区| 美女在线H91| 欧美色997| 影音先锋一区二区在线资源| 亚洲AV不卡在线观看尤物| 小骚逼被操的爽不爽| 伊人96在线| 色欧美在线| 伊人网高清| 少妇一级无码精品| 日本成人A片免费看| 热99这里只有精品| 激情综合网激情五月天| WWW4虎| 亚洲91网站| 男人的天堂三级| 69一区二区三区| 男女日B国产| 天天做日日做天天欢。| 久久99热这里只频精品6学生| 日韩在线视频1234| 欧美乱妇狂野欧美在线视频| 东北女人性交| AⅤ片水多多| 亚洲综合中文字幕有码| 伊人综合色网| 亚洲欧美在线综合| 99re视频这里只有精品| 国产在线视频二区| 97久久超碰| 四虎国产成人精品免费一女五男| 9.1小视频| 亚洲 无码 偷拍| 爽 好舒服 无码刺激久久| 国内精品999| 精久久久| 亚洲春色一区二区三区| 久久男女激情视频网站 | 国产成人无码网站在线视频| 久久一二区四| 日日骚av| 超碰国产精品无码| 五月丁香啪啪啪| 国产精品电影推荐| 黄骗免费网站| 99精品久久久久久久婷婷蜜桃| 校园春色欧美色图| 日本精品一区二区不卡| 国产51色综合久久免费| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 淫荡网址| 久精品无码av一区二免费国产在线观看 | 伊人久久综合精品欧美| 玖玖人人爱| 夜夜国自区| 高清无码在线播放网站| 啊啊啊啊嗯嗯嗯用力好爽 | 德国一二三不卡| 91亚洲图片| 啪一啪免费视频| AV高清一区| 成人羞羞视频国产| 骚逼高潮久久精品| AV在线播放网址| 人妻中文字幕精品无码 | 九九热精品| 日本五区不卡| 日韩丰满熟妇| 射丝袜高跟鞋99| 91国模| www.婷婷五月天| 蜜桃天美传媒AV一区二区三区| 激情无码日韩| 天天看高清麻豆| 永久免费av无码网站国产app | 最新av在线| 欧美性爱日韩高清| 草b在线| 好属操| 极品色社| 91bbb| 超碰人人乐97| 神马久久久久久| 熟妇熟女亚洲天堂网| 操熟女91| 999久久久精品国产| 日日夜夜骑| 色播丁香| 超碰九7| AV天天在线观看| 97色综合中文网| 亚洲日韩AV视色| 清纯唯美亚洲综合| 麻豆精品久久久久久久| 欧美在线啊啊| 亚州成人a∨| 日韩一级性爱无码| 欧美日韩一干二干| 国产精品久久久久久无码红治院| 日本欧美色| 精品国产丝袜一区二区三区乱码| 色综合99999| 精品一二三区久久AAA片| 超碰97资源网亚洲| 六月色色| 无码人妻1727| 97爱欧美| 大香网站| 怡红院久久老司机| 蜜桃久久综合视频| 99久久久久久亚洲精品不卡| 久久久九九九九| 国产一区二区欧美日本| 97久久久久| 天天日日本| 国产亚洲女v在线观看| 天欧美在线| 麻豆人妻精品一区二区| 高清有码一区二区| 18禁久极品美女久久哦哟呀!| 东亚亚洲无码高清| 91成人无码| 欧美 亚洲 大香| 天天视频综合在线观看视频| 色臀AV| 久久久久密臀一区二区| 无码 有码 国产18p| www国产精品| 上床不卡网站| 狠狠色婷婷7777久| 伊人热综合| 999熟女精品| 插入综合网| 2019久久久久久久久福利| 欧美性色欧美| 白丝jkav| 熟妇熟女视频一区二区三区| 亚洲精品白浆高清久久久久久| 亚洲乱熟女一区二区| 国产精品天美传媒| h无码动漫在线观看| 欧美色图电影| 久久视频,这里只有精品 | 深夜啪啪啪视频免费| 370p日韩欧美亚洲精品| 97chaopengongkai| 欧美人人天天网| 天天欧美色| 手机看av网站在线看| 秋霞色色影院| 色97欧美| 一二三四视频在线社区中文字幕| 久久久九97| 日本一本道A级黄色毛片试看60分钟| 免费国产视频| 亚洲日韩97| 欧美少妇性乱| 91久久久久久久久久久| 91free福利| 青娱乐亚洲自拍| 综合久久少妇中文字幕| 日本黄色精品| 欧美 综合 亚洲| 欧美激情视频一区二区三区不卡| 五月丁香狠狠爱| 性在久久久久久| 欧美性爱综合,免费| 999热这里只有精品| 91欧洲入口| 97精品视频网站| 玖玖爱综合| 亚州精人品大香蕉| 色色色热| www.色操逼| 日韩亚洲Av人人夜夜澡人人爽| 大二网站亚洲| 在线免费观看高清无码视频| 伊人麻豆传媒| 东京热av影院| 蜜桃香蕉久草精品在线| 亚洲文学偷乱拍啪啪啪啪| 久久 亚洲 日韩 人妻| 天天日日本| 亚洲欧美爆| av操操不卡| 男人的天堂.com| 炮色五月| 99999精品视频| 性欧美另类高清| 天天日天天插| 激情婷婷五月天| a网站免费观看| 久久免费精彩视频| 深爱五月婷婷| 麻豆久久久一区二区| 熟妇熟女视频一区二区三区| 色婷婷五月天| 伊人久久88国产女| 天天爽天天爽| 日韩在线76| 啊啊啊com| 欧美一区二区情色| 超碰97玖玖爱| 欧美日韩天堂| 久久后入制服| 欧美草草高清日韩视频| 91精品91久久久中77777| 精品亚洲天堂| a片自拍直播视频| 强奸乱伦免费网站| 福利操逼| 一区三区啪啪| 美女黄色一级A视频| 日韩人妻大香蕉| 天堂日本亚洲欧美| 天天天天做夜夜夜夜做| 日产成人久久| 强乱老妇中文字幕| 亚洲国产精品成人久久蜜臀| 精品人妻免费观看| 日逼逼免费看| 天美麻花大全视频| 97日本超碰综合| 青青操在线亚洲视频观看欧美在线| 男人的亚洲天堂| 精品少妇人妻一区二区三区| 搡老女人老熟女91老熟女综合网| 91视频精品| 久久九九视频九九视频| 久热九九| 怡红院怡春院| 本道在线| 91精片| 亚洲欧美自拍偷拍| 国产精品久久久久av| 日韩99999色| 综合一区二区影视| 校园春色五月天| 国产成人99久久亚洲综合| 丰满人妻大屁一区二区| 花野真衣| 色偷综合| 久久国产乱子伦精品免费女,网站| 午夜a成v人电影| 日韩中文字幕二区| 欧美成人亚洲精品| 九九九偷拍| 欧美成人A√在线一区二区| 操逼逼无码| 欧美黄色图片| 丝袜美腿91| 午夜乱轮操逼视频免费看| 婷婷色播婷婷| 大香蕉啪啪啪啪在线| 欧美性爱一区二区三区| 久久欲| 亚洲第一页色| 伊人久久亚洲色欲综合网站 | 啊啊啊啊啊啊在线观看| 一区二区三区四区免费视频| 久久色一区| 97资源站国产精品| 亚洲囯产精品女人久久久| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | av无码av无码专区| 亚洲情色五月天| 97人人夜| 操逼操逼逼操操逼91 | 任我爽在线视频免费观看| 久久久蜜桃臀无码视频| 九九性爱网| 欧美国产成人在线| 精品一区二区三区国产| 免费观看啪视频| 天天综合网AV91| 国产偷拍网站| 日本欧美韩国日产片片在线看免| 久久久精品中文字幕麻豆| 综合国产影视三级| 日本天天人人狠狠在线日美女| 亚洲在线综合| 思思热影视| 精品小视频在线| 婷婷超| 亚洲精品丝袜-不卡成人免费……| 91精品操美女| 男女激情黄色网址| 久久亚洲熟妇在线视频| 97超碰人人操人人操| 亚洲精品视频二区| 美女9118禁| www久久99| 国产日韩中文字幕欧美| 国产精品色片一区二区| 校园春色亚洲无码| 日本三级一区二区 在线| 亚洲天堂第一页| 国产午夜福利专区综合| 蜜桃臀 后入 一区 二区 三区 在线| 在线欧美亚洲| 一区二区三区精品黑丝白丝酒店对鸡 | 999久久久国产精品| 9久久精品| 91老司机精品| 五月激情小说| 色九久| 婷婷色一区| 人人操人人色网| 女人妻一区| 黄色AV免费| 青青久操| 中文字幕日韩人妻视频一区二区三区| 亚洲色香| 日韩成人性爱AV| q2午夜理论片夜色av| 一区在线国产播放| 亚欧洲日韩国产精品| 欧美躁死她一区二区| 女色综合| 97人亚洲综合字幕| 麻花豆传媒剧国产MV出差| 色香伊人| 国产自偷自拍一区| 好吊色综合| 影音综合网| 久久久久久电影| 99最新日韩偷拍视频| 狠狠色综合网| 老司机午夜精品视频| 久久最新视频免费观看| 欧美一区二区三区蜜桃| 99草精| 精品国产嫩穴视频| 久久久久久久伊人精品| 亚洲性猛| av九九| 自拍偷拍 日韩欧美| 久久久免费懂色| 五月丁香啪啪| av网站免费线看| 99国内熟女露脸视频| 丁香婷婷大香蕉| 国产主播福利| 成年人免费观看网站| 嗯嗯啊啊视频在线看| 日韩欧美午夜一区二区| 激情内射| 午夜福利久久久噜久噜久久综合| 操逼国产免费| 99re这里只有| 啊啊啊啊啊啊啊好爽不要| 自拍大香蕉乱插| 操逼操逼操| 玖玖超碰熟| 91狠婷| 无码在线亚洲| 偷拍精品一区二区三区| 97精品久久久久中文字幕| 99激情| 国产成人午夜视频网址| 999久久久国产精品| 国产美女口爆吞精| 激情五月综合网| 思思热久久成人| 俞拍久久国应视频| 97精品97久久| 麻豆天美久久91| 亚洲av影院在线观看| 人人模人人看| 天堂亚洲精品| 欧美 熟女 日韩| 天美av在线观看| 岛国黄色大片网站| 香伊人在线| 欧美欧美少妇| 亚洲国内精品成人不卡| 熟妇人妻一区二区三区| 国产精品视频精品一二| 久热影视| 白丝av| 久久线上视频免费看| 超碰97久久观看| 久久9 9 9精品| 九月婷婷| 精品久久人妻成人网| 九九综合久久中文字幕| 国产60页| 亚洲欧美97√| 超碰到97情色| 国产青青美女玩逼视频| 成人精品视频一区二区| 九九碰九九爱97超碰| 国产无码一二三区| 国产中文精品一区二区在线观看| 日本精品一级二级三级| 欧美色图20p| 夜夜黄| 玖玖大干人妻| 无码人妻精品一区二区三区九九| 成人精品视频一区二区| 人妻天天夜夜爽一区二区| 五月香婷婷| 天天日B夜夜干B时时操B| 久久av一级av少妇av高潮| 一级二级三级黑人无码| 精品欧美不卡在线播放| 国产美女高潮| 国产久久久| 淫荡网址| 欧美亚洲激情| 高清无码人妻久久久一区二区三区aⅴ| 中出20p| 欧美久久人体| 少妇熟女视频一二三区| 国产中午字一暮区| 日韩成人人妻网站| 亚洲影视高清第一页| 超碰97综合网| 欧美综合色图片| 欧美小说区视频区| 99超碰网| 少妇无码999| 九九久久久| 超碰在线一区| 视频一区二区免费在线| 国产成人91一区二区三区| 91精品国产91久久青草 | 亚洲欧洲日韩中文字幕一区| 精品久久久一本一道| 9久9久| 欧美性性性| 亚洲精品九九九| 亚洲一区日韩精品| 日日噜噜夜夜狠狠视频无| 狼人综合婷婷激情四射 | 亚洲人妻中文在线视频| 亚洲av无码国产精品字幕| 人人摸.人人色| av网页一区二区三区| 丝袜熟女一区二区三区| 高清无码国产亚洲| 超碰三级秋霞| 春色校园综合网| 少妇色综合| 97超碰精品图片| av网站在线看| 免费看黄视频亚洲网站| 亚洲精品人妻吞精av| 少妇超碰在线| 欧美亚洲影视| 欧美日韩人妻少妇 一区二区三区| 久操免费电影| 国产精品人妻免费精品| 亚洲字幕一区二区| 欧美日韩第一页| 高潮内射在线| 欧美天堂亚洲电影院一区在线播放| 久热精品在线| 综合亚洲欧美精品日韩?v| av天堂天堂av日韩| 久久9视频| 亚洲激情 欧美色图| 久久久国产护士丝袜美腿一| 97爱亚洲| 免费精品人妻一区二区三| 日本三级中国三级99人妇网站| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 综合久久99| 啪啪AV导航| 偷拍欧美综合| 91精品久久久久久77777|