亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

嵌入式以太網(wǎng)驅(qū)動調(diào)試:從MAC-PHY鏈路到工業(yè)協(xié)議優(yōu)化

嵌入式以太網(wǎng)驅(qū)動調(diào)試:從MAC-PHY鏈路到工業(yè)協(xié)議優(yōu)化 干過嵌入式驅(qū)動的人都有個共同體驗(yàn)?zāi)玫揭粔K新板子最先想干的事就是讓網(wǎng)口亮起來。燈亮了串口能進(jìn)shellping通上位機(jī)這塊板子才算活了。反過來說如果燈不亮、link up不上或者在end用戶態(tài)怎么都收不到包排查起來往往比點(diǎn)燈復(fù)雜得多——因?yàn)橐蕴W(wǎng)驅(qū)動從來不是一個驅(qū)動而是一條鏈路控制器MAC、物理層芯片PHY、MDIO總線、設(shè)備樹/PCI枚舉、內(nèi)核協(xié)議棧任何一個環(huán)節(jié)掉鏈子表現(xiàn)就是網(wǎng)口有脾氣。這一期是嵌入式驅(qū)動開發(fā)經(jīng)驗(yàn)系列的第10期主題是Ethernet以太網(wǎng)。我把這幾年在嵌入式Linux平臺上碰到的網(wǎng)口問題和處理思路理了一遍重點(diǎn)圍繞幾個高頻關(guān)鍵詞展開Intel I219-V這類板載千兆控制器的適配、VLAN配置、1G/2.5G PCS/PMA與SGMII這些MAC與PHY之間的鏈路細(xì)節(jié)以及面向EtherNet/IP等工業(yè)協(xié)議場景時底層驅(qū)動該做什么樣的取舍。內(nèi)容不一定高深但都是能直接拿去排查問題的思路。1. 一塊新板子來了先搞清楚網(wǎng)口這條鏈路上誰在干活1.1 MAC、PHY與MII總線驅(qū)動開發(fā)眼里的一條鏈很多新手拿到網(wǎng)口問題第一反應(yīng)是查驅(qū)動但驅(qū)動這兩個字在以太網(wǎng)場景里至少包含三層MAC控制器驅(qū)動、PHY芯片驅(qū)動、以及把兩者連起來的MII總線管理機(jī)制。這三個角色各管一段缺一不可。MAC是主控側(cè)的核心它負(fù)責(zé)把內(nèi)存里DMA ring上的數(shù)據(jù)包搬運(yùn)到線路接口上同時處理幀的填充、CRC校驗(yàn)、流控等底層邏輯。在嵌入式SoC里MAC通常已經(jīng)是片上資源比如Zynq、i.MX、RK系列都有自己的GEM/MAC外設(shè)。而PHY是芯片外部那個小顆粒負(fù)責(zé)把MAC送出來的數(shù)字比特流變成物理線纜上的電平信號同時承擔(dān)鏈路自協(xié)商、狀態(tài)檢測這些臟活。MIIMedia Independent Interface則是兩者間的語言規(guī)范常見的有RMII、RGMII、SGMII等不同接口決定了引腳數(shù)、時鐘方式和能跑的最高速率。驅(qū)動開發(fā)時要記住一個關(guān)鍵點(diǎn)MAC和PHY之間不是簡單的主從關(guān)系而是一條雙向協(xié)商通道。MAC側(cè)說我支持千兆PHY側(cè)說我可以千兆物理介質(zhì)上才能以千兆速率把鏈路拉起來。兩者任何一個撒謊結(jié)果就是表面上設(shè)備存在、驅(qū)動加載正常實(shí)際卻link down。1.2 從PCI/設(shè)備樹到net_device驅(qū)動掛載的順序理解驅(qū)動加載順序才能看懂dmesg里那些日志。以X86嵌入式平臺為例Intel I219-V這類網(wǎng)卡走PCIe總線內(nèi)核先在PCI枚舉階段發(fā)現(xiàn)設(shè)備然后由對應(yīng)驅(qū)動如e1000e的probe回調(diào)接管而在ARM/FPGA平臺上走的是設(shè)備樹描述MAC節(jié)點(diǎn)通過compatible屬性匹配到平臺驅(qū)動PHY掛在MDIO總線上由PHY驅(qū)動識別。無論哪種路徑最后都會走到同一個出口注冊net_device調(diào)用ndo_open此時MAC驅(qū)動會做三件事——配置MAC控制器的時鐘與復(fù)位、啟動DMA描述符環(huán)、然后觸發(fā)PHY的狀態(tài)機(jī)開始自協(xié)商。我習(xí)慣把這一步叫做三方握手PCI/設(shè)備樹只是把設(shè)備認(rèn)出來了真正讓網(wǎng)口能用的是open時MAC和PHY之間的交互。1.3 第一步硬件摸底把設(shè)備挖出來拿到板子先別急著改代碼先把硬件身份確認(rèn)了。X86平臺下最直接的是lspci -nn | grep -i ethernet lspci -vvv -s 00:1f.6第一行能告訴你設(shè)備編號第二行能看到LnkCap/LnkSta、中斷號、BAR空間以及EEPROM里固化的MAC地址。我遇到過不止一次批量板卡MAC地址全寫入同一個值的情況那就是工廠燒錄環(huán)節(jié)的問題跟驅(qū)動沒關(guān)系。如果是ARM平臺看設(shè)備樹里MAC節(jié)點(diǎn)的status狀態(tài)是不是okayPHY節(jié)點(diǎn)有沒有正確引用MDIO子節(jié)點(diǎn)。還有個小技巧解析設(shè)備樹時用dtc -I fs -O dts /proc/device-tree導(dǎo)出當(dāng)前實(shí)際生效的設(shè)備樹比翻源碼里的dtsi靠譜得多——因?yàn)閎ootloader可能覆蓋了部分屬性。這一節(jié)的核心思路概括成一句話遇到網(wǎng)口問題先分清是哪一段在喊痛。PCI枚舉失敗是硬件識別問題net_device注冊了但link up不上是MAC-PHY協(xié)商問題鏈路速率正常卻丟包嚴(yán)重又是DMA和中斷配置的問題。方向錯了后面全是無用功。2. Intel I219-V 在嵌入式板卡上的適配不止是e1000e能用就行2.1 I219-V為什么出現(xiàn)在工業(yè)板卡Intel I219-V全稱Intel(R) Ethernet Connection (16) I219-V是一款集成在Intel芯片組里的千兆以太網(wǎng)控制器廣泛出現(xiàn)在各類x86工控板、嵌入式BOXPC和邊緣計(jì)算設(shè)備上。它沒有獨(dú)立PHY芯片而是通過板級線路直接把SerDes接到RJ45或內(nèi)部PHY驅(qū)動是內(nèi)核里經(jīng)典的e1000e。選它做工業(yè)板卡的理由很樸素生態(tài)成熟、CPU占用低、驅(qū)動常年穩(wěn)定。但穩(wěn)定不代表不需要適配。e1000e雖然主線上一直在維護(hù)具體到某個板卡廠商的定制設(shè)計(jì)仍然會出現(xiàn)EEPROM配置、LED極性、Wake-on-LAN等細(xì)節(jié)問題需要針對板卡做定制。2.2 加載e1000e驅(qū)動后第一步確認(rèn)什么驅(qū)動加載成功后我一般依次看三樣?xùn)|西ethtool -i enp0s31f6 ethtool enp0s31f6 ethtool -k enp0s31f6ethtool -i確認(rèn)driver名稱、固件版本和總線位置ethtool查看速率、自協(xié)商狀態(tài)、wake-on設(shè)置ethtool -k查offload特性重點(diǎn)看tx-checksumming、tcp-segmentation-offload、vlan-offload。I219-V對TSOTCP Segmentation Offload和VLAN offload支持都很好但有時板級設(shè)計(jì)有缺陷時需要臨時關(guān)掉這些特性后面會詳細(xì)說。還有一個容易被忽略的檢查項(xiàng)EEPROM里的MAC地址和PCI配置空間是否一致。通過ethtool -e enp0s31f6可以dump EEPROM內(nèi)容做備份。工業(yè)現(xiàn)場設(shè)備多運(yùn)維經(jīng)常要按MAC地址管理資產(chǎn)如果出廠燒錄環(huán)節(jié)出了岔子驅(qū)動層面是無解的。2.3 VLAN配置的兩種路徑與offload陷阱給I219-V配VLAN大多數(shù)人第一反應(yīng)是用ip link命令ip link add link enp0s31f6 name enp0s31f6.100 type vlan id 100 ip link set enp0s31f6.100 up ip addr add 192.168.100.10/24 dev enp0s31f6.100這套命令本身沒問題但嵌入式工程師還要問一句VLAN tag的添加和剝離是在CPU里軟處理還是由網(wǎng)卡硬件完成如果e1000e啟用了VLAN offload默認(rèn)開啟那收包時硬件已經(jīng)剝掉了tag內(nèi)核看到的skb不帶VLAN頭而是帶著VLAN_CFI/VLAN_VID元數(shù)據(jù)走專用路徑。這種情況下如果上層應(yīng)用直接抓包看raw socket會發(fā)現(xiàn)看不到VLAN標(biāo)簽——這不是丟包而是硬件加速生效了。反過來如果遇到VLAN口收不到廣播報文、或者tcpdump看到重復(fù)的VLAN層多半是offload和軟件處理形成了矛盾。排查命令ethtool -k enp0s31f6 | grep vlan ip link show enp0s31f6.100實(shí)際項(xiàng)目里我會根據(jù)業(yè)務(wù)場景決定是否保留VLAN offload。單純跑ModbusTCP、EtherNet/IP這類普通業(yè)務(wù)流offload開不開影響不大但涉及工控報文深度解析、旁路抓包分析時建議先統(tǒng)一關(guān)掉再做測試避免排查時被硬件幫忙處理了這個隱藏因素干擾。2.4 性能調(diào)整隊(duì)列、中斷合并與功耗平衡I219-V雖然不像高端網(wǎng)卡那樣有幾十個隊(duì)列但它同樣支持多個DMA隊(duì)列和RSSReceive Side Scaling。在嵌入式Linux里可以通過ethtool -L調(diào)整隊(duì)列數(shù)量ethtool -L enp0s31f6 combined 1 ethtool -L enp0s31f6 combined 4隊(duì)列少好管理但多核平臺上高吞吐場景也會受限于單核中斷隊(duì)列多又可能讓緩存命中率下降。工業(yè)場景我通常先用combined 1保證邏輯簡單遇到吞吐瓶頸再逐步加大。中斷合并是另一個關(guān)鍵點(diǎn)。e1000e默認(rèn)為了吞吐會盡量合并中斷但這會帶來不確定的延遲抖動。等會兒第5節(jié)講EtherNet/IP時會專門展開這里先記住一條命令ethtool -C enp0s31f6 rx-usecs 0 tx-usecs 0把合并關(guān)到最低延遲上來了但確定性變好。功耗方面ethtool --set-phy-tunable enp0s31f6 downshift 0這類參數(shù)在I219-V上不一定都支持更多是控制EEE節(jié)能以太網(wǎng)。工業(yè)現(xiàn)場我建議關(guān)掉EEE因?yàn)樗鼤阪溌房臻e時進(jìn)入低功耗模式有些交換機(jī)和遠(yuǎn)端設(shè)備配合不好會導(dǎo)致鏈路偶發(fā)斷連。3. SGMII、PCS/PMA與1G/2.5G速率MAC和PHY之間沒說的線速秘密3.1 用快遞分揀理解SGMII的每秒1.25GRGMII用4對數(shù)據(jù)線并行傳千兆SGMII則把線減到1對差分線跑1.25Gbps的串行碼流。很多工程師第一次聽到千兆用1.25G串行線都覺得矛盾數(shù)據(jù)明明只有1G怎么線速是1.25G其實(shí)多出來的25%是8b/10b編碼開銷——每8bit數(shù)據(jù)編碼成10bit線上符號目的是保證直流平衡和時間同步。這就好比快遞分揀時為了確保包裹不丟不錯每個包裹都額外貼了一張帶校驗(yàn)碼的面單面單本身也占體積。所以SGMII的本質(zhì)是把MAC數(shù)據(jù)流先做8b/10b編碼串行化后送出。這個編碼過程可以由MAC內(nèi)置完成也可以由外置的PCS/PMA芯片完成。在FPGA的以太網(wǎng)IP核里這就對應(yīng)最常見的配置選項(xiàng)1G/2.5G Ethernet PCS/PMA or SGMII。3.2 PCS/PMA在FPGA/SoC里的角色FPGA做以太網(wǎng)端口擴(kuò)展時Xilinx現(xiàn)在叫AMD的1G/2.5G Ethernet PCS/PMA or SGMIIIP核是繞不開的。它承擔(dān)了PCS物理編碼子層和PMA物理介質(zhì)接入子層的功能內(nèi)部可以做SGMII接口、也可以直接做1000BASE-X/2500BASE-X光口模式。PCS負(fù)責(zé)編碼、自協(xié)商AN、鏈路狀態(tài)跟蹤PMA負(fù)責(zé)高速串行收發(fā)也就是說PMA直接對接板上的SerDes引腳。在Zynq平臺中常見的接法是PS端GEM通過SGMII接到片外PHY如Marvell 88E1512、Realtek RTL8211或者PL端以太網(wǎng)IP核通過SGMII/1000BASE-X接到PHY/光模塊。設(shè)備樹里對應(yīng)的描述是gem0 { phy-mode sgmii; phy-handle phy0; phy0: phy0 { reg 0; device_type ethernet-phy; }; };phy-mode驅(qū)動了驅(qū)動側(cè)對MAC接口模式的配置必須和實(shí)際硬件設(shè)計(jì)嚴(yán)格一致。這個屬性配錯了MAC側(cè)的數(shù)據(jù)收發(fā)時序就會完全錯位。3.3 速率協(xié)商失敗的經(jīng)典現(xiàn)場SGMII場景最典型的故障是PHY協(xié)商成100M甚至10M但MAC側(cè)還鎖在1000M。SGMII的自協(xié)商機(jī)制里MAC和PHY之間會傳遞速率信息可如果中間的PCS/PMA配置成了固定速率模式或者IP核把AN功能關(guān)閉了兩邊就不在同一個頻道上。我曾經(jīng)處理過一個板卡PHY用的是RTL8211MAC側(cè)是Zynq GEMphy-mode寫的是rgmii-id但硬件實(shí)際走的是SGMII結(jié)果Link Up后收包全是FCS錯誤。內(nèi)核日志里會反復(fù)刷macb f8008000.ethernet eth0: link up (1000Mbps/Full duplex) macb f8008000.ethernet eth0: link up (1000Mbps/Full duplex)看著是up了其實(shí)MAC在不停重傳。最后定位是設(shè)備樹接口模式和實(shí)際硬件不匹配。所以排查這類問題第一步永遠(yuǎn)是檢查接口模式屬性與實(shí)際電路的對照關(guān)系比看寄存器快得多。3.4 2.5G速率模式別想當(dāng)然2.5G Ethernet和SGMII之間很容易混淆。標(biāo)準(zhǔn)SGMII按協(xié)議只能跑10/100/1000M2.5G速率下接口形態(tài)雖然和SGMII很像但跑的是2500BASE-X沒有自協(xié)商機(jī)制鏈路兩端必須強(qiáng)制設(shè)定相同速率。很多工程師在FPGA里配置了2.5G PCS/PMA然后拿標(biāo)準(zhǔn)SGMII去對端對接結(jié)果駐留相位正確但雙方速率認(rèn)知不一致鏈路始終無法起來。實(shí)際調(diào)試時要確認(rèn)的清單很短但都很關(guān)鍵MAC側(cè)是否支持2.5G速率上報、PCS/PMA IP核是否選對了2.5G模式、對端交換端口是否強(qiáng)制2500M、線纜和連接器是否支持2.5G SerDes速率。漏掉任何一項(xiàng)就可能出現(xiàn)link指示燈亮但數(shù)據(jù)不通的假象。2.5G應(yīng)用我還有個建議先用iperf3做雙向打流確認(rèn)實(shí)測速率不要只看ethtool顯示的協(xié)商速率——速率上報機(jī)制在非標(biāo)模式下經(jīng)常是假的。4. 從dmesg和netlink日志挖出link up但ping不通的根因4.1 網(wǎng)口驅(qū)動初始化的時間線一個網(wǎng)口從驅(qū)動加載到能正常收發(fā)內(nèi)核日志里其實(shí)有條清晰的時間線。我處理這類問題時喜歡先把dmesg里所有相關(guān)日志粘出來標(biāo)上序號[ 12.345] e1000e 0000:00:1f.6 eth0: (PCI Express:2.5GT/s:Width x1) [ 12.351] e1000e 0000:00:1f.6 eth0: MAC: 3, PHY: 7, PBA No: E5020-008 [ 12.357] e1000e 0000:00:1f.6 eth0: Intel(R) PRO/1000 Network Connection [ 12.363] e1000e 0000:00:1f.6 enp0s31f6: renamed from eth0 [ 12.789] IPv6: ADDRCONF(NETDEV_UP): enp0s31f6: link is not readylink is not ready出現(xiàn)在這里很正常因?yàn)榇藭rIP層配置已經(jīng)完成但驅(qū)動還沒觸發(fā)PHY自協(xié)商。真正的link up日志要等ifconfig up之后才出現(xiàn)。很多誤報驅(qū)動掛了的板子其實(shí)只是日志看少了后面半段。4.2 PHY狀態(tài)機(jī)是怎么跑的內(nèi)核PHY子系統(tǒng)有一套標(biāo)準(zhǔn)狀態(tài)機(jī)背后對應(yīng)了一個workqueue周期調(diào)度。狀態(tài)機(jī)從PHY_DOWN開始o(jì)pen后進(jìn)入PHY_UP然后向PHY_AN發(fā)起自協(xié)商協(xié)商完成進(jìn)入PHY_RUNNING如果鏈路斷開會退回PHY_NOLINK并周期性重試。內(nèi)核里一旦PHY狀態(tài)變化會通過netlink發(fā)送RTM_NEWLINK最終反映到用戶態(tài)就是carrier的變化。調(diào)試的時候關(guān)注兩個位置/sys/class/net/enp0s31f6/carrier的值以及/sys/class/net/enp0s31f6/operstate。前者是物理鏈路是否通暢后者是協(xié)議棧對鏈路可用性的判斷。如果carrier1但operstatedown基本可以斷定是上層配置問題比如沒配IP、沒up如果carrier來回跳就是物理鏈路在閃斷。4.3 快速定位的四類現(xiàn)場根據(jù)經(jīng)驗(yàn)link up但ping不通的問題可以歸成四類現(xiàn)象常見原因快速定位手段link反復(fù)up/downPHY復(fù)位設(shè)計(jì)不良、電源噪聲、交換端強(qiáng)制模式dmesg頻率統(tǒng)計(jì)換端口驗(yàn)證link持續(xù)up但收不到包VLAN tag錯配、offload不匹配、MAC地址過濾tcpdump抓包看VLAN/源MAC收發(fā)都不通接口模式phy-mode與硬件不符檢查設(shè)備樹與原理圖只能小包通大包不通MTU不一致、TSO/GSO問題分別ping -s 1472和9000測試這里最想提醒的是MTU問題。嵌入式設(shè)備默認(rèn)MTU是1500但如果對端交換機(jī)配置了巨型幀或VLAN透傳時MTU加了4字節(jié)就會出現(xiàn)小包通、大包卡的經(jīng)典故障。排查命令也很簡單ping -M do -s 1472和ping -M do -s 8000分別測一下再對比兩端MTU設(shè)置即可。4.4 rgmii-id與外部PHY的相位坑RGMII接口本身存在時鐘和數(shù)據(jù)線的相位對齊問題所以標(biāo)準(zhǔn)里定義了不同的延遲模式rgmii-id表示TX和RX都加內(nèi)部延遲rgmii-txid只加TX延遲rgmii-rxid只加RX延遲。很多人把這個屬性當(dāng)成擺設(shè)實(shí)際在PHY芯片選型和PCB布線不同的情況下差的正是這一點(diǎn)延遲直接導(dǎo)致采到的數(shù)據(jù)全是錯位比特。處理建議是拿到一塊新板子如果網(wǎng)口link up但收包不正常先把設(shè)備樹里phy-mode從rgmii-id換成rgmii-rxid或rgmii-txid試試。有次我在一塊定制的AM335x板卡上排查默認(rèn)rgmii-id下FCS錯誤率高達(dá)30%改成rgmii-txid后錯誤率直接歸零。這種問題光看寄存器很難看出名堂偏偏改一個設(shè)備樹字符串就能解決。5. 為EtherNet/IP這類工業(yè)協(xié)議服務(wù)的驅(qū)動特調(diào)5.1 工業(yè)協(xié)議對網(wǎng)卡驅(qū)動的三個隱性要求EtherNet/IP是基于標(biāo)準(zhǔn)以太網(wǎng)的工業(yè)協(xié)議CIP報文跑在TCP/UDP之上。很多人認(rèn)為跑標(biāo)準(zhǔn)TCP/IP驅(qū)動不用特別改但真正部署產(chǎn)線時你會發(fā)現(xiàn)工業(yè)現(xiàn)場對底層驅(qū)動有超出能通之外的要求一是確定性延遲報文到達(dá)和發(fā)出的時間抖動要小二是穩(wěn)定優(yōu)先級排除中斷合并和驅(qū)動bug造成的偶發(fā)超時三是異常報文處理能力比如廣播風(fēng)暴下不能把CPU打滿。所以驅(qū)動層面的調(diào)優(yōu)思路和通用服務(wù)器不一樣。服務(wù)器追求高吞吐可以大開中斷合并工業(yè)實(shí)時場景則要壓低延遲抖動必要時犧牲一點(diǎn)吞吐。5.2 中斷合并關(guān)閉與NAPI先看中斷合并。e1000e驅(qū)動默認(rèn)的rx-usecs不是0意味著收包后不會立刻觸發(fā)中斷而是攢一段時間或攢夠數(shù)量再上報。對EtherNet/IP這種要求循環(huán)周期穩(wěn)定的應(yīng)用這個攢的動作就是不確定性的根源。建議直接關(guān)ethtool -C enp0s31f6 rx-usecs 0 tx-usecs 0 rx-frames 1 tx-frames 1NAPI那邊不用特別關(guān)。內(nèi)核里NAPI的輪詢機(jī)制本來就是處理高吞吐的有效手段而且中斷NAPI的組合在工業(yè)場景下表現(xiàn)很好。重點(diǎn)是別在驅(qū)動里隨便加modprobe e1000e InterruptThrottleRate0這類全局參數(shù)I219-V的驅(qū)動參數(shù)雖然支持但全局禁用對性能和CPU占用影響很大不如針對單個接口用ethtool做精準(zhǔn)控制。5.3 隊(duì)列、中斷親和性與CPU隔離當(dāng)設(shè)備有多隊(duì)列可以把網(wǎng)卡中斷綁定到指定CPU核心避免中斷在各個核之間漂移。常見做法是查/proc/irq/下對應(yīng)中斷號寫到/proc/irq/N/smp_affinity。但注意嵌入式平臺的CPU核數(shù)少盲目綁定可能適得其反建議先壓測確認(rèn)瓶頸確實(shí)在中斷漂移上再做綁定。如果是EtherNet/IP協(xié)議棧比如EtherNet/IP Scanner/Adapter部署在Linux用戶態(tài)還建議把網(wǎng)卡的協(xié)議處理CPU與實(shí)時控制CPU分開。Linux的isolcpus內(nèi)核參數(shù)可以隔離出專屬核配合sched_setaffinity把協(xié)議棧線程固定到非隔離核驅(qū)動中斷固定到另一個核這樣能有效降低協(xié)議棧線程被搶占的概率。5.4 驅(qū)動版本與PHY固件的別輕易動最后這條是經(jīng)驗(yàn)教訓(xùn)。工業(yè)設(shè)備網(wǎng)卡驅(qū)動一旦穩(wěn)定不要因?yàn)閮?nèi)核升級了順手更新一下就隨意換驅(qū)動版本。e1000e這類驅(qū)動在不同內(nèi)核版本上的行為差異不少尤其涉及PCIe電源管理、EEE、VLAN offload的部分。曾經(jīng)有客戶把內(nèi)核從4.19升到5.10I219-V網(wǎng)卡在低流量時出現(xiàn)偶發(fā)斷流最后定位是新的驅(qū)動默認(rèn)開啟了EEE而板載PHY對端設(shè)備不支持正確的喚醒序列。解決方案不是打補(bǔ)丁而是關(guān)掉EEE參數(shù)。固件和EEPROM同理。ethtool -S里能看到tx_timeout、rx_errors等統(tǒng)計(jì)如果這些計(jì)數(shù)長期為0就不要去碰固件升級。網(wǎng)絡(luò)設(shè)備在產(chǎn)線上跑得好好的任何不必要的變更都是在引入風(fēng)險。給現(xiàn)場維護(hù)團(tuán)隊(duì)的建議永遠(yuǎn)是先備份當(dāng)前驅(qū)動版本、固件版本和配置命令再考慮任何升級操作。這一期從驅(qū)動鏈路的基礎(chǔ)認(rèn)知聊到具體芯片適配、接口速率、狀態(tài)機(jī)排錯再到工業(yè)協(xié)議場景下的驅(qū)動特調(diào)算是把嵌入式以太網(wǎng)驅(qū)動開發(fā)中容易出問題的幾塊硬骨頭都啃了一遍。如果讓我總結(jié)一條最實(shí)用的經(jīng)驗(yàn)?zāi)蔷褪蔷W(wǎng)口故障別急著改代碼先沿著PCI/設(shè)備樹識別 → MAC-PHY協(xié)商 → 鏈路狀態(tài) → offload配置 → 協(xié)議棧行為這條鏈路逐層驗(yàn)證絕大多數(shù)問題都能在半小時內(nèi)定位到具體環(huán)節(jié)。至于SGMII的速率陷阱、RGMII的相位細(xì)節(jié)、VLAN offload的隱性問題這些都是需要拿板子實(shí)測才能沉淀下來的經(jīng)驗(yàn)光看芯片手冊遠(yuǎn)遠(yuǎn)不夠。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久久精品无码亚免费| 啊啊啊 在线| 婷婷激情五月天小说网| 色吧 综合| 亚洲国产精品久久久久婷婷老年| 成人AV素股で擦久久| 久久人人爽爽人人爽人人片αV| 99少妇| 精品国产污一区二区三区| 欧美精品一区二区少妇免费A片| 天天情欲宗合网| 800zy一区二区| 国产AV毛片| 97Ai亚洲| 97超碰人人操人人操| 97chaopenrihan| 中文久久一区| 操一区| 国产精品精品系列在线观看| 91老熟妇| 色操逼网| 国产精品久久久久综合| 日韩熟女乱伦中出| 18禁无码永久免费无限制| 欧美色图自拍| 人人扣人人操| 蜜桃无码AV一区二区| 啪啪啪东京| 在线中文字幕| 青青青国产手线观看视频2| 色综合91好| 9美女超碰在线免费观看| 亚洲和欧美裸体美女双飞视频| 2010男人的天堂| 伊人女女资源在线观看| 99精品欧美一区二区三区桃色| 国产精品美女久久久久久网站| 欧美 色 亚洲| 亚洲日韩美国人妻| 成功精品影院| 麻豆国产av网| 欧美熟女妇同| 69久久| 精品免费囯产一区二区三区 | 色亚州人久干视频在线观看免费版| 日韩人妻资源网| 精品人妻1237| 欧美青青视频| AVE乱伦| 家庭乱伦麻豆| ji熟女.com| 超碰在线欧美性爱激情| 午夜福利无毒不卡| 夜夜影视四色| 亚洲欧美天堂在线| 碰人碰碰人人开房人肉| 哈哈操 大香蕉| 激情欧美97| 日本乱人伦片中文三区| 成人七区| 欧美性爱视频免费一区一A| 超碰美女97| 2019天天干| 久久精品店| 青青草久草| 日韩在线地址一| 另类 日韩 熟女| 9+1视频网址| 天天爽天天| 九九玖玖精品| 9999久久久| 91亚洲色人| 中文字幕 码精品视频网站| 在线观看十八禁| 中文字幕一区二区三四五区日日骚| 国产乱码久久久| 97国产超碰| 老司机天天操| 爱射综合| 日韩无码人妻中字久久三区四区| 九热超碰| 精品一区二区三区国产| 尹人大香蕉视频在线| 你草精品在线视频| 日韩熟女无码| 亚洲天堂另类小说男人| 亚洲高清视频在线免费观看| 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 青青操视频在线| 欧美图片校园春色| 操逼天美3区| 玖玖97综合 | 日韩一级免费性爱| 91艹逼精品| 亚洲综合校园春色| 美女诱惑一区| 久操精品网| 久久久久一本一区二区青青蜜月| 欧亚揄拍偷拍精品视频| 五月天婷婷在线看| 91 手机在线播放 绯色| 国产夫妻性生活视频| 99久久婷婷丁香| 射 色综合| 美女t无毒不卡不卡| 在线强奷到舒服的无码视频| 欧美日韩国产电影| 日韩欧美大片免费高清啪啪| 欧美综合91| 久久精品国产亚洲AV片多多| 精人妻无码一区二区三区伊人直播| 美女诱惑久久| 九九99精品视频在线观看| 免费看污网址| 永久免费发布性爱网| 超碰色老头| 黑人性欧美| 成人一级性爱| 日本加靬比网站发布页| 日韩在线国产字幕| 又摸又舔在线观看网站| 婷婷午夜成人色中色| 色综合加勒比四四季| 亚洲超碰97| 天天影视综合网欧美精品| 午夜九九| 国产欧美美女免费观看视频| 人人看人人插| 亚洲s色图| 欧美少妇性爱网站| 男人的天堂99| 综合日本女人伊人| 午夜激情成人在线观看| 加勒比性爱成人在线| 欧美东京热精品A∨| 国产亚洲精品美女| 97av在线视频| 国产按摩一区二区三区| 精品黄色电影| 日本天天干天天搞一区| 青娱乐国产盛宴视频| 男人天堂网手机版婷婷| 91欧美| 久久超碰天天| 欧洲天天在线| 久久久久免费看少妇A片特黄| 人人操人人射人人干| 免费看日产一区二区三区| 亚洲成成熟女人综合一区二区| 欧美1727免费观看视频| 亚洲欧洲自拍图片专区满春格| A啊啊在线观看| 囯产操逼片| 国产成人在线观看网址| 国产25页| 99色热| 日本伦乱九九九综合| 午夜福利在线合集| 嗯嗯啊啊视频在线看| 欧美色女人| 日韩传媒在线| 蜜桃久久综合视频| av天堂天堂av日韩| 久久系列| 日韩欧美偷拍美女视频| h在线看免费版在线看| 欧美不卡在线一区二区| 婷婷97| 91综合色噜噜| 亚洲男人天堂网站| 曰本特级特黄特色黄色A级网站高清在线免费看 | 人妻五十路在线| 女人双腿搬开让男人桶| 久久伊人最新网址视频| 欧美丰满少妇交换91欧美精品| 欧美熟妇视频 | 天天91~综合入口| 天天色天天干天天爱| 人妻熟女一区二区在线视频| 亚洲AV无码久久精品蜜桃小说| 色五月激情综合网| www.色操逼| 成人性爱AV在线免费观看| 国产嫩草精品A88AV| 精品美女在线视频| 98一区二区精品| 天天色综亚洲91污| 亚洲精品人妻在线| 亚洲国产精品无码AV久久久| 91东北熟女| 91痴汉| 高潮嗯啊性感美女久久久| 中文字幕在线日亚洲9| 日韩性爱免费观看视频| 看免费的黄片| 大香蕉欧美国产日韩高潮| 日日操天天操| 人人澡人人爽人人精品| 日本福利社| 色婷久久| 超碰免费人人| 亚洲欧洲综合视频在线| 激情看片网站| 99ri精品| 色噜噜综合在线| 99综合网| 天天日天天插| 黄污污污污| 中日高清无码操逼视频| 五月天婷婷色色| 欧美综合区| aaaa黄片| 综合色久| 9久综合网| 五月天综合网| 91 在线亚洲| 91碰碰碰| 顶级少妇BT天堂| 大香蕉伊利av| 成人五月天色网| 超碰97网址| 麻豆精品A片免费观看| 日韩精品人妻中文字幕久久久| 99爱久久视频频| 97色视频在线| 天天综合网合集91| 国产精品天美传媒| 天天日日日射| 欧美一级专区免费大片 | 97在线免费观看视频| 干少妇视频| 亚洲乱码精品一区二区| 青娱乐国产精品| 久操精品网| 午夜精品久久久久久久男人的天堂 | 日逼视频日本| 爱做久久久久久| 99啪啪| 精品女人999| 香一区二区三区| 欧美大战久久久伊人| 超碰一区二区| 色综合一区二区三区| 情趣丝袜无码操逼视频| 99久久e免费热视| 精品久久99| 丰满翘臀美女影院视频| 蜜桃精品一区二区三区久在线| 99re6在线视频播放免费精品| 草草草视频| 亚洲精品一区二区精品| 黄片不用下载在线观看| 午夜后入| 国产一国产一级毛片古装| 久久青青草原免费视频| 免费精品无码一级毛片牛牛影视| 国产精品视频自拍在线| 九色婷婷| 中文字幕无码不卡啪啪| 欧美 日韩 亚洲 春色| 免费的黄片wwwwww| 国产精品久久久久久久久久久久久久久久 | 青青草久草AV| 久久久久久精| 激情五月天丁香社区| 亚洲乱色视频一区、二区在线| 婷婷探花久久精品一区| 自拍偷拍草一草| 色婷久久| 日韩在线观看AV| 3d成人精品一区二区| 亚洲性综合9| 日韩色图 一区二区| 亚洲欧美色图| 蜜臀久久久久久999| 中文一区二区| 久久精品国产AV一区二区三区| 欧美激情五月天| 久久九精品| 日本一区二区亚洲综合| 少妇免费视频| 92久久| 亚洲免费人妻在| 九草在线大香蕉| 狠狠中文字幕| 四虎精品一区二区| 99热最新| 色网亚洲人| 久久久久国产精品喷潮免费观看臀| 2001天天操| 97久久超碰日韩精品| 久久肏大逼| 亚洲欧美日韩电影网站一区 | 老司机香蕉久久久久| 美女写真| 天综合网欧美| 国内亚洲精彩视频在线| 色哟哟av网址| 在线观看国产黄色| 神马久久久久久久久| 日韩人妻播放| 国产suv精品一区二六| 日韩欧美午夜视频在线| 97精品视频在线播放| 在线观看AV片| 国产视频97| 日本一级二级三级网站| 亚洲,欧美,综合网| 久久性爱视频| 黑人娇小av在线播放| 懂色综合久久久| 一中国女人毛片水真多| 黄网站黄视频网站进入口| 色呦呦国产精品免费看| 嫩草影院永久在线制服丝袜| 黑人粗大V S日韩女优视频| 国产9 9在线 | 亚洲| 亚洲成人精品久久久| 成人av影院在线观看| 日本九九久久99| 成人乱码一区二区三少妇| 精品二区三四区五电影 | 99热99在线| 亚洲加勒比| 午夜久久一区二区无码中出| 日韩精品在线观看观看| 欧美亚洲首页| 殴洲老熟女| 日韩人妻免费精品| 97久久国产精品女不卡| 老司机免费视频在线91| 丁香色色网| 成人精品无码| 亚洲色图 91| 精品四五区| 少妇人妻好深太紧了vr91| 色欲久久99精品久久| 男人的天堂2019AV| 永久免费发布性爱网| 校园春色亚洲色图| 好吊爽好吊爽在线视频,中文字幕精品一区二区日本,国产良妇出轨视频在线观看, | 波多野结衣一级视频| 4虎在线视频| 久久久人体| 亚洲AV成人无码一二三久久| 亚洲一区中文字幕| 天天内射| 欧亚乱色熟一区二区三四区| 多乙久久久久久| 欧美91变态| 欧美一级专区免费大片| 啪啪视频mP4| 少妇高潮对白在线观看| 26uuu久久| 蜜桃网熟妇| 婷婷色香| 啊啊啊com| 久操热线| 婷婷中文网| 人人操人人爽人人操人人| 九九九久| 97超碰中文字幕| 97视频在| 超碰久久性爱| 五月天伊人| 久久亚洲AV无码专区国产精品| 亚州欧美色图| 96久久久久久久| 综合91网| www.AV有限公司一区| www鬼畜国产男人的天堂| 国产美女高潮叫床视频| 中文字幕一区二区在线日韩精品| 曰韩人妻中文字幕在线 | www久久99| 亚洲欧洲综合av在线| 国产精品高潮久久久无码| 97超碰精品图片| 午夜亚洲| 日本欧美不卡| 91色欧美| 99热在线播放| 亚洲日韩国产精品| 精品人妻一区二区三区在| 超碰九区| 中文字幕一区av| 日韩成人精品中文字幕| 久久婷婷影院| 五月丁香六月激情综合| 欧美日韩丝袜| 中国黑人三级片网站上区| 天美av在线观看| 精品夜夜澡人妻无码| 密桃99999| 日韩有码免费视频| 亭亭丁香激情| 欧美在线视频观看一二三四区高清| 操操操操网黑人| 九九九九日本| 97欧美色| 亚洲色交| 亚洲无码超碰免费| 黄片免费久久久久久久| 欧美精品99久久久| 骚乳在线| 97爱b| 黄色av播放免不| 中韩中文字幕在线观看| 日本精品五区| 欧洲综合无码| 青青草中文-久久青草精品一区二区三 | 欧美成人精品A片免费一区99| 国产精品大香蕉| 亚洲色堂免费视频| 麻豆 亚洲 97| 丝袜 中出 制服 人妻 美腿 中文字幕| 天堂性色| 岛国网址国产| 女人天堂AV五区在线| 日韩精品9999| 91国产丝袜白虎| 99国产精品| 久久国语| 97在线免费看视频| 亚洲蜜乳av| 久久久婷婷婷| 久久熟女久| 啊啊啊啊操死我| 国产午夜在线观看视频| 国产无马av| 国产成自自拍在线观看| 日韩有码专区| 亚洲午夜福利在线影院| 亚洲不卡不卡中文字幕不卡| 玖玖大干人妻| 亚洲一区操| 日韩av乱伦| 国产传媒美日韩av| 日韩亚洲欧美中文字幕| 性色av婷婷久久一区二区点复制| 日韩AV中文字幕电影| 欧美在线第五页| 老司机午夜精品视频| 国产中文字幕曰本毛片| 日少妇亚洲版| 大香蕉中文在线| 亚洲精品第一| 青久操| 久久久久久久| 日韩AV熟女乱伦| 日韩9999| 亚洲欧洲中文日韩女优乱码| 亚洲一区二区三区久久 亚洲一区二区| 区二区亚洲婷| 国产精品不卡一区二区电影| 91久久久久免| 麻豆成人AV| 中国探花熟女| 国产自偷| 色欲蜜臀AV| 久久一二三四五六七八九区区| 亚洲精品久久久久久久蜜桃臀| 国产小u女在线观看| 九九九九欧美| 影视综合无码少妇| 天天碰操中国年青熟妇| 久久综合九色综合欧洲98| 天天日天天操心| 久久99干一本高清| 欧美很很操视频| 941超碰| 加勒比在线视频一区二区三区 | 久久精品人人做人人看| 91夜色chaopeng| 成人精品无码| 亚洲不卡av在线| 青娱乐休闲视频在线观看| 开心五月婷婷| 大香蕉欧美| 草草影院在线视频| 亚洲色人| 男人的天堂在线2| 操b在线观看| 人人澡综合涩| 色综合天天| 欲色啪| 操比国产| 蜜臀久久久99久久久久 | 亚洲,日韩,欧美,成人播放 | 日本人妻中文字幕精品| 97在线资源| 大地资源在线观看中文第二页| 国产一区二区在线看| 中文字幕一区 二区三四五 区日 日骚| 久久久久久999| 久久久久9久久久久| 在线观看不卡一区二区三区| 操淫穴亚洲五月丁香| 亚洲操逼无码| 97操| 91美女片在线| 台湾佬中文娱乐自偷自拍| se吧提供国产乱老熟视频胖女人| 激情人妻另类| 超碰79人人乐| 国产黄色小视频网站| 在线观看 99热| AV九九| 好爽视频在线观看视频| 亚洲最新Av| 后入日本1234| 日本一天色道久久久精品视频| 久久久人妻| 欧美色图20P| 插入逼91| 蜜桃臀久久| 欧美色偷拍 | 男人的天堂99| 欧美成人色| 狠狠干综合| 亚洲乱伦图片视频| 九九九九精品| 夜夜无码| 日韩少妇无吗| 泰国AV在线观看| 无码精品一区二区三区潘金莲| 亚洲天天操| 欧美综合传媒| 色欲人妻一区二区在线| 五月婷婷激情| 韩日无码在线观看| 国产一级特黄大片处女| 日本综合色图| 99精品综合久久久久五月天| 日韩9999| 丝袜喷水在线| 日韩亚洲美州欧洲综三区一品在线| 国产高清免费不卡av| 91青青草| 东京热毛片177b2viP| wuyechaopeng| 青娱乐手机日韩在线视频| 97九色人妻| 乱老女人一区二区视频| 亚洲欧综合另类无码一区| 日本操逼视频免费| 天天综合网~91| 999国产精品999久久久久久| 蜜桃臀一区二区三区久久| 99热aaa| 久热伊人99re| 99热综合在线| 久久理论字幕视频| 男人的天堂,欧美亚洲另类国产日韩,日本高清一区二区 | 国产精品视频在线观看| 国语精品av| 亚洲影视第一页| av久日| 日日夜夜噜| 熟妇艹鸡八| 麻豆天美久久91| 国语人妻精彩刺激| 97九色人妻| 欧美后进式| 亚洲人妻一区二区三区| 亚洲欧美大| 97精品国产97久久久久久| 大香蕉啪啪啪| 91xingse| 夜夜高潮夜夜爽| 日韩国产十八禁| 69精品人人人人| 物尤视频一区二区| 亚洲老司机123专区| 欧美综合网1| 国产免费一区| 99热在线只有精品| 九九九九国产| 亚洲精品白浆高清久久久久久 | 久久少妇视频| 五月开心久久AV官网| 麻豆传媒一区二区在线观看| 蜜桃午夜视频一区二区| 久9九综合在线| 亚洲天堂久久久久久粉红视频| 手机午夜电影神马久久| 999亚洲国产视频| 美女国产一区二区久久| 99色视频| 日本九九久久99播| 后入福利| 91亚洲综合| 国产精品福利视频播放| 女人被添高潮免费视频| 天天日日舔舔| 97精品中文字幕| 四虎在线视频| 人妻献身系列第54部| 福利在线黄片| 大鸡吧尹人在线| 91久久久老司机| 日本精品加勒比海一区| 岛国在线国产| 极品极品色影院| 情色av电影| 国产精品夜夜夜| 久久亚洲中文字幕视频| 亚洲福利中文字幕在线| 五月天伊人| 日韩91网| 亚洲精品无码成人久久久99| 欧美亚洲日韩人妻在线观看| 粉嫩AV输入| 久久精品黄色| 久久久精品成人国产| 少妇被玩视频二三区| 国产又长又大又粗的视频| 中日韩一区二区三区欧美| 亚洲精品中文字幕一区在线视频| 蜜桃视频精品一区二区三区| 东京热,男人的天堂| 亚洲三区视频| 91色噜噜狠狠| 91人人操| 天天日夜夜爽| 十八禁电影伊人网| 日本人妻中文字幕精品| 在现视频女上位好爽| 成年在线视频日本亚洲在线视频区精品江靖宇公司 | 黄色高清久久无码依人| 欧美资源| 激情五月天色色| 99国产精品自在自在| 一个色导综合| 伊人五月天青青草婷婷| 91亚洲欧美激情| 中文字幕av乱伦| 亚热日本熟女| 亚洲囯产精品女人久久久| 另类亚洲图色| 中英熟女操女| 四虎影库国产精品免费| 青青草中文字幕| 99热精品在线| 夜夜欢天天干| 青青草中文-久久青草精品一区二区三 | 日韩三级性| 中文字幕中文字幕一区二区| 伊人伊人LD| 日韩综合无码色欲vv| 最新亚洲风情电影| 日韩99精品视频综合区| 色噜噜人妻丝袜AV资源| 人人做天天爱| 绑缚麻绳人妻寝取完整版| 亚洲无码太久| 啊啊啊快操我视频| 思思热在线cao| 亚洲日韩乱码中文无码蜜桃臀网站| 欧美午夜视频免费观看| 久久m| 18禁网站在线播放| 中文字幕伊人| 99操视频| 97超碰护士| 日本三级日本三级三级人妇四虎| 国产黄色剧情影片麻豆免费播放| 狠狠热这里都是精品| 精品久久无码午夜福利| 日本新免费二区三区| 抽插无码高清一区| 天天综合色图| 亚洲情色一区三区| 日韩一级特黄av毛片| 97精品一区| 久久小视频| 高清国产无码av| 在线情色电影 91大| 自偷自拍的亚洲视频| 国产久久久久久| 欧美 青青草| 午夜福利在线合集| 日韩熟女精一区二区三区不卡| 北条麻妃99精品青青久久| AV天堂国产| 尤物视频新赏网鲜网色诱网| 校园春色之综合网| 中文日本免费高清| 欧美亚洲天天| 麻豆性爱视频在线播放| 激情五月天社区| 国产强奸乱伦无码视频| 男人精品天堂一区| 麻豆精品久久久久久久| 国产精品视频一区二区三区八戒| 亚洲性高潮| 午夜精品久久久久| 九九这里只有精品| 95自拍视频在线观看| 久久精品毛片免费不卡| 久久亚洲日韩熟女精品| 熟妇艹鸡八| 天天爽人人综合免费7799| 亚洲无无码αⅴ每日更新| 亚洲国产97在线精品一区| 亚洲瓯美色图| 婷婷丁香六月| 八人操人人摸人人看| 亚洲成人贴图| 91天天爽| 欧美日韩青操| 欧美三级一级| 色九区| 久久riav中文精品| 日韩性爱啪啪视频| 伊人九九| 熟妇一区,二区,三区。| 亚洲熟妇熟在线电影视频| 色色色欧美| 欧美午夜一区二区三区| 性饥渴少妇av无码毛片| 亚洲国产97| 亚洲交性| 老鸭窝成人| 天综合网欧美| 国产综合久久久鬼色| 性爱网站一区二区| 亚洲黑人在线| 97这里有精品| 揉揉揉夜夜| 肉丝中文无码高清| www. 男人天堂成人在线| 亚洲色图加勒比| 九九九午夜| 精品一区二区啪啪啪| 欧美日韩性爱精品| 综合自拍| 国产精品99久久久www| 亚洲成a人片在线观看中文!!!| 少妇熟女1区2区3区| 亚洲国产成人精品女人久久久| 九九九九热只有精品| 久久九九热| 久热网| 日本ZZ高免费A级视频| 欧美线天码中字| 屁股久久久久久久久| www. 男人天堂成人在线| 欧美 亚洲 另类 综合| 成人一区二区三区四区| 亚洲综合性网址| 蜜桃一区二区三区| 九九九九一级| 亚洲色天堂九9| 毛片99-全集电影手机免费观看完整-B029AV | 大香蕉伊人久久| 97在线精品| 东京日日夜夜| www鬼畜国产男人的天堂| 久久久不能久久久久| 天天摸夜夜摸| 成人无码在线超碰网| 91影库| 日韩一性一交一A片俄罗斯| 久久久久成人亚洲国产| 亚洲午夜AV| 国内精品999| 天天综合网在线| 欧洲自拍色图gif在线| 精品制服美女中文一区二区三区| 一区e区三| 欧美亚洲小说| 精品国产一区二区三区香蕉欧美| 日本高清_区二区三区 | 久久久久骚| 狠肏骚人妻| 97爱啪| 国产精品视频在线观看| 欧美的性爱网站免费| 国产精品自在自拍视频| 美女刺激久久国产欧美| 国产污视频麻豆传媒一区二区 | 国产亚洲日韩在线三区黑人| av凤凰久久久| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 99热啪啪| 超碰 av 女人天堂| 久久九九久精品国产尤物|国产精品爽黄69天堂A片潘金莲,国产亚洲精品第一综合 | 熟女五十路一区二区三| 99久久婷婷国产综合| 日韩精彩免费| 精品久操| 国产无码三级视频在线观看| 亚洲一卡2卡3卡4卡乱码网站 | 乳欲人妻办公室奶水| 黄网在线播放| 丰满精品人妻少妇久久字幕| 2017天天操天天日| 天天躁日日躁AAAAXXXX国产| 日本色婷婷| 亚洲综合小视频小说在线观看 | 亚洲最大的综合性av| 亚洲青青青视频在线| 91男人天堂网| 国产精品懂色tv影视免费观看| 777奇米影视777四色| 日韩一区二区熟女| 99久久久| 播播亚洲小说亚洲| 婷婷激情一区二区三区俺也去| 亚洲玖玖爱| 亚洲制服aⅴ中文字幕| 日韩情色视频| 日韩本不卡视频在线观看| 国产日韩区| 国产天天骚| 国产精品在线免费| 国产伦乱91| 日韩中文字幕2020| 青娱乐淫乱1314| 青青草日韩无码| 国产夫妻性生活视频| 亚洲精品xxx| 丝袜喷水在线| 91青青草| 五月综合激情| 亚洲av资源| 精品在线观看视频在线| 69久久久久久久久久久久久| 国产久久免费精品视频| 91在线美女| 啊啊啊想要| 欧美拳交在线播放| 欧美日韩制服| 91干熟女| 91痴汉| 操逼逼无码| 日本久久久精品电影| 国产精品久久久久亚洲av| 色九九九综合| 天天看天天在线精品| 日本A级视频| 国产无码高清操逼视频| 韩国女主播青草在线| 国产无码三级视频在线观看| 亚洲精品欧美专业| 操操操五月天婷婷丁香影院| 老熟女91av| 美国日韩黄片| 久久久婷| 亚一综合久久久久久久久久| 任我爽在线视频免费观看| 国产三区免费在线观看| 日韩成人人妻网站| 婷婷在线精品| 激情小说亚洲色图| 亚洲综合影视| 人人操人人干网页| 超碰视97中文| 色婷婷综合网| 九九热九九| 日韩成人午夜精品久久高潮| 久久精品中文字幕观看| 久欲AV| 婷婷久久综合| 中国熟女老妇仑乱一区二区三区| 欧美色图亚州激情| 一区二区影院| 超碰导航97| 久久精品亚洲婷婷| 又大又长又粗又爽又黄| 激情四射婷婷六月天| 色情综合网| 中文字幕天堂在线| 日韩一级二级三级免费看完整版国语版| 黄色视频特级毛片| 国产精品一区二区三| 亚洲精品天天影视综合网| 欧美日韩操逼动图| 欧洲综合色| 欧美色图私拍91| 婷婷五月天激情网| 久久精品国产亚洲AV先锋| 日韩不卡网操逼中文字幕日韩| 日本女人操逼| 韩日色费| 精品人妻高清麻豆av| 五月天色图| 日韩乱伦视频| 老司机福利青青草| 久9爱经典视频| 热天堂一区二区| 3P乱轮视频| 蜜臀久久一区二区| 亚洲国产欧美另类自拍| 久热这里只有精品9| 国产精品欧美激在线| 99精品免费| 国产精品女生av| 好爽免费视频| 欧美草草| 99九九久久| 亚洲精品 大香蕉| 93人人操人人| 久久黄片国产一区二区| 大香蕉日韩| www.男人天堂| 欧美性战999| 日日爽夜夜爽| 大伊香蕉在线视频免费| 精品人妻中文字幕高清| 欧美黑人与女人91| 夜夜做夜夜爽精品视频| 欧美性,色九九| 日本三级久| 大香蕉五月天婷婷| aaaa少妇高潮大片| 天天插夜夜操| 国产午夜精品理论片a大结局| 91亚洲丝袜熟女| 一区二三区四区视频大全套| 97国产亚洲中文在线| 六月婷激情福利天堂69| 婷婷色导航| 强奸乱伦αv片| 亚洲第一狼人丝袜美女另类| 97精品一区二区视频| 91成人无码| 久久久青青草| 天天影视综合色| 97草草| 人妻素股| 日本一级不卡一二区| 欧美中文狠| 日本男人插女人的逼黄色| 懂色AV中文| 日本精品国产视频| 一区二区三区四区姦女| 超碰色中文| 日本不卡码黄色| 熟女一区二区| 99.色网| 国产视频一区二区三区久久亚洲天堂| 欧美亚洲综合色| 久久精品一区二区三区不卡| 狠狠狠狠狠| 色婷婷五月天| 96AV精品| 国产夜夜操| 色五月第四色| 好看的久久不射无码影视影院| 自拍二页| 亚洲日韩欧美一区二区| 制服丝袜第二页| 青青草原成人| 校园春色 亚洲| 亚洲综合在线第一页| 亚洲欧美不卡线| 强奸抽插av| 91精品久久久久五月天精品 | 91色综合激情| 一区二区三区成人| 玖玖超碰熟| 91欧美色| 日韩国产精品人妻无码久久久| 国产偷人伦激情在线观看| 91P0RNY大屁股人妻| 家庭乱伦国产| 国产精品免费视频人成| 99爱精品| 久久精品一区| 日韩久草| 天天综合网~91| 人人操,人人插| 五月天婷精品激情| 夜夜操2028| 婷婷丁香一区二区三区| 欧美激情一| 97超碰久久| 日韩精品国产一区二区| 无码自拍SM| 嗯嗯啊啊啊好舒服| 最新9久久久9免费视频| 99少妇| 无码直播久久久| 亚洲砖码砖专无区2023| 亚欧精品久久久久久久久久久| AV丝袜少妇| 日韩人人精品| 亚洲无码偷拍| 综合久久欧美| 日韩AV一区二区三区三州三州| 欧美91丝袜| 亚洲男人天堂av| 国产欧美日韩一区二区三区| 综合熟女| 久久夜精品一区二区三区| 精品78| 性爱乱伦网址| 色女99一级片在线观看| 91日韩网站| 国产精品日韩在线一区| 性爱视频久久| 97频视在线| 一起草高清无码| 日韩av在线播放不卡| 少妇诱惑视频| 麻豆 美女 丝袜 人妻 中文| 蜜桃视频成a人v在线| 九九玖玖精品| 東南亚性呦成人伦理资源在线视频| 人人贴人人摸| 日本在线不卡123| 蜜区区视频79 | 麻豆三极片| 久久曰曰| 亚洲诱惑天堂 | 成人精品视频| 日本韩国国产精品一区| 狠狠穞A片一區二區三區| 国产精品久久久久久夜夜夜夜| 放黄片放3级黄片没穿衣服| 免费看日产一区二区三区| 成人欧美日超碰| 9国产超碰| 国产超碰国产97| 理论久久婷婷网8| 日韩欧美俄罗斯A片| 久久人爽| 久久久久久69国产一区二区| 美日韩一卡二卡三卡免费人妻精品| 青娱乐黄色录像| 综合色啪| 人妻喷水| 亚洲欧美国产其他二区| 国产情色在线| 上海一级黄片| 亚洲熟久久| 欧美性爱第一区| 日本999精品| 一二三四视频中文字幕在线看| 裸体女人草逼视频播放一区,二区,三区,四区,五区 | 啪啪91| 欧美91精品国产自产| 97爱免费插| 精品78| 91在线美女| 成年无码动漫av片无尽在线 | 熟妇精品juliaannAV| 操逼视频国产无套| 婷婷情色五月天| 18禁无码永久免费无限制| 色婷婷综合久久中文字幕雪峰| www.亚洲黄色| 天天摸夜夜操视频| 国产无马视频| 97国产精品久久久久 | 日韩天堂av电影在线观看| 立川理惠被中出无码| 日本一片一区| 色网在线视频观看免费| 蜜桃狠狠色伊人亚洲综合| 92午夜免费福利视频| 久艹免费| 亚洲一区二区三区久久 亚洲一区二区| 欧美色图色综合| av操操不卡| 亚洲囯产精品女人久久久| 黄色一区三区| 加勒比大香蕉视频在线| 啪啪视频免费在线观看| 欧美视频激情久久久久久| 秋霞蝌科网日本一区| 色色97爱| 精品久久99| 欧美黄片免费在线观看视频| 在线五区| renqi久久久久久久久久久久| 国产1024在线播放| 日韩综合97P| 色99视频| 99久久精品无码一区二区毛片免费| 美女黄码视频午夜| 久久免费精彩视频| 狠狠操,使劲操| 蜜臀aV午夜一区二区三区| 五月色综合| 性爱视频啪啪啪啪| 亚洲天在线| 午夜精品久久久99| 黄网色一区二区三区四区精品| 青青色在线观看| 97精品久久久久中文字幕| 六月丁丁香| 综合国产影视三级| 99热这里都是精品| 91欧美美女日韩国产婷婷| 中字乱伦AV| 内射老妇BBWX0C0CK| 大逼色网站| 黑人与人妻| 久悠悠av| 亚洲成人性爱在线观看| 操逼A∨| 国产超碰欧美| 香蕉久久精品| 调教熟妇 久久久久久| 亚洲最大成人a毛毛片| 99re这里只有精品9| 国产精品乱码久久久久久| 国产天天骚| 色一情一乱一乱一区91Av| 欧美日本中字另类在线| 百度百度日本操逼| 97精品全部| 久久精品人妻一区二区| 欧美日韩国第一区| 日韩成人网址| 国产中文精品一区二区在线观看| 97香蕉网| 91在线观看,天天综合| 少妇99| 色色99| 大香蕉在线视频15| 99亚洲精品| 国产高清成人传媒影视| 亚一综合久久久久久久久久| 欧洲在线性爱视频| 97久久超碰| 亚洲欧美在线丝袜| 91蜜桃传媒精品久久久一区二区| www.男人天堂| 四虎免费看黄| 韩国三级三级BD在线| 爱射综合| 精品女人999| 婷婷成人五月天| www久| 一区二区三区视频在线观看免费| 操逼www.| 国产啊v在线免费播放| 国产精品区在线12p| 国产精品成人久久一区二区三区| 精品视频一区二区| 国产白丝精品在线观看| 亚洲天堂2020| 9久精品| 屁股久久久久久久久久| 男人久久天堂| 啊v在线观看视频| 一区二区不卡视| 欧美激情激情xxxx欧美专区| 三级色影综合网| 中文字幕制服诱惑| 日日夜夜精品视频| 久久产精品一区二区三区电影| 好爽视频在线观看视频| 手机看片91人妻| 日本黄色精品专区网站| 亚洲免费成人在线高清无码视频|