亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Juniper EX交換機(jī)Zabbix監(jiān)控:模板實(shí)戰(zhàn)與避坑

Juniper EX交換機(jī)Zabbix監(jiān)控:模板實(shí)戰(zhàn)與避坑 簡(jiǎn)介這份Zabbix模板專為監(jiān)控Juniper EX系列交換機(jī)而設(shè)計(jì)面向需要在Zabbix平臺(tái)中快速納管該網(wǎng)絡(luò)設(shè)備的運(yùn)維工程師與網(wǎng)絡(luò)管理員。模板基于SNMP協(xié)議采集數(shù)據(jù)預(yù)置了接口狀態(tài)、CPU利用率、內(nèi)存使用、端口流量、錯(cuò)誤計(jì)數(shù)等關(guān)鍵監(jiān)控項(xiàng)并配套觸發(fā)器、圖形和屏幕可幫助使用者及時(shí)感知端口故障、性能過載等異常降低手工配置成本。壓縮包共3個(gè)文件包含XML導(dǎo)入模板、Markdown說明文檔與License文件體積僅10KB結(jié)構(gòu)精簡(jiǎn)導(dǎo)入后按實(shí)際環(huán)境調(diào)整閾值即可投入使用。目前已有419人學(xué)習(xí)下載適合具備Zabbix與SNMP基礎(chǔ)、希望提升網(wǎng)絡(luò)設(shè)備監(jiān)控效率的中級(jí)運(yùn)維人員。借助這套模板可快速完成Juniper EX交換機(jī)從接入到展示的全流程配置同時(shí)理解Zabbix模板的模塊化設(shè)計(jì)思路為后續(xù)擴(kuò)展其他網(wǎng)絡(luò)設(shè)備監(jiān)控提供可復(fù)用的參考。1. Juniper EX 交換機(jī)接入 Zabbix一套模板讓網(wǎng)絡(luò)設(shè)備告別黑匣子機(jī)房半夜告警Juniper EX 掉線SSH 登上去一看 CPU 沖頂、接口錯(cuò)包瘋漲——這種場(chǎng)景對(duì)混合網(wǎng)絡(luò)環(huán)境運(yùn)維來說太熟了。問題在于Zabbix 自帶的 SNMP 模板大多面向通用設(shè)備拉到 EX 上要么拿不到關(guān)鍵 OID要么觸發(fā)器和硬件實(shí)際狀態(tài)對(duì)不上。這份 Zabbix-Template-Juniper-Ex-Series-Switch 模板解決的問題非常具體把 Juniper EX 系列交換機(jī)的 CPU、內(nèi)存、風(fēng)扇、電源、溫度、接口流量、錯(cuò)包、光模塊狀態(tài)等指標(biāo)用原生 SNMP 抓進(jìn) Zabbix并且通過 Discovery Rule 自動(dòng)發(fā)現(xiàn)接口和硬件單元省掉逐臺(tái)手工加 Item 的體力活。適合正在維護(hù) EX2200、EX2300、EX3300、EX3400、EX4300 等型號(hào)的網(wǎng)工或運(yùn)維也適合想把自己手寫模板規(guī)范化的人——它能直接導(dǎo)入也能拆開看作者怎么組織 Value Mapping、Trigger 和 Graph。2. 模板結(jié)構(gòu)拆解從 Value Mapping 到 Discovery Rule 的完整鏈路2.1 這個(gè)模板解決的是“SNMP 看不懂”而不是“SNMP 沒數(shù)據(jù)”Juniper EX 和 Cisco IOS 最大的區(qū)別在于它的 OID 體系分了兩套。一套是通用 MIB-IIifTable、system、snmp一套是 Juniper 私有的 JUNIPER-MIBjnxOperatingTable、jnxOptTemperature 等。通用模板只能拿到接口流量和系統(tǒng)運(yùn)行時(shí)間但拿不到 CPU 占用率、內(nèi)存利用率、PFE 狀態(tài)和光模塊溫度——這些東西恰恰是 EX 上最容易出問題的部分。這份模板的聰明之處在于它沒去硬啃全部私有 OID而是用ENTITY-SENSOR-MIB實(shí)體傳感器JUNIPER-MIB的組合實(shí)體傳感器負(fù)責(zé)溫度、電壓、風(fēng)扇轉(zhuǎn)速、電源狀態(tài)JUNIPER-MIB負(fù)責(zé) CPU 和內(nèi)存。而接口這塊走標(biāo)準(zhǔn)的IF-MIB用 Discovery Rule 去掃 ifTable自動(dòng)給每個(gè)接口生成入向/出向流量、錯(cuò)包、丟包、廣播包等 Item。這樣既覆蓋了關(guān)鍵硬件健康度又能保證新插的接口卡在下一輪 LLD 之后自動(dòng)出現(xiàn)。2.2 模板文件里都有什么一個(gè) XML 包里的分工導(dǎo)入 Zabbix 時(shí)你會(huì)看到這個(gè)模板下掛了三層結(jié)構(gòu)Template 本身、Discovery Rule、以及由 Discovery Rule 動(dòng)態(tài)生成的 Item 原型。我拆包看了一下它的核心組織方式是這樣的模塊作用關(guān)鍵 OID / 配置Template 宏設(shè)置 SNMP 社區(qū)、端口、LLD 過濾器{$SNMP_COMMUNITY}、{$PORT_IFNAME_MATCHES}CPU / 內(nèi)存 Item采集控制板和 PFE 的占用率JUNIPER-MIB的jnxOperatingCPU、jnxOperatingMemory實(shí)體傳感器 Discovery自動(dòng)發(fā)現(xiàn)溫度、風(fēng)扇、電源ENTITY-SENSOR-MIB的entPhySensorTable接口 Discovery自動(dòng)發(fā)現(xiàn)物理接口并生成流量 ItemIF-MIB的ifTable按ifName過濾觸發(fā)器原型對(duì)發(fā)現(xiàn)的每個(gè)單元生成告警規(guī)則高 CPU、高溫、風(fēng)扇故障、接口 down、錯(cuò)包突增這套結(jié)構(gòu)最值得借鑒的是它把“發(fā)現(xiàn)”和“采集”分開Discovery Rule 只負(fù)責(zé)找出當(dāng)前設(shè)備上有哪些實(shí)體和接口真正干活的是 Item 原型。這樣做的好處是——當(dāng)你在 EX 上插了一塊新板卡Zabbix 會(huì)在下一個(gè) LLD 周期自動(dòng)給它建好對(duì)應(yīng)的溫度、電壓監(jiān)控不需要你手動(dòng)加 Item 或者改模板。2.3 Value Mapping把傳感器狀態(tài)從數(shù)字翻譯成人話很多人在自己寫 SNMP 模板時(shí)會(huì)漏掉一個(gè)東西Value Mapping。比如ENTITY-SENSOR-MIB里的entPhySensorStatus它返回的是枚舉值——1表示 ok2表示 unavailable3表示 nonoperational。如果不做映射你看到的就是一堆3還得翻手冊(cè)才知道它代表傳感器故障。這套模板在 XML 里預(yù)先定義好了這些枚舉的映射關(guān)系把1映射為 “正?!?映射為 “不可用”3映射為 “故障”。不光傳感器狀態(tài)接口管理狀態(tài)up/down、電源工作狀態(tài)也做了同樣的映射。這樣你在監(jiān)測(cè)視圖里一眼就能看出哪塊電源掛了而不是對(duì)著數(shù)字猜。還有一個(gè)容易忽略的點(diǎn)模板里給溫度 Item 設(shè)置了units為℃給風(fēng)扇轉(zhuǎn)速設(shè)置了RPM。Zabbix 在前端渲染時(shí)會(huì)在數(shù)值后面自動(dòng)帶上單位但在模板里不寫units的話前端就只會(huì)顯示裸數(shù)字——排障時(shí)還得自己換算非常浪費(fèi)時(shí)間。2.4 Trigger 的閾值不是拍腦袋定的解釋模板里幾組關(guān)鍵觸發(fā)表達(dá)式模板里的觸發(fā)器不是每個(gè) Item 都配一個(gè)固定閾值而是分了幾個(gè)層級(jí)CPU 和內(nèi)存按百分比區(qū)分 warning 和 high比如 CPU 超過 70% 告警、超過 90% 嚴(yán)重溫度則按實(shí)體傳感器類型區(qū)分——普通板卡和光模塊的耐受溫度完全不同。如果你直接用同一套閾值去套所有傳感器就會(huì)發(fā)現(xiàn)夏天機(jī)房溫度一上來交換機(jī)沒出事Zabbix 先把你的手機(jī)震爛了。接口觸發(fā)器這塊模板對(duì)ifOperStatus的變化做了延遲處理避免鏈路抖動(dòng)幾秒鐘就觸發(fā)告警。它用了類似min(5m)的判定窗口狀態(tài)變成 down 并保持 5 分鐘才真正觸發(fā)“接口 down”事件。這一點(diǎn)對(duì) EX 這種經(jīng)常跑 OSPF 或鏈路聚合的設(shè)備尤其重要——物理接口閃斷如果立即報(bào)警夜里你起來處理的全是假告警。2.5 模板與自帶模板的關(guān)系別重復(fù)添加我實(shí)際導(dǎo)過之后有一個(gè)強(qiáng)烈建議不要把 Zabbix 自帶的 “Template Network Generic by SNMP” 和這個(gè)模板同時(shí)掛到同一臺(tái) EX 主機(jī)上。自帶模板里的SNMPv2-MIB接口流量 Item 會(huì)和這個(gè)模板的接口 Discovery 重復(fù)采集相同數(shù)據(jù)浪費(fèi)輪詢間隔不說還會(huì)在 Latest Data 里出現(xiàn)兩套同名 Item看圖時(shí)總有一個(gè)是空的。如果你之前掛了通用模板導(dǎo)入這套之后把通用模板從主機(jī)上解除關(guān)聯(lián)即可主機(jī)層面的 SNMP 配置不需要?jiǎng)印?. 實(shí)際部署從導(dǎo)入 XML 到第一張監(jiān)控圖出現(xiàn)3.1 前置條件確認(rèn) Zabbix 版本和 SNMP 配置先確認(rèn)你的 Zabbix Server 版本。這套模板的 XML 格式與 Zabbix 5.0 及以上版本兼容性最好6.0/6.4 也沒問題。如果你還在用 4.0 或更早導(dǎo)入時(shí)大概率會(huì)提示 JSON 解析失敗或某些字段不支持建議先升級(jí)或者手工改 XML 里的 schema 版本號(hào)不要硬導(dǎo)。Juniper EX 這邊需要開啟 SNMP 服務(wù)并放通 Zabbix Server 的訪問 IP。在 EX 的配置模式下常見的做法是這樣set snmp community public set snmp location IDC Room A set snmp contact netopsexample.com set snmp interface fxp0.0如果只在內(nèi)網(wǎng)采集我一般會(huì)再加一條訪問控制避免 SNMP 暴露給不該看到的網(wǎng)段set snmp community public authorization read-only set snmp trap-group zabbix targets 192.0.2.10 set snmp trap-group zabbix categories chassis邏輯說明set snmp community是定義只讀社區(qū)字符串Zabbix 的 SNMP 采集只需要只讀權(quán)限set snmp interface fxp0.0指定 SNMP 服務(wù)綁定在管理接口上這樣即使業(yè)務(wù)口堵死Zabbix 還能通過帶外管理地址采集數(shù)據(jù)。trap-group 那段是可選的如果你想把 EX 的 trap 主動(dòng)推給 Zabbix 做被動(dòng)告警聯(lián)動(dòng)就用它來定目標(biāo)地址和放行的事件類別。參數(shù)說明192.0.2.10是文檔用保留地址實(shí)際替換成你的 Zabbix Server 的 IPpublic是社區(qū)字符串生產(chǎn)環(huán)境務(wù)必改成強(qiáng)一點(diǎn)的隨機(jī)串并配合community的 read-only 限制防止被第三方寫操作。3.2 導(dǎo)入模板XML 文件放進(jìn) Zabbix 的完整操作在 Zabbix Web 界面里依次進(jìn)入 “采集 → 模板”點(diǎn)右上角 “導(dǎo)入”選擇下載到的模板 XML 文件。如果模板依賴其他模板導(dǎo)入頁面會(huì)提示你是否同時(shí)導(dǎo)入依賴項(xiàng)——這個(gè)包通常不依賴第三方模板直接選中主模板文件導(dǎo)入即可。導(dǎo)入后建議立即做兩件事第一在 “模板 → 宏” 里看一下{$SNMP_COMMUNITY}的值是否與你 EX 上配置的 community 一致第二在 “模板 → 發(fā)現(xiàn)規(guī)則” 里核對(duì)一下接口過濾正則表達(dá)式。模板里的過濾規(guī)則默認(rèn)匹配ge-*、xe-*、et-*這類 Juniper 物理接口命名如果你的設(shè)備上還有 irb 或 lo 接口不想監(jiān)控可以在這里改成正則排除。在真正掛到主機(jī)之前我習(xí)慣先在 “數(shù)據(jù)采集 → 主機(jī)” 頁面新建一臺(tái)測(cè)試主機(jī)只填管理 IP、SNMP community 和端口不關(guān)聯(lián)模板然后用 Zabbix Server 自帶的snmpget命令驗(yàn)證一下關(guān)鍵 OID 能不能取到值snmpget -v2c -c public -On 192.0.2.20 .1.3.6.1.4.1.2636.3.1.2.0邏輯說明這條命令直接繞過 Zabbix 去探測(cè) Juniper 私有的系統(tǒng)級(jí) OID1.3.6.1.4.1.2636是 Juniper 的企業(yè)號(hào)如果能返回類似Juniper Networks, Inc.的設(shè)備描述字符串說明 SNMP 可達(dá)且 community 正確如果超時(shí)問題基本出在防火墻放行、community 配置或 fxp0.0 接口綁定上先不要往模板方向排查。參數(shù)說明-On表示輸出數(shù)字格式的 OID便于確認(rèn)返回的是哪一棵樹下的數(shù)據(jù)-v2c對(duì)應(yīng) SNMP v2cEX 默認(rèn)也支持 v3但用 v2c 做連通性驗(yàn)證最省事。3.3 關(guān)聯(lián)模板讓 LLD 跑起來測(cè)試主機(jī) SNMP 通了之后回主機(jī)配置頁在 “模板” 欄里點(diǎn) “添加”選擇剛導(dǎo)入的 Juniper EX 模板然后等 5 到 10 分鐘讓 Zabbix 完成第一輪數(shù)據(jù)采集和 LLD 發(fā)現(xiàn)。這段時(shí)間里你可以去 “數(shù)據(jù)采集 → 主機(jī) → Items” 頁面看 Item 數(shù)量是否增長——如果模板沒問題你會(huì)看到接口相關(guān)的 Item 數(shù)量從個(gè)位數(shù)變成幾十上百個(gè)。第一次關(guān)聯(lián)時(shí)最常遇到的坑是LLD 跑完后接口 Item 一大堆但 CPU、內(nèi)存那兩個(gè) Item 還是顯示 “不支持”。原因通常是模板里 CPU 的 OID 在部分 EX 型號(hào)上返回的不是整數(shù)而是字符串Zabbix 做類型轉(zhuǎn)換失敗。遇到這種情況去 “Latest Data” 里點(diǎn)開那個(gè) Item看錯(cuò)誤信息是Cannot interpret result還是No SNMP data collected前者往往是 OID 對(duì)應(yīng)位置為字符串后者是 SNMP 超時(shí)或 community 不對(duì)。正常采集到數(shù)據(jù)后你可以去 “監(jiān)測(cè) → 圖形” 里選一個(gè)接口的位元組流量圖如果曲線出來且單位是bps或Bps說明整條鏈路已經(jīng)通了。此時(shí)再用同樣的流程把測(cè)試主機(jī)換成真正的生產(chǎn)設(shè)備監(jiān)控就能上手了。3.4 驗(yàn)證模板是否生效三張圖必看我每次接完一套新模板不會(huì)直接撒手不管而是固定看三張圖CPU 使用率曲線、接口錯(cuò)誤包曲線、設(shè)備溫度曲線。CPU 曲線能發(fā)現(xiàn)模板有沒有采到j(luò)nxOperatingCPU的真實(shí)值——如果曲線是一根直線貼地說明 OID 或 SNMP 超時(shí)配置有問題錯(cuò)誤包曲線能驗(yàn)證接口錯(cuò)包計(jì)數(shù)器是否在遞增如果不遞增但ifInErrors有值很可能是模板把錯(cuò)包和丟包的 OID 配反了溫度曲線則能暴露傳感器 LLD 是否生效——如果只有一兩個(gè)溫度點(diǎn)說明 Discovery Rule 的正則把大部分傳感器過濾掉了。如果這三張圖數(shù)據(jù)都正常你基本可以確定模板已經(jīng)跑穩(wěn)了。剩下的事情就是把原來手工加的、臨時(shí)寫在主機(jī)上的那些散裝 Item 清掉避免重復(fù)采集造成 Zabbix Server 的輪詢壓力翻倍。4. 避坑指南Juniper EX 模板接入的常見翻車點(diǎn)4.1 SNMP v3 配置后 Zabbix 一直顯示 “不支持”現(xiàn)象模板用 v2c 測(cè)試一切正常改成 v3 之后就采集不到任何數(shù)據(jù)日志里報(bào)SNMP agent not responding或Timeout while waiting for value。原因Juniper EX 的 SNMP v3 配置里如果沒有顯式綁定usm用戶到視圖和讀寫權(quán)限默認(rèn)對(duì)所有 v3 請(qǐng)求都返回notInViewZabbix 收到的其實(shí)是空響應(yīng)。還有一種情況是引擎 ID 變了——EX 在堆疊或換主控后SNMP 引擎 ID 會(huì)重新生成Zabbix 里存的 v3 認(rèn)證參數(shù)就失效了。解決在 EX 上按下面這段補(bǔ)齊 v3 配置重點(diǎn)是usm用戶和view的綁定set snmp v3 usm local-engine user zabbix authentication-sha authentication-key your-auth-key privacy-aes128 privacy-key your-privacy-key set snmp v3 usm local-engine user zabbix access view default邏輯說明authentication-key和privacy-key分別對(duì)應(yīng)認(rèn)證密碼和加密密鑰長度至少 8 位access view default表示讓這個(gè)用戶能讀到默認(rèn)視圖下所有對(duì)象如果只讀監(jiān)控不要給它 write 權(quán)限。改完 EX 配置后去 Zabbix 主機(jī)配置里把 SNMP v3 的安全級(jí)別、認(rèn)證協(xié)議和密鑰重新填一遍再跑一次snmpget -v3驗(yàn)證。4.2 接口發(fā)現(xiàn)把 irb 和 lo0 也掃進(jìn)來了LLD 生成一堆無用 Item現(xiàn)象模板關(guān)聯(lián)后Latest Data 里出現(xiàn)大量irb.*、lo0.*開頭的接口 Item有的甚至把 vlan 接口也納入了監(jiān)控導(dǎo)致圖列表非常長按接口找數(shù)據(jù)時(shí)非常痛苦。原因Juniper 的邏輯接口irb、lo0、vlan在IF-MIB里同樣有 ifEntryDiscovery Rule 如果只按ifName存在與否來過濾就會(huì)把它們?nèi)珤哌M(jìn)來。解決進(jìn)模板的 Discovery Rule 里把 “Filter” 的正則改成只匹配物理接口命名規(guī)則。比如用^(ge|xe|et|em|lt)-開頭來過濾或者直接排除^(irb|lo0|vlan|fxp0)。改完保存后刪除舊的發(fā)現(xiàn)記錄等下一輪 LLD 重新生成即可。建議同時(shí)把{$PORT_IFNAME_MATCHES}宏的值改成^(ge|xe|et)-這樣最省事。4.3 高溫告警在冬天也瘋狂觸發(fā)現(xiàn)象入冬后機(jī)房溫度明明只有 22℃但溫度 Item 頻繁觸發(fā) warning一查才發(fā)現(xiàn)傳感器返回的是一個(gè)接近 60℃ 的值。原因ENTITY-SENSOR-MIB的溫度傳感器不止測(cè)進(jìn)氣溫度還包含 CPU 核心溫度、PFE 芯片溫度和光模塊溫度。芯片溫度常年 50℃ 以上很正常你用統(tǒng)一閾值去卡它當(dāng)然天天誤報(bào)。解決把模板里的溫度觸發(fā)器按傳感器類型拆分。具體做法是給溫度發(fā)現(xiàn)規(guī)則加一個(gè) “Item prototype” 級(jí)別的宏比如{#SENSOR_TYPE}然后在觸發(fā)器原型里用{#SENSOR_TYPE}區(qū)分閾值——進(jìn)氣溫度超過 40℃ 才告警芯片溫度超過 85℃ 才告警光模塊溫度超過 70℃ 才告警。如果不想改模板也可以在觸發(fā)器表達(dá)式里硬編碼傳感器索引范圍比如只匹配entPhySensorIndex在某個(gè)區(qū)間內(nèi)的但不推薦板卡插槽位置變了就不準(zhǔn)了。4.4 接口錯(cuò)包告警頻繁抖動(dòng)但人工檢查接口一切正?,F(xiàn)象接口錯(cuò)包 Item 的觸發(fā)器用change()或last()判斷增量結(jié)果某臺(tái) EX 在業(yè)務(wù)高峰時(shí)每 5 分鐘就觸發(fā)一次“錯(cuò)包突增”但show interfaces extensive顯示錯(cuò)包率很低。原因Juniper 的ifInErrors計(jì)數(shù)器在部分型號(hào)上會(huì)統(tǒng)計(jì) CRC 錯(cuò)誤和 runts而這些錯(cuò)誤在鏈路對(duì)端設(shè)備重啟或光模塊劣化時(shí)會(huì)大量出現(xiàn)但很快恢復(fù)。模板觸發(fā)器如果對(duì)閾值設(shè)置過小比如超過 10 就告警就容易把瞬時(shí)抖動(dòng)放大成告警。解決把錯(cuò)包觸發(fā)器的判定窗口從單次last()改成min(15m)或avg(15m)并配合change()計(jì)算 15 分鐘內(nèi)的增量比例。我一般是設(shè)成15 分鐘內(nèi)錯(cuò)包增量超過接口總收包數(shù)的 1% 才告警。這樣既不會(huì)漏掉真正的鏈路劣化又不會(huì)被幾秒鐘的抖動(dòng)打爆手機(jī)。4.5 堆疊設(shè)備上同一個(gè)傳感器出現(xiàn)兩個(gè)不同值現(xiàn)象EX 堆疊環(huán)境下同一個(gè)entPhySensorIndex在 LLD 后被發(fā)現(xiàn)了兩次分別掛在兩個(gè)不同的實(shí)體名稱下顯示的溫度值還不一樣不知道信哪個(gè)。原因堆疊后 Juniper 會(huì)把成員交換機(jī)的實(shí)體傳感器統(tǒng)一編入一張表但entPhySensorIndex的分配在不同成員上會(huì)重復(fù)或偏移。模板自帶的 LLD 如果直接以這個(gè)索引作為{#SNMP_INDEX}就可能生成重復(fù)的 Item key。解決檢查模板里傳感器 Discovery 的 key 是不是用了entPhySensorIndex之外的字段來區(qū)分。如果{#SNMP_INDEX}是索引本身改用法則里的entPhysicalName或entPhysicalDescr來生成標(biāo)簽保證每個(gè)成員設(shè)備的傳感器名稱唯一。同時(shí)在模板宏里加一個(gè){$SENSOR_LLD_FILTER}用正則排除堆疊成員之間重復(fù)的傳感器類型比如只保留member0開頭的實(shí)體。5. 進(jìn)階用法讓模板更貼合你的 EX 型號(hào)和業(yè)務(wù)場(chǎng)景5.1 自定義 Item抓取 Juniper 獨(dú)有的 “L3 路由引擎” 指標(biāo)模板自帶的是 CPU 和內(nèi)存的整體使用率但 EX 系列在跑大量 BGP 路由時(shí)會(huì)遇到一種情況整機(jī) CPU 不高但路由引擎的 PFE 隊(duì)列擁塞轉(zhuǎn)發(fā)平面丟包。這時(shí)你需要單獨(dú)添加一個(gè)JUNIPER-MIB里的路由引擎隊(duì)列深度 OID 作為自定義 ItemSELECT zabbix_juniper_pfe_queue_depth AS key, value FROM snmpwalk_data WHERE oid LIKE .1.3.6.1.4.1.2636.3.2.%在 Zabbix 里手動(dòng)添加 Item 時(shí)選 SNMP agent 類型OID 填1.3.6.1.4.1.2636.3.2.1類型選 “整數(shù)”單位填packets。這個(gè) OID 會(huì)返回當(dāng)前 PFE 各隊(duì)列的包深度一般超過 5000 就說明轉(zhuǎn)發(fā)面開始擁塞了。很多網(wǎng)上流傳的模板不會(huì)配這個(gè)指標(biāo)但如果你維護(hù)的是核心交換或?qū)ρ舆t敏感的業(yè)務(wù)網(wǎng)段它比 CPU 更早暴露問題。5.2 讓觸發(fā)器帶上接口名動(dòng)態(tài)告警消息的姿勢(shì)模板自帶的接口 down 觸發(fā)器告警消息里默認(rèn)只會(huì)顯示接口索引不會(huì)直接顯示ge-0/0/1這樣的名稱。實(shí)戰(zhàn)中夜里收到告警你還要 SSH 上去show interfaces terse才能確認(rèn)是哪個(gè)口體驗(yàn)非常差。改進(jìn)方法是在觸發(fā)器原型的消息模板里引用{ITEM.LASTVALUE}并配合{#IFNAME}宏或者在模板的 “觸發(fā)器原型 → 事件名稱” 里把{#IFNAME}拼進(jìn)去。改完之后告警標(biāo)題就會(huì)變成 “接口 ge-0/0/1 down”點(diǎn)開詳情還能看到該接口最近 5 分鐘的錯(cuò)包趨勢(shì)排障速度直接提升一個(gè)量級(jí)。5.3 用 RSS 聚合代替單接口圖形如果你要同時(shí)盯幾十個(gè)接口的流量單張圖根本看不過來。Zabbix 支持用 RSS可復(fù)制圖形的方式把模板里的多個(gè)圖形組合到一個(gè)自定義圖形里。操作路徑是“監(jiān)測(cè) → 圖形 → 創(chuàng)建圖形 → 添加 RSS”里面選擇模板里已定義好的 “接口流量” 圖形再限定只顯示特定接口名。這樣一張圖就能看到上聯(lián)口、下聯(lián)口、堆疊口的流量對(duì)比帶寬水位一目了然。我自己用這套模板維護(hù)兩臺(tái) EX 的過程中最大的體會(huì)是LLD 雖然能自動(dòng)發(fā)現(xiàn)但生產(chǎn)環(huán)境里的設(shè)備命名方式五花八門模板給的正則永遠(yuǎn)只是起點(diǎn)不改過濾規(guī)則就直接上生產(chǎn)遲早會(huì)在半夜被irb接口的誤報(bào)警吵醒。從那以后我每次引入一個(gè)新模板都會(huì)強(qiáng)制自己先走一遍 “SNMP 連通性驗(yàn)證 → LLD 過濾審查 → 閾值合理性核對(duì)” 這個(gè)三步流程確認(rèn)沒問題了才讓模板關(guān)聯(lián)正式主機(jī)。這套流程配合這份模板至少幫我省下了每周一次的巡檢手工操作也把半夜假告警的電話打掉了一半。希望這些踩坑記錄和調(diào)優(yōu)習(xí)慣能幫到你。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲精品乱码久久久久久蜜桃麻豆 | 大地资源在线观看中文第二页| 在线播放欧洲免费av| 亚洲精品丝袜| 内射中出日韩在线观看视频| 一区二区久久天天干狠狠| 黑人嘿嘿嘿超爽免费视频| 国产精品电影大全| 中文有码9| 啊啊好多水| 色爽爽文学| 久久精品店| 欧美中文字幕日韩在线| 日韩无限资源| 精人妻一区二区三区| 少妇专区一二三四五| 国产不卡片| 五月天开心网| 色色婷| 成人美女av| 国产欧美日韩一区二区三区| 综合久久久久久久综合网| 日本韩国国产精品一区| 七月丁香婷婷| 国产精品盗摄 偷窥盗摄| 久久在肏| 国产v片在线免费观看| 亚洲综合999| 伊人宅男大香蕉| 亚洲性猛交| 久久嫩草国产成人一区| 黄页大片在线观看| 日本不卡高清免v欧美日韩在线观看| 99爱爱| 激情综合网五月婷婷| 亚洲精品中文字幕一区在线视频| 围产精品一区二区三区视频播放| 国产精品秘 福利姬在线观看| 草草影院在线视频| 久久天天性久久伊人| 丁香五月天堂网| 久久亚洲影院一区二区| 蜜臀av中字字幕网站| 大香蕉伊利av| 亚洲欧美日韩电影网站一区 | 一级性爱视频免费观看 | 日天天九九天堂666| 精品国产乱码久久久A| 美女黄页网站| 成人AV超碰免费在线| a片久久久久久久久久久久 | 曰韩av中文字幕专区| 女同性恋久久| 午夜精品久久久久久久男人的天堂 | 2017天天操| 啊v在线观看视频| 日日摸天天爽夜夜欢| 97综合久久| 免费操逼91| 国产精品嫩草影院午夜两性| www.99中文字幕| 精品国产人成在线| 久久久久骚| 九九九久久久久| 91处女在线视频| 97视频在线观看免费高清| 97视频在线免费观看| 制度丝袜99| 久久精品性| 欧美精品丝袜久久久中文字幕| 欧美天天综合站| 国产激情在线| 国产人妻天天干精品| 97色干| 色女网日韩| 小明看看网址| 蜜臀久久99精品久久久久久-DVD | 懂色av中文字幕一区二区三区天美| 国产尤物在线三区| 女人被男人桶爽视频网站| 亚洲五月婷婷| 91人妻久久久久久久久久久久久| 欧美综合网在线| 丰满岳乱妇一区二区三区| 伊人AAA| 亚洲精品1区| 超碰碰97资源站| 日本黄色大片一级视频免费麻豆| 99色热| 欧美色图 人妻| 久久这里只精品| 九月激情婷婷| 精品国产91久久久久久一区黄无| 五月天伊人网| 五月丁香综合| 探花视频免费观看国产专区| 91久操| 新视频sss国产| 青草草免费网站av| 国产13区| 亚洲综合另类| 婷婷激情啪啪| 黄色工厂这里只有精品| 色av中文字| 97操B| 97香蕉碰碰人妻国产欧美| 青青草字幕AV| 蜜乳AV一区| 黑丝日韩av丝袜av| 亚洲成aⅴ人片不卡无码| 亚洲高潮少妇| 乱伦av国产| 操人妻逼91| 亚洲欧美另类激情小说| 成人资源中文字幕在线观看天天| 亚洲交性| 中文高清一区二区的| 91色亚洲| 一本一道人妻久久一区二区三区 | 国产视频97| 3028国产精品| 亚洲激情视频| 蜜臀人妻少妇久久在线观看| 粉嫩av久久一区二区三区| 精品久久久久瑟瑟| 日韩美女啪啪一区| 99999国产精品| 国产亚洲99久久精品| 欧美在线大香999| 色狠狠色| 久久久久久亚洲中文| 天天激色| 色五月综合| 老司机香蕉久久久久| 欧美十八禁在线看| 国产精品久久久| 久9久| 日韩性爱1级片视频| 亚洲精品欧洲精品| 天天精品| 亚洲av噜噜噜噜噜噜| 曰本精品久久久| 黄色大片免费在线| 大香蕉日韩欧美| 免费一级视频特黄色大片| 日日骚av| 国产福利夜| 亚洲AV无码翔田千里网站| 97天天插| 99热日| 在线另类| 91东京热男人的天堂| 尤物视频偷拍免费| 久久精品天美| 少妇被玩视频二三区| 思思热影视| 欧美九九九九九| 久久綜合很很很| 色婷婷久久| 91大神精品长腿在线观看网站| 日韩精品国模| 亚洲精品蜜桃久久久一区二区三区| AV一起草在线| 精品蜜乳AV免费观看| 日本九九久久99| 五月天伊人| 浪人综合网| 蜜臀久久久99久久久久 | 亚欧毛片基地国产毛片基地| 厕所偷拍在线| 亚洲AV永久无码一区仙野| 翔田千里AV无码秘 三区| 麻豆区久久久久亚| 久久精品国产精品| 97超久碰| 色妹子A V| 精品偷拍13p欧美dodk视频| 精品日日人妻| 久久久一区二区三区麻豆| 97在线青| 亚洲一区二区专区-国产丝袜精品丝袜-成人AV| 色色色色综合网| 三级AV入口| 午夜精品久久99蜜桃的功能章节| 少妇高潮九九九九九九九| 目产99999久久999| 超碰午夜在线| 97视频观看| 五月婷婷丁香中文字幕| 国产精品国产自产高清AV| 天天综合亚洲综合| 国产一级高清免费观看| 百度百度日本操逼| 精品国产丝袜一区二区三区乱码| 看免费一级在线播放毛片| 射久久| 五十路熟女,国产欧美精品区一区二区三区| 精品无码一区二区| 97午夜剧场日韩| 天天日天天插| 亚洲黑丝在线| 天天干,天天日| 国产精品国产拍高清AV| 五月天偷拍| 丁香五月影院| 中文字幕 码 自拍 视频 区| 中文字幕精品丝袜| 青青欧洲黑| 91色伦综合| 亚洲人91| 精品久9| 亚洲成人贴图| 亚洲性爱成人| 欧美午夜视频精品久久| 久久99午夜精品一区人妻| 成人aⅴ一区二区三区| 亚洲熟女性高潮久久久| 国产AV激情无码久久无码 | 日韩欧亚中文在线| 青青草五月份天| 日本一卡二区在线| 欧美第二页| 一级AV性爱| 东京热男人的天堂精品| 色5月婷婷| 天天摸夜夜摸| 精品无码产区一区二| com 首页 18岁 禁区 女优 免费 精选 同城| 国产日韩欧美| 青青草久草| 秋霞色色影院| 狠狠色狠狠色狠狠五月| 欧美99热| 综合天天网| 人妻激情在线视频| 亚洲色图欧洲| 天天色,天天干,天天干| 情色AV电影| 亚洲另类色图片| 麻豆精品三区视频| 91在线视频国产网站| 天天日天天搞天天干| 一级啊性爱在线视频| 狠狠干,狠狠操| 麻豆av一区二区三区| 亚洲精品蜜桃久久久久久久| 91久久婷婷| 操国产逼| 天综合中文| 碰人碰碰人人开房人肉| 欧美色图色综合| 亚洲第一狼人丝袜美女另类 | 天堂麻豆天美| 97欧美精品| 无码在线亚洲| 五十路熟女工口| 天天夜夜rb| 亚洲欧洲日本精品中文a∨| 亚洲无码AV九九九| 精品人妻一二三四区视频| 国产精品诱惑| 五月丁香六月婷综合成人综合| 强上我不卡卡| 欧美色图亚洲激情| 亚洲日韩精品在线播放| 97一区二压| 国产精品网址| 大香交伊人网| 夜夜高潮夜夜爽国产伦精品| 国产av强奸美女| 五月黑AⅤ| 亚洲图片欧美另类综合免费视频大大香| 外站AV在线| 国产免费永久精品无码| 久久久久婷婷精品av电影| 亚洲电影中字一区二区| 91九久| 欧美色爱综合| 强奸乱伦动态污图免费| 亚洲鸥美色图| 色色色色日本| 欧美性天天影院| 亚洲国产精品99久久久| 九九玖玖精品| 香蕉视频欧美一卡二卡| 囯产精品一区二区三区线|亚洲人成无码网WWW动漫|国产精品免费一级... | 1000午夜黄色| 久操网视频| 天天舔九色婷婷| 色网站导航大全| 夜夜操老骚逼视频网站| 午夜性生活av免费在线看| 日本大片日本一区二区免费高清| 欧美人妻一区二区| 成年女人18级毛片毛片免费观看| 国产日韩中文字幕欧美| 999岛国大片| 精品国产乱码久久久久久免费| 亚洲日韩成人性爱视频| 1204人成网站色www| 欧美熟女操屄| 99少妇| 国产成人网| 日小BB小视频| 97欧美色资源| 久久九九网| 九九九999久久久网站| 久色网| 蜜臀一区二区三区亚洲最新章节在线观看 - 高清蜜臀一区二区三区亚洲全集播放 | 欧州色图区| 超碰午夜| m欧洲一级午老| 近亲乱伦一区二区| 亚洲图片91| 亚洲国产精品乱码在线观看| 国产二区三区免费视频| 试看60秒| 欧美专利1区2区3区4区5区免费| 91欧洲国产成人久久精品网站| 91在线限制级| 日韩黄色一区二区三区| 一起草三级AV电影在线观看 | 亚洲一二三四区在线免费看视频| 国产欧美一区激情交| 亚洲天堂欧美| 男人天堂网手机版婷婷| 大香蕉宗合网在线| 国产操操日韩三级黄| 91激情国产| 伊人久久青青草| 欧美不卡二区| 天天操夜夜操| 色欧美在线| 欧美在线伊人色| 国产精品成人无码av无码免费| 日韩小电影| 极品久久久久久久久久久久久久| 午夜免费福利视频一区| 亚洲AV成人无码一二三久久| 欧美,日韩,中文,另类| 91女人的网站| 欧美日韩第一页| 国内偷自视频区视频综合| 欧美97免费| 日本男人插女人的逼黄色| 亚洲黄色影视| 五月天激情四射| 999精品国产高清一区二区| 国产9熟妇视频网站| 超碰人妻久久人妻中文97| 国产九九九九九九九九| 最好看的中文字幕在线2018| 亚洲无992tv| 九色 蝌蚪 熟女自 | 夜草网站| 精品一级毛片在线观看| 99人妻| 丝袜加勒比| 久久99精品九九久久久婷婷| 激情亚洲天堂| 裸体女人草逼视频播放一区,二区,三区,四区,五区 | 成·人免费午夜在线观看| 欧美手机在线综合| 亚洲天堂日本| 试看60秒| 亚洲熟女偷拍在线观看| 国产免费一区| 青青操日韩| 99re在线视频国产| 99热大香蕉伊在线| 久久宗合亚洲| 后入式五六区| 91超碰在线观看| 中文字幕在线第二页| 欧洲自拍色图gif在线| 麻豆精品天美| 亚洲999综合| 东京热熟女亚洲视频网站| 熟女中出视频| 人妻熟女一区二区三区在线| 亚洲青色欧美| 蜜桃臀一区二区三区久久| 小骚逼被操的爽不爽| 美女91在线观看| 欧美情色男人的天堂| 国产自产91区13区| 久草精品国产蜜臀| 日韩精品9999| 青青操视频在线| 超碰一区二区| 人妻夜爽夜夜爽| 午夜操一视频一区| 91精品老女人| 先锋影音av先锋一区| 岛国黄片网站| 8050午夜少妇无码| 五月大香蕉| 爱爱动态120秒| 亚洲熟女乱色| 超碰碰小说97| www欧美91| 黄色免费网| 人妻献身系列第54部| 日韩一级特黄av毛片| 国产福利小视频高清在线观看| 约操熟妇| 日本福利社| 天天综合欧美综合| 在线电影亚洲色图| 日本操逼无码| 日韩精品1区2区中文字幕| 日韩女模中文造逼| 9热9热综合网| 97超碰影音| 亚洲无992tv| 色操逼网| 丁香五月天堂网| 欧美国产视频| 91欧美网| 伊人激情五月天一区二区| 日韩钢筋无码高清啾啾啾| 欧美亚洲性爱一区二区| 亚洲中文电影| 久久超碰天天| 亚洲h片在线免费观看| 亚洲最大无码中文字幕网站| 人人澡人人爽人人精品| 午夜福利 成人 91| 日本黄色大片一级视频免费麻豆| 婷婷色综合| 91性高| 91成人无码| 日韩在线一区高清在线| 在线观看一卡二卡| 四虎精品一区| 另类小说综合网| 久久一二三四五六七八九区区区 | 久草成人影片| 狠狠色噜噜狠狠狠狠2018| 丁香六月婷婷| 青草影院内射高潮| 一级做a爰片性色毛片久久| 99精品久久久久久久婷婷蜜桃| 国产精品。| 96精品久久久久久久久久| 一区三区啪啪| 日日嗷| 亚洲欧洲日韩天堂av| 天天综合~91入口| 亚洲情色 自拍| 草草影院最新网址| 日日做夜狠狠爱欧美黑人| 激情文学88| 五月婷婷激情网| 99re在线视频这里只有精品| 最新国内自拍av免费| 久久久久日本视| 麻豆精品.欧美精品.日韩精品.| 成人八戒网站| 超碰视97中文| 久久久九九网站| 亚洲文学偷乱拍啪啪啪啪| 欧美αv.com| 色婷婷蜜臀av| 日本成人A片网站| 青青草白白色| 国产精品嫩草久久久久| 大香蕉综合久久| 乱伦图av| 欧美日韩亚洲国产中文永久天天看| 黄色人人| 熟妇高潮二区三区| 日本免费亚洲欧美| 嗯嗯啊好爽| 欧美不卡在线美女| 91性高朝久久久久久久久| 欧美久久毛片基地| 天天日天天搞天天干| 白丝jkav| 日本国产欧美高清在线| 日产精品久久久一区二区| 成人片在线播放| 久久久久久九九九| 秋霞午夜视频一区二区| 在线v中文字幕一区二区三区| 操91| 日韩pv中文| 日本精品中文字幕视频| 久久久久久久六六| 偷拍伦理视频| 日本操逼视频不卡直接放| 久久久111| av凤凰久久久| 男女啪啪啪18禁网站| 一本一首道人妻少妇免费久久| 波多野结衣被操50分钟免费视频| wuyechaopeng| 91国产精品熟女| 福利操逼| 亚洲无码一区成人免费午夜| 福利偷拍视频-中文字幕2019国语完整视频大全-S91AV | 免费?级毛片无码?∨蜜芽试看| 色五月激情AV在线| 婷婷尹人大香蕉免费| 91在线精品一区二区三区| 国产精品国产| 亚洲欧美校园另类春色| 嗯啊抽插大香蕉网页| 精品人妻一区二区三区四区| 欧美 传媒 麻豆 日韩 偷拍| 国产伦精品免编号公布| AV免费在线播放一区| 东北女人无套内谢视频| 黄色十八禁| 欧美亚洲性爱一区二区| 日韩欧美经典在线观看| 亚洲av无码成电影在线播放| 国产成人五月天丁香花| 国产偷人妻精品一区二区在线| 婷婷六月色| jk白丝没脱就开始啪啪| 国产精品白领在线观看 | av天堂精品久久| 中文字幕乱亚洲美女精品一区| 午夜毛片高清免费不卡| 116美女午夜| 精品一区二区亚洲国产| 无码丰满熟妇一区二区浪潮AV| 日韩精品人妻一区二区| 亚洲九九视频在线观看| 密臀AV在线| 青青草自拍视频在线播放| 久久香蕉国产线看观看猫咪av| 视频国产成人精品日本亚洲18| 婷婷10月天青娱乐| www.acm成人黄色毛片| 97色视频在线| 九九夜精品九九在线| 狠狠久久四虎| 另类图片五月| 亚洲色图大香| 国产又粗又又黄又猛| 一级免费啪啪片| 超碰97色| 欧美96交| 蜜臀在线网站| 欧美美逼| 91宗合网| 天美传媒AV在线| 欧洲人妻视频| 91殴美| 2017亚洲天堂| 日日爱99| 一级乱伦网站| 92性色国产午夜福利在线661| 人人操人人色网| 放黄片放3级黄片没穿衣服| 男人的天堂va| 久久久久九九九九| 欧美性爱第一页久久| 操逼A∨| 秋霞一集毛片观看| 最新国内自拍av免费| 内射老妇BBWX0C0CK| 亚洲AV成人无码一二三久久| 免费一级性爱久久| blacked精品一区国产| 亚洲日韩美女中文字幕乱| 成人福利视频网| 巨爆乳肉感一区二区三区竹菊影视| 亚洲中文一区二区三区视频| 国产原创自拍| 天天摸夜夜摸| 精品妇操一区二区三区| 国产怡红院在线| 亚洲日韩美女丝袜美腿人妻视频| 九九碰九九爱97超碰| AV麻豆免费一区| 一本一道波多野毛片中文在线| 日韩成人精品视频自拍| 亚洲欧美精品91| 中文字日本乱码| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 久操在97| 极品少妇久久久| 亚洲人妻中文高清| 加勒比伊人影院| 六月丁香婷| http://qxhbdz.com| 久久a久久| 欧美熟妇操操视频| 日本孕妇孕交| 久久东京热久久| 国产精品午夜福利亚洲综合网| 日本三级A片网站com| 思思性爱| 国产九九久久久精品| 美女黄码视频午夜| 肥臀熟女福利视频一区二区| 久久久穴999| 亚洲欧美国产中文视频| 无码操逼网| 99精品网| 自拍亚洲综合| 国产老太乱伦一区| 黄片直播三级黄片两女一男| 日本熟妇熟色97一本在线观看| 久久一二三四不卡| 欧美96精品在线| 久草视频在线视频在线视频在线观看| 天天操狠狠日夜夜干超碰撸com视频在线观看 | 色五月首页| 国产AV人人 夜夜人人澡| 伊人欧美大香蕉视频| 黄色大片免费在线| 超碰亚洲欧美日韩无| 国产后入清纯| 久久久亚洲Av| 91老司机在线视频免费观看| 欧美黑人与女人91| 亚洲精品无码久久AV| 日本不卡高清免v欧美日韩在线观看| 中精品一区二区三区| 十八禁视频一区二区| 激情婷婷五月天| 97久久天天综合色天天综合色电影| 96精品久久久久久久久久| 欧亚免费视频| 超碰欧美97资源| 黄色电影在线播放综合网站| 91 丝袜在线观看| 高清国产精品无码| 宗合情欲网| 黑人娇小av在线播放| 日本三级中国三级99人妇网站| 超碰久草| 日本精品一区二区中文字幕| 日本精品九九九| 日韩一区二区高清在线观看的| 九九亚洲精品| 亚洲国产一区二区入口| 久久久久9999妇女| 天天草夜夜草高潮片| 欧美白嫩女HD| 大香蕉久| 欧美淫乱视频| 91操人视频| 久久久啊啊啊| 狠狠 91| 国产精品扒开腿做爽爽爽视频| 五月综合激情网| 亚洲久久久久| 欧美内射少妇| 日韩综合无码色欲vv| 欧美日韩亚洲五月天婷婷| 国产高清26uuu| 国内成人圈中文字幕无码视频| 岛国艾薇凹凸视频天堂| 91在线丝袜| 色色色五月婷婷| 日韩无码一区二区三区| 大香蕉中文201| 一区二区 韩日AV| baisiav| 亚洲人精品午夜不卡| 91爱| 99ri精品| 欧美天天射| 八戒无码国产午夜福利| 欧美大片天天看| 天天干天天狼在线视频| 天天综合青苹果| 中出后入| 巨爆乳肉感一区二区三区竹菊影视 | 欧美一二在线| 一级性爱aaaa| 射久久| 中 文字幕一区二区三四 五 区日 日 骚| 日韩精品国产一区二区| 999久久芭蕾| 少妇国产不卡| 久久性爱网站| 精品欧美老熟女一二区| 欧美色天堂网在线视频| 亚洲高清无码在线桃色| 安徽熟妇视频| av在线人气| 久久综合97| 国产67194| 欧洲亚洲人妻无码高清久久三区四区| 九七毛片九九毛片| 色偷偷人人玩人人舔人人操人人摸人人爽| 日韩性爱高清免费视频| 精品一级毛片在线观看| 青青操视频在线| 色色色综合| 亚洲免费在线探花| 婷婷久月| 亚洲日本大香蕉1| 免费农村成人少妇人妻Aa一区二区视频| 国产高清免费不卡av| 久久一区二区蜜桃| 亚洲drav色图| 亚洲欧美综合色| 欧洲Au麻豆| 在线观看亚洲成人精品| 国产五码丝袜屁眼| 91视频女生| 黄片直播三级黄片两女一男| 激情内射| 蜜臀av中字字幕网站| 日本熟女免费視颖| 啊啊啊啊啊好多水| 日韩欧美大片免费高清啪啪| 亚洲激情综合| 美女一区二区国产精品| 超碰在线人妻中文字幕| 91丝袜美女视频| 夜夜嗨一区二区三区三州加勒比| 青久操| 精品国产乱码久久久久A| 久久精品国产免费观看99| 99这里只有精品国产| 97超碰人妻| 精品一区二区三区18| 欧美色图在线视频少妇| 亚洲熟久久| 日韩99神马视频播放| 成人影 天天操 亚洲| 欧美午夜精品久久久久久3D| 色综合久久久久| 综合色啪| 欧美日韩性爱精品| 懂色AV蜜臀无码精品APP| 国产精品久久久久无码A√| 欧美日韩国产成人高清| 日韩性爱一级片| 玖玖爱影院| 伦理第一页| 免费国产视频| 久久伊人最新网址视频| 国产又黄又爽| 欧美成年人性爱视频免费观看| 免费操逼91| 91一区二区三区蜜桃| 亚洲综合射| 高树玛利亚无码流出| 欧美成人A天堂片在线观看| 被男人吃奶很爽的毛片| 内射老妇BBWX0C0CK| 囯戸精品高潮呻吟旡码| 国产成人精品必看 | 级做a爱无码性色永久免费| 超清福利精品视频在线| 国产在线视频二区| 国产精品一区二区三区,亚洲综合| 91爆操视频| 日本精品不卡一二三区| 欧美日韩成人在线| 日本免费一区二| 日本99一区二区| 人妻少妇久久中文| 啊啊啊啊好疼| 大屁股人妻女教师撅着屁股| 金莲网址| 97电影院超碰| 超碰1024久久| 久热这里| AVE乱伦| 日韩无码黄色片| 欧美性生活综合| 九一亚洲国产免费| 日本爽爽爽爽爽爽免费视频| 不卡中文字幕aⅴ在线| 中文字幕一区二区三区高清| 国产成人精品亚洲日本| 91是天天| 五月婷婷青青草娱乐伊人| 美女91AV| 约操熟妇| 嗯啊免费视频| 久久久草草精品| 天天综合97| 性色av网站| 9久久9综合| 日韩精品人妻中文字幕不卡乱码| 国语av狠狠色丁香婷婷综合激情| 99久久婷婷丁香| 青青草视频久久| 亚洲综合贴图91 | 秋霞蝌科网日本一区| 97久久资源| 爱丝福利| 天天懆天天日| 色色色色色色色色色色色色色色综合| 大香蕉色欲AV| 最新日本中文字幕| 久久五月视频| 国产欧美后入| 三级精品三级在线观看| 六月婷婷五月丁香| 伊人午夜福利视频| 大学生口爆吞精| 曰韩欧美国产传媒麻豆第一区| 亚洲影视第一页| 欧美黄色大片在线观看| 天天欧美色| 亚洲 欧美 第一页 | 亚洲天天天| 国产精品一级毛片不卡视| 夜夜爽妓女| 97av在线观看| 久久久网站| 91碰碰| 免费亚洲黄色视频在线观看| 一区 欧美 日韩 麻豆| 超碰91在线| 伊人网av| 丰满人妻一区二区三区免费 | 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 亚洲欧洲精品视频发布| 国产亚卅97| 日本成人免费一区二区三区| 精品久久久无码| 91国模| 大香交伊人网| 欧美97超碰| 超91综合网| 欧美夜夜| 91扒丝袜综合在线| 91视频精品| 亚洲欧美九九九| 欧美日韩*字幕一区| 国产有码一区| 欧美A片中文字幕| 91色综合激情| 亚洲国产av中文字幕久久| 91网站18在线| 色黄色美女大长腿午夜视频| 日韩欧美偷拍美女视频| 天天操天天射天天日| 久久久99999久网站| 在线看的av| 国产亚洲日本| 国产亚洲禁久一区二区| 人妻夜爽夜夜爽| 国产少妇肉丝在线观看| 欧美色狠| 欧洲精品一区二区三区| 欧美一区二区三区蜜桃| 美女上床网站| renqi久久久久久久久久久久| 婷婷五月天激情四射| 蜜桃中文字日产乱幕4区| 亚洲欧洲无码bt精品合集| 久久国产对白激情浪潮 | 99国产精品久久久久久久成人热| 欧美探花网| 91综合天天看| 中文啪啪视频| 加勒比在线观看一区二区| 中文日韩欧美熟| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | 久草成人福利导航| 欧美日韩午夜精品一区二区三区| 国产少妇高潮| 色色婷婷丁香| 激情深爱五月天| 青青草久草| 999综合色| 亚洲中文字幕精品久久久久久直播| 亚洲欧美碰碰| a人欧美综合天堂麻豆| 国产精品一二三在线看| 欧美天天干| 美性中文综合网| 1024人妻| 亚洲一区二区三区播放在线| 欧美另类丝袜熟女| 日韩 欧美 校园一区| 黑人精品成人一区二区三区| 日本一道在线播放高清| 91伊人久久在线| 天天操天天射青青草| 国产精品视频一区二区三区八戒| 一区二区影视| 亚洲诱惑天堂| 欧美高清性猛交| 色人久久| 手机在线中文字幕国产| 999久久久国产精品| 加勒比海成人视频网| 婷婷五月天_亚洲小说欧美激情另类_精品久久国产字幕 | 99re久久| 99re热| 欧美三级免费伊人| 五月丁香狠狠爱| 不卡av在线中文字幕| 97在线视频网站| 97超级色碰碰| 97自拍一区| 天天综合色电影| 亚洲图片偷拍视频区| 少妇高潮流水av免费| 欧美日韩欧美| 久久久草草精品| 日韩不卡码| 嫩草 人人网精品| 黄污污污污| 国产成人自拍视频在线| 福利社区午夜一区二区| 亚洲国产一级黄色视频| 人妻铁牛TV| 日韩精品啪啪啪| 日韩欧美~中文字| 久久草视频污视频| 不卡码视频| 中文字幕国产精品1区| www.狠狠| 色婷婷久久| 一区二区三区视频| 国产中文字幕曰本毛片| 亚一综合久久久久久久久久| 久久久久久久久久va| 亚洲国产精品久久AV| 欧美天天综合在线| 日比av无码| 老熟女综合网| 风韵犹存大大大大香蕉 | 午夜福利精品| 亚洲导航深夜福利| 国产白嫩漂亮KTV在线| 一线黄色免费性爱片| 欧美一级国产一级| 色婷婷视频| 亚洲国产精品成人无码久久久| 91九色蝌蚪在线观看| 日本一级婬片试看三分钟| 亚洲天堂一区二区久久| 国产精品无码久久久久2028| 欧美性爱日韩性爱| 色呦呦呦在线观看视频| 国产亚洲色婷婷久久99精品91葵花宝典| 高清无码 国产精品| 国产中文字幕曰本毛片| 人人操人人狠狠操| 发朗少妇买婬全视频中文| 亚洲综合网电影91| 久久亚洲骚逼综合| 九X超碰| 久久九操在线观看| 大色网久久| 久草成人| 成人a级高清视频在线观看| 精品视频免费在线一区| 日韩激情啪啪| 精品久久久久久亚洲| 人妻夜夜爽天天爽麻豆三区网站| 精品人妻一区二区免费蜜桃| av东京热男人的天堂| 亚洲日精品| 国产呦精品系列在线观看| 国产精品久久久久久久久久梁医生| 不卡av在线中文字幕| 999岛国大片| 欧美色图另类图片| 亚洲性高潮| 日韩欧美大片免费高清啪啪| 麻豆国产视频精品观看| 无码WWW免费视频网站| 9999免费精彩视频| 四月丁香婷婷| 色999人与兽| 99热欧美| 国产精品久久久久久久久久久久| 强被迫伦姧在线观看无码网站| 日韩精品碰碰| 国内外色色色色色成人视频| 亚洲高清视频在线观看| 在线色资源| 久久AV无码AV| 岛国艾薇凹凸视频天堂| 射 色综合| 超碰午夜| 黑人娇小av在线播放| 少妇99成人麻豆| 欧美91在线+|+欧美| 欧美亚洲特P| 变态乱伦伪娘灌肠一区二区| 91操人| 青青草男人天堂| 日本不卡在线二区三区| 国产乱伦亚洲| 殴美性色a级欧美| 伊人视频| 一级岛国大片| 骚货人妻偷情自拍在线视频| 欧美91久久久久| 小说区 图片区色 综合区| 色青青久久影视| 做爱福利视频一区二区| 91 欧美| 91粉嫩萝控精品福利网站_精品影音先锋国 | 少妇超碰在线| 校园春色家庭伦理欧美激情| 波多野42部激情无码喷潮| 色情婷婷| 国产熟码AV| 黄片com.| 国产中文福利| 日本人妻丰满熟妇久久久久久| 亚洲操操操| 欧美小说区视频区| 国产成人亚洲精品无码古代早漏男 | 国产蜜臀在线| 在线欧美69V免费观看视频| 精品久久99| 国产在线播放成人免费| 日日夜夜干| 天天射天天色成人| 亚欧国产无码精品在线| 综合视频91| 日韩国产欧美伦理在线| 美女啪欧美一区| 无码一区免费在线不卡| 成人AV素股で擦久久| AV中亚| 97人妻色| 国产精品96| 啊啊啊用力在线观看| 91春色| 91在线视频免费中出| 亚洲欧洲成人在线电影| 中文字幕一区 二 区 三 四 五 区日 日 骚 | 人人操人人插 - 百度 - 百度| 国产又黄又猛又粗又爽的网站| 青草精品视频-日本久久久久网站| 日本综合色图| 97精品在线视频| 欧美少妇熟女| 日韩视频中文字幕| 熟女一区二区| 91伊人久| 亚洲精品一区二区免费在线观看| 国产精品美女在线一区| 97精品在线| 国产综合操逼高清| 亚洲欧美骚| 97爱免费插| 翔田千里无码一区| 蜜臀久久在线视频| 91成人久久| 亚洲同性aV综合| 日韩亚洲美女一区久久| 一区二区三区美女超清| 色综和网| 日韩乱伦视频| 97色在线视频| 人人澡综合涩| 黄色大香焦1级‘′‘| 人妻夜爽夜夜爽| 殴美,日韩国产伦精品| 日本黄大片在线观看视频| 超碰在线97国产| 97人人模人人爽人人| 久久人| 国产美女精品| 亚洲国产欧美中文永久| 国产精品国产精品国产| 九九热视频这里只有精品| 亚洲精品一区二区三区在线播放| 国产97色在线 | 亚洲| 十八禁网站在线| yellow网站免费观看日韩高清无码| 亚欧操逼片在线观看 | 日韩性爱播放| 亚洲女人毛茸茸91| 青青草日韩无码| 麻豆60秒| 久偷拍欧美日韩三区| 5252色欧美在线男人的天堂| 人人妻人人玩人人澡人人爽| 国产捆绑一区| 欧美特大黄一级片片免费| 国产精品一二三免费网站| 日产中文字幕2020| 中文字幕精品探花视频| 人干人人人操人人摸| 亚洲色悠悠久久88| 这里只有精品久久| 超碰国产精品久| 91人妻人人澡人人爽人人精品| 影音先锋中文字幕日本好一区二区| 在免费jIzzjIzz在线视频| 久久久精品网| 亚洲凸凹超碰成人| 97色冈| 天天做日日爱夜夜爽| 精品国产三级av韩国在线| 夜夜嗨一区| 色九九九综合| 欧美精品人妻视频| 国内精品伊人久久久久影院会| 激情图片亚洲色图| 大香蕉中文aV在线| 欧美成97爱| 亚洲激情网| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 最新日日夜夜天天干干| 日韩精品资源| 日本中文字幕一区| 大香蕉在线视频15| 欧洲熟妇xxXx欧美老妇裸体 | 精品97久久综合| 欧美视频在线第3页| 综合欧美日本三级| 午夜视频好爽啊| 女性喷水高潮在线观看| 欧美综合色图网| 啊啊啊啊啊好舒服视频| 操人妻逼91| 密臀在线免费观看| 亚洲天堂区| 涩五月婷婷| 成人国产精品三级A片| 欧美大香蕉同搞| 在线无码视频| 啪啪啪精品| 精品日韩人妻视频| 久久狠狠色噜噜狠狠狠狠97| 春色综合网| 亚洲丝袜少妇在线| 欧美在线亚洲| 黑人性欧美| 97国产|免费| 欧美综合色,www| 久久9精品| 久久久不卡| 伊人超碰97| 亚洲欧洲自拍| 啊啊啊啊啊啊啊啊视频| 中文字幕乱亚洲美女精品一区| 91情色在线| 78超碰| 91中文字幕| 中文字幕第9页萱萱影音先锋| 极品国产内射| 国产一区二区成人av在线播放| 玖玖97综合 | 九九热免费在线国产视频伊人五月| 高潮的A片激情扒开一区| 老妇女91| 丰满人妻一区二区三区免费| 自拍亚洲综合| 日韩精品人妻中文字幕久久久| 日本色色色色色视频| 欧美中出1| 99视频只有精品| 欧州色图区| 欧美狠狠弄|