亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務建站與企業(yè)官網運營的一線實戰(zhàn)洞察。

MQTT QoS深度解析:報文交換機制與選型建議

MQTT QoS深度解析:報文交換機制與選型建議 1. 從一次實際故障聊起為什么選錯 QoS 會讓人半夜爬起來修先說個我踩過的坑。某次給一套物聯(lián)網設備做數(shù)據(jù)采集傳感器每隔幾秒上報一次溫濕度我圖省事把所有消息都設成了 QoS 0覺得丟了就丟了下一條馬上就來。結果客戶現(xiàn)場出現(xiàn)間歇性數(shù)據(jù)空洞運維同事查到半夜最后發(fā)現(xiàn)是弱網環(huán)境下報文頻繁丟失而業(yè)務側又拿這條數(shù)據(jù)做告警判斷一個空洞直接觸發(fā)誤報。反過來另一個項目里我把所有下行控制指令都設成了 QoS 2結果設備量上來之后broker 的 Qos 2 報文處理隊列積壓嚴重指令延遲從幾十毫秒飆升到好幾秒。兩次教訓讓我徹底明白一件事MQTT 的 QoS 不是越高越好選錯才是真麻煩。在選擇 QoS 之前得先弄清楚它到底解決什么問題。MQTT 是應用層協(xié)議跑在 TCP 之上按理說 TCP 已經保證了字節(jié)流的可靠傳輸為什么還需要業(yè)務層的 QoS 等級原因在于 MQTT 的通信模型是客戶端 - broker - 客戶端而 broker 是獨立進程TCP 只保證單條連接上的字節(jié)不丟不亂不保證 broker 在轉發(fā)消息、處理 session、管理訂閱關系時不出岔子。同時MQTT 消息是發(fā)布 / 訂閱的異步模式發(fā)布者發(fā)完就完事訂閱者可能在某個時間點才上線這中間消息在 broker 里怎么存、怎么保證不重復不丟失TCP 根本管不著。所以 QoS 實際上是客戶端與 broker 之間、以及 broker 與訂閱端之間的協(xié)議層可靠性約定從每次握手需要交換多少個報文就能看得很清楚。這篇文章我把 QoS 0、1、2 逐個拆開核心關注點只有一個它們各自在投遞一條消息時到底要交換多少報文、狀態(tài)機長什么樣、失敗時誰來負責重試、以及這些機制在真實業(yè)務中對應的代價是什么。把這幾個問題算明白你自然知道什么場景用什么等級。2. QoS 0一發(fā)一收的裸奔模式到底省在哪QoS 0 是整個協(xié)議里最干脆的等級官方術語叫 At most once最多一次投遞。它的行為就是發(fā)送端把 PUBLISH 報文扔出去然后什么都不管沒有 ACK沒有重傳沒有消息 ID。broker 收到之后往匹配的訂閱者那邊轉發(fā)一條 PUBLISH同樣不確認。2.1 報文數(shù)量與協(xié)議行為一條 QoS 0 消息的完整鏈路報文數(shù)量極其固定發(fā)送端向 broker 發(fā)送 1 個 PUBLISH 報文broker 向每個匹配的訂閱端轉發(fā) 1 個 PUBLISH 報文全程 0 個確認報文如果發(fā)送端和訂閱端有 N 個匹配訂閱關系那么一條原始消息最多產生1 N個 PUBLISH 報文除此之外沒有任何額外的握手開銷。這里有一個容易忽略的細節(jié)PUBLISH 報文的固定頭里QoS 等級只占 2 bitQoS 0 對應的值是 0所以 DUP 標志位、RETAIN 標志位的組合也相對簡單。沒有 QoS 0 的消息沒有 Packet ID或者說 Packet ID 字段長度為 0這意味著從協(xié)議層面根本無法追蹤某一條消息是否被送達。2.2 省下來的開銷背后是什么QoS 0 最大的價值是極低的延遲和極小的帶寬占用。對于上報型業(yè)務比如環(huán)境溫濕度、GPS 坐標、設備心跳這類數(shù)據(jù)天然有時間價值衰減一條數(shù)據(jù)過了幾秒就是廢數(shù)據(jù)重傳舊數(shù)據(jù)反而會干擾下游分析。與其糾結丟沒丟不如盡快把最新值送過去。而且這類消息量大、頻率高如果每條都走確認流程broker 的 CPU 和網絡 IO 都會明顯上升最終反而擠壓了真正重要的控制消息的帶寬。但省下的代價也清清楚楚消息可能丟失。TCP 層只保證字節(jié)流到達 broker不保證 broker 應用層一定能把消息成功寫入訂閱者的會話。比如訂閱者正好在斷線重連瞬間消息被 broker 發(fā)往舊的 socketTCP 連接關閉時數(shù)據(jù)被丟棄QoS 0 不會觸發(fā)任何重發(fā)再比如 broker 內部路由處理時發(fā)現(xiàn)沒有匹配的訂閱者消息直接丟棄也不會告訴發(fā)送端。這些行為在協(xié)議規(guī)范里都是允許的所以業(yè)務代碼必須把可能丟消息當成默認前提來設計。2.3 一個容易犯的認知錯誤很多人以為反正應用層自己會做數(shù)據(jù)校驗QoS 0 丟了我可以從別的地方補然后給所有消息都用 QoS 0。這個思路在純數(shù)據(jù)采集、且下游能做時序拼接的場景下是合理的但在以下場景就危險了告警觸發(fā)類消息比如設備溫度越限、電量低丟了可能就是一次安全事故狀態(tài)變更類消息比如設備在線 / 離線切換、門鎖開閉丟了會導致業(yè)務側狀態(tài)字段和實際不符冪等性較弱的下行控制消息比如切換工作模式重發(fā)或丟失都會造成狀態(tài)漂移所以我現(xiàn)在的習慣是把所有消息按可丟性分三檔QoS 0 只放丟掉之后對業(yè)務無影響或影響可自然恢復的那一檔。這不是保守而是吃過虧之后的經驗。3. QoS 1多一來回買到的是至少一次的確定性QoS 1 全稱 At least once至少一次投遞。它的引入提供了消息到達確認機制但同時也引入了重復消息的可能性。這個等級應該是 IoT 項目里用得最多的比 QoS 0 多了一倍的握手但可靠性提升非常明顯。3.1 報文交換流程逐字節(jié)算清一條 QoS 1 消息從發(fā)布端到 broker 的流程如下我做了一個逐步驟拆解發(fā)送端先給消息分配一個 Packet ID2 字節(jié)從 1 到 65535發(fā)送端發(fā)送 PUBLISH 報文QoS 位設為 1Packet ID 填入報文broker 收到后把消息按訂閱關系轉發(fā)給所有匹配的訂閱端broker 向發(fā)送端回復一個 PUBACK 報文確認收到發(fā)送端收到 PUBACK 后把這條消息的本地狀態(tài)標記為已完成如果發(fā)送端在發(fā)出 PUBLISH 之后等待 PUBACK 期間發(fā)生了超時或連接斷開發(fā)送端就不知道 broker 到底有沒有收到。此時協(xié)議允許發(fā)送端在重連后重新發(fā)送一次 PUBLISH并且把 DUP 標志置 1表示這是一條可能重復的報文。這個 DUP 重發(fā) 的機制正是 QoS 1 重復消息的來源。從報文數(shù)量上看一條 QoS 1 消息發(fā)布和確認至少需要 2 個報文PUBLISH PUBACK如果發(fā)生超時重發(fā)那就是 4 個、6 個甚至更多。對于每個匹配的訂閱端broker 向它轉發(fā)時同樣會進行 QoS 1 的流程因此完整鏈路的報文量是 2 2N不考慮重發(fā)。3.2 重復消息為什么不可避免注意上面對話里第三步的時序很關鍵broker 在轉發(fā)給訂閱端和回復 PUBACK之間是有順序的。不同 broker 的實現(xiàn)可能先轉發(fā)再回 ACK也可能先回 ACK 再轉發(fā)甚至可能是異步并發(fā)。如果 broker 已經向訂閱端轉發(fā)了 QoS 1 消息但是發(fā)送端斷線了沒收到 PUBACK那發(fā)送端重發(fā)時訂閱端就會收到兩條一模一樣的消息。兩條消息的 Packet ID 一樣DUP 標志也一樣因為都是同一會話重發(fā)訂閱端無法簡單地通過 Packet ID 去重因為 QoS 1 規(guī)范里壓根沒要求它做去重。這就是至少一次的代價消息不丟但你得自己處理重復。最常用的辦法是在應用層加業(yè)務去重比如每條消息帶一個全局唯一的 messageId 字段訂閱端用一個滑動窗口或者 Redis set 記錄最近處理過的消息 ID。另一個常規(guī)思路是把消息做成冪等操作例如把溫度設為 25 度這種賦值型指令天然冪等重復執(zhí)行兩次結果一樣而把計數(shù)器加 1這種非冪等操作就必須配合業(yè)務去重。3.3 QoS 1 實際項目中擴展出來的花樣實際項目里我還見過 QoS 1 配 session 過期時間的方式來做離線消息緩存。比如控制指令場景設備可能離線一小段時間如果 cleanSessionfalse 且 session 未過期broker 會把 QoS 1 消息緩存在會話里等設備重連時再補發(fā)。這比直接用 QoS 2 便宜得多而且大部分業(yè)務對重復指令是可以容忍的——用冪等設計把重復消掉就好。所以 QoS 1 是可靠性和成本折中最均衡的等級也是我默認的起步等級。4. QoS 2兩輪四次握手為了恰好一次付出多少代價QoS 2 全稱 Exactly once恰好一次投遞。這是 MQTT 協(xié)議里最復雜、也是最容易被誤解的部分。很多人以為 QoS 2 就是更可靠一點實際上它是用一整套握手狀態(tài)機換來消息既不丟失也不重復的語義報文量和協(xié)議復雜度都遠超 QoS 0 和 QoS 1。4.1 每一條消息的四步完整往返QoS 2 的發(fā)送端到 broker 這一段協(xié)議規(guī)定的報文交換流程嚴格分成兩階段第一階段發(fā)送端發(fā)送 PUBLISH 報文QoS 位設為 2攜帶 Packet IDbroker 收到后不會立刻轉發(fā)給訂閱端而是先持久化這個 Packet ID 到會話狀態(tài)標記為已收到但未釋放然后向發(fā)送端回復 PUBREC 報文第二階段發(fā)送端收到 PUBREC 后知道 broker 已經確認收到該消息于是發(fā)送一個 PUBREL 報文表示我這邊已經完成發(fā)送流程你可以正式釋放這條消息broker 收到 PUBREL 后才把消息轉發(fā)給訂閱端同時向發(fā)送端回復 PUBCOMP 報文表示整個 QoS 2 發(fā)送流程關閉現(xiàn)象上一條 QoS 2 消息從發(fā)送端到 broker 至少要交換 4 個報文PUBLISH、PUBREC、PUBREL、PUBCOMP。在最理想情況下是各 1 個總共 4 個。如果在某個環(huán)節(jié)發(fā)生重傳那報文數(shù)量還會成倍增加。這個成本已經非常直觀了傳輸 1 條 QoS 2 消息控制報文的個數(shù)是 QoS 1 的 2 倍是 QoS 0 的 4 倍以上。4.2 為什么是兩階段提交而不是簡單 ACK 兩次初學 MQTT 的人都會有一個疑問QoS 1 是 PUBLISH PUBACKQoS 2 為什么不能做成 PUBLISH PUBACK 再 PUBACK 一次因為兩次獨立的 ACK解決不了重復問題。如果只用一次 ACK重復完全靠語義用兩次獨立 ACK發(fā)送端重發(fā) PUBLISH 時broker 無法區(qū)分這條 PUBLISH 是全新的還是重發(fā)的也就無法決定到底要不要把消息轉發(fā)兩次。QoS 2 的關鍵設計在于中間那個 PUBREL。PUBREL 是一張釋放令牌相當于告訴 broker之前的 PUBLISH 我已經確認你收到了現(xiàn)在我們要完成最后的交接。broker 在收到 PUBLISH 時記錄 Packet ID但并不會立即把它投入轉發(fā)流程收到 PUBREL 之后這個 Packet ID 的狀態(tài)才從待處理變?yōu)榭赊D發(fā)從而保證任何一個 Packet ID 在 broker 側只會被消費一次。這套機制和分布式事務里的兩階段提交思路非常像本質上就是用額外的握手換取唯一一次投遞的語義保證。從 broker 側視角來看還隱含了一個重要邏輯收到 PUBREC 后broker 一方面要保存 Packet ID另一方面可以回復 PUBREC但是對外轉發(fā)消息必須等到 PUBREL 之后。如果發(fā)送端在發(fā)出 PUBREL 后一直沒收到 PUBCOMP發(fā)送端會重發(fā) PUBREL而不是重發(fā) PUBLISHbroker 收到重復的 PUBREL 時不會再次轉發(fā)消息只會再次回復 PUBCOMP。這個細節(jié)保證了無論如何重試訂閱端最多收到一次。4.3 QoS 2 的狀態(tài)機異常情況都從哪里來我把 QoS 2 發(fā)送端的典型狀態(tài)變化列一下更直觀發(fā)送端狀態(tài)觸發(fā)事件動作待發(fā)送業(yè)務產生消息發(fā)送 PUBLISH記錄 Packet ID進入等待 PUBREC等待 PUBREC收到 PUBREC發(fā)送 PUBREL進入等待 PUBCOMP等待 PUBREC超時 / 斷線重連后重發(fā) PUBLISHDUP1仍在等待 PUBREC等待 PUBCOMP收到 PUBCOMP清理 Packet ID流程結束等待 PUBCOMP超時 / 斷線重連后重發(fā) PUBREL仍在等待 PUBCOMP你可能注意到了等待 PUBREC 階段重發(fā)的是 PUBLISH等待 PUBCOMP 階段重發(fā)的是 PUBREL。這兩次重發(fā)的報文類型是不同的很多 SDK 的 debug 日志里可以看到同一 Packet ID 的 PUBLISH 和 PUBREL 交替出現(xiàn)如果你不理解狀態(tài)機很容易誤判成協(xié)議 bug。其實這正是 QoS 2 為了防重復做的一個細節(jié)只有收到 PUBREC 之后才允許把消息提交給 broker否則無條件重發(fā) PUBLISH而一旦進入 PUBREL 階段PUBLISH 已經確認落地了重發(fā) PUBREL 不會造成二次轉發(fā)。4.4 一個值得警惕的坑QoS 2 不是端到端恰好一次QoS 2 只保證了發(fā)布端到 broker這一段恰好一次以及broker 到單個訂閱端這一段恰好一次。如果一條消息從發(fā)布端發(fā)出broker 把它轉發(fā)給兩個訂閱者 A 和 B那么在 A 和 B 那邊各自會獨立執(zhí)行 QoS 2 流程。也就是說broker 和 A 之間的 Packet ID 可能與 broker 和 B 之間的完全不同A 和 B 收到消息的時間也可能差很多。QoS 2 從來不做跨訂閱端的全局去重它只做連接級的語義保證。更關鍵的是如果發(fā)布端和 broker 用 QoS 2但 broker 向某個訂閱端轉發(fā)時訂閱策略或會話配置把 QoS 降級了比如訂閱時請求 QoS 1或者 broker 對 QoS 2 做了下鉆映射那么端到端的語義就不是恰好一次。所以當你看到某個架構說自己實現(xiàn)了端到端 exactly once一定要追問一句發(fā)布端到 broker 是什么等級broker 到訂閱端是什么等級兩個等級不一致的時候消息語義以更低的那個為準。5. 三張表看懂 QoS 選型性價比才是第一原則把前三節(jié)的內容壓縮一下QoS 等級的核心差異其實可以收斂成一張報文對照表、一張可靠性對照表、和一張選型決策表。我在實際評審方案時基本就是拿這三張表逐條過需求。5.1 報文量與開銷對照QoS等級最簡報文數(shù)確認機制消息ID超時重發(fā)動作重復可能性QoS 01PUBLISH無無無沒有重發(fā)邏輯不可能重復但可能丟失QoS 12PUBLISH PUBACK有有重發(fā) PUBLISHDUP1可能重復QoS 24PUBLISH PUBREC PUBREL PUBCOMP兩階段確認有等待 PUBREC 時重發(fā) PUBLISH等待 PUBCOMP 時重發(fā) PUBREL不重復保證恰好一次這個表格應該是你電腦前貼著的默認參考。凡是讓你一把梭直接全上 QoS 2的把這個表格甩給他看同樣的消息吞吐QoS 2 的協(xié)議開銷是 QoS 1 的兩倍是 QoS 0 的四倍如果消息量大這帶來的 CPU、帶寬、延遲成本會直接反饋在監(jiān)控曲線上。5.2 典型場景決策參考以下選型建議來自我參與過的幾類真實項目不是教科書標準答案但大概率能幫你少走彎路業(yè)務場景消息特征推薦QoS理由傳感器高頻數(shù)據(jù)上報周期性、容忍少量丟失、量大QoS 0省帶寬、低延遲下游可以做插值或跳變檢測設備心跳 / 在線狀態(tài)低頻、需要不丟失QoS 1丟了就誤判離線正常重發(fā)可接受控制指令開關、調參低頻、需要必達QoS 1 業(yè)務冪等重發(fā)可接受但要做好指令去重計費 / 工單 / 支付回調 / 授信變更低頻、語義重大、不允許重復QoS 2用協(xié)議層保證恰好一次省掉大量對賬離線設備指令緩存設備可能長期離線QoS 1 持久會話用 session 緩存成本比 QoS 2 低很多要注意的是表格里 QoS 1 業(yè)務冪等和 QoS 2 是兩條不同的技術路線。很多時候 QoS 2 能解決的問題QoS 1 配合冪等 ID 也能兜住只是實現(xiàn)位置不同QoS 2 把去重做在協(xié)議棧里QoS 1 把去重做在應用代碼里。前者省心但費帶寬后者省帶寬但費開發(fā)。5.3 不要盲目升級 QoS 的另一個原因有人可能想我都用 QoS 2成本高點就高點至少保險。但 QoS 2 的恰好一次有一個前提條件broker 必須能夠維護每個 Packet ID 的會話狀態(tài)。如果 broker 宕機重啟、或者客戶端長時間離線導致會話過期那么 QoS 2 的握手狀態(tài)也會丟失此時若發(fā)送端重連并重發(fā) PUBRELbroker 可能已經不認識這個 Packet ID 了這時候會回復一個 DISCONNECT 或直接當作新消息處理。所以 QoS 2 并不等于消息絕對可達它只是盡最大努力保證在鏈路和會話正常的前提下不重不丟。一個真正可靠的系統(tǒng)還是要靠業(yè)務層的最終一致性設計和重試機制兜底而不是寄希望于單一協(xié)議等級。6. 實際工程里影響 QoS 選擇的隱藏因素我不說你很難注意到上面聊的都是協(xié)議本身的語義但在真實項目里QoS 最終表現(xiàn)還受一堆外部因素制約。這些因素在報文數(shù)量層面看不出差異一旦上線都是暗坑。6.1 cleanSession 與持久會話對 QoS 的影響MQTT 連接由 CONNECT 報文里的 cleanSession 標志控制。如果 cleanSessiontruebroker 不保存任何會話狀態(tài)客戶端重連后一切清零。此時 QoS 1 或 QoS 2 的重發(fā)機制依舊存在但當客戶端斷開期間到達的消息broker 不會緩存直接丟棄。如果 cleanSessionfalsebroker 會為這個客戶端保留 session包括未確認的 QoS 1 / QoS 2 消息狀態(tài)和離線消息隊列這才會出現(xiàn)我們常說的離線消息補發(fā)。所以做選型的時候要問的不只是 QoS 等級還有 cleanSession 配置。設備上報場景通常 cleanSessiontrue簡單干脆但控制指令緩存、遺囑消息、狀態(tài)同步這些場景往往要開持久會話。我見過一個項目用了 QoS 2 但忘了關 cleanSession結果設備一離線消息就丟排查了很久才發(fā)現(xiàn)是會話狀態(tài)沒保留。協(xié)議等級選得再高會話策略不對等于白搭。6.2 Broker 實現(xiàn)差異同一 QoS不同表現(xiàn)不同 broker 內部實現(xiàn)方式差別很大直接體現(xiàn)在 QoS 處理路徑上。輕量級 broker 可能把所有消息都放在內存里投遞完就刪企業(yè)級 broker 會對消息做持久化甚至在 QoS 2 轉發(fā)之前寫入消息存儲。如果你的 QoS 2 消息數(shù)量很大broker 的磁盤 IO 就是新的瓶頸。我實測過同一組 QoS 2 消息在嵌入式 broker 和企業(yè)級 broker 上的表現(xiàn)吞吐可以差一個數(shù)量級原因就是后者多了持久化步驟。另外某些 broker 為了性能會在轉發(fā)時做 QoS 降級。比如發(fā)布端用 QoS 2 發(fā)送但某個訂閱端訂閱主題時用的是 QoS 0那么 broker 按照取發(fā)布和訂閱 QoS 的較小值這個規(guī)則只會用 QoS 0 轉發(fā)給該訂閱端。很多人不知道這個規(guī)則以為發(fā)布端選了 QoS 2 訂閱端就一定能 QoS 2 收到實際上協(xié)議規(guī)定是 min(pubQoS, subQoS)。所以客戶端訂閱時的 QoS 也必須按業(yè)務需求明確設置否則前面省心后面鬧心。6.3 鏈路層不等于應用層TCP 超時重傳與 MQTT 重發(fā)的疊加MQTT 跑在 TCP 上TCP 自己也有超時重傳這會不會和 MQTT 的 QoS 重發(fā)疊加會但它們的語義不同。TCP 重傳解決的是字節(jié)流層面的丟包保證整段字節(jié)到達對端MQTT 重傳解決的是 broker 應用層是否處理完畢。舉一個極端例子發(fā)送端發(fā)出 QoS 1 的 PUBLISHTCP 層把它拆成幾個 segment 發(fā)出去第一個 segment 到了 broker第二個 segment 丟了TCP 會重傳丟掉的 segment最終 broker 完整收到 PUBLISH回復 PUBACK。這一過程 TCP 和 MQTT 都在參與但 MQTT 的重發(fā)邏輯不會介入因為發(fā)送端還沒到超時條件。如果網絡質量極差TCP 重傳多次仍失敗MQTT 層才會啟動自己的重發(fā)定時器。所以做測試時不要用拔網線來模擬 MQTT 消息丟失那模擬的是連接斷開觸發(fā)的行為往往是會話重建和 DUP 重發(fā)而不是 TCP 重傳。想要看 MQTT QoS 機制的真實表現(xiàn)更好的方式是人為丟包、亂序或延遲注入比如 tc 命令加 netem 模塊這樣可以分別觀察 QoS 1 的 PUBACK 超時和 QoS 2 的 PUBREC/PUBCOMP 超時。搞清楚這兩層機制線上出問題時才不至于把鍋甩錯對象。6.4 消息體大小對 QoS 開銷的放大效應協(xié)議開銷的計算不應該只算報文個數(shù)還得乘消息體長度。QoS 0 和 QoS 1 / QoS 2 在 PUBLISH 報文的可變頭部上差異很小差值基本上就是 0 到 2 字節(jié)的 Packet ID。但是 QoS 1 和 QoS 2 的確認報文 PUBACK / PUBREC / PUBREL / PUBCOMP 都很短固定頭 可變頭不超過 4 字節(jié)。所以當消息體很大時比如固件升級包分片QoS 1 和 QoS 2 的額外開銷占比反而小當消息體很小時比如開關狀態(tài)就幾個字節(jié)QoS 2 的控制報文開銷占比可能超過 100%。這也是為什么大量小報文的遙測場景要堅持用 QoS 0哪怕業(yè)務方一開始喊著不能丟講完成本之后通常也會接受加業(yè)務層兜底而不是全局升 QoS。7. 最后的實操建議和幾個值得收藏的細節(jié)寫到這里把我自己項目里沉淀下來的幾條硬經驗放出來基本上可以直接抄作業(yè)。第一默認從 QoS 1 起步再按需降級或升級。不要在項目啟動會上拍腦袋定 QoS而是先按消息分類梳理出丟得起 / 丟不起但可重復 / 絕不能重復三類每一類對應 QoS 0、QoS 1 冪等、QoS 2。這套方法我用在十幾個項目里都穩(wěn)。第二消息體里一定要帶業(yè)務 ID即使你已經用了 QoS 2。因為跨 broker 橋接、版本升級遷移、以及訂閱端做多副本消費時都可能出現(xiàn)重復或亂序業(yè)務 ID 是最后的兜底手段。QoS 2 節(jié)省了去重代碼但省不掉業(yè)務排重字段。第三QoS 2 的 PUBREL 重發(fā)是很常見的現(xiàn)象不要當成錯誤。正常網絡抖動下每次 QoS 2 消息的傳播都可能伴隨一次 PUBREL 重發(fā)字節(jié)流日志里出現(xiàn) DUP 標志是正常行為。真正需要警惕的是 PUBLISH 的 DUP 在 QoS 2 下頻繁出現(xiàn)那說明 PUBREC 遲遲未到大概率是 broker 處理能力存在瓶頸。第四做壓測時把報文數(shù)量統(tǒng)計帶上。只要在發(fā)布端和訂閱端分別統(tǒng)計收到的 PUBLISH 數(shù)就能立刻算出實際 QoS 生效比例。比如發(fā)布端發(fā)了 1000 條 QoS 1訂閱端收了 1012 條那說明至少有 12 條經歷了重復投遞如果訂閱端只收到 958 條那不是 QoS 的錯而是會話配置或 broker 丟消息得另行排查。第五不要在 QoS 2 上強行疊加離線永久緩存。離線緩存場景用 QoS 1 持久會話就夠了QoS 2 的握手狀態(tài)在長時間離線后大概率會失效到時候反而多出一堆 PUBREL 重發(fā)日志和數(shù)據(jù)殘留。把話說到底QoS 2 是為在線鏈路可靠性設計不是為離線海量緩存設計。我覺得 MQTT 的 QoS 選型本質上是個系統(tǒng)工程問題協(xié)議只是給了一個解決可靠性的杠桿而你真正要做的是搞清楚業(yè)務能容忍什么語義再決定要不要花報文數(shù)量的成本去換取更嚴格的語義。報文數(shù)量會告訴你每個選擇的代價業(yè)務語義會告訴你每個選擇的收益兩者對齊答案自然就出來了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚洲精品日韩国产欧美| 大香蕉狠狠爱| 欧美人人天天网| 中文字幕在线免费观看2| 久久东京热成人| 爱av免费| 91成人18| 中文字幕第23区| 亚洲综合九九| 老司机深夜18禁污污网站| 操九九九九九九| 国产精品久久久久久久久久久久| 熟女自慰久久久| 狠狠操,使劲操| 99抽插| 人妻丰满熟妇一区二区三| 超碰久久网| 婷婷色中文字幕| 免费簧片在线观看| 超碰久超碰久| 中出后入| 屌妞视频久久久久久久久久久久| 人人污日韩一区二区| 小视频国产| 久久九九久精品国产尤物|国产精品爽黄69天堂A片潘金莲,国产亚洲精品第一综合 | 天天综合网~69| 精品人妻久久久| 久久精品国产99国产精品亚洲| 中文字幕丰满子伦无码专区在线视频最新 | 草草影院最新网址| 欧美高清无码免费视频高清版| 91欧美色| 久久亚洲天堂| 天操天操夜操夜月操月年年操| 久久久久人妻二区精品叶可怜| 97精品视频在线播放| 91N欧美| 高清成年美女黄网站免费大全 | 中文字幕99999| 久久熟女嫩草成人片免费| 亚洲熟女一区| yazhousetuoumei| 麻豆av一区二区三区| 久操视频资源站公开| 欧美写真视频一区| 午夜国产综合视频在线观看| 一类av片在线看| 久久精品区| 久久久少妇诱惑精品视频| 厕所偷拍在线| 91在线|亚| 国产懂色精品国产av| 亚洲日韩在线a不卡99精品| 亚洲男人在线观看天堂| 日韩图色| 翔田千里爆乳巨臀无码| 小视频玖玖| 美女性91| 日韩精品资源专区二区| 免费少妇一区二区| 久久精品国产欧美日韩亚洲欧美日韩中文久久国产一区 | 亚洲国产福利视频| 亚洲风情在线观看| 在线观看中文字幕| AV女优男人的天堂| 麻豆美女丝袜人妻中文| 亚洲一区在线观看欧洲 | 丁香六月综合激情| 国产欧美一区激情交| 亚洲国产成人福利在线观看| 操逼日韩无码| 青青草啪啪网| 久久精品国产亚洲AV先锋| 69av一区二区三区| 日韩女模中文造逼| 91激情网| 日韩无码服务区| 亚洲熟女av中文字幕| 日比av无码| 四虎国产精品永久在线囯在线| 操逼天美3区| 女人高潮大叫一级毛片| 嗯嗯啊啊操死我| 亚洲在高跟鞋自慰久久在色线| 欧美中文字幕一区 | 澳门色噜噜色噜噜色噜噜色噜噜色噜噜| 亚洲三级。日韩三级| 国产男女边吃边摸视频网站| 欧美1727免费观看视频| 久久久久久免费电影| 翔田千里A片一区二区| 狠狠久久手机视频精品| a网站免费观看| 精品少妇一区二区三区免费观看| 尤物视频偷拍免费| 男人的午夜天堂| 国产熟女完整版中字| 久久超碰爱| 91一区二区三区蜜桃| 国产乱伦性爱AV| 天天操美美| 97在线观看免费视频| 色色婷婷丁香| 久久久不卡区一区二区三区久久久| 91九色丰满高潮| 国产一区二区三区视频在线看| 99热这里只有精品9| 亚洲偷拍欧美激情| 97香蕉网| 午夜呻吟欧美| 综合亚洲欧美精品日韩?v| 99ri视频| 天天干18禁| www色色色com| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 超碰中文字幕人妻草一区| 视频不卡中文字幕| 日韩一级二级| 国偷自 一区二区| 97干色| 狠狠色色| 肥佬影院91| 久久久中文| 九一国产精品| 五月婷婷激情| 97超碰人人模人人拍人人| 色色色综合网| 日少妇视频| 囯戸精品高潮呻吟旡码| 亚洲五区熟女| 美日韩成人| 国产日本顶级一区二区三区| 久久婷婷一区二| 日本一二区不卡| 97色伦欧美| 亚洲 小说 欧美 激情 另类| 超碰99热中文字幕| 亚洲九九九| 91黑丝少妇| 国产精品视频自拍在线| 欧美综合网1| 国产偷拍自拍在线视频| 久久久久久九九九九-美女久久久久久久-成人AV | 欧美日韩系列| 欧美性天天影视| 超碰97护士| 亚洲情色1区| 亚洲国产精品成人综合| 亚码激情| CCYY草草影院地址入口| 嗯,啊。舔我逼| 久久精品店| 美女91在线| 色婷婷蜜臀av| 日韩少妇一区二区三区| 日韩大香蕉| 久久嫩草国产成人一区| 天美精品原创av片国产| 久久婷婷欧美| 一区麻豆 高清中文字幕| 成人a大片在线观看| 亚洲欧美变态| 色999偷自拍拍| 1769精品一区二区三区| 丝袜美腿av女优在线| 久久久久久久久久久久久久久乱码 | 热无码中文亚洲H一道本一区二区| 亚洲色图美腿丝袜| 欧美1727免费观看视频| 人妻少妇av在线观看| 99国产精品| 天美传媒AV国产在线| 9久精品| 日韩一区二区高清在线观看的| 91九色首页| 国产精品极品美女视频| 91色狼| 亚洲天堂日本| 日han少妇无码| av资源在线观看少妇| 人妻一区二区三区四区视频| 日本不卡免费二区| 久久熟女久| 国产人伦精品一区二区三区| 色综合天天| 国产欧美日韩精品中文| 性爱乱伦视频免费| 伊人久久大香线蕉无码| 国产一区二区成人av在线播放| AV天黑人| 九七毛片九九毛片| 亚洲淫色网中文| 91一区二区| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 少妇被玩视频二三区| 成人av动漫在线观看| 日本操逼视频不卡直接放| 亚洲国产97| 日韩内| 日本高清视频在线观看黄已三辽| 久久久久人| 黄资源| 97色论| 国产白领连续中出在线观看| 欧美日不卡| 五月天婷婷小说| av资源在线观看少妇| 国产精品嫩草影院免费| 操迟操逼在巾线Fre看| 99精品欧美一区二区三区桃色| 亚洲视频中文一区| 久久久久久99AV无码免费网站| 青青草久草| 日韩99999| 91少妇人妻| 亚洲午夜精品久久久中文影院| 国产精品97超碰| 91高清欧美| 国产97/欧美| 97网站在线观看 | 欧美精品精品一区二区| 啊啊啊在线观看| 麻豆亚洲AV成人无码久久精品| 97av在线观看| 中文字幕人成乱码熟女香港| 91精品久久久久五月天精品| 99热伊人| 成人网欧美风情| 亚洲国成人情色好看电影| 人妻出轨一区二区三区| 欧美激情色婷婷花野真衣一区二区| 熟女中出视频| 亚洲资源吧| 久久久专区| 伊人久久亚洲色欲综合网站| 99在线精品视频| 亚洲成a人v欧美综合天堂下载 | 亚洲性爱无码乱伦av| 99精品久久久久久久婷婷蜜桃| 国产精品一二三区福利| 亚洲高清内射| 东北女人性交| 中文字幕日韩人妻视频一区二区三区| 一级黄色影片| 一区=区三区视频| 97碰碰日本乱偷人妻中文的| 一区二区三区男人的天堂| 亚洲男人天堂网| AV不卡在线| 天天天天天天天天天天干美女| 最新日韩黄片| 99999精品成人| 在线色资源| 国产美女高潮| 日韩av在线播放不卡| 夜夜操2028| 欧美韩日精品资源| 亚洲欧美情色| 屌逼麻豆| 九九九九九九九| 九久精品| 人妻精品视频一区二区| 欧美一区二区三区大综合| 中文子幕一二三| 午夜舔阴达高潮视频免费看| 婷婷91| 97大色网| 亚洲?V高清一区二区三区尤物| 色乱二区| 91影视亚洲| 国产老太乱伦一区| 午夜大香蕉| 青青欧洲黑| 大干人妻| 爽极品影院| 天天看片天天爽| 中文字幕一区二区三区四五区| 日熟女| 亚洲日韩av一区二区三区百合| 少妇熟女视频一二三区| 岛国视频一二三区| 国产极品久久久| 亚洲综合影院| 精品妇女一区二区三区| 91bbbbbb| 五月天色色色| 91bbbbbb| 欧美亚洲性爱一区二区| 男人天堂新| 久久久中文| 另类图片五月天| 2019天天干天天操| 91男同| 黄色电影观看久久9| 国产欧美日韩臀| 人人操人人干xxx| 日韩熟女精品无码专区一区二区| 一级性爱视频免费观看 | 超碰九7| 亚洲欧洲综合视频在线| 极品人妻少妇综合| 性爱久久| 免费观看日本操逼视频| 国产人妻天天干精品| 99re6国产精品99re| 欧美另类综合久久| 久久久久久免费电影| 探花一区在线| 精品人妻一区二区三区四区| 亚洲综合网电影91| 久久大黄片| 久久超碰亚洲人| 日韩精品在线观看观看| 欧美性色欧美| 91亚洲不卡一区| 国产拍偷精品网站| 久久超碰98| 亚洲第2页| 午夜美女诱惑电源网| 日本大片日本一区二区免费高清| 亲子敌伦对白在线播放| 牛牛久久国产精品视频一二三| 精品亚洲黄色片 国产精品导航一区二区| 一区二区三区色综合| 六月婷婷综合| 午夜小电影在线插入淫高潮| 久久草视频污视频| 天天干,夜夜爽| 色在线综合| 日本精品久久久久久久| 久操大香蕉| 色色毛片| 日本不卡免费二区| 大香蕉啪啪啪啪在线| 青娱乐日韩无码| 精品午夜福利| 1.igao73.com 加入收藏 免费专区 国产精品 中文字幕 日韩精品 欧美精品 精彩 | 午夜性生活av免费在线看| 欧美视频激情久久久久久| 99日精品欧美国产| 91大神精品长腿在线观看网站| 成人片视频| 在线观看一卡二卡| 中国东北熟女老太婆内谢| 亚洲日韩美女丝袜美腿人妻视频| 久久久不卡区一区二区三区久久久| a在线视频免费观看| 国内精品嫩模A∨私拍小视频| 美女91av| 亚洲欧洲精品成人| 九九综合| 日韩精品永久在线观看| 久艾草在线精品视频在线观看| 国内一区二区三区| 人人妻人人色| 午夜成人福利影视| 欧美日韩情色一区二区| 日B操| 亚洲九九视频| 97超碰免费生活| 中文字幕丝袜人妻| 色性综合| 亚洲色图超碰在线| 五月丁香在线| 六月丁香啪啪| 看一级黄色视频| 蜜乳AV一区二区三区四| 波多野结衣一级视频| 91爱网| 青青草在线视频播放器| 夜夜高潮夜夜爽夜夜爱爱一区| 亚洲综合夜色| 久久夜夜夜| 精品乱子一区二区三区99| 亚州国产精品乱| 婷色五月| 综合色图区| 九九成人视频| 内射白嫩美女| 精品人人| 国产大片精久久久久久| 色爱欲亚洲| 国产白嫩精品久久| 色九九九| 大香蕉在线视频重口味毛片在线| 精品然女一区二区| 天堂精品| 综合亚洲网| 蜜臀AV一区二区三区| 欧美92| 97chaopengongkai| 亚洲色狠| 综合伊人激情| 免费人成在线观看网站品爱网| 国产精品麻豆成人av| 国产精品久久久久久久无码AV| 国产精品国产亚洲区艳妇糸列| 色牛aV| 免费一级性爱久久| 欧美顶级黄色大片免费| 亚洲欧洲综合视频在线| 欧美色偷拍 | 日韩一级欧美一级国产一级台湾 | 亚洲精品乱码久久久久久蜜桃麻豆| 99久久久er直播网址| 久久亚洲精品成人av| 99ri视频| 丁香五月天久久精品视频一区二区三区| 日韩国产十八禁| 天堂伊人久久| 果冻传媒A片麻豆熟妇人妻| 搡老女人老91二区| 人人操人人插人人摸人人干| 日本天天色| 天天香香欲综合| 欧美第二页午夜| 青青色在线观看| 一级特黄aaa大片在线观看成人一级片在线观看| 国产性爱在线视频一区二区| www.色综合| 久9久| 久久久久极品| 成人精品无码| 操碰91| 精品97精品97| 久操免费电影| 日韩综合无码色欲vv| 亚洲黄色影视| 欧美影音在线| 超碰在线一区二区| 午夜精品视频777| 91亚州欧美| 欧美线天码中字| 亚洲性爱成人| AV 少妇 人妻 偷拍| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 亚洲情色 欧美| 久久久久久亚洲Av无码| 婷婷丁香六月天| 伊人久久大香线综合无码| 亚州黄站| 国产熟女完整版中字| 99久久com免费视频′| 天天综合站| 影音先锋乱伦资源| 天天爽爽爽爽| 男人天堂毛片| 强奸乱伦中文字幕AV| 久久久久久久久久久久久久9999| 久久中文字幕人妻熟av女蜜柚| 一本色道久久天天射天天干| 国语人妻精彩刺激| 蜜臀99久| 婷婷五月天小说| 职场同事知名国产国产精品久久欧美日韩| 永久免费av无码网站国产app | 91视频综合| 天天躁日日躁AAAXX| 好吊爽好吊爽在线视频,中文字幕精品一区二区日本,国产良妇出轨视频在线观看, | 欧差乱伦二三| 久久久久久性爱片| 亚洲无码精品AV久久久| 97国伦国色| 欧美中出| 中文字幕在在线观看网站| 亚洲天天综合| 中文字幕丝袜美腿| 麻豆视频国产一区二区| 国产精品欧美激在线| 乱伦一二三| 在线啊啊啊啊| 你懂的在线观看区国产| 裸体女人草逼视频播放一区,二区,三区,四区,五区 | 国产一线二线三线av| 欧美十八禁在线看| 精品国产乱码久久久影院| 牛黄色久午久| 美女诱惑久久| AV高清一区| 亚洲一区日韩精品中文字幕| 骚逼一区二区| 国产精品久久久久中文字幕| 久久久精品视频欧州站| www久久久| 亚洲久久久久| 91网18| 国产亚洲99久久精品| 欧洲一区二区| 欧美78p| 欧美v亚洲v综合v国产v妖精| 国产乱码精品久久久久久 | AV丝袜东京热| www久久99| 另类图片天天影视| 久久国99999| 欧亚性爱啪啪| 日日骚AV| 亚洲高清少妇| 黑操B| 性爱乱伦视频免费| 亚洲高潮影院| 成人日韩中文字幕| 欧美黄片欧美黄片xxx| 91N综合网| 一区黄二区黄| 精品国产一级久久| 欧美色图片| 久久久久久久六六| 日本曲间由美性生活片| av在线免费一区二区| 先锋女优在线观看视频| 大香网伊人久久综合网eew| 粉嫩不卡一区二区性爱| 精品蜜乳AV免费观看| 精品妇操一区二区三区| 久极品在线观看| 日亚韩精品视频二区三| 日韩无码精品综合久久| 97在线视频免费看| 久久美国毛片| 亭亭丁香激情| www.夜夜操| 国产操逼视频在线观看| 东京热大香蕉| 色777999综合| 欧美熟妇亚洲版| 欧美久久九九| 亚洲操操| 激情专区综合| 国产熟女完整版中字 | 亚洲欧美精品一区天堂久久 | 亚洲免费97免费| 日韩另类色图| 日本岛国黄色网址| 欧美日韩 强奸乱伦| 亚洲乱码精品一区二区| 人妻天堂三区| 亚洲精品电影| 久久久久96| 91爰爱欧美| 区一在线观看| 久久久久久久久久久久久9999| 色999五月色| 99久久久久久久久| 女人 A一级| 大香焦A片| 九九视频黄色片| 97精品| 亚洲精品97久久| 综合色区偷拍| 国产激情在线| 91白嫩| 欧美综合1性辶| 日本二区不卡| 天美av在线| 国产自偷| 婷婷国产精品一区二区| 久久精品国产亚洲粉嫩| 97精品在线视频| 色五月av| 国产高清自拍视频| 立川理惠被中出无码| 人妻精品视频一区二区三区| 草草电影院| 国产精品国产亚洲区艳妇糸列| 亚洲无线观看久久| 午夜a成v人电影| 日韩无码精品综合久久| 亚洲熟女性高潮久久久| 国产精品制服丝袜清纯唯美| 国产精品自在线发布| 日韩欧美俄罗斯A片| 亚洲无线码一区国产欧美国| 狠狠综合| 亚洲国产综合久久天堂| 97精品97| 欧美在线亚洲| 欧美日韩97| 国产精品ⅴ无码大片在线看.| 黑人美精品 A片| 黄色大香焦1级‘′‘| 人人透人人操| 中文字幕av色| 裸体美女久久久| 亚洲另类色综合网站| 少妇天堂| 伊人精品久久网站| 97一区二区蜜臀| 收看日本人日bb| 91九九九吃| 秘书高跟黑色丝袜国产91在线| 插插综合网天天影视网| av三级电影在线播放| 亚洲欧洲自拍图片专区满春格| 精品国产一区二区三区在线播出| 蜜乳AV一区二区三区四| 国产欧美日韩在线观看麻豆传媒公司| 最新亚洲风情电影| 91痴汉| 懂色Av| 大香蕉免费乱伦视频| 26uuu国产| 精品国产99| 在线看污网站| 国产绿奴视频在线观看| 日本色婷婷| 亚洲涩涩| 久久久少妇| 欧美疯狂做爰xxxx| 97色论| 丰满人妻-区二区三区免费看| 亚洲无码国产探花在线观看| 亚洲精品久久久久久久蜜桃臀| 九九久久久九九| 久热这里| 国产精品一区二区三区,亚洲综合 性开放中文AV高清无码免费看 | 亚洲91网| 女人爽到高潮潮喷18禁网站| 无码人妻精品一区二区三区九九 | 玖玖玖玖精品国产剧情| 日韩/97| 91熟女丨91老女人| 动漫爆乳3D奶水一区在线观看| 九九九久久久久| 国产女人视频三四五区| 超碰人人干| 国产精品在线一区二区| 中文字幕美女91| 中文字幕国产精品1区| 亚洲精品国产拍免费91在线| 在线看片国产精品每日更新| 亚洲一区二区 麻豆传媒| 日本韩高清无砖码22o| 六月丁香啪啪啪| 色香网| 国产精品成人蜜臀AV在线| 97这里只精品| 2019久久久久久久久福利| 久久国产视频专区一二三| 日本不卡五区| 偷拍欧美激情| 国产女人视频三四五区| 91狠| 蜜臀久久99精品久久久久久无删减 | 99色网| 人人喜人人妻| 五月婷亚洲精品天堂| 亚洲高潮少妇| 精品免费一区| 蜜桃精品一区二区三区ww| 97爱综合| 久久的网站啊啊啊啊啊| 涩综合导航| 久久久久久久久久久久黄色| 波多野结衣被操50分钟免费视频 | 天天看天天在线精品| 欧美青青视频| 日韩人妻免费精品| 九九九国产精品| 性爱av网站| 色与欲影视天天看综合网| www网站黄| 啊啊啊 在线| 一起草av| 亚洲在线网站| 我中文字幕6区| 精品黑人一区二区| 999久久久国产精品| 在线啊啊啊啊| 91艹B视频| 老鸭窝成人| 小草三级久久观看| 国产精品嫩草久久久久| 青青操日韩| 天天综合网一91网| 欧美一区二区日韩三区| 久久久久久久久国产| 狠狠色婷婷7777久| 中文字幕国产在线天堂| 欧美天堂亚洲电影院一区在线播放 | 欧美激情总合网| 91久久九九精品国产综合| 欧美久久久| 久热99| 内射小黄片| 97在线播放| 国产suv精品一区二区四| 人妻少妇被猛烈进入中| 91色亚洲| 国产白丝在线| 狂操嫩妻视频一区二区三区| 老司机天天操| 天天综合网~91| 久久啊啊啊视频| 农村妇女一级二级三级视频| 午夜福利无毒不卡| 大香蕉狠狠爱| 98超碰日本| 国产丝袜美女诱惑| 在线观看av区| 国产精品爱欲| 亚洲超碰97| 久久久久久裸体| 热天堂一区二区| 女人被添高潮免费视频| 免费福利视频中文字幕| 97网色| 人妻美腿丝袜日韩| 国产女同性恋视频| 粉嫩国产精品久久粉嫩| 国产成人免费观看在线视频| 最新无码国产| 伦理第一页| 少妇精品久久久八区九区| 欧美性色综合网| 免费视频无码| 3p国产欧美99热| 国产东北女人在线视频| 人人爱人人乐人人操| 久久精品无码专区| 亚洲骚男同com| www.男人天堂| 热久久99999| 黄色成品网站| 97国产精品国| 夜夜嗨AV一区天天| 日本片日本片祼观看网站在线看中文版网页在线看 | 青草成人免费视频一com| 人妻另类| 免费视频观看60秒| 蜜桃AV天堂| 91劲爆| 人妻熟女一区二区| 97超碰中文| 欧美性爱一区二区| 欧美综合色,www| 丝袜美腿91| 少妇熟女视频一区二区三区 | 首页中文字幕中文字幕免费| 尤物网址| 思思热久久成人| 天天草夜夜草高潮片| 99久国产精品午夜性色福利| 国产精品白领在线观看| 精品国产av一区二区三区四区入口| 天美传媒婬乱| 九九九色| 情趣丝袜无码操逼视频| 伊人丁香五月婷婷| 免费超碰97在线观看| 黄色免费网页无码| 91精品丝袜在线观看| 能看的AV| 91丝袜美女| 欧美老妇综合网| 亚洲欧洲第二视频在线观看色图| 粉嫩AV一区夜夜嗨| 综合色久欲| 青青草好吊色| 色欲久久久久综合网| 亚洲色系另类精品国产| 特级毛片特黄久久免费看| 操逼网站视频漫画国产| 国产原创自拍| 日欧美色| 亚洲中文字幕一区| 色香欲综合| 国产精品免费1区2区视频| 乱伦图av| 婷婷色五月激情| 狼人综合婷婷激情四射 | 久久亚洲不卡| 熟女AV一区| 九九九九九九综合| 人人弄人人摸| 熟女人妻一区二区三区| 嗯嗯嗯嗯啊啊啊好紧好大| 北京美女一区二区| 春色91| 国产福利视频精品视频| 国产熟女乱论| 狼天天狼天天大香蕉| 青青草成人视频在线观看二区| 久久久一二三四区| 亚洲国产一级黄色视频| 久久精品亚洲成a人天堂| 91网站18在线观看| 黄色片G G G| 老妇女91| 黄色欧美性爱视频| 久久久久久久 九九九九九九九| 日本顶级天天操狠狠操夜夜操中文字幕| 综合熟妇一区二区三区| 蜜乳视频网站| 色综合色综合网| 中文字幕-区二区三区四区视频中国| 激情内射| 久久精品欧美一区二区三区不卡| 五月婷婷六月激情| 久久久久久久9最新免费视频观看| 91综合熟女| 欧美成人黄网色网站| 久久久亚洲精品电影免费看| 在线观看啊啊啊啊啊| 欧美日韩国产另类综合| 少妇 综合| 色原狠狠天天天| 黄色片,com| 成人AV素股で擦久久| 色婷婷日韩精品一区二区三区| 国产高清精品一区二区三区毛片| 天天射,天天操,天天爽-国内精品一区二区三区-成人AV | 大香蕉乱伦视频网| 青青伊人这里只有精品| 欧美一二三级精品在线| 欧美超碰9798| 久热最新在线杭州| 国产成人精品日本亚洲语言| 久久视频少妇美女| 欧美A片中文字幕| 色女网日韩| 欧美97爱| 精品国产乱码久久久久久久久1| 久久9免费视频| 欧美三级中文字幕hd| 九九九九九精品十六| 美女操逼A A| 超碰激情808| 精品78| 日韩性色b| 中文字幕在线免费观看 | 欧美日韩在线小说 | a在线视频免费观看| 欧美在线干| 国产AV激情无码久久无码| 天天做天天爱| 五月婷婷深深爱| 男人的天堂1024| 日韩中文欧美| 久久高潮妇女视频| 91oumei| 久久久久九九九| 神马久久久久眼| 国产精品人妻免费精品| 欧美激情视频一区二区三区不卡| 成人国产视频在线观看| 亚洲 图片 欧美 色图| 看免费一级在线播放毛片| 欧美白嫩女HD| 日韩一级特黄av毛片| 97久久国产亚洲精品超碰热| 国产AV超爽| 久久久久久久久久久久97| 色婷婷激情| 精品人妻一区二区三区日产| 嗯嗯嗯,草死我| 为用户提供免费看黄网址在线观看| 国产亚洲色婷婷99精品91| 国产精品999zyz| 97在线日韩中文字幕| 一级黄色影片| 中国AAAAAA黄色片| 亚洲精品 欧美精品| 婷婷天堂站| 97香蕉网| 欧洲自拍色图gif在线| 青草av在线| 亚洲欧美综合| 人妻人妻天天碰| 日本久久99| AV乱伦国产| 精品妇操一区二区三区| 色性综合| 天天躁日日躁xxxxx| 大茄子熟女AV导航| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 日本女优在线视频福利| 91精品国产91熟女| 在线观看A啊啊啊| 日本午夜福利影院| 日韩熟女无码| 中文字幕免费在线观看| 日韩AV中文字幕电影| 欧美黄片欧美黄片xxx| 97精品免费| 久久久免费懂色| 少妇99成人麻豆| 在线可观看的黄色网址| 亚洲啪啪综合?v一区综合精品区| 国产情色第一第二页在线观看| 五月天啪啪| 激情抓乳插进去啪啪啪日韩| 久久久久久久| 亚州欧美总和| 青苹果影院男人的天堂| 91精品久久久久久综合五月天| av一区二区三区不卡| 久久精品无码一区二区三区| 久久九精品| 手机av天堂久久久久| 亚洲熟女av日韩熟女| 精品国产一区二区三区四区在线看| 青草地一本线一区二区三区| 呦女网站| 欧美成人色| 伊人影院在线理论播放 | 啊啊啊啊好大好硬啊啊啊啊啊 | 欧成人精品一区二区三区| 国产精品久久久久久久免牛肉蒲团 | 久久精品中文| 色女综合| 91精品国产综合久久久蜜臀| 免费看日产一区二区三区| 国产精品亚洲天堂网址| 成人毛片免费| 国产乱子伦一区二区三区在线观看| 亚欧美综合| 2017超碰| 欧美亚洲涩涩| 78久久久| 97人人中文网| 99999无码| 麻豆亚洲Av成人无码一区精品| 亚洲图片欧美在线视频| 在线观看日韩av不卡| 欧美经典一区二区三区| 亚洲图片日本AⅤ欧美在线| 国内毛片欧美香蕉精品| 日本成人在线不卡一区二区三区| 亚洲熟妇A V黑人| 欧美综合色图网| 精品熟妇视频一区二区| 九99久久| 欧美最婬乱婬爆婬牲视频| 偷拍亚洲情色| 天天性射网| 一二区在线观看视频| 激情视频图片| 97中文综合| 日天天九九天堂666| 3级毛片一二| 日韩精品三级| 亚洲国产天堂| 欧美色狠| 欧美成年人性爱视频免费观看| 日韩性爱啪啪视频| 欧美18 在线观看| 免费啪啪av| 污污汅18禁网站在线永久免费观看| 中文字幕精品一区欧美| 久久精品中文字幕观看| 丝袜熟女一区二区三区| 免费的黄片wwwwww| 亚洲综合五月天| 人妻天堂综合网| 免费看污网站| 1204av韩国| 人妻无码一区二区三区久久99| 拍拍拍拍大尺度黄色三级片拍拍拍拍拍照| 亚欧美综合| 天堂成人网| 四虎国产精品永久在线囯在线| 精品久久久久久无码| a v网站在线播放| 国产精品老师| 超AV色女| jiujiujiujingpin| 九九热只有精品| 蜜臀久久99精品久久久久| 久热影视| 91狼人| 久久久久日本视| baiduhicn.com。| 人妻熟女一区二区三区视频| 男女一进一出视频久久| 嗯啊抽插大香蕉网页| 超碰免费人人| 亚洲激情 欧美色图| 欧美日韩亚洲国产中文永久天天看| 97视频免费播放| 另类小说综合网| 久久久com| 十八禁黄色成人网站观看| 91天天爽| 蜜臀AV秘一区翔田千里| 国产 日韩 另类 视频一区爱| 怡红院视频在线| 91久久久久久久| 超清中文乱码字幕| 久久精品店| 嗯嗯嗯啊啊啊操的我好爽| 天天天堂影视日韩亚洲91| 91美女在线观看| 熟女人妇一区二区三区| 欧美亚洲激情小说| 九九超碰综合网| WWW操逼| 色五月婷婷五月天| 天堂综合| 国产辣妈在线视频福利| 操一区| 九七毛片九九毛片| 亚洲精品一二牛牛| 久久久中文| 九七人妻在线| 中文字幕日韩精品久久| 五月丁香啪啪啪| 天操天操夜操夜月月年年操操| 亚洲 无码 偷拍| 99热在线观看| 四虎影视国产精品| 伦伦成年午夜免费视频| 蜜桃臀 后入 一区 二区 三区 在线| 97在线观看视频| 国产区91柔拿会所技师| 欧美亚综合色图| 日韩色| 国产激情久久| 男人天堂无码| 日韩乱伦影音先锋| 日韩美女高潮喷水视频| 国产兽交视频在线播放| 久久国产精品一级二级三级| 久热这里只有精品9| 国模少妇一区二区三区| 四虎在线观看网站| 亚洲va有码在线天堂| 屌妞视频久久久久久久久久久久| 亚洲欧美成人网站AAA| 夜夜肏2021| 色色九区| 色情综合网| 大香蕉中文201| 久久九色| 男人的天堂com| 超碰99在线| 农村少妇久久久久久久| 99熟女| 超碰碰97资源站| 丁香五月激情综合| 九九九九精品精| 天天射,天天操,天天爽-国内精品一区二区三区-成人AV | 人妻 欧美 中文| 性爱视频无打码在线观看| 精品97久久综合| 波多野42部无码喷潮在线观看| 91l欧美在线| 九九干| 国产AV线| 婷婷99| 天美传媒精品一区二区| 精品大久久| 人人干黄色| 国产第11页| 欧美极度丰满熟妇hd| 超碰97人妻自拍| 91色情黑丝搞鸡在线观看一区二区三区三州 | 亚洲春色欧美激情自拍| 级品肉射| 欧美性爱伊人| 欧美日韩亚洲天堂| 一二三啪啪专区| 国产一级内射无挡观看| 97jingpin| 人妻少妇色综合| 国产精品成人AV片免费看网站| 亚洲欧美setu| 在线观看av区| 激情小说亚洲| 中文字幕综合人妻| 欧亚免费视频| 中文字幕在线观看网址| 成人熟女区| 久热九九| 一级AV性爱| 亚洲熟妇白浆无码AV| 野狼激情网| 国产99精品一区二区三区免费| 日韩在线观看AV| 午夜情侣自拍网站| 国产精品999zyz| 国产视频第二页| 丁香五月天久久精品视频一区二区三区| 国产AV久久野战精品| 97超碰9| 天美传媒在线一区| 色五月婷婷在线| 国产精品区在线12p| 欧美亚洲中文字幕| 日日黄色三级网站| 欧美激情五月天| 亚洲一区二区三区播放在线| 噜噜噜噜久久久精品免费| 97视频在线观看高清资源| 亚洲精品日日夜夜52| 久久av无码| 国产熟女一区二区| 欲香欲色天天天综合和网| 伊人AAA| 国产剧情AV不卡在线观看| 97爱爱| 久久久久久十| 98福利在线视频| 夜夜操夜夜爽夜夜高潮| 国产精品久久久鸭无码的功能| 26uuu成人影片| 日本不卡在线二区三区| 亚洲黄色a级片| 日本123区操B视频| 84YTCOM性无码| 青青草综合在线| 欧美影音在线| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 97天堂| 欧亚韩国999| 亚洲视频二区 | 17c嫩草51久久91嫩草| 人妻丰满熟妇av无码区蜜桃| 日本五十路在线| 日韩一区二区熟女| 日韩AV一区二区三区四四| 黄色高清无码无码破解免费暗网 | 国产视频小说| 蜜臀AV成人精品蜜臀AV久久| 欧日韩不卡视.频| 操美女高潮抽搐白浆| 久久毛卡| 人妻中文字幕精品无码| 大屁股人妻女教师撅着屁股| 69一区二区三区| 久久久久久久| 一本色道久久综合精品婷婷| 亚洲自拍青操视频| 九9热伊人| 天天综合网~91入口| 人妻 欧美 中文| 亚洲欧洲色情高清| 神马午夜久久久| 欧美老妇综合网| 亚欧中文字幕在线视频| n1038 一二三区| yazhousetuoumei| 欧美se亚洲| 麻豆AV短剧| 久久久久久久久久黄色网| 超碰碰97| 91丝袜激情在线| 色九九九综合| 亚洲性少妇| 嫩草91| 美女91网址| 午夜在线播放| 精品视频一区二区| 人人爱人人乐人人操| 亚洲无码国产探花在线观看| 操人人| 岛国视频免费在线观看| 日韩人妻一区二区精品| 婷婷大香蕉| 91九久|