亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Kafka丟消息排查指南:從acks、ISR到偏移量的可靠性配置全解析

Kafka丟消息排查指南:從acks、ISR到偏移量的可靠性配置全解析 Kafka 在很長一段時間里都被當(dāng)成消息中間件里的“天花板”來用吞吐量高、可擴展性好、還能做存儲。但凡是線上實際用過 Kafka 的團隊幾乎都經(jīng)歷過一次“到底丟沒丟消息”的爭論。有人說是 Kafka 的問題有人說是自己代碼的問題還有人說是網(wǎng)絡(luò)抖動導(dǎo)致的偶發(fā)故障。實際上我做了這么多年 Kafka 相關(guān)的項目結(jié)論非常明確Kafka 本身很少會“無理由丟消息”絕大多數(shù)丟消息的根源都出在生產(chǎn)者配置、消費者提交位點的時機以及你對確認機制的理解上。這篇文章我會從生產(chǎn)端、Broker 端、消費端三個鏈路分別拆解把“丟消息”這件事徹底講透。不管你是在做日志采集、實時數(shù)倉還是普通的后端消息推送這篇內(nèi)容都值得對照你當(dāng)前的配置逐條查一遍。你會發(fā)現(xiàn)很多丟消息不是玄學(xué)而是配置和代碼寫得不夠謹慎。1. 先說結(jié)論丟消息從來都不是 Kafka 一個環(huán)節(jié)的問題1.1 我對“Kafka 丟消息”這句話的理解很多人一搜“Kafka 丟消息”第一反應(yīng)是 Kafka 這個中間件本身有沒有 bug。其實 Kafka 作為分布式系統(tǒng)單從設(shè)計上講它已經(jīng)盡最大努力去保證消息不丟了。問題在于這個“保證”是有前提條件的比如生產(chǎn)者要設(shè)置合理的確認機制、Broker 端要有足夠的副本數(shù)、消費者要自己管理好偏移量。你如果把保證可靠性的責(zé)任全部甩給 Kafka自己代碼里毫不在意地往生產(chǎn)端一塞、消費端一拉那丟消息幾乎是必然的。所以我的第一句話永遠是Kafka 不丟消息是有條件的你要做的不是問 Kafka 為什么丟而是問自己在哪個環(huán)節(jié)破壞了它的可靠性邊界。1.2 先想清楚消息從進到出要經(jīng)過哪幾道門一條消息從業(yè)務(wù)系統(tǒng)產(chǎn)生到最終被下游消費者處理完整的路徑是生產(chǎn)者把消息發(fā)送給 Kafka BrokerBroker 把消息寫入分區(qū)對應(yīng)的日志文件并完成副本同步消費者從 Broker 拉取消息處理業(yè)務(wù)邏輯消費者提交偏移量offset確認這條消息已經(jīng)被消費。這里面每一道門都有可能把消息弄丟。生產(chǎn)端可能因為發(fā)送失敗、回調(diào)沒處理、緩沖區(qū)滿了而丟Broker 端可能因為刷盤不及時、副本同步失敗、Leader 切換而丟消費端可能因為位點提交太快、程序崩潰、重平衡而丟。你光盯著某一端排查是沒用的。我見過不少團隊 debug 了好幾天最后發(fā)現(xiàn)是消費端業(yè)務(wù)異常導(dǎo)致位點已經(jīng)提交了但消息沒處理完成這種“假成功”最容易讓人誤以為是 Kafka 在丟消息。所以先建立這個全局鏈路認知后面排查起來才有方向。2. 生產(chǎn)端你還沒發(fā)出去消息就已經(jīng)丟了2.1 acks0 的代價說發(fā)就發(fā)后果自負生產(chǎn)者端第一個經(jīng)典坑就是 acks 配置。如果你把acks設(shè)成 0意味著生產(chǎn)者不需要等待 Broker 的任何確認消息發(fā)出去就算完事。這個配置下吞吐量最高但代價就是只要網(wǎng)絡(luò)發(fā)生抖動、請求還沒到 Broker或者 Broker 寫入過程中出現(xiàn)問題生產(chǎn)者這邊完全無感知。我實際幫團隊排查過一個采集系統(tǒng)的丟數(shù)據(jù)問題客戶端采集到日志后直接往 Kafka 里懟配置里acks0結(jié)果高峰期數(shù)據(jù)丟失率在 0.5% 左右看著不高但對于需要精準對賬的業(yè)務(wù)來說完全不可接受。后來把acks改成 1丟失率立刻降下來了。在這個配置下你所謂“發(fā)消息成功”只是客戶端把數(shù)據(jù)交給了 socket 緩沖區(qū)并不是真的寫到了 Kafka。所以生產(chǎn)環(huán)境里除了極少數(shù)允許丟失的監(jiān)控指標類數(shù)據(jù)我認為一般不要用acks0。真到了丟不起的場合再回來的查證成本遠高于那點吞吐量收益。2.2 acks1 的中間地帶Leader 掛了你就傻眼acks1是很多團隊里的默認選擇意思是生產(chǎn)者只需要等 Leader 副本寫入成功就返回成功。這個配置在實際吞吐量和可靠性之間確實比較均衡很多業(yè)務(wù)也都跑在這種模式下。但你要清楚它的死角如果 Leader 在寫入完成后、還沒等其他副本同步的時候掛了這條消息對消費者來說就是“丟失”的。舉個例子你給主題配置了一個分區(qū)三個副本某臺機器上的 Leader 副本把消息寫盤后數(shù)據(jù)還沒同步到其他兩個 Follower結(jié)果這臺機器突然斷電。Kafka 會從剩下的 Follower 里選一個新的 Leader之前那批沒有同步完成的消息就永遠沒了。在這個環(huán)節(jié)你要是只盯著生產(chǎn)者有沒有收到成功回調(diào)那是不夠的。acks1只保證“那一刻的 Leader 寫入成功”不保證這條消息在集群里永久存活。對于賬務(wù)類、訂單類這種強一致場景我建議直接上acksall別太摳那一點點延遲。2.3 最穩(wěn)妥的 acksall選對 ISR 才是關(guān)鍵acksall也不是無敵的很多人的理解是“設(shè)成 all 就絕對不丟了”這其實是個誤區(qū)。acksall的含義是 Leader 必須等待當(dāng)前 ISRIn-Sync Replica同步中副本集合里的所有副本都寫入成功才返回成功。注意ISR 集合是動態(tài)變化的。如果一個 Follower 跟不上水位它會被踢出 ISR那么acksall實際上只需要等 ISR 里剩下的那些副本確認。極端情況下ISR 里只有 Leader 自己這時候acksall的可靠性就退化成acks1了。所以我有一個習(xí)慣性建議把min.insync.replicas這個參數(shù)設(shè)置好比如設(shè)置成 2。它的作用是最少要有多少個 ISR 副本在線否則分區(qū)直接不可寫。這樣配合acksall可靠性才能真正兜住底。不要只改一個參數(shù)這倆是配套的少了誰都有漏洞。2.4 異步發(fā)送、緩沖區(qū)和超時三個隱藏的地雷除了 acks生產(chǎn)端還有三個隱藏炸彈異步發(fā)送、max.block.ms、buffer.memory。很多人寫代碼時喜歡用異步發(fā)送因為同步發(fā)送在 Broker 繁忙時會有明顯的 RT 上漲。異步發(fā)送本身沒問題問題在于很多人發(fā)了消息之后沒有正確注冊回調(diào)或者回調(diào)里只是打了行日志就沒后續(xù)。消息發(fā)送失敗后你毫無感知這對“丟沒丟消息”的判斷是致命的。緩沖區(qū)參數(shù)也一樣。如果生產(chǎn)者的buffer.memory設(shè)置太小或者max.block.ms設(shè)置得過于保守在業(yè)務(wù)洪峰來臨時KafkaProducer 會直接拋出異常。如果你沒做重試和補償這條消息就靜默丟失了。建議把異常處理落到實處發(fā)送失敗至少要有重試機制而且重試時必須關(guān)注enable.idempotence冪等生產(chǎn)者避免重試造成消息重復(fù)。3. 服務(wù)端Broker 層面的丟失其實最容易被忽視3.1 刷盤策略斷電的一瞬間內(nèi)存里的都白寫B(tài)roker 端的第一個“丟消息”隱患就是刷盤策略。Kafka 利用操作系統(tǒng) PageCache 來提升寫入性能生產(chǎn)數(shù)據(jù)會先寫入 PageCache再由系統(tǒng)異步刷到磁盤。這個機制在絕大多數(shù)情況下都沒問題性能高、吞吐大。但一旦發(fā)生斷電或者內(nèi)核崩潰PageCache 里還沒有落盤的數(shù)據(jù)就會全部丟失。有些團隊會調(diào)整log.flush.interval.messages和log.flush.interval.ms來強制更頻繁地刷盤但這兩個參數(shù)和吞吐量是沖突的。你不能又想要極致吞吐又想要斷電不丟數(shù)據(jù)這不現(xiàn)實。我實際遇到的案例里很多公司壓根沒注意日志目錄的磁盤是不是 SSD、IO 是否穩(wěn)定。磁盤性能差會導(dǎo)致 Follower 復(fù)制延遲升高進而被踢出 ISR最終影響整個分區(qū)的可用性。這里我想跟大家說的經(jīng)驗是不要把 Kafka 部署在性能很差的云盤上否則你會遇到各種詭異的消息延遲和副本同步問題。3.2 副本數(shù)是 2丟一半的概率可不算小很多人創(chuàng)建主題時只設(shè)置了 1 個副本或者圖省錢只設(shè) 2 個副本。副本是 1 的時候機器一掛分區(qū)數(shù)據(jù)全沒這種場景已經(jīng)不能叫“丟消息”了應(yīng)該叫“數(shù)據(jù)毀滅”。副本數(shù)設(shè)置為 2其實也并沒有好到哪里去因為它只能容忍一臺機器故障遇到機房級別的斷電依然可能同時掛掉兩個副本。我自己在給項目做容量規(guī)劃的時候一般建議核心業(yè)務(wù)主題至少 3 個副本。如果你說我資源緊張至少保證min.insync.replicas2并且磁盤、機器盡量分散到不同的故障域。記住一個核心原則可靠性是設(shè)計出來的不是運氣碰出來的。你可以用最小副本數(shù)跑測試環(huán)境但生產(chǎn)環(huán)境請別抱僥幸心理。另外想說一下副本數(shù)不是設(shè)置完就完事的。Kafka 的副本分布和機器的機架信息有關(guān)如果所有副本恰好都分配在同一臺物理機上那等于沒有副本。你可以通過kafka-reassign-partitions.sh來做副本重分配至少看一眼分區(qū)副本的分布情況再上線。3.3 Leader 選舉與 ISR 收縮你以為的高可用是暫時的一條消息能不能被安全消費其實取決于它是否完成了“高水位”同步。高水位就是所有 ISR 副本都同步到的位置。如果你的消費者只讀取了 Leader 上的數(shù)據(jù)而一條消息還沒來得及同步到所有副本Leader 掛掉時新選舉出來的 Leader 上可能沒有這條消息消費端就會覺得消息丟了。還有一個很多初學(xué)者會忽視的點Leader 切換時消息的偏移量可能會重置。比如舊 Leader 上有 offset 是 0~100 的數(shù)據(jù)但新 Leader 只同步到了 offset 80那么舊 Leader 上 80~100 的數(shù)據(jù)對客戶端來說就是“被丟了”。嚴格意義上說這不是 Kafka 丟了你的消息而是你讀取的是一個并不完整的副本數(shù)據(jù)。所以我們要依賴min.insync.replicas和 ISR 機制把“數(shù)據(jù)未完整同步前不可用”變成硬約束。你可以把 ISR 收縮、Leader 切換的日志全部打開來觀察一旦發(fā)現(xiàn) ISR 頻繁變化就要注意了這往往意味著某臺機器磁盤 IO 很高、GC 停頓嚴重或者網(wǎng)絡(luò)有問題。表面上是在“丟消息”實質(zhì)上是在“丟副本”。3.4 日志清理和配額別讓物理資源替你“丟消息”還有一個冷門但真實會發(fā)生的場景日志清理。Kafka 的主題默認開啟了日志刪除機制超過retention.ms或者超過retention.bytes的舊數(shù)據(jù)會被自動清理。如果你消費端掛了好幾天回來繼續(xù)消費的時候發(fā)現(xiàn)從頭開始讀已經(jīng)讀不到多少數(shù)據(jù)了那不是 Kafka 丟消息而是消息被過期清理了。這種問題常發(fā)生在測試環(huán)境或者運維不規(guī)范的團隊里。消費者離線太久清理線程把舊日志都刪掉了。我建議你根據(jù)數(shù)據(jù)保留需求設(shè)置合理的retention.ms同時監(jiān)控消費組 Lag 的監(jiān)控指標發(fā)現(xiàn) Lag 持續(xù)增長就要及時處理別等消息被清理了再去找原因。還有一種情況是磁盤空間被打滿導(dǎo)致日志寫入失敗Kafka 會直接停止接受寫入。這個場景比較像“丟消息”其實是集群進入保護狀態(tài)。日常運維中必須為日志目錄預(yù)留充足的空間并配置好磁盤使用率告警別讓物理資源掐住了消息通道的脖子。4. 消費端處理不掉的“丟”其實是消費位點的問題4.1 自動提交位點程序一崩一批消息直接“丟了”消費端的“丟消息”往往最具有迷惑性因為它在很多時候表現(xiàn)為“消費者明明拉取了消息結(jié)果卻像沒有消費過一樣”。最經(jīng)典的場景就是開啟enable.auto.committrue默認每 5 秒自動提交一次消費位點。想象一個場景消費者把一批消息拉了下來業(yè)務(wù)處理過程中 Redis 超時代碼拋了異常于是這批消息還沒有處理完但 Kafka 客戶端的后臺線程已經(jīng)按照落地時間提交了 offset。等重啟消費者之后Kafka 會認為這批消息已經(jīng)消費完畢直接跳到后面去了。你的業(yè)務(wù)數(shù)據(jù)缺失看起來就像 Kafka 把消息丟了。最讓我無語的是有些團隊把錯誤處理邏輯做成打日志然后繼續(xù)消費這樣連“消費失敗”的痕跡都看不到。下游數(shù)據(jù)對不上賬的時候翻業(yè)務(wù)日志全是異常后跳過繼續(xù)往下走的記錄。這里我給大家一個最基礎(chǔ)也最有效的建議核心業(yè)務(wù)里不要自動提交位點手動提交并且做到“先處理完業(yè)務(wù)再提交 offset”。4.2 enable.auto.commitfalse 真的就不丟了嗎手動提交位點解決了“處理一半就提交”的問題但如果你用手動提交的方式又容易引發(fā)另一個常見問題位點提交失敗。比如你的消費者處理完一條消息準備提交 offset 的時候剛好發(fā)生 Rebalance這時第一次提交失敗。如果你沒做重試重啟之后就會從這個舊位點重新消費。這種情況和“丟消息”相反它會導(dǎo)致“重復(fù)消費”而不是消息丟失。但引出的另一個極端是有些人為了追求效率在業(yè)務(wù)處理之前就提前提交 offset這樣下一次消費者掛掉時這些消息就永遠不會再被讀到。這不叫丟但在業(yè)務(wù)效果上跟丟了一模一樣。所以我特別想強調(diào)一個觀點在 Kafka 的消費模型里“不丟消息”和“不重復(fù)消息”這倆目標本質(zhì)上就是沖突的。你只能選擇“至少一次”或者“恰好一次”沒有完美的中間態(tài)。如果業(yè)務(wù)要求絕對不能丟那你就要接受可能會有重復(fù)并且在消費端做冪等。比如用 Redis 記錄消息唯一 ID或者直接把冪等判斷做到數(shù)據(jù)庫里。4.3 重平衡踢你出群的那一刻消息去哪里了重平衡Rebalance是消費端丟消息的另一個重災(zāi)區(qū)。Kafka 消費者通過消費組協(xié)調(diào)分區(qū)分配當(dāng)消費者數(shù)量變化、消費組訂閱關(guān)系變化或者消費者心跳超時的時候會觸發(fā)重平衡。重平衡本身不是問題問題在于重平衡發(fā)生時未提交位點的分區(qū)會被重新分配給其他消費者。打個比方分區(qū) 0 之前分配給了消費者 AA 拉了幾百條消息正在處理還沒提交位點結(jié)果網(wǎng)絡(luò)抖動消費組觸發(fā)了重平衡分區(qū) 0 分給了消費者 B。B 會從上次提交的位點開始消費那些 A 拉下來但沒來得及落庫的數(shù)據(jù)就“丟”了。當(dāng)然現(xiàn)代 Kafka 的協(xié)同式重平衡已經(jīng)比老版本溫和了不少但老版本的問題在新版本里依然可能因為心跳超時、session.timeout.ms設(shè)置不合理而出現(xiàn)。我給團隊的建議是不要把max.poll.records調(diào)得過大單次拉取太多消息處理時間太長容易導(dǎo)致消費者超過max.poll.interval.ms被判定為不可用從而觸發(fā)重平衡。4.4 從“至少一次”到“恰好一次”別把丟和重混為一談最后一條是關(guān)于語義邊界的認知。很多人說“我想做到不丟消息”其實他們內(nèi)心的真實訴求是“我一條消息都不多、一條都不少”。要做到一條都不少需要引入 Kafka 的冪等生產(chǎn)者和事務(wù)機制配合消費端的冪等消費也就是端到端恰好一次。但這里有一個現(xiàn)實問題絕大多數(shù)業(yè)務(wù)系統(tǒng)追求的是“至少一次”加上消費端的業(yè)務(wù)冪等。比如你用訂單號做主鍵做 upsert重復(fù)插入和插入一次效果一樣你就不怕重復(fù)消費。反而是一味追求事務(wù)機制會帶來比較大的性能損耗和實現(xiàn)復(fù)雜度。站在我個人的角度除非你是做支付、對賬一類強一致系統(tǒng)否則優(yōu)先采用“生產(chǎn)冪等 消費冪等”這個組合性價比最高。搞清楚語義邊界你才不會被“丟消息”和“重復(fù)消息”這兩個詞來回繞暈。排查問題的時候要搞清楚用戶說的“丟”到底是真的丟了還是重復(fù)消費中被掩蓋了還是只是延遲變高導(dǎo)致看起來像是沒消息。這一步清晰了很多時候你根本不需要調(diào)一堆參數(shù)。5. 排查實錄遇到丟消息我是怎么一步步查的5.1 第一步先分清楚是“沒生產(chǎn)成功”還是“沒消費到”排查丟消息最忌諱一上來就翻 Kafka 源碼或者亂調(diào)參數(shù)。我自己的固定套路是先分域到底是生產(chǎn)端沒發(fā)出去Broker 端沒存住還是消費端沒消費掉。生產(chǎn)端好判斷你只要看生產(chǎn)者日志里有沒有異?;卣{(diào)里有沒有記錄失敗消息。如果回調(diào)里記錄了大量失敗那問題就定位在生產(chǎn)端先看max.block.ms是否觸發(fā)、重試次數(shù)是否不夠、目標 topic 是否存在。如果回調(diào)都是空的可以去 Broker 端看這個 topic 的落盤總消息數(shù)。消費端則要看消費組的 Lag。用命令行工具執(zhí)行kafka-consumer-groups.sh --describe --group xxx觀察每條分區(qū)的CURRENT-OFFSET和LOG-END-OFFSET。如果 Lag 很高說明消息沒被及時消費完先排查消費者是否有異常退出。如果 Lag 是 0 但下游數(shù)據(jù)缺失那大概率是“處理失敗但提交成功”需要回源日志看業(yè)務(wù)處理狀態(tài)。5.2 第二步用數(shù)據(jù)驗證別靠感覺很多時候大家判斷丟消息都是“感覺丟了”。比如下游說某個時段的數(shù)據(jù)少了然后就開始抓狂。我建議遇到這種場景先做個端到端的數(shù)字驗證生產(chǎn)者端統(tǒng)計發(fā)送成功總數(shù)Broker 端統(tǒng)計某個 topic 的累積消息量消費者端統(tǒng)計處理成功數(shù)。三個數(shù)字一對問題到底出在哪一段就清楚了。如果生產(chǎn)者發(fā)送成功數(shù)比 Broker 的入站消息數(shù)多那是生產(chǎn)者回調(diào)處理有問題消息實際上沒發(fā)到 Broker。如果 Broker 端有但消費者端沒有那就是消費端處理邏輯或提交位點的問題。如果 Broker 端本身就少了再繼續(xù)查副本、磁盤和 ISR 的情況。這里分享一個我常用的手法在生產(chǎn)端往消息里注入唯一 ID消費端用這個 ID 做去重和統(tǒng)計這樣幾乎可以把每條消息的流轉(zhuǎn)軌跡都撈出來。日志長期留存的情況下排查“丟消息”會變得非常直觀。不要嫌麻煩這樣的投入在關(guān)鍵時刻能救你一命。5.3 第三步常見“丟消息”場景速查表下面是我這些年排查中遇到最常見的幾類“丟消息”場景直接做成速查表方便你對照自己的系統(tǒng)場景表現(xiàn)潛在原因核心檢查點生產(chǎn)端偶發(fā)超時消息缺失網(wǎng)絡(luò)抖動、delivery.timeout.ms過小增加重試次數(shù)調(diào)大超時時間極端情況下 Leader 切換少量消息丟失acks1或acksall但min.insync.replicas太小設(shè)置acksall并配套min.insync.replicas2磁盤滿或 IO 異常寫入失敗機器磁盤容量/性能不足監(jiān)控磁盤配置告警增加節(jié)點消費者重啟后部分數(shù)據(jù)缺失自動提交位點處理失敗但已提交關(guān)閉自動提交先處理再提交消費組重平衡后數(shù)據(jù)缺失未提交位點 Rebalance 觸發(fā)重分配檢查心跳超時、max.poll.interval.ms消息還在但消費不到日志過期被清理設(shè)置合理retention.ms監(jiān)控 Lag這張表不是標準答案但它基本覆蓋了日常 90% 的丟消息故障。如果你遇到的問題不在這張表里那再去翻kafka.server:typeKafkaRequestHandlerPool、RequestQueueTimeMs這些監(jiān)控指標看有沒有請求積壓或者處理瓶頸。5.4 幾條我踩過坑之后留下的經(jīng)驗第一條經(jīng)驗是永遠不要依賴環(huán)境默認值。Kafka 的默認配置是“均衡”的但用在你的業(yè)務(wù)上未必合適。每個團隊都要根據(jù)自己的消費頻率、允許延遲、數(shù)據(jù)重要性去調(diào)整配置。最好把關(guān)鍵參數(shù)固化到你們的部署模板里新項目直接套用。第二條經(jīng)驗是監(jiān)控一定做在前頭。Kafka 的指標非常多我不建議一開始就堆一堆 Dashboard先盯幾個關(guān)鍵項就夠了生產(chǎn)端成功消息數(shù)、消費組 Lag 值、ISR 副本數(shù)是否健康、Broker 磁盤剩余空間。這四個指標能覆蓋大多數(shù)丟消息預(yù)兆。第三個比較個人化的體會是不要在工作中試圖制造完美的“絕不丟失”系統(tǒng)。我見過不少同事為了追求極端可靠性設(shè)計出了一套非常復(fù)雜的事務(wù)方案最終運行維護成本劇增反而是引入了更多故障點。成熟的架構(gòu)會接受“去重”而不是“杜絕重復(fù)”用冪等去消化不確定性而不是把一切都堵死在消息系統(tǒng)這層。6. 附值得長期關(guān)注的 Kafka 可靠性配置清單如果你看到這里還不知道從哪里入手我直接給你一份我常用的配置清單里面每一項都是圍繞“降低丟消息概率”來設(shè)計的。主題級別配置replication.factor3至少也要 3 個副本核心主題別低于這個數(shù)。min.insync.replicas2保證至少有兩個副本同步完成才可寫。retention.ms要匹配消費端的最大離線容忍時間別設(shè)太短。cleanup.policydelete保留默認即可除非你需要 compact。生產(chǎn)者級別配置acksall。enable.idempotencetrue讓生產(chǎn)者自動處理重復(fù)與亂序。retries設(shè)置一個較大值比如Integer.MAX_VALUE配合delivery.timeout.ms控制總時長。max.in.flight.requests.per.connection在開啟冪等后可以保持默認 5不用刻意調(diào)為 1。buffer.memory根據(jù)你的單機峰值發(fā)送量調(diào)大別默認 32MB高峰期很容易滿。max.block.ms建議在 3000 以上不然一阻塞就拋異常。消費者級別配置enable.auto.commitfalse手動提交異步入庫成功后再提交。auto.offset.reset根據(jù)業(yè)務(wù)選默認latest對新消費組來說會直接跳過已有消息如果你需要“從最早開始消費”就設(shè)成earliest。max.poll.interval.ms要大于你的單次批量處理耗時余量建議至少 3 倍余量。session.timeout.ms不要太高也不要太低默認 45 秒在很多場景夠用但要注意網(wǎng)絡(luò)抖動時太短容易頻繁重平衡。這些參數(shù)不是一成不變的但你可以把它們當(dāng)成一個比較可靠的基線。業(yè)務(wù)跑起來之后再根據(jù)監(jiān)控數(shù)據(jù)微調(diào)單個參數(shù)每次修改都要能說清為什么改不要憑感覺拍腦袋。我自己就是這樣從一堆“丟消息”的事故里熬出來的希望對你有幫助。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
97操综合| 色五月综合网| 91美女片在线| 亚洲 欧美 另类 日韩 人妻一区| 国产综合操逼高清| 最新日日夜夜天天干干| 97久久国产亚洲精品超碰热| 97色色色| 超碰是碰在线观看| 亚洲欧美洲综合| 无码久久亚洲高清,| 狠狠操天天干| 操逼片中文| 国产精品内射婷婷一级二| 日日夜夜草草草| 日本三级韩三级99久久| 操逼免费视频无码国产| 在线不欧美| 大香蕉男女超碰精品在线| 久久精品无码不卡| 9久超碰| 精品亚洲国产成人精品| 97av,com| 狠狠爱夜夜干| 2019午夜福利视频| 亚洲日韩青青草色月| 成人av动漫在线观看| 狠狠操狠狠操操| 天天操女人| 波多野结衣AV无码一区| 久久的免费性爱视频| 欧美日韩亚洲少妇寂寞影院正在播放| 91成人社区| 欧美日韩情色一区二区| 国产精品成人无码av无码免费| 91亚洲欧洲| 国产夫妻性生活视频| 亚洲熟女乱熟乱熟妇综合网二区| 美女露胸露屁股| 欧美性爱另类综合| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 啊啊啊好舒服好爽啊啊啊视频| 五月婷婷基地| 日韩中文字幕二区| 午夜丁香| 狠狠狠狠狠| 成人午夜视频免费播放| 性欧美另类高清| 亚洲一区制服诱惑| 日韩97视频| 亚洲少妇在线影音| 亚洲日本大香蕉1| 久久久久久久久久久久久女过产乱-少妇高潮一区二区三区喷水-成人AV | 色97综合中文字幕| 韩国毛片一区二区三区| 婷婷九月国产| 欧美一级专区免费大片| 成熟熟女国产精品一区二区| 亚洲熟女乱综合一区二区三区| 九X超碰| 91AV天堂| 欧美一品道| 国产精品久久久午夜夜伦鲁鲁| 丰满搜索结果 -第18页- 久久高清无码| 人妻久久久久久久久久久久久久久 | 日韩欧美中文字亚洲慕| 青青草原成人| 上特色A在线| 欧美色图20p| 欧美色www亚洲国产阿娇要播| 久久无码一区二区二三区性色| 91精品91久久久中77777| 青青草好吊色| 国产不良强奸视频免费看| 亚洲欧美在线观看无码| 操逼逼无码| www久| 丁香五月社区| 9999久久久久| 91综合色噜噜| 999综合网| 亚洲精品尤物yw在线影院| 在线观看精品国产免费| 任我爽视频在线观看| 在线情色电影 91大 | 中国一级αV| 亚洲图片婷婷五月天| 精品亚洲国产成人AV制服丝袜| 五月婷婷六月丁香| 久久久久密臀一区二区| 密臀在线一区尤物| 亚洲成人av电影在线| 中文字幕 国产 精品| 熟女丰满人妻一区| 人妻 欧美 中文| 美女爽到高潮91| 精品国模无码| 欧美色图天堂在线| 1.igao73.com 加入收藏 免费专区 国产精品 中文字幕 日韩精品 欧美精品 精彩 | 玖玖在线视频| 亚洲精品1区| 嗯嗯不要视频| 性爱av网站| 性生活无遮挡纯毛片在线看| 超碰超碰超碰超碰的大鸡吧操黑丝袜| 91社操逼| 91性生活久久久| 啊啊啊啊免费视频| 激情婷婷五月天| 99热日| 国产精品久久久| 国语av最新自产拍在线观看| 九九99精品视频在线观看| 午夜天堂精品久久| 亚洲在线91| www.人人cao| 久久人人爽av亚洲精品天堂桃色| 少妇高潮流水av免费| 国产自偷自拍一区| 1.igao73.com 加入收藏 免费专区 国产精品 中文字幕 日韩精品 欧美精品 精彩 | 欧美综合第一| 久久六六| 91+欧美| 国产高清成人免费视频| 五月天激情影院| 久久精品视| 国产精品无码久久久久2025| 欧美少妇性乱| 国产懂色精品国产av| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 欧美成人9797| 岛国精品视频在线观看| 日本黄色XXX| 日韩无码a片| 久久一二三四不卡| 91人妻最真实刺激绿帽| 亚洲综合图色在线| 亚洲熟女性高潮久久久| 99爱久久视频频| 欧美亚洲今日在线| 麻豆久久久久久久久丝袜 | 素人伊尹大香蕉免费下载视频| 国产一区二区a毛片| 中文字幕久久亚州无码| 97人妻免费中文字幕| 久久久九九九九| 亚洲情色五月天 | 久久五月丁香| 一本久道久久综合狠狠爱一密臀精 | 看大黄色大片原件| 亚州色图欧美色图| 欧美淫穴| 很黄很色的视频在线观看| 超碰综合色| 国产又黄又粗又猛大片| 亚洲精品97中文字幕| 欧美一区二区三区蜜桃| 色老大| 国产精品老熟女一区二区| 色综91| 黑人中出21连凳花野真衣| 草莓精品视频在线免费观看| 97se综合| 操学生天天| 亚洲精品亚洲人成在线麻豆| 麻豆天美传媒毛片| 国产精品午夜福利视频| 91狠| 97在线精品观看视频| 九色 蝌蚪 熟女自| 久久a久久| 国内毛片免费h片在线| 久草成人| 夜夜国自区| 顶级丝袜熟女一区二区三区| 亚洲女毛多水多21P| 亚洲综合草草| 99精品伊人| 国产91久久九九免费精品无码| 久久嫩草国产成人一区| 亚洲图片欧洲图片aⅴ| 欧美一二三| 伊人一区二区三区| 天天日天天色| 中国zzijzzijzzwww精品| 天天欧美| 狠狠爱AV| 欧美一二级| 第二页中文字幕| 亚洲 欧美日韩 另类| 国产精品国产亚洲区艳妇糸列| 夜色97| 激情久久久| 一区二区三区黄色片a| 青青草色AV| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 老熟妇乱轮| 蜜桃丰满熟妇av无码区不卡| 中文字幕AV片| 97免费视频网| 国产一区二区三区不卡手机在线| 激情色播| 亚欧高清v| 日韩欧美aⅴ综合网站发布| 91殴美| 欧美姓爱综合网| 欧美一二级| 亚洲清纯唯美| 99热这里只有是精品10| 午夜成人福利影视| 色一射色一射| 干b在线性社区| 99re这里只有精品中心播放| 亚洲欧美大香蕉| 五月丁香六月婷| 美中日韩无码| 日本午夜久久电影| AA丁香综合激情| 性性久久| 亚洲天堂电影网| 夜夜人妻爽| 久操视频免费在线观看| 99热色这里只有精品| 色五月av| 91色艳| 人妻日日夜夜精品| 亚洲人在线| 91成人在线| 91neishe| 69精品人人人人| 五十路熟女工口 | 亚洲操人| 这里只有精品久久| 国色天香av| 成人情色一区二区| 九九九综合精品| 男人天堂站| 四虎884a| 怡红院成人视频| 亚洲 欧美 色图| 日本一二区不卡| 在线日韩日本亚洲国产| 久久久久免费看少妇A片特黄| 国产一区二区精品久久99| 黄色免费一级在线毛片| 久久久久亚洲Aⅴ无码| 熟女色综合久久| 九月婷婷久久| 啊啊啊啊啊操我视频| 91色综合| 精品毛片av一区二区| 日韩亚洲中文有码视频| 黑丝内射一区二区三区| 综合视频91| 亚洲精品九九九九九九| 欧美人与动性人交a| 18禁免费视频| 麻豆人妻精品一区二区| 人妻人人澡人人爽人人| 青青草原伊人网| 欧美AAAA黄片| 欧苏综合色综合| 婷婷五月天无码 | 久久av网| 午夜九九九九九九| 久久久久亚洲?V片无码V| 国产超碰人人爽人人做| 九九英色视频| 看全色黄大色大片免费视频| 少妇高潮对白在线观看| 欧美激情总合网| 91中文精品日韩欧美在线| av草草在线电影| 国产家庭乱伦表演| 97人妻色| 亚洲色图A| 性色av蜜臀av色欲aV| 天天插天天干| 久久骚| 日韩综合无码一区久久92| 国产色精品午夜大片| 少妇国产不卡| 在线 欧美 亚洲| 午夜福利精品| 亚洲综合小视频小说在线观看| 亚洲色图欧美色图在线播放| 丝袜熟女一区二区三区| 男人的天堂VA在线| 亚洲av无码国产精品字幕| 天美麻豆黄色录像| 中文字幕中文字幕一区二区| 久热69九色熟妇97| 青草成人免费视频一COm| 岛国黄色大片网站| 亚洲人人夜夜澡人人爽| 亚洲男人电影天堂| 亚洲欧美精品一区天堂久久 | 九一国产精品| 十八禁啪啪视频| 人人操AV| 国产乱子伦久久精品综合一区二区三| 国产少妇肉丝在线观看| 精品少妇999| 亚洲男人的天堂亚洲| 欧美玖玖爱免费玖玖| 丰满岳乱妇一区二区三区| 91天天日| 人妻系列无码专区中文有码| 欧美熟女丝袜| 亚洲第一黄色av网站| 天天肏美女| 久久久97| 欲色影视综合吧| 亚洲欧美国产va在线播放频| 熟妇女人妻呻吟久久AV| 黄色人人| 久久后入制服| 激情五月综合网| 亚州男人天堂| 久久有码| 亚洲国产精品无码AV在线| 97精品久久久久中文字幕| 亚洲一曲日韩精品| 无码丰满熟妇一区二区浪潮AV| 国产传媒日本欧美专区| 无码操逼网| 啊啊啊在线观看免费视频| 色在线综合| 久久久久密臀视频| 激情久久av一区av二区av| 南澳成人一级片在线播放| 97五月天| 深夜国产一区二区三区在线看| 狠狠躁天天躁日日躁| 国产精品香蕉热久久新品| 超碰欧美在线欧美| 粉嫩绯色AV一区二区在线| 欧美aⅴ99久久黑人专区| 亚洲精品国产专区在线观看| 久久久三区二区一区| 操人无码| 自怕偷自怕亚洲精品| 91九九九逼| A片三级无码| 国产精品69久久久久久久| 在线 制服丝袜中出 人妻| 欧美成人A√在线一区二区| 九九九精品色乱九九九| 十八禁网站在线| 国产视频一区二区三区在线免费观看| 精品人妻一区二区三区免费视频| 99青青草国产视频| 欧美 亚洲 偷拍自拍| 国产精品精品系列在线观看| 久久男人| 欧美精品久久| 天天操天天射青青草| 91快色色色色色| 激情五月天中文字幕色| 国产丝袜高跟美女av免费观看| 久久婷婷色综合一区二区三区| 日逼逼免费看| 尤物视频新赏网鲜网色诱网| 欧美高清无码免费视频高清版| 日影院久久婷婷夜夜网| 人妻加勒比东京热| 亚洲欧洲综合视频在线| 少妇熟女1区2区3区| 老色鬼成人精品视频下载大在线观看| 中文字幕精品丝袜| 久久久一区二区三区四曲免费听| 国产强奸超碰AV| 亚州综合色| 亚州高清AV| h色99999| 欲香欲色天天天综合和网| 啊啊啊啊嗯嗯嗯用力好爽| 偷拍精品一区二区三区| 香蕉99秘 一区精品蜜桃臀| 久久久久久少妇| 97久久免费| 亚洲s在线观看| 亚洲国产精品有声| 被男人吃奶很爽的毛片| 91看黄片| 啪啪视频亚洲第一| 亚洲自拍天堂| 久久一区二区高清免费| 久草国产在线视频| 日韩欧美大力操| 成人五级久久| 日韩簧片免费看| 无码久久国产| xxxx网站亚洲精品| 午夜理论片在线观看免费| 亚洲图片日本AⅤ欧美在线| 极品销魂美女一区二区| 欧美日韩*字幕一区| 色欲天天综合久久久无码网中文| 国产久久久久久| 欧美狠狠干| 亚洲色人| 亚洲一区日韩精品中文字幕| 亚洲综合另类小说色区亚洲成av人片在www| 久久久久亚洲Av无码专区老牛影视| 天天射日日干| 国产精品爆乳懂色蜜乳| 国产成人自拍视频视频| a v网站在线播放| www.国产高潮精品| 国产小u女在线观看| 秋霞视频一区二区| 人妻天天操天天爽视频免费 | 夜夜性| 91天天| WWW啪啪的com| www.色操逼| 强奸乱伦麻豆| 狠狠干妹子| 欧美,亚洲,日韩,v,天堂,手机在线观看| 亚洲日本大香蕉1| 黄页av| 日本αv| 日本高清_区二区三区| 日本免费亚洲欧美| 秋霞男人网| 九9精品| 狠狠爱大香蕉| 中日韩熟女| 日韩成人精品视频自拍| 校园春色制服丝袜中文字亚洲| 超碰97欧美在线| 夜夜骑天天燥| 国模久久在线| 网友自拍第一页| 国产成人手机视频激情| 欧美色图天堂在线| 加勒比伊人综合| 91精品丝袜久久久久久| 久久久久久久伊人精品| 婷婷综合| 粉嫩久久久极品| 免费在线看黄片av| 亚洲欧美日韩精品久| 91狠狠综合久久久久久| www.acm成人黄色毛片| 91丝袜| 国产精品无码av在线 | 久久久久久久六六 | 97天天日| 色色激情五月天| 今日头条成人一区二区三区四虎精品| 欧美激情精品| 亚州操逼网| 欧美熟女妇同| 欧美亚洲中文| 丁香五月天堂网| 日本999精品| 91天天看| 婷婷五月天成人| 欧美亚洲清纯| 日本人体九九九九九九| 国产97在线播放| 狠狠操夜夜| 91最新综合| 94色色电影网| 9999免费精彩视频| 亚州色图欧美色图| 欧美午夜一区二区三区| 制服诱惑亚洲一区二区三区在线观看| 中文字幕天堂在线| 国产夜夜艹| 亚洲激情综合另类| 九九在线视频| 天美传媒AV在线播放| 99久久网站| 天天综合站| 日韩黄色一区二区三区| 91碰碰| 大香蕉一线视频| 加勒比东京热五月天天堂网| av网页一区二区三区| 秋霞男人网| 日韩极品无码B| 欧美色图成人网一区二区| 亚洲中文字幕熟女| 97香蕉人人乳| 岛国毛片在线观看免费| 青青草视频在线观看一区二区| 天天操天天舔| 国产一区二区三区中文字幕| 久久精品一区二区| 人人摸人人干| 乱伦一二三| 黄色不卡视频| 人人操人人叉人人插人人| 99热国产精品| 在线播放成人网站| 亚洲精品久久久久毛片A片拉屎| 五月天春色激情网| AA级电影三区| 偷拍新久久| 免费夜夜爱黄色视频毛片| 久久久久少妇| 欧美日动态视频| 久久精品亚洲成a人天堂| 美女十八禁| 99福利社| 久久久久免费少妇| 探花视频免费观看国产专区| 久久色一区二区| 无码 有码 国产18p| 久久啊啊| 国产白丝在线| 五月天激情四射| 91丨国产丨白浆秘 洗澡动漫| 操我啊啊啊啊啊| 美国一区二区三区视频| 亚洲a色| 九九成人精品| 激情五月天视频| 无码不卡亚洲成?人片| 精品一久久久| 亚洲天堂区| 日韩亚洲中文字幕在线| 老女人综合| 国产精品久久久999| 99精品久久久久久久婷婷蜜桃| 无码人妻1727| 啊啊啊啊啊舒服| 日本九九久久99播| 熟女乱伦二区| 九色精品视频导航1| 日本媚薬中文字幕在线| 丝袜色综合| 九九九网页| 91精品国产麻豆国产自产在| 在线毛片片免费观看| 欧美综合色图片| 欧美日韩亚洲天堂网| 狠狠色色| 日韩黄色一区二区三区| 欧美1区二区三区公司| 超碰诱惑| 色亚洲欧美| 中文字幕一区二区三区蜜臀| 超碰久热| 日韩人妻中文视频| 家庭乱伦麻豆| 免费在线视频97| 人妻激情在线视频| 91色伦综合| 绯色AV粉色AV蜜臀AV| 亚洲综合在线视频| 爆操无码| 懂色AV蜜臀无码精品APP| 最新av中文字幕高清| 欧美性爱一区二区三区| 色九色久| 熟女熟妇一区二区三区视频| 制服丝袜第二页| 中文字幕在线日亚洲9| 伊人操操| 天天干,夜夜爽| 日韩大香蕉精品在线视频| 亚洲成人久久美女| 亚洲成aⅴ人片不卡无码| 亚洲欧美高清| 亚洲日韩国产精品| 日日夜夜摸| 人妻铁牛TV| 青草精品视频日本久久久久网站在线| 99少妇| 密臀在线视频| 欧美高清色| 97精| 人妻色偷色噜| 欧美日韩国产一区二区小黄片大全| 老女人综合网| 超碰在线人妻中文字幕| 不卡中文字幕aⅴ在线| 亚洲电影中字一区二区| 天天日天天搞天天干| 操操逼视频| 人人潮人人摸| 日本一本道A级黄色毛片试看60分钟| 久久久无码av精| 动漫爆乳3D奶水一区在线观看| 人妻激情偷乱视三区频一区二区| 五月婷婷色| 江都AV在线| 91五月天| 天天天干977| 97伊人网| 午夜福利国产欧美日韩夜夜| 大香蕉专区| 超碰在线国产| 色香蕉影院| 91人妻人人妻| 很很很很操| 色综合20p| 亚洲成人AB| 欧美色就是色| 久9re热视频这里只有精品| 一区操逼| 久久婷婷五月| 成 人 影视 一区 二区 三区 四区| 91在线免费观看处女| 国产乱人妻精品入口| 中日韩久久久免费看| 夜夜草我| 九九黄色网| 欧美高潮在线| 亚洲人妻爽爽爽| 婷婷午夜成人色中色| 狠狠综合| 超碰97在线 欧美 国产| 97伦综合| 中文字幕亚洲永久精品| 色婷婷综合网站| 中国人高清www色视频免费| 日韩AV一区二区三区四四| 久久超碰亚洲人| 肉丝无码中文高清| 三级日本一区二区三区| 九九色影院| 久久国99999| 色五月av| 免费视频a级毛片免费视频| av操操不卡| 啊啊啊啊好疼| 无码免费精品高清| 一区二区不卡| 亚洲开心网| 亚洲成A∨人影院在线欢看| 成人AV素股で擦久久| 91精品国| 亚洲中文日韩欧美大香蕉视频| 特级毛片特黄久久免费看| 久久久久久夜夜夜夜夜| 中国韩国明星一极片一区乱码毛片人妻熟女一区二区三区 | 97免费视频在线| 国产欧美岛国精品一区| 久久精品一区| 久久久久久网址| 色五月婷婷麻豆在| 亚州五月| 国产亚州高清国产拍精| 刺激精品视频| 丰满人妻区一区二区三| 婷婷色综合| 精品女同一区| 手机看片1024你懂的国产| 人妻酒店出差被中出免费在线播放| 精品福利| 中文字幕在线观看丝袜| 国产sv美女内射| 高清无码 国产精品| 97精品第3页| 日韩操p| 久久久久久久久久久久久久久乱码| 91丝袜| 午夜男人一级A片7777| 久久偷偷色综合蜜桃| 99热99在线播放激情| 白丝在线一区| 人妻aa| 99操逼| h在线看免费版在线看| 91制服丝袜中文字幕| 影音先锋中文字幕日本好一区二区 | 亚洲91射| 五月天色色网站| 欧美男人的天堂| 大香蕉久操| 97干在线视频| 午夜久久一区二区无码中出| 超碰精品日韩欧美国产| 天天α片| 国产一区二区三区影片| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 一区二区三区国产在线播放| 婷婷五月天网| 熟妇综合一区二区三区| 狠综合网| 亚洲五月婷| 韩国三级色呦呦| 久婷婷一区| 久久久性| 欧洲精品欧洲精品| 色五月婷婷麻豆在| 国模私拍一区二区三区神乳| 91男人天堂网| 九九久久九九久久| 2019天天干天天操| 美女诱惑久久| 日韩欧美被操黄免费观看| 日本操逼aaaaa| 九99久久| 可以看的av| 2025年A片视频精品| 国产热av| 久久久草成人网站久久久草成人久久久草久久久 | 天堂性色| 天天干天天日天天射黄色| 色色网91| 蜜臀久久99'精品久久久| 志村玲子视频一区二区| 精品午夜福利国产一区二区在线观看| 2020天天色综合| 91九九| 欧美一区二区三区入口| 色逼综合| 亚洲高清男人天堂| 欧美日韩资源在线| 五月丁香综合啪啪| 日韩熟女乱伦中出| 啊啊啊想要| 久久9精品网站| 97se综合网| 五月婷婷激情| 五月婷婷丁香中文字幕| 中文字幕精品一区二| 蜜臀99精品国产高清在线观看| 成人在线永久| 色噜噜国产在线| www.久久99| 强奸乱伦Av网| 国产一区免费午夜视频| 老熟女综合| 秋霞一级视频在线观看免费| 国产综合色精品在线观看| 就去色综合| 任我爽视频在线观看| www.超碰在线| 天天色综亚洲91污| 国产亚洲精品av一区| 日韩熟女操逼| 一区二区三区免费视频入口| 97免费视频在线| 夫妻AV网站| 丝袜色综合| 国产视频一区二区在线| 国产成人亚洲精品自产在线| 国产精品久久久三级无码| 亚洲啪啪视频一区二区| 小视频国产| 欧美十八禁视频| 日韩免费簧片| 国产精品嫩草影院午夜两性| 美女裸体无遮挡永久免费观看网站| 大香蕉伊人75| 日韩精品一二三| 九九九久久久W精品| 99久在线精品99re8| 91网站18+| 好一吊区二区| 欧亚三区动漫| 亚洲精品美女操逼| 91国内外在线| 亚洲女人毛茸茸91| 精品人妻一区二区蜜桃视频 | 久久这里都是精品| 热久久精品| 美女啊啊啊啊pc| 大香蕉免| 欧美在线l亚洲| 97碰碰日本乱偷人妻中文的| 色网综合网| 天堂av最新电影网| 欧美亚州综合网图片| 亚洲男人的天堂va亚洲男人社| 97色色色| 人妻天天爽天天爽三区| 操逼逼一区视频| 26uuu性物| 很很操在线| 草草影院日本第一页| 国产精品久久久久亚洲av| 黑人嘿嘿嘿超爽免费视频| 在线国产探花| 在线播放中文字幕| 国产欧美日韩女同性恋ww喷水精品| 蜜臀精品1区2区| 丰满少妇一区二区三区四区观看| 嗯嗯啊好大| 欧美色图99| 日韩少妇无码| 嗯啊抽插大香蕉网页| 蜜臀久久精品久久久久视频| 蜜臀在线网站| 一级黄色性爱裸体视频| 18禁免费视频| 婷婷五月天丁香| 操逼内射干逼白丝91| 91精品少妇搡搡搡| 欧美少妇人妻| 国产欧美日韩精品中文| 九色97| 天堂麻豆天美| 欧美瑟综合| 欧美大波激情xxxx| 1769精品一区二区三区| 大香蕉 222| 九草在线大香蕉| 欧美美逼| 岛国视频一二三区| 香蕉在线一区二区三区| 97超碰超欧美。| 97干色| 温婉少妇玩3p| 婷婷色香| 免费岛国一级片| 婷婷五月天影院| 四虎精品亚洲| 免费观看的黄色的网站| 国产精品网站www| 啊啊啊啊啊啊好多水| 日本 欧美 国产一区| 欧美日韩亚洲电影| 欧洲亚洲国产综合在线| 国产玖玖| 日本不卡一二区| av国产无码| 欧美韩国你懂得在线 | 日韩精品免费高清视频在线| 人妻激情另类| 精品二区三四区五电影 | 5月婷婷6月六月丁香| 美女毛片999| 伊人国产成人av网站| 久操婷婷| 午夜福利在线合集| 国产精品4p在线观看| 久久国产99精品72福利| 新怡红院| 97最新在线播放视频| 高树玛利亚无码流出| 99超碰网| 五月天黄色激情视频| 神马久久69| 四虎午夜影院| 国产精品亚洲四五区在线观看| 欧美97免费| 国产亲戚伦亲在线| 97超碰色中文字幕| 国模精品一区二区三区苹果色戒| 亚洲资源吧| 精品少妇一区二区三区免费观看| 少妇久久久久久| 欧美日韩222| 午夜视频好爽啊| 亚洲色图欧美色图制服诱惑| 久久精品国产亚洲AV成人直播| 九九久精品| 好吊妞转入那个网| 亚洲巨爆乳一区二区三区四季网| 国产成人AV麻豆| 制度丝袜99| 久久后入制服| 99热在线播放| 十八禁啪啪视频| 麻豆AV96熟妇人妻| 精品性爱一二三区| 亚洲高清91| 一牛影视久久久一区二区三区| 操逼日批| 大香蕉手机在线| 国产视频三区四区| 亚洲91在线播放影院| 九九九九一区| 中文字幕 一区二区 亚洲无码| 国产一级137片内射麻豆| 97欧美久久久久久久| 国产亚洲在线| 国产精品露脸在线观看| 八人操人人摸人人看| julia国产在线| 97欧美精品综合| 成人三级片无码| 大象AV在线| 一区二区亚州激情久婷婷欧美| 韩日精品四区| 欧美老妇曰批的视频| 亚洲色人阁| 精品美女少妇一区二区三区| 天天插天天操| 国产人妖的免费的视频| 无套后入双马尾| 国厂麻豆77q4| 色色色色色色色色色色色色色色综合 | 国产成人无码久久精品| www熟女乱伦com| 少妇大屁屁| 狠色婷婷久久一区二区三区_| 日本99热| av网页一区二区三区| 久久大| 亚洲成人帖图| 国内97干免费看| 1024亚洲中文字幕久在线看片你懂的| 69精品久久久久中文字幕| 你懂的在线观看区国产| 亚洲人妻日日日| 久热大香蕉网站| 天天综合网91入口| 日本三级韩国三级99| 凸凹视频在线观看| 国产中文大片资源中文字幕| 激情综合网亚洲| 男同专区一区二区三区在线| 9997se| 日日噜噜夜夜久久亚洲一区二区| 九九视品黄色| 男人的天堂不卡一区二区| 日韩性爱电影一区| jk白丝没脱就开始啪啪| 欧美人人曰人人操人人射射| 中文字幕欧美丝袜07资源| 伊人国产AV| 疯操AV| 亚洲高清在线se| 亚洲日韩少妇一道本视频| 美女大乳久久久久久久女人18| 亚洲春色激情小说| 久久午夜伦| 天天干,夜夜爽| 91九色精品熟女内射| 免费人成?大片在线播放| 国产 无码 一区二区| 亚洲精品xxx| 奇米四色影视777久久久| 人人操,人人插| 黄视频免费| 国产精品又黄又猛又粗| 中文字幕天堂在线| 超碰在线人妻中文字幕| 91性高朝久久久久久久久| 黄色免费一级在线毛片| 国产精品久久aV| 无码人妻一区二区三区色欲aⅴ| 无码精品久久久久久亚洲| 天天综合91| 乱伦日本中文自拍| 26uuu国产亚洲综合| 韩三级a视频在线观看| 免费啪啪av| 熟女五十路一区二区三| 91爆操视频| 久久老子无码午夜伦不卡| 日欧操屄视频| 欧美淫穴| 狠狠热这里都是精品| 欧美精品久久| 综合亚州欧美| 日韩精品人妻| 豆花视频操逼网址| 福利视频一区二区微拍| 婷婷深爱五月| 97人肏| 九九拍拍精品视频在线播放 | 中文字幕 一区二区 亚洲无码| 日本一区三级韩国| 妇女视频网站| 天天干1区2区在线| 超碰人妻久久| 久久首页| 五月丁香色色网| 中文字幕加勒比海高清无码免费视频| 日日做夜狠狠爱欧美黑人| 欧美日韩亚洲少妇寂寞影院正在播放| 清纯唯美亚洲综合| 性久久| 综合熟女| 精品国产乱码久久久兰草影视| 久久精品国产97欧美精品亚洲| 又大又大又大又粗爽高潮观看| 亚洲国产欧美另类自拍| 99在线观看| 樱花草社区www中国| 亚洲九九视频| 2019精品国产无码成人| 自拍鲍鱼一区在线高清观看免费| 四虎永久在线精品免费网址| 91N综合网在线| 曰韩中文人妻视频| 中文字幕性感少妇av| 无码人妻丰满熟妇奶水区毛片| 亚洲91射| 在线岛国新天堂8| 五月天精品| 日韩久草| 欧美v亚洲v综合v国产v妖精| 97香蕉碰碰人妻国产欧美| 亚洲国成人情色好看电影| 久夜操| 亚欧无码在线| 日韩传媒在线| 好吊色综合| 精品国产久热在线观看| 日韩在线97| 欧美狠狠干| 大香蕉AV在线| 日本最新1区2区3区| se吧提供国产乱老熟视频胖女人 | 97欧美日韩| 久久东京国产精品视频| www.男人天堂| 影音先锋日本乱伦| 91狠婷| 日韩三级av片| 精品超碰国产| 久久人妻无码毛片A片麻豆| 中国AAAAAA黄色片| 欧美极品少妇交| 麻豆 美女 丝袜 人妻 中文| 亚洲 欧美 手机在线观看| 久久大陆| 人人看人人爰人人操| 久草色悠悠在线视频| 九九九精品| 日韩精品.久久精品.AV女优.天美传媒 | 国内精品嫩模A∨私拍小视频| 92福利社视频| 男女啊啊啊啊啊| 抽插无码高清一区| 欧美青青草视频| 国产中文精品一区二区在线观看| 精品人妻一区二区免费蜜桃| 美女黄网| 久久久久久久极品香蕉视频| 亚洲精品久久久久久久蜜桃臀| 日本精品高清一二区一本到| 久久久久久久久久精| 国产最新小视频在线播放下载| 99999无码| 国产资源中文字幕在线 | 成人一级性爱| 欧洲与亚洲欧美精品中文字幕| 亚洲熟女乱色一区二区三区| 欧插网站| 国产精品久久久久久久无码AV| 久久伊人在线五区| 成人av毛片在线观看| 九九久久久久久爱| 久热69九色熟妇97| 嗯嗯啊啊操我| 97操97色| 黑人精品一区二区在线播放| 免费9 1久久| 最新国内自拍av免费| 97在线青| 日韩乱伦视频| 青青五月天| 超91综合网| 国产无码精品无码| 欧美性,色九九| 国产精品一区午夜福利| 欧洲性人爱视频| 久久9视频| 亚洲色天| 欧美 熟女 日韩| 久久精品亚洲成a人天堂| 久操频道免费在线呗看| 国产日本熟女顶级一区二区三区视频| 人妻性爱一区二区| 中文字幕第23区| 99久久九九| 在线免费观看高清无码视频| 蜜桃色院一区久久 | 亚洲狠| 中文字幕丝袜人妻| 福利在线观看一区二区| 久久久999国产精品| 97午夜剧场日韩| 国产宅男宅女在线观看| 嗯嗯啊啊啊好爽| 欧美亚洲丝袜美女电影| 乱伦AVxx| 久久久999| 经典丝袜一区| 国内91熟女人妻丝袜天天精品视频在线 | 人妻少妇精品视频一区二区三区| 国产精品乱人伊人网| 黄色一区二区秘书性感| 丝袜足交视频| 欧洲自拍色图gif在线| 日韩精品99999| 国产人伦a片信息免费片| 午夜精品久久久久久久久久久久久 | 丰满人妻一区| 看看小穴| 欧美熟女操屄| 你懂的在线观看区国产| 香港久久久| 91丝袜在线视频| 欧美少妇熟女| 殴美大黄片| 综合激情二| 一二三区精品视频| 狠操91,com| 日本一区二区三区精品| 国产在线视视频有精品| 欧美日韩午夜精品一区二区三区| 欧美色亚洲色| 新视频sss国产| 久热久一区二区三区| 激情四射五月天| 91快色色色色色| 国产成人亚洲精品无码最新在线| 欧美亚综合色图| 天天日骚逼熟女| 亚洲免费97免费| 天天操狠狠日夜夜干超碰撸com视频在线观看 | 中文三一区| 中文一区二区| 中日韩久久人妻一区二区| 国产少妇肉丝在线观看| 爱做久久久久久| 亚洲AV无码黄色强奸| 日韩簧片免费看| 五月丁香黄色网| 欧美天天综合网| 日本媚薬中文字幕在线| 日1区2区3区2020| 欧美日日人人天天| 啊啊啊久久久视频| 伊人伊人LD| 四虎国产成人精品免费一女五男| 久久一区无码| 色综合一区二区三巨| 99热这里都是精品| 婷色五月天| 欧洲色色| 六月婷婷五月丁香| 丁香激情网| 久久久久久午夜男人的天堂| 操操啪| 婷婷成人五月天| 亚洲日韩一区电影| 极品色社| 最新加勒比丝袜在线| 亚洲欧洲小说图片视频 | 欧美色图天堂在线| 男人的天堂亚洲| 久久久98网站免费视频| 2020中文字幕| 日韩精品.久久精品.AV女优.天美传媒| 国产免费一区二区三区最新不卡| 久久久久久亚洲精品不卡人乳| 丝袜美腿诱惑亚洲欧美视频在线观看| 99在线免费观看| 野狼激情网| 亚洲人在线成线成人| 一区中文字幕二区日韩| 绑缚麻绳人妻寝取完整版| 久久99精品九九久久久婷婷| www被窝色com| 日韩91网| 大香蕉一级黄色片久久|