亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Spring Boot + Redis + Kafka 構(gòu)建高并發(fā)秒殺系統(tǒng)架構(gòu)設(shè)計(jì)與實(shí)戰(zhàn)

Spring Boot + Redis + Kafka 構(gòu)建高并發(fā)秒殺系統(tǒng)架構(gòu)設(shè)計(jì)與實(shí)戰(zhàn) 秒殺幾乎是Java后端面試?yán)锢@不開的“高并發(fā)試金石”。Spring Boot、Kafka、Redis 這三件套是電商秒殺方案里最常被問到的組合。面試官只要問出“讓你設(shè)計(jì)一個秒殺系統(tǒng)你怎么做”大概率就是想從流量削峰、庫存扣減、數(shù)據(jù)一致性這三個維度看你有沒有真實(shí)項(xiàng)目經(jīng)驗(yàn)。落到技術(shù)棧上Spring Boot 負(fù)責(zé)搭起整體工程Redis 在前端扛住讀請求和分布式鎖Kafka 在中間做異步削峰這套組合已經(jīng)是電商場景的標(biāo)準(zhǔn)答案。但標(biāo)準(zhǔn)答案和線上能穩(wěn)定跑通的方案之間隔著大量細(xì)節(jié)坑比如 Redis 分布式鎖續(xù)期、Kafka 消息順序性、緩存與數(shù)據(jù)庫一致性每一條我都踩過。這篇實(shí)錄沒有教科書式的廢話適合正準(zhǔn)備跳槽的 Java 開發(fā)也適合已經(jīng)把 CRUD 寫得很熟、想往高并發(fā)方向突破的工程師。我會從整體方案設(shè)計(jì)講起再落到 Spring Boot 工程里的核心代碼最后把面試官最常追問的高頻問題和線上排查經(jīng)驗(yàn)一起給你。你不需要一次全背下來但建議先理解每層設(shè)計(jì)要解決什么問題后面看代碼和面試答案會輕松很多。1. 電商秒殺場景的整體方案設(shè)計(jì)1.1 秒殺為什么難流量模型與核心矛盾先看流量模型。普通業(yè)務(wù)接口的 QPS 可能就幾百秒殺開場那幾秒流量往往達(dá)到平時的幾十倍甚至上百倍而且用戶像潮水一樣涌進(jìn)來。數(shù)據(jù)庫連接池一般也就 50~100 個連接一個慢 SQL 就能把連接池打滿更別說秒殺瞬間的寫入壓力。所以你會發(fā)現(xiàn)所有秒殺方案本質(zhì)上都在解決同一個矛盾有限的數(shù)據(jù)庫處理能力 vs 瞬間爆發(fā)的海量請求。既然處理不過來思路就變成“讓請求在到達(dá)數(shù)據(jù)庫之前盡量被攔截、排隊(duì)或丟棄”。后端常見手段有四級瀏覽器/CDN 限流、Nginx 層限流、Redis 層攔截、Kafka 層削峰。前兩級是擋無效流量后兩級才是保護(hù)訂單系統(tǒng)。秒殺結(jié)果本來就只有少數(shù)人能搶到所以系統(tǒng)設(shè)計(jì)的第一原則不是“每個請求都成功”而是“保證成功請求不丟、庫存不超賣、數(shù)據(jù)最終一致”。這里要注意一個思維轉(zhuǎn)換很多新手一上來就想著“怎么優(yōu)化數(shù)據(jù)庫”其實(shí)秒殺最忌諱讓數(shù)據(jù)庫直接面對峰值流量。數(shù)據(jù)庫在秒殺里扮演的角色應(yīng)當(dāng)是最終流水存儲而不是實(shí)時請求處理。把數(shù)據(jù)庫往后放前面用 Redis 和 Kafka 頂住才是正確的架構(gòu)方向。1.2 三層削峰方案前端限流、Redis 緩存與 Kafka 異步削峰從用戶點(diǎn)擊“立即搶購”到最后收到訂單結(jié)果我習(xí)慣把秒殺鏈路分成三段來設(shè)計(jì)。第一段是請求接入層。用戶請求先進(jìn) Nginx通過 OpenResty 的 lua-resty-limit-traffic 做令牌桶限流每秒只放行比如 1 萬請求超過直接返回“限流中”。這一層能防住一部分腳本刷單。再往下后端接口在 Spring Boot 層面用 Guava RateLimiter 或 Resilience4j 做單機(jī)限流防止單節(jié)點(diǎn)被沖垮。很多人忽略這一層但線上秒殺如果沒有接入層限流后面 Redis 壓力再小也會被無效請求打滿。第二段是Redis 預(yù)扣庫存。秒殺接口的第一步不是寫數(shù)據(jù)庫而是先查 Redis 里的庫存再通過 Lua 腳本完成“檢查庫存 校驗(yàn)是否已購買 扣減庫存”。Lua 腳本可以保證原子性避免超賣。庫存數(shù)據(jù)在秒殺開始前從數(shù)據(jù)庫預(yù)熱到 Redis秒殺結(jié)束后再異步同步回?cái)?shù)據(jù)庫。Redis 能抗的 QPS 在十萬級別用來做瞬間攔截再合適不過。第三段是Kafka 異步下單。Redis 預(yù)扣成功后只說明用戶“搶到了資格”真正的訂單創(chuàng)建、扣減數(shù)據(jù)庫庫存、生成支付記錄等動作放到 Kafka 消息里由訂單服務(wù)異步消費(fèi)。這樣數(shù)據(jù)庫收到的寫入頻率就被拉平了從峰值每秒幾萬變成每秒幾百上千。消費(fèi)端做一定的批量處理還能進(jìn)一步提高吞吐。這套三段式方案的好處是每一層都在做“減負(fù)”。流量到數(shù)據(jù)庫之前已經(jīng)過了一層層的漏斗真正落到數(shù)據(jù)庫的寫操作數(shù)量級大幅下降。面試時我們講方案不需要把每層代碼都背出來但一定要講清楚每一層攔截了什么流量、為什么要放在這一層。2. Spring Boot 工程落地接口分層與并發(fā)控制2.1 秒殺接口的核心流程預(yù)扣庫存、校驗(yàn)重復(fù)、異步下單用 Spring Boot 寫一個秒殺接口代碼上其實(shí)不復(fù)雜復(fù)雜的是并發(fā)控制。我習(xí)慣把接口拆成三步請求校驗(yàn)、Redis 預(yù)扣、發(fā)送 Kafka 消息。第一步請求校驗(yàn)包括參數(shù)合法性、用戶是否登錄、活動是否已開始/結(jié)束。這些校驗(yàn)要在 Redis 預(yù)扣之前做干凈否則一個非法參數(shù)就可能浪費(fèi)一次庫存扣減。第二步調(diào) Redis Lua 腳本預(yù)扣庫存這一步同時完成“庫存 0 判斷”和“扣減”兩個動作確保原子。第三步如果扣減成功就封裝一個 OrderMessage 發(fā)給 Kafka由下游服務(wù)創(chuàng)建訂單。有一個非常容易被忽視的點(diǎn)發(fā)送 Kafka 消息放在 Redis 扣減成功之后但如果在發(fā)送消息前服務(wù)宕機(jī)了用戶明明搶到了資格訂單卻永遠(yuǎn)不生成。所以工程上不能簡單發(fā)了就完事。我這邊用的方案是預(yù)扣成功后先把一條“待創(chuàng)建訂單”記錄寫入本地?cái)?shù)據(jù)庫或者寫一個訂單流水表狀態(tài)是“待處理”然后發(fā)消息消費(fèi)端處理成功后回寫狀態(tài)。如果發(fā)消息失敗或消費(fèi)失敗由一個定時任務(wù)掃描待處理訂單重新投遞消息。這個“本地消息表 定時對賬”的思路下面講數(shù)據(jù)一致性時會詳細(xì)說。2.2 Redis 分布式鎖的正確寫法與續(xù)期問題秒殺里最容易被面試官追問的就是 Redis 分布式鎖。很多網(wǎng)上的教程還在教 setnx expire但真正生產(chǎn)環(huán)境這樣寫至少有兩個坑一是 setnx 后服務(wù)崩了沒有設(shè)置過期時間鎖永遠(yuǎn)不釋放二是鎖過期時間太短業(yè)務(wù)還沒執(zhí)行完鎖就自動釋放了另一個線程進(jìn)來造成并發(fā)覆蓋。正確的寫法是用SET key value NX EX timeout這一條命令完成加鎖和設(shè)置過期時間value 必須是唯一標(biāo)識比如 UUID 或業(yè)務(wù)訂單號。釋放鎖的時候不能直接 del而要先用 Lua 比較 value 是否是自己是自己的才 del避免誤刪別人的鎖。原因很簡單如果線程 A 執(zhí)行時間過長鎖過期了線程 B 拿到鎖開始執(zhí)行A 執(zhí)行完直接 del就會把 B 的鎖刪掉。再說續(xù)期。高版本 Redis 客戶端推薦用 Redisson 的 watchdog 機(jī)制默認(rèn)鎖的租期是 30 秒每 10 秒自動續(xù)期。如果業(yè)務(wù)執(zhí)行完了就釋放鎖不用關(guān)心續(xù)期如果服務(wù)宕機(jī)了鎖也會因?yàn)樽馄诘狡谧詣俞尫挪粫梨i。這比自己寫 Timer 續(xù)期安全得多。我見過不少為了省依賴自己實(shí)現(xiàn)續(xù)期的最后要么少續(xù)期導(dǎo)致鎖提前釋放要么忘了釋放導(dǎo)致死鎖。能用 Redisson 就用 Redisson面試時可以提一嘴看門狗機(jī)制會很加分。2.3 數(shù)據(jù)一致性緩存與數(shù)據(jù)庫的最終一致性秒殺里 Redis 庫存是“前置庫存”數(shù)據(jù)庫庫存是“最終庫存”。理論上兩個值最終要一致但不可能實(shí)時一致所以必須接受“最終一致性”。怎么保證我的做法是扣減 Redis 時記錄一條庫存流水流水表里帶本次扣減的唯一訂單號Kafka 消費(fèi)者收到消息后在數(shù)據(jù)庫本地事務(wù)里同時完成“扣減數(shù)據(jù)庫庫存 更新庫存流水狀態(tài) 創(chuàng)建訂單”如果數(shù)據(jù)庫扣減成功但 Kafka 消費(fèi)失敗流水表里會有一直處于“待處理”的數(shù)據(jù)由定時任務(wù)掃描并重發(fā)如果數(shù)據(jù)庫庫存不足或消費(fèi)端業(yè)務(wù)失敗需要回補(bǔ) Redis 庫存。回補(bǔ)操作同樣先寫流水再通過消息或直接調(diào)用來恢復(fù) Redis。這套“流水 對賬”機(jī)制是一個通用保底方案面試?yán)镆欢ㄒv清楚因?yàn)樗瑫r回答了“消息丟失怎么辦”“消費(fèi)失敗怎么辦”“Redis 和數(shù)據(jù)庫不一致怎么辦”三個問題。至于用不用分布式事務(wù)我的觀點(diǎn)是秒殺這種高并發(fā)場景盡量規(guī)避強(qiáng)分布式事務(wù)因?yàn)?XA 事務(wù)會鎖資源、拖垮性能。用本地消息表和最終一致性就好。3. Kafka 消息中間件在秒殺中的實(shí)戰(zhàn)配置3.1 為什么用 Kafka削峰填谷與流量整形秒殺場景選消息隊(duì)列Kafka 是首選。相比 RabbitMQ、RocketMQKafka 的吞吐更高、分區(qū)模型更適合并行消費(fèi)而且在大促場景下有成熟的“削峰填谷”能力。所謂削峰填谷就是生產(chǎn)者把高峰期的大量消息快速寫入 Kafka消費(fèi)者按自己的節(jié)奏慢慢消費(fèi)。從時間維度看請求的“峰”被削掉了數(shù)據(jù)庫處理的“谷”被填平了整體負(fù)載平穩(wěn)。Kafka 寫入延遲極低生產(chǎn)端吞吐可達(dá)每秒幾十萬條這點(diǎn)對秒殺特別重要。消費(fèi)者雖然默認(rèn)單線程但可以通過增加分區(qū)數(shù)和消費(fèi)者實(shí)例數(shù)并行消費(fèi)。每個分區(qū)只能被同一個消費(fèi)組內(nèi)的一個消費(fèi)者實(shí)例消費(fèi)分區(qū)數(shù)是并行消費(fèi)的上限。所以大促前我會把秒殺訂單 topic 的分區(qū)數(shù)提前設(shè)置成 16 或 32而不是用默認(rèn)的 1。后續(xù)想擴(kuò)容分區(qū)會比較麻煩需要提前規(guī)劃。3.2 生產(chǎn)端與消費(fèi)端的幾個關(guān)鍵參數(shù)陷阱先說生產(chǎn)端。Kafka 單條消息默認(rèn)最大 1MBtopic 的 max.message.bytes 默認(rèn)也是 1MB。如果訂單消息里塞了完整的商品快照、優(yōu)惠券詳情甚至營銷日志很容易踩到“Record is too large”的坑。我的經(jīng)驗(yàn)是消息體里只放訂單號、用戶 ID、商品 ID、數(shù)量、秒殺活動 ID 等必要字段其他詳情由消費(fèi)端去查緩存或數(shù)據(jù)庫。實(shí)在要傳大對象需要在 broker 端調(diào)大 message.max.bytes但帶來的網(wǎng)絡(luò)和存儲開銷也會變大非必要不建議。消費(fèi)端有幾個容易踩的配置enable.auto.commit 默認(rèn) true處理邏輯復(fù)雜時容易消息還沒處理完就自動提交了 offset服務(wù)重啟后會丟消息。建議設(shè)為 false手動提交并等業(yè)務(wù)處理完成后提交。max.poll.interval.ms 默認(rèn) 300 秒如果單條消息處理耗時超過這個時間消費(fèi)者會被踢出消費(fèi)組觸發(fā) rebalance。秒殺訂單處理里要避免在消費(fèi)線程里做長任務(wù)比如遠(yuǎn)程調(diào)用、慢 SQL盡量做成異步化或批量化。消費(fèi)線程數(shù)不要超過分區(qū)數(shù)。用多線程消費(fèi)時如果同一訂單的重試消息落到不同分區(qū)順序就無法保證。要保序只能犧牲并行度一個分區(qū)一個線程或者按訂單號哈希到固定分區(qū)。3.3 Kafka 消息積壓與消費(fèi)延遲的排查實(shí)錄線上秒殺最常見的故障就是“消息積壓”?,F(xiàn)象是 Redis 已扣庫存但用戶遲遲出不來訂單結(jié)果。排查路徑大概是第一步看 Kafka 消費(fèi)組 lag。用命令行工具kafka-consumer-groups.sh --describe --group order_group看每個分區(qū)的 lag 數(shù)。lag 持續(xù)增長說明消費(fèi)能力跟不上生產(chǎn)速度或消費(fèi)者卡住了。第二步看消費(fèi)者日志有沒有頻繁 rebalance。rebalance 會導(dǎo)致消費(fèi)暫停。常見原因是 max.poll.interval.ms 設(shè)置太短、處理耗時超時或消費(fèi)者實(shí)例頻繁宕機(jī)。rebalance 期間分區(qū)的 offset 可能要重新分配也會放大延遲。第三步看下游數(shù)據(jù)庫連接池和慢 SQL。很多時候 Kafka 不背鍋而是消費(fèi)線程在等數(shù)據(jù)庫連接。秒殺訂單服務(wù)要把數(shù)據(jù)庫連接池從默認(rèn)的 10 個調(diào)大壓測時觀察活躍連接數(shù)和等待線程數(shù)。我遇到過“消息積壓 10 萬”的報(bào)警最后排查是消費(fèi)端一個查詢商品詳情的 SQL 沒走索引單條處理從 5ms 變成 300ms直接拖垮了消費(fèi)速度。優(yōu)化后 lag 幾分鐘就清掉了。排查這種事靠經(jīng)驗(yàn)也靠工具。可視化工具可以裝 Offset Explorer原 Kafka Tool看 cluster、topic、consumer group 的 lag 非常直觀不用每次都敲命令。4. 面試高頻問題匯總與避坑指南4.1 Redis 緩存穿透、擊穿、雪崩的區(qū)別與應(yīng)對這是 Java 大廠面試的基礎(chǔ)題但放在秒殺場景里問就成了進(jìn)階題。三者的區(qū)別簡單說穿透查一個根本不存在的數(shù)據(jù)比如偽造的商品 ID緩存和數(shù)據(jù)庫都沒有導(dǎo)致每次請求都打數(shù)據(jù)庫。擊穿熱點(diǎn) key 在緩存過期的一瞬間大量請求同時打到數(shù)據(jù)庫。雪崩大量 key 在同一時間過期或者 Redis 宕機(jī)導(dǎo)致請求全部落到數(shù)據(jù)庫。秒殺場景里擊穿是重點(diǎn)。秒殺商品的庫存 key 是絕對熱點(diǎn)一旦過期瞬間所有請求都會去數(shù)據(jù)庫查庫數(shù)據(jù)庫必掛。應(yīng)對方案有幾種熱點(diǎn) key 永不過期或者設(shè)置邏輯過期時間由后臺任務(wù)異步更新加互斥鎖緩存未命中時只讓一個線程去查數(shù)據(jù)庫其他線程等待后回源還有多級緩存本地 Caffeine 或 Redis 副本兜底。穿透的應(yīng)對是布隆過濾器或緩存空值并設(shè)置短過期時間。雪崩則需要加隨機(jī)過期時間、做 Redis 高可用、限流降級。這些都要作為方案的一部分講給面試官不要只背概念要結(jié)合秒殺鏈路的哪一環(huán)會出現(xiàn)每種問題。4.2 Kafka 重復(fù)消費(fèi)與 Redis 冪等性設(shè)計(jì)消息隊(duì)列不丟消息很難做到“恰好一次”所以消費(fèi)端必須做冪等。秒殺訂單場景的重復(fù)消費(fèi)主要有兩種來源一是生產(chǎn)者發(fā)送時服務(wù)重試導(dǎo)致同一條消息發(fā)了兩遍二是消費(fèi)端處理成功后還沒來得及提交 offset 就宕機(jī)重啟后又消費(fèi)一遍。冪等設(shè)計(jì)我常用三種方案數(shù)據(jù)庫唯一鍵約束。訂單流水表用“用戶ID 秒殺活動ID 商品ID”建唯一索引重復(fù)插入時數(shù)據(jù)庫報(bào) duplicate key捕獲后直接返回成功。Redis 冪等標(biāo)記。每個用戶搶購前先把用戶ID寫入 Redis SETNX設(shè)置過期時間如果已經(jīng)存在則拒絕。這是業(yè)務(wù)層的重復(fù)請求攔截。本地去重表 狀態(tài)機(jī)。消費(fèi)消息后先查流水表狀態(tài)已經(jīng)“處理中”或“已完成”就不重復(fù)處理。這三種可以疊加使用。面試時提到“消費(fèi)端必須冪等”然后說出具體怎么設(shè)計(jì)比單純喊口號強(qiáng)很多。4.3 分布式事務(wù)與最終一致性本地消息表 vs 事務(wù)消息秒殺鏈路里“扣減庫存、創(chuàng)建訂單、增加積分、推送通知”分布在多個服務(wù)里數(shù)據(jù)庫沒辦法用本地事務(wù)一把梭這就涉及分布式事務(wù)。我從來不用強(qiáng)一致方案而是用最終一致性。兩種主流實(shí)現(xiàn)一是本地消息表。在業(yè)務(wù)數(shù)據(jù)庫中維護(hù)一張消息表業(yè)務(wù)操作和消息寫入在同一個本地事務(wù)里提交。然后有一個定時任務(wù)把消息表中狀態(tài)為“待發(fā)送”的記錄發(fā)給 MQ成功后再更新狀態(tài)。這樣做的好處是簡單可靠壞處是消息表和業(yè)務(wù)表耦合且對數(shù)據(jù)庫有一定額外壓力。二是事務(wù)消息。RocketMQ 支持事務(wù)消息Kafka 生態(tài)里對應(yīng) Exactly Once 和 Kafka Streams 更復(fù)雜通常不直接用。如果我們強(qiáng)制用 Kafka 做分布式事務(wù)一般還是“本地消息表 Kafka”的組合。所以面試時你可以說Kafka 生態(tài)下我更傾向本地消息表如果架構(gòu)里用了 RocketMQ可以選用事務(wù)消息配合回查。所謂“回查”就是事務(wù)消息發(fā)送到 MQ 后如果事務(wù)未提交MQ 會反向調(diào)用生產(chǎn)者的接口查一下本地事務(wù)狀態(tài)。這個機(jī)制保證了“本地事務(wù)成功但消息沒發(fā)出去”也不會丟。能把這些區(qū)別講明白面試官就知道你是真寫過。4.4 面試現(xiàn)場如何回答“秒殺系統(tǒng)的設(shè)計(jì)”很多候選人對方案很熟但回答時沒有框架東講一句西講一句。我建議按下面這個順序組織答案先說核心矛盾瞬時流量 vs 數(shù)據(jù)庫有限處理能力。再說總體架構(gòu)接入層限流 - Redis 預(yù)扣庫存 - Kafka 異步下單 - 數(shù)據(jù)庫最終落庫。重點(diǎn)講三個關(guān)鍵點(diǎn)如何防超賣Redis Lua 原子扣減、如何防重復(fù)冪等設(shè)計(jì)、如何保證最終一致本地消息表/對賬。最后補(bǔ)充高可用Redis 哨兵/Cluster、Kafka 多副本、數(shù)據(jù)庫主從、降級策略。這個順序符合“問題 - 方案 - 細(xì)節(jié) - 保障”的邏輯面試官就算追問細(xì)節(jié)你也能穩(wěn)穩(wěn)接住。千萬不要一上來就背 Redis 命令讓人覺得你只是看過八股文。5. 實(shí)操復(fù)盤一個可復(fù)現(xiàn)的秒殺 Demo 核心代碼5.1 環(huán)境準(zhǔn)備與基礎(chǔ)配置本地跑一個最小原型推薦用 Docker 一次性把 Redis 和 Kafka 拉起來。如果你用的是 IntelliJ IDEA 社區(qū)版也可以正常創(chuàng)建 Spring Boot 項(xiàng)目社區(qū)版只是少了 Spring Initializr 的向?qū)О粹o去 start.spring.io 手動生成壓縮包導(dǎo)入 IDEA 即可。個人開發(fā)足夠用。先用 Docker 起服務(wù)寫一個 docker-compose.ymlversion: 3 services: redis: image: redis:7-alpine ports: - 6379:6379 zookeeper: image: bitnami/zookeeper:3.8 ports: - 2181:2181 environment: - ALLOW_ANONYMOUS_LOGINyes kafka: image: bitnami/kafka:3.4 ports: - 9092:9092 environment: - KAFKA_BROKER_ID1 - KAFKA_CFG_ZOOKEEPER_CONNECTzookeeper:2181 - KAFKA_CFG_LISTENERSPLAINTEXT://:9092 - KAFKA_CFG_ADVERTISED_LISTENERSPLAINTEXT://localhost:9092 - ALLOW_PLAINTEXT_LISTENERyes depends_on: - zookeeper本地單節(jié)點(diǎn)夠用。如果面試或工作中要搭集群至少三臺 broker配置 KAFKA_CFG_BROKER_ID 分別為 1、2、3并修改 advertised.listeners 使用各自內(nèi)網(wǎng) IP。集群的價值在副本默認(rèn) replication.factor 至少 2否則一臺 broker 掛了分區(qū)沒有副本生產(chǎn)環(huán)境會出大事。Spring Boot 項(xiàng)目里引入依賴dependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-data-redis/artifactId /dependency dependency groupIdorg.springframework.kafka/groupId artifactIdspring-kafka/artifactId /dependency配置 application.ymlspring: redis: host: localhost port: 6379 kafka: bootstrap-servers: localhost:9092 producer: key-serializer: org.apache.kafka.common.serialization.StringSerializer value-serializer: org.apache.kafka.common.serialization.StringSerializer acks: all retries: 3 consumer: group-id: seckill-order-group enable-auto-commit: false key-deserializer: org.apache.kafka.common.serialization.StringDeserializer value-deserializer: org.apache.kafka.common.serialization.StringDeserializer auto-offset-reset: latest listener: ack-mode: manual_immediate這里有幾個參數(shù)我解釋一下。acksall 表示生產(chǎn)者要等所有 ISR 副本都寫入成功才返回保證消息不丟代價是吞吐略降但秒殺場景下可靠優(yōu)先。enable-auto-commitfalse ack-modemanual_immediate 表示消費(fèi)者手動提交 offset拿到消息處理完后立即提交避免處理中出問題導(dǎo)致 offset 丟失。auto-offset-resetlatest 表示消費(fèi)者啟動后從最新 offset 開始消費(fèi)秒殺場景通常不接受回放老消息所以用 latest如果你要做補(bǔ)償掃描再單獨(dú)用 earliest。5.2 秒殺接口核心代碼與解釋先定義一個 Redis Lua 腳本做原子性的庫存預(yù)扣和防重復(fù)。RedisTemplate 序列化這里有個大坑很多人存進(jìn)去是字符串取出來卻報(bào)類型錯誤。原因是用默認(rèn)的 JdkSerializationRedisSerializer 把對象序列化成了二進(jìn)制。我在配置里統(tǒng)一把 key 和 value 改成 StringRedisSerializer需要存對象時再用 JSON 序列化這樣可讀性也更好。Redis 扣庫存腳本如下注意 KEYS[1] 是庫存 keyKEYS[2] 是用戶去重 keyARGV[1] 是用戶 IDARGV[2] 是扣減數(shù)量ARGV[3] 是去重 key 的過期時間local stock redis.call(get, KEYS[1]) if not stock or tonumber(stock) tonumber(ARGV[2]) then return 0 end local bought redis.call(sismember, KEYS[2], ARGV[1]) if bought 1 then return 2 end redis.call(decrby, KEYS[1], ARGV[2]) redis.call(sadd, KEYS[2], ARGV[1]) redis.call(expire, KEYS[2], ARGV[3]) return 1解釋一下返回 0 表示庫存不足返回 2 表示重復(fù)秒殺返回 1 表示扣減成功。用戶去重集合單獨(dú)設(shè)置過期時間避免 key 一直占內(nèi)存。這個腳本把“查庫存、查重復(fù)、減庫存、記錄用戶”放在一個 Lua 里執(zhí)行Redis 單線程保證原子性不會出現(xiàn)兩個請求同時讀到庫存 1 然后都扣減成功的情況。接著是秒殺接口的 Service 方法核心代碼Service public class SeckillService { Autowired private StringRedisTemplate redisTemplate; Autowired private KafkaTemplateString, String kafkaTemplate; private static final String STOCK_KEY seckill:stock:1001; private static final String BUY_KEY seckill:buy:1001; // DefaultRedisScript 初始化省略 public long seckill(Long userId, Long goodsId, Integer count) { // 前置校驗(yàn)省略 ListString keys Arrays.asList(STOCK_KEY, BUY_KEY); Object result redisTemplate.execute( SECKILL_SCRIPT, keys, userId.toString(), count.toString(), 86400 ); long code Long.parseLong(result.toString()); if (code 1) { // 構(gòu)建訂單消息發(fā)送到 Kafka OrderMessage message new OrderMessage(); message.setUserId(userId); message.setGoodsId(goodsId); message.setCount(count); kafkaTemplate.send(seckill-order-topic, userId.toString(), JSON.toJSONString(message)); } return code; } }發(fā)送消息時把用戶 ID 作為 key目的是讓同一個用戶的訂單消息始終進(jìn)入同一個分區(qū)這樣消費(fèi)端可以按照用戶維度保證順序。Kafka 的分區(qū)器會用 key 的哈希值選分區(qū)這一點(diǎn)對后續(xù)消費(fèi)順序很重要。消費(fèi)端代碼Component public class SeckillOrderConsumer { KafkaListener(topics seckill-order-topic, groupId seckill-order-group) public void onMessage(ConsumerRecordString, String record, Acknowledgment ack) { try { OrderMessage message JSON.parseObject(record.value(), OrderMessage.class); // 1. 校驗(yàn)本地流水表是否已存在 // 2. 本地事務(wù)創(chuàng)建訂單、扣減數(shù)據(jù)庫庫存、更新流水狀態(tài) // 3. 假如流程成功則提交 offset ack.acknowledge(); } catch (Exception e) { // 記錄錯誤由對賬任務(wù)補(bǔ)償不要在這里無限重試 log.error(consume order message failed, e); } } }到這里一個最小鏈路就通了用戶調(diào)用秒殺接口 - Redis Lua 扣庫存 - Kafka 發(fā)消息 - 消費(fèi)者落庫。你可以用 Postman 或?qū)憘€ Jmeter 腳本模擬并發(fā)請求觀察 Redis 庫存不會變負(fù)數(shù)、數(shù)據(jù)庫訂單數(shù)不超過庫存數(shù)。5.3 壓測與監(jiān)控用實(shí)際數(shù)據(jù)驗(yàn)證方案Demo 寫完后要壓測。我用 JMeter 開 1000 線程循環(huán) 10 次觀察三個指標(biāo)Redis 的 QPS、Kafka 的消費(fèi) lag、數(shù)據(jù)庫的活躍連接數(shù)。壓測前先預(yù)熱否則第一次請求會大量落到數(shù)據(jù)庫。壓測中重點(diǎn)看 Redis 的info commandstats里 lua 腳本的平均耗時如果在 1ms 以下說明原子扣減還有余量。監(jiān)控上Spring Boot 可以接 Spring Boot Admin 或者 Micrometer Prometheus。如果你只是本地驗(yàn)證最簡單的就是直接看 Kafka 消費(fèi)組的 lag。命令如下kafka-consumer-groups.sh --bootstrap-server localhost:9092 --describe --group seckill-order-grouplag 為 0 說明消費(fèi)速度跟得上。如果 lag 持續(xù)增大優(yōu)先查消費(fèi)者日志里的 rebalance 記錄以及數(shù)據(jù)庫慢查詢?nèi)罩?。這個順序我壓測時用過幾十次不會錯。6. 踩坑實(shí)錄與個人心得6.1 線上坑 TOP5把我在真實(shí)秒殺項(xiàng)目里踩過的、也是面試官最喜歡問的坑整理成一張表方便你自查。坑現(xiàn)象根因解法Redis 庫存為負(fù)超賣判斷和扣減不是原子的Lua 腳本合并鎖被誤刪并發(fā)覆蓋釋放時沒有校驗(yàn)持有者釋放前用 Lua 比較 value消息丟失用戶搶到無訂單消費(fèi)者 offset 自動提交或生產(chǎn)者未確認(rèn)acksall 手動提交消費(fèi)順序錯亂同一用戶訂單亂序多線程消費(fèi)且沒有分區(qū)策略用用戶ID做 key固定分區(qū)消息體積超限發(fā)送失敗消息體塞入大字段只傳必要字段或調(diào)大 max.message.bytes第一行那個坑我印象最深。早期用 Redis 的get和decrby兩條命令來判斷庫存高并發(fā)下 A 請求讀到庫存 1B 請求也讀到庫存 1兩個都執(zhí)行 decrby庫存變成 -1。這就是典型的“非原子操作導(dǎo)致超賣”。后來換成 Lua 腳本再也沒出現(xiàn)過。面試現(xiàn)場你如果能主動講出這個演化過程會讓面試官有共鳴。第二行的鎖誤刪也很經(jīng)典。值用 UUID 后釋放鎖前必須用 Lua 判斷 value 再刪除。但還有一個更隱蔽的坑如果業(yè)務(wù)只加鎖不加續(xù)期代碼執(zhí)行超過鎖過期時間即使加了 UUID 也可能被誤刪。所以要么用 Redisson要么業(yè)務(wù)方法里盡量縮短鎖內(nèi)耗時。其實(shí)這些坑背后有個共同規(guī)律分布式場景下的每個判斷和操作都要優(yōu)先考慮是不是原子的、會不會因?yàn)榫W(wǎng)絡(luò)或宕機(jī)產(chǎn)生中間狀態(tài)。這個思維方式比背具體命令更重要。6.2 給新人的建議從 Demo 到項(xiàng)目實(shí)戰(zhàn)如果你現(xiàn)在還在學(xué)習(xí)階段我的建議是把 Demo 跑通之后再自己動手改造成一個完整的小項(xiàng)目增加商品活動表、把庫存預(yù)熱做成定時任務(wù)、給訂單消費(fèi)加上本地消息表和定時對賬然后用壓測驗(yàn)證超賣和消息積壓問題。這樣再去看大廠面經(jīng)就不會覺得“這只存在于面試官嘴里”了。有人說秒殺系統(tǒng)是面試造火箭、工作擰螺絲但我覺得秒殺場景是極少數(shù)能在一套系統(tǒng)里同時訓(xùn)練高并發(fā)、一致性和高可用的實(shí)戰(zhàn)場景。你把這些思路吃透再去面對日常的接口性能優(yōu)化、緩存治理和消息隊(duì)列問題思維層次會完全不一樣。最后說一個我壓箱底的小技巧秒殺活動開始前提前把商品庫存和活動信息預(yù)熱到 Redis并做一次小規(guī)模壓測別等線上流量真的涌進(jìn)來了才排查問題。還有所有秒殺相關(guān)操作都要加接口冪等和用戶級別限流不然腳本一刷你的活動就沒意義了。這些聽起來都是小事但線上的大事故往往就敗在這些小細(xì)節(jié)上。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
美国久久一二三四| 国产精品免费日韩| 久久久96精品| 东北操逼| 婷婷色网| 口爆综合网| 无码丰满熟妇一区二区浪潮AV| 成年人免费观看网站| 丝袜熟女2P| 91干熟女| 国产激情综合| 亚洲成人久久一区二区| 国产一级特黄大片处女| 亚洲全色网| 亚洲天天精品| 亚洲精品一卡二卡三卡福利视频网站 | 97超级色碰碰| 91在线观看,天天综合| 欲射影视| 操操操操网黑人| 嗯嗯嗯好爽| 国产精品久久久久久久久AV大片| 丰满人妻大屁一区二区| 免费操逼视频下载| 精品婷婷| 综合网欧美在线| 91黑人无码激情在线| 视频黄色国产一级| jizzjizz欧美| 岛国在线一区二区三区| 日本一级二级三级网站| 欧洲成人性爱视频| 人妻乱仑一区二区三区| 国产亚洲精品第一最新| 国产精品免费视频人成| 亚洲二区精品在线观看| 亚欧无码在线| 风流老熟女一区二区三区l| 婷婷av在线中文字幕| 九久精品| 最新日本中文字幕| 91大神精品长腿在线观看网站| 亚洲无线观看久久| 国产乱伦性爱区| 国产欧美日本亚洲精品 | 日韩二级| 麻豆天美传媒在线视频天堂| 婷婷另类小说| 久久99久久99精品天美传媒棢·纸:.| 日本熟妇人妻一区二区三区| 日韩兔费看黄片| 亚洲欧美首页| 日逼视频日本| 五月婷婷爱六月丁香色| 亚洲熟妇丝袜在线观看| 91骚妇| 99色骚| 久草线上视频免费看| 欧美九一精品久久久熟妇| 国产精品在线一区二区| 91欧美www| 精品久久久av无码免费| 蜜乳AV一区| 亚洲AV无码黄色强奸| 国产综合永久精品日韩鬼片| 吻戏激情性巴克| 97九色人妻| 久久一二三级一一一| 超碰在线人妻不卡| 天天性射网| 国产精品剧情| 能直接看AV的网站| 欧美性暴力猛交XXXX| 亚洲色入欧美| 91亚洲网| 黄色小视频日本txt| 一区二区三区精品黑丝白丝酒店对鸡| 天天影视之亚洲综合网| 2019久久久久久久久福利| 亚洲AV无码成人精品久久| 久操大香蕉手机视频在线看| 欧美亚洲今日在线| av绯色| 黄污污污污| 91综合国产精品| 天天摸天天操视频| 一级黄色视频网| av一区二区三区 中文| 超碰爽人妻熟女Av| 亚洲欧美激情小说| 97国产高清视频在线观看| 99热精品在线观看| 啊啊啊在线看| 国产精品成人久久一区二区三区| 蜜臀国产AV中文字幕| 欧美老妇女内射网址| 久久在肏| 午夜欧美女人操逼| 东京热AV男人的天堂| 亚洲国产av中文字幕久久| 人妻丝袜无 码视频专区| 中文在线视频| 噜噜噜在线视频| 99国内精品| 97超碰精品图片| 久久免费精品视频免一| 精品亚洲俞拍视频一区| 在线免费观看高清无码视频| 亚洲中文字幕网| 超碰 国产熟女精品一区| 操逼不卡中文字幕| 久久动漫精品视频这里只有精品| 家庭乱伦国产精品| 中文字幕片| 97精品视频| 囯产精品一区二区三区线|亚洲人成无码网WWW动漫|国产精品免费一级... | 99热思思| 99久久久无码国产精品性啊聊| 狠狠躁AV| 久久久性| 日韩天天本| 日本东京热加勒比久久| 熟女久久久| 强奸乱伦av电影| 97干综合网| 黄在线| 国产一区二区在线播放,久久亚洲精品中文字幕第一区,亚洲精品在线中文字幕视频 | 欧美刺激色黄片免费看| 精品欧美日韩在线观看| 黄色性爱网网| 亚欧洲一区二区视频| 国产AV久久野战精品| 婷婷另类小说| 一级久久久久久久久久久| 欧美天堂亚洲电影院一区在线播放| 国产成年精品高清在线观看91| 99国产精品在线观看| 国产成人在线观看网址| 欧美情色男人的天堂| 中文字幕亚洲永久精品| 久久亚州大香蕉| 中文激情网| 欧美 色 亚洲| 99久久com免费视频′| 91精品国产91久久青草| 2026国产精品视频| 98色网| 激情小说图片亚洲首页| 免费草草草草草视频| 亚洲欧洲网站免费观看| 亚洲美女av无码| 亚洲精品色| 99老司机精品视频在线观看| 爱爱啊啊啊| 亚洲综合性网址| 久操视频资源站公开| 久久超碰天天| 青青草视频久久久久| av在线免费一区二区| 亚洲在线综合| 欧美大片一区二区三区| 激情久久久| 高清在线不卡一区二区 视频| 嗯嗯啊好大| 26uuu国产| 色哟哟 日韩精品| 中国熟女91| 色色色网站| 精品人妻中文字幕4399| 91n处女在线观看| 78p欧美| 久久性爱城| 中日韩免费看男女操逼大全| 丝袜美腿91| 91色五月俺来也| 久久精品色欧美aⅴ一区二区| 操久久久久| 久草色悠悠在线视频| 亚洲色图亚洲无码强奸乱伦| 国产狂喷潮在线精品| 97超碰欧美手机在线| 精品久久久九九九孕妇| 伊人影院中文字幕| 狠狠久久亚洲欧美专区| 在线可观看的黄色网址| 午夜啪| 天天肏夜夜肏| 亚洲男人天堂视频| 91网站视频在线观看| 五月天激情小说网| 开心五月婷婷激情| 夜夜操二区| 人妻激情偷乱视三区频一区二区| 亚洲字幕一区二区| 国产亚洲精品精AV.| AAAA级日本片免费视频 | 日本片日本片祼观看网站在线看中文版网页在线看 | 青青草在线视频播放器| 超碰 欧美| 精品人妻一区二区三区夜夜| 亚洲免费97免费| 亚洲另类久操网| 激情丁香五月婷婷| 99热久| 五月婷久久| 少妇滛荡视频| 大香蕉九九| 人人透人人操| 国产11页| 午夜福利在线视频1000| 欧美传媒一区| 久久噜噜噜精品国产亚洲综合| 一区二区视频你懂的| 97公开久久| 久久熟妇五十路一区| 九一亚洲国产免费| 日韩精品国模| 狠狠爱大香蕉| 人人搞人人插人人操| 亚洲人妻在线精品| 熟女六十路| 日本人妻A片成人免费看片| 亚洲精品a人片在线观看视| 亚洲系列第一页| 9999免费精彩视频| 日本有码影片下载 | 情趣丝袜无码操逼视频| 国产精品免费日韩| 色婷亚洲五月在线观看| 日本在线一二| 久草精品国产蜜臀| 色天欧美| 亚洲性高潮| 人人操人人色网| 亚洲欧美日韩中文播放| 色操逼网| 丁香五月性| 97超碰jingpin| 中文字幕精品丝袜| 国产精品农村妇女精品| 超碰欧美| 亚洲欧美日韩综合在线尤物| 另类图片五月| 国产乱码精品久久久久久| 久操av在线| 97国产超碰| 亚洲精品性爱片| 无码国产精品久久久久| 少妇毛片久久| 密臀国产在线| 伊人久久在线视频观看| 大奶啊啊好爽| 日产成人久久| 日日操免费视频| 午夜福利成人免费视频| 99re95| 又黄又硬又粗又长国产视频| 久久久久亚洲AV无码专区少妇| 久久久久婷婷| 91女优在线观看| 亚洲久久久久| 国产激情综合| 老熟妇一区二区三区啪啪| 国产久久天堂资源| 黄色片大香蕉| 操逼操网| 爱做久久久久久| 欧美亚洲20p| 亚欧美色| 久久伊人大香蕉| 屌妞视频久久久久久久久久久久| 国产怡红院在线| 国产精品ⅴ无码大片在线看.| 人人操人人摸人| 熟女欧美日韩综合婷婷| 色哟哟 日韩精品| 少妇滛荡视频| 国产精品97超碰| 国产日韩在线播放av| 五月丁香色婷婷| 中国熟女91| 亚洲欧美日韩制服另类| 鲁鲁色综合网| 四虎影视精品| 亚洲熟女乱色| 少妇久久久久久| 欧美日韩成人在线| 久久精品无码熟妇一区二区三区视频导航 | 久久精品无码熟妇一区二区三区视频导航 | 97超碰中文在线| 五月大香蕉| 亚洲男人天堂网站| 玖玖婷婷五月天| 国产精品高朝久久久久久久| 在线中文字幕极品av| 热久久99999| 成人一道本免费视频| 东北夫妻性偷拍| 国产精品操| 婷婷四五区| 亚洲色图欧美| 精品免费1| 亚洲欧美日韩偷拍色图| 日韩中文字幕2020| 91操人视频| 日韩无码服务区| 久久99网站| 精品国产乱子伦一区二区三区,精品一| 亚洲四虎熟女精品| 国内外内射高清视频| 超碰公开久久网| 无码久久国产| 国产精品乱码久久久久久| 日本在线不卡v二区| 中精品一区二区三区| 欧美一区二区亚洲天堂| 免费观看网黄| 九七毛片九九毛片 | 91成人亚洲色图| 99热综合| 性爱视频无打码在线观看| 亚洲资源网| 国产AV超爽| 麻豆成人AV| 少妇一区二区三区在线观看| 欧美性爱视频免费一区一A| 97超碰影音| 亚洲色图久久精品蜜| 亚洲精品一二牛牛| 久久一二三四五六七八九区| 色婷婷综合久久久久中文国产精品一区中文字幕,国产福利电影一区二区三区 | 91精品啪在线观看国产城中村| 丰满少妇精品一区二区| 嗯嗯,啊啊,国产精品| 黄片视频,下载| 超碰97综合在线| 国产一区二区三区不卡手机在线| 乱伦3P视频| 91精品国产91久久青草| 国内成人圈中文字幕无码视频| 丁香五月天社区| 国产第12页| 日本亚洲嫩草影院啪啪| 欧美青青草视频| 青青草原人妻| 亚洲欧洲国产综合av| 国产二区三区免费视频| 色路综合| 神马九九九| 国产精品 亚洲情色| 女人喷水视频在线观看| 日本十八禁免费看污网站| 酒色综合网| 蜜桃臀一区二区三区久久| 一牛影视久久久一区二区三区| 中日韩欧美精品无码AⅤ一区二区| 91精片| 97精品一区| 骚逼一区二区| 91色图片| 免费的av网| 欧美99| 日韩av在线播放不卡| 桃花色综合影院| 激情欧美97| 蜜臀在线看片| 大香蕉青青9| 欧美熟妇人体| 欧美另类自拍 | 成人性生活高清视频在线播放| 婷婷五月天无码| 女一区二区| 国产青一二三| 亚洲瓯美色图| 爱欲AV| 久久久精久久久| 久久黄黄| 啊啊啊啊啊在线观看网址 | 久久久久国产精品人妻aⅴ天堂| 欧美天堂日韩三级国产传媒| 久久精品72| 精品久久久久9999| 嗯啊不要啊啊在线观看视频| 蜜臀av一区二区三区免费观看| 超碰在线看| 六月丁香婷| 97色碰| 国产乱码久久| 欧美美女在线高潮999| 国产夫妻一区二区| 亚洲天堂日本| 精品久操| 射久久| 成人一二| 黄片免费看的| 欧美综合区| 欧美操人| 色女网日韩| 乱老熟女一区二区三区| 大香蕉懂9| 91w欧美| 国产成人拍国产亚洲精品| 一个色导综合| 亚洲av无码成人精品国产| 黄片在线免费在线观看| 久久久久日本视| 懂色AV中文| 任你干在线视频| 日韩BBN| 欧美亚洲综合高清在线| 国产精品久久久久久高清无码免费看 | 韩国黄片aaaa| 亚洲最大黄网| 尤物视频偷拍免费| 97精品免费| 日本一区二区三区午夜观看| 亚洲情色中文字幕一区| 人人澡人人爽人人精品| 精品美女久久一二三| 亚洲欧美内射| 无码外流操逼视频| 99热这里是精品| wwe 天天干.com| 色色青青久久| av网站免费线看| 在线强奷到舒服的无码视频| 91视频国品一二三区| 免费9 1久久| 天美传媒婬乱在| 国产黄片精品在线| 大稥蕉免费视频这里只有精品| 另类图片亚洲加勒比另类图片亚洲加勒比另类图片亚洲加勒比 | 精品国产Av无码久久久伦古装| 欧美国产精品| 爆乳免费黄网站| 97少妇人妻中文字幕久久| 91狠狠综| 欧美日不卡| 午夜无码熟妇丰满人妻| 国产拍偷精品网站| 欧美夜夜狠| 清纯唯美综合亚洲| 日韩乱伦AⅤ| 亚洲……91| 亚洲中文字幕av| 男人天堂黄片| 久久超碰、| 中文字幕乱码在线| 精品色色| 超碰偷拍| 1769一区二区| 九九综合网| 99re热有精品视频国产| 久热69九色熟妇97| 91丝袜| 日本午夜久久电影| A一级色女| 亚洲va有码在线天堂| 色盈盈影院| 秋霞怕怕片| 精品一区二区三区蜜桃臀赵总 | 一个人免费视频观看在线WWW| 成人欧美一区二区三区黑人一| 大肉棒导航| 亚洲天堂在线怕怕视频 | 精品人妻一区二区免费蜜桃视频| 色综合色| 色妇综合网| 亚洲天堂,男人| 人人妻人人爽| 夜夜嗨AV一区天天| 亚洲天堂男人网| 天天综合亚在线| 91性片| 日韩AV电影网站 | 哈哈操电影AV| jizzjizz欧美| 久久久久久久久国产| 操91| 九九热三级片| 超碰亚洲欧美日韩无| 成·人免费午夜在线观看| 97香焦色区| 国内亚洲高清无码| 男人的天堂日本东京热| 国产午夜无码片在线观看影视| 欧美激情亚洲情色| 99天堂网| 人妻偷拍一区二区三区| 日日妻色网| 亚洲精品美女久久久久久久久| 亚洲欧美激情小说| 欧美熟爽综合| 精品一区二区在线针对华人免费观看这里只有精品免费观看 | 韩日自拍| A V少妇特黄三级| 搡老女人911熟妇老熟女| 色欲人妻一区二区在线| 中日韩欧美精品无码AⅤ一区二区| 一本一道久久综合久久| 97网址www| 色狠狠 - 百度| 67914在线兔费成人视频| 亚洲精品 大香蕉| 伊人一区二区在线播放| 97精品视频在线播放| 蜜臀少妇一区二区| 亚洲精品无码久久AV| 高清无码91| 啊啊啊啊啊在线视频| 留下AⅤ黄色片| av激情亚洲五月天| 熟女熟妇伦久久影院毛片一区二区| 五月婷婷无码| av最新免费中文字幕| 99热在线只有精品| 亚洲大色堂| 激情深爱五月天| 日韩精品在线观看观看| 日韩视频中文字幕| 96一区二区三区| 九九拍拍精品视频在线播放| 69精品少妇一区二区三区蜜桃| 日韩中文字幕国产| 日骚逼视频| 美女干逼2| 欧美亚洲激情小说| 99自拍视频在线观看| 色五天伊人| 久操97| 综合亚州欧美| 亚洲综合大片| 欧美国产操逼| 亚洲爱爱视频一区二区| 熟妇女人妻呻吟久久AV| 久久超碰爱| 久久久夜夜嗨免费视频| 一级黄色性爱A级片| 国产综合色精品在线观看| 97精品一区二区视频在线观看| 久久久18禁| 蜜桃传媒一区二区亚洲| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴 | 97亚洲在线| 男人天堂无码| 九热超碰| 亚洲精品国产熟女久久久| 日韩精品99久久久久久中文字幕 | 日韩性爱一级片| 上特色A在线| 超碰色97| 激情欧美97| 97在线免费看视频| 色爱天堂| 69精品| 中文久久| 免费精品国偷自产在线在线 | 大奶啊啊好爽| 97免费在线视频在线观看| 日本大片日本一区二区免费高清| 99久久婷婷| 亚洲激情网一二三四区| 欧美性天天影视| 野狼激情网| 日本免费一区二| 九九九久千久久激情蜜桃在线看| 亚洲欧洲视频小说在线观看| 好爽,再快点啊哈嗯嗯嗯嗯| 啊啊啊好湿久久| 91日日| 九九热在线精品视频| 淫乱图区 | 老熟女搡BBBB搡BBBB视频| 久久久精品中文字幕爱豆| 五月天久久综合网| 太久视频| 婷婷五月天福利| 无码99| 三级网站超变态精品| 东京热精品97综合网| 免费亚洲国产精品久久一区| 亚洲图片视频小说| 狠狠操狠狠操操| 综合国产影视三级| 精品黑人一区二区| 激情四射婷婷四五月天| 欧美精品 - 91爱爱| 丝袜狠狠草尤物 91| 久久这里只精品| 国产精品 视频| 高潮的A片激情扒开一区| 日本一级二级三级网站| 狼人综合婷婷激情四射 | 91丨熟女丨丰满熟女| 亚洲另类电影| wwe 天天干.com| 中文字幕午夜精品久久久| 9久精品| 熟女乱伦A| 五月婷婷丁香| 欧美玖玖爱免费玖玖| 欧美天天综合网版| 成人性爱av.com| 久7色| 视频黄站| 极品综合| 超碰超碰95| 久久噜| 国产精品又黄又猛又粗| 熟女突然公开看18禁影片| 中文字幕一区二区三区蜜臀| 夜夜嗨免费视频| 亚洲成人黄色在线观看| 人妻22p| 夜夜爽爽夜夜精品视频| av亚欧| 久久曰曰| 蜜臀在线看片| 精品人体无圣光凹凸| 看看小穴| 一本久道久久综合狠狠爱一密臀精| 欧美精品日韩久久久九| 天天肏美女| 欧美一区二区| 黄aaaaaaaaaaaaaaaaaa色网站| 操人妻逼91| 久久久久亚洲Av无码专区老牛影视 | 97精品国产97久久久久久| 少妇内射视频| 日日噜噜夜夜狠狠视频无| 99久久com免费视频′| 99re这里只有精品2| 少妇xx精品| 91在线色| 樱花蜜乳av| 国产女同性恋视频| 大屁股人妻女教师撅着屁股| 久久精品视频久久久| 97免费在线观看| 这里只有精品久久| 啊啊啊好大好深| 欧美黄色片AAAAA| 热热色AV| 操逼日韩无码 | 翔田千里无码一区| 国产精品乱码久久久久久久久久久久| 亚洲欧美小说| www.操| 99亚洲精品| 亚洲色9| 日本操逼视频不卡直接放| 亚洲综合性感在线| 欧美激情性久久久久久| 伊人精品视频| 欧美成人AⅤ大片在线观看| 60秒免费小视频| 久久久久久国产无码精品| 试看60秒| 国产激情综合| 欧美激情综合网| 啪啪视频mP4| 人人操人人舒服| 97天天日| 射丝袜高跟鞋99| 久久精品国产AV一区二区三区| 亚洲成人色情五月天丁香花| 加勒比久久综合网高清| 91亚洲丝袜熟女| 国产 日韩 欧美 人妻 熟女 中文 69人妻精品一区二区绯色 | 日日骚网站| 精品久久99| 亚洲成人性爱网站在线播放| 国产和美国毛片| 日本色色网| 国产精品白领在线观看| 天天操人人操骚逼网站| 新版天堂中文资源8在线| 日韩精品-原创伙伴| 69AV女优男人的天堂| 超碰成人公开| 91性网| 久久久久久久久久久久黄色| 多乙久久久久久| 日韩人妻丝袜中文字幕| 欧美亚洲高清不卡| 久热99| 欧美伊人久久综合网| com 首页 18岁 禁区 女优 免费 精选 同城 | 少妇天堂网络| 国产呦精品一区二区三区下载| 日韩十八禁| 综合天天网| www.久久爱| 激情天天视频| 国产久久天堂资源| 欧美暴力猛交| 精品超碰中文在线| 福利视频一区二区微拍| 亚州91| 久久久九精品| 中文字幕 一区二区 亚洲无码| caoni国产亚洲av| 好色综合| 91操熟女视频 | 26uuu偷拍亚洲欧洲综合| 久久成人东京热人妻| 日韩中文字幕av在线播放| 日本中文字幕在线电影| 国产99精品一区二区三区免费| 男人的天堂VA| 日本三级韩国三级美三级91| 江都AV在线| 亚洲成av人片色午夜乱码| 大香蕉天天看妹子| 久久人妻| 91女人的网站| 黄色激情电影在线观看| 91亚洲网站| 久久精品人妻一区| 日韩精品国模| 一区黄二区黄| 国产十八禁视频| 97超级欧美| 婷色五月天| 男女真人网18| 国产色精品午夜大片| 99热| 婷婷激情丁香| 高清孕妇孕交 交孕妇| 欧美 熟女 日韩| 香蕉久久精品| 99re在线| 日本人妻中文字幕 | 国产女s强制榨精视频| 欲香欲色综合天天伊人| 97欧美色| 天天搞欧美| 亚洲精品97中文字幕| 噜噜噜久久亚洲精品色情| 一个人在线看的黄色电影网站| 激情丁香五月婷婷| 亚洲第一综合| 97色婷婷| 欧美天天拍| 九九热免费国产视频婷婷伊人| 五月天婷婷成人网| 国产精品交换一区二区| 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 亚欧毛片基地国产毛片基地| 国产精品久久久久久亚洲色欲| 91天天看| 色欲天天综合久久久无码网中文| 91精品国产91综合久久蜜臀| 国产在线播放成人免费| 1769成人国产精品视频| 在线毛片片免费观看| wwwxxx日本爽| 黄色区免费观看中文字幕| 亚洲中文国际强奸字幕| 欧美日韩岛国大片在线观看| www.人人cao| 婷婷激情五月综合| 97超碰jingpin| 亚洲乱色视频一区、二区在线| 久草资源欧美在线视频| 日本欧美m v精品网站加| 中文字幕无码不卡啪啪| 本道综合精品| 亚洲无码超碰免费| 一区二区三区四区免费视频| 亚洲国产日韩欧美熟妇在线| 欧美一区91大爱| 久草新免费| 欧美亚洲清纯| 91色狼| 人人操我人人干| 欧美精品久久久久久久久88| 99热免费| 久干网| 中国特猛少妇色xxx| 久久草草亚洲蜜桃臀| 亚洲人妻中文高清| 久久久精品国产亚洲伊人| 青青草白白色| 国产精品一区二区三区四区五区| 国产亚洲福利第一页丝袜| 国产精品久久久久久片| 91色艳| Aa东京男人的天堂| 亚洲综合另类| 久草视频分类在线| 少妇人妻无码| 麻豆精品.欧美精品.日韩精品.| 丰满人妻被猛烈进入中| 探花激情视频| 日韩中文字幕av在线播放| 99在线观看视频在线高清| 狠狠色伊人亚洲综合网站色| 十八禁啪啦拍视频无遮挡| 色狠狠综合噜一二三区| 综合网亚洲在线| 中国一级操逼视频| 麻豆精品久久久久久久| 免费草草草草草视频| 色在线视频导航| 日本色婷婷| 91AV天美在线视频| 欧美日韩*字幕一区| 亚洲性爱高潮影院| 少妇熟女视频一二三区| 巨爆乳一区二区爆乳区| 爱爱动态120秒| 天天久久久久久| 国产精品嫩草影院免费| 9999伦理视频| 探花精品 一区二区| 国产乱伦性爱AV| 人妻黑丝袜电影| 日韩精品一区二区高清| 老鸭窝亚洲毛片| 9丨久久九九九| 高清在线偷拍自拍视频| av草草在线电影| 高清成年美女黄网站免费大全| 亚欧美天堂在线| 天美91| 男人的天堂2019AV| 天天狂操夜夜狂日| 丁香五月影院| 色亚洲欧美| 欧美黄色片AAAAA| 亚洲色综网| 欧美熟女操屄| 不卡六六在线91| 另类小色呦| 在线 欧美 亚洲| 黄色视频特级毛片| 久操| 亚洲成人综合在线| 清纯唯美第一页| 大香蕉九九| 亚欧美综合网| 日韩亚洲美州欧洲综三区一品在线| 中文字幕丝袜| 一二三四免费视频| 大JI巴好深好爽又大又粗视频| 天天综合精品| 69av一区二区三区| 免费久久9999| 免费看A片毛毛片在线播| 啊啊啊啊好疼视频| 亚洲色欲天天人妻无码系列专区| 视频一区二区三区精品| 日韩 欧美 校园一区| 一区二区三区黄色片a| 欧洲自拍色图gif在线| 国产成人免费观看在线视频| 999久久久久久久久| 六月丁丁香| 国产福利一区二| 绑缚麻绳人妻寝取完整版| 亚洲欧美在线观看免费| 久啪视频| AV天堂丝袜| 久思思热视频在线观看| 国产精品3| 五月婷在线| 91搡老女人老妇女老熟女歌词翻译| 黄色二级片网站| 思思热国产在线视频| 精品人妻视频一区二区在线播放| 最新欧洲欧美日本激情网站| 亚洲成人精品在线一区| 久久熟女久| 99欧美| 黄片qw| 亚洲激情欧美色图| 大香蕉伊人网WWWn0n| 国产精品免费日韩| 夜夜欢天天干| 东京热精品97综合网| 色狠狠色| 波多野结衣被操50分钟免费视频| 亚洲天堂一二| 日本999精品视频| 一区二区三区欧美激情| 网站A V在线| 亚洲素人综合| 久久天天躁日日躁狠狠躁 | 极品五月天噜噜| 日本高清_区二区三区| 少妇的嫩逼图片| 日本999精品| 欧美黄页在线| 蜜臀AV网站| 69av一区二区三区| 国产一线二线三线av| 欧美性生活内射| 中亚av| 亚洲中文字母在线播放| 岛国免费视频在线| 大香久久| 丝袜视频网国产90| 欧美日本天堂| 亚洲欧洲小说图片视频 | 久久久久78| 草b在线| 日韩欧美视频青青| 国产 v乱码一区二| 奇米四色影视777久久久| 狠狠操狠狠操操| 78m成人视线| 九一国产精品| 97精品综合久久网| 麻豆婷婷成人一二三| 激情五月天婷婷| 亚洲无码一区二区三区三州| 国产人妖的免费的视频| 久96热在线观看视频| 深喉吞精| 欧美,日韩,中文,另类| 九九九九九九九九九九九九九九九女| 久久久久国产亚洲一区欧美色图日韩| 91超碰人人操| 欧美视频中文字幕区| 日韩国产乱子伦App| 成人无码在线超碰网| 欧美视频一| 精品免费一区| 中文字幕三四区| 激情小说亚洲| 国产精品操| 久久久久亚洲| 中文字幕丰满人妻日本| 91伊人| 热99这里有精品综合久久| 女生久久网| 欧亚日韩中文在线| 免费视频一二三区| 欧美在线啊啊| 九九九久久久| 凹凸视频在线一区二区| 搡老女人老91妇女老熟女| 五月丁香激情四射| av亚欧| 性色av大全| 色在线亚洲视频www| jk白丝没脱就开始啪啪| 成人激情无码在线视频| 无色无码| 亚洲另类电影| 精品国产乱码久久久久久久久1| A V少妇特黄三级| 久久9久9久99久9久9| 久久一二三级一一一| 伊人久久大香蕉线AV五月天| 蜜桃色院一区久久| 九九人妻| 国产熟女无套内射| 亚洲 无码 偷拍| 中文字幕一区二区日韩网| 国产精品嫩草影院免费| 午夜黄色免费在线观看| 日韩有码免费视频| 国产传媒一区日韩| 高清不卡 中文 人妻| 丝袜美腿丝袜| 韩国三级一线观看久| 强奸乱伦Av网| 偷拍色图| 国产精品另类一区大香蕉| 少妇一区二区三区| 91人妻最真实刺激绿帽| 亚洲精品精品一区二区| 日韩草久视频| 久久久国产精品亚洲精品| 日本2020一区二区| 国内偷拍精品一区二区| 3P乱轮视频| 七久久久| 久久少妇人妻| 日韩无码一区二区三区| 95自拍视频在线观看| 97干在线| 久久久久久中文版| 久久久久女教师免费一区 | 人妻美腿丝袜制服诱惑综合天堂-| 亚洲Av噜噜一区二区三区妖精| 色九九久九九| 精品人妻1区| 天天日天天色| 六月婷婷一区二区三区| 91欧美综合| 精品国产人成在线| 精品久久久九九九孕妇| 男人成人黄色视频在线观看免费下载| 丰满少妇一区二区三区免费看| 色在线亚洲视频www| 亚洲午夜免费狠狠干| 韩日自拍| 亚洲国产精品无码AV久久久| 99热综合| 精彩久久中文| 日韩在线欧美精品一区二区| 天天干少妇| 97操综合| αⅴ天堂| 国产黄色动态精品| 干少妇视频| 色色色色电影网| 久久久久久久六六| 不卡中文字幕aⅴ在线| 美女刺激久久国产欧美| 99热线麻豆 | 中美日韩毛片| 色香综合| 日本九九九九| 日韩丨制服丨中文|在线| 十八禁视频一区二区| 亚洲最大91网| 亚洲精品欧洲色| 久久老子无码午夜伦不卡| 超碰久在线天天做| 久久久久人妻二区精品叶可怜| 91亚·色| 99re9| 久久久蜜桃一区二区三区| 亚洲另类色综合网站| 亚洲图片欧洲图片aⅴ| 国精综合一二三区影视| 麻豆国产97在线| 久久久久无码| 97视频网站| 97精品国产97久久久久久免费| 色九久| 91人妻爽爽人人做人人澡| 性高潮久久久久久久久久久| 日本午夜久久电影| 日日摸日日弄日日拍| 中字乱伦AV| 国产激情在线| 欧美性爱五月天| 另类欧美色| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 夜夜夜夜久久久久| 婷婷丁香久久| 中文字幕视频二区| 色婷婷五月天| 七月婷婷综合| 中文字幕在在线观看网站| 人人操人人爽人人操人人| 欧美图片色综合| 自怕偷自怕亚洲精品| 国产精品在线网站| 欧美大香蕉专区网| 嗯~啊~轻一点 视频| 午夜一区| 久久69| 一级黄碟在线观看| 亚洲av影音先锋| 97伊人超碰| 国产熟女少妇一区| 尹人免费观看视频在线| 色婷婷久久综合超碰| 激情视屏国产乱伦强奸| 精品日韩产品在线,日韩在线不卡视频,欧美日韩免费专区/久, | 综合色图区| 日日爱99| 99色骚| 午夜一区| yw尤物av无码点击进入麻豆| 久久久性爱视频| 97最新在线播放视频| 日本天天干天天操一区| 97亚洲资源| 嫖老熟女A片一二三区| 欧美色图电影| 欧美色一二三| 岛国成人av在线播放网址| 91欧美亚洲| 日韩不卡一二三四| 天天影视网综合少妇| 国产精品亚洲无码| 一本大道青青| 青青草五月天| 再深点灬舒服灬太大了好硬好爽| 亚洲国产综合图区中文字幕 | 午夜精品五区| 亚洲色图图片| 九九九精品色乱九九九| 淫淫总合网| 天天做日日爱夜夜爽| 无码天堂| 欧美色图自拍| 日韩三级在线观看mp4| AAA久久| 日逼逼免费看| 九热中文字幕| 精品白丝一区| 色天使大香蕉| 3571色综合一区二区二区| 深夜国产一区二区三区在线看| 国产400孕妇孕交群| 日本天堂在线播放| 久久綜合很很很| 亚州宗合另类| 人人色人人操在线| 亚洲精品国产熟女| 欧美天天性| 久久久青青草| 日本最新1区2区3区| 欧美色997| 亚洲日韩AV视色| 久久丁香五月婷婷| 亞洲久久直播| 午夜.DJ高清在线观看免费7| 999久久久九九九九| 性色高清..……| 亚欧美综合网。| 少妇人妻精品| 久9久| 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 艳美熟妇先锋一二三区| 狼人久草| 中国探花熟女| 黑人操一区二区| 黄色激情电影在线观看| 成人国产视频在线观看| 伊人九九九| 九九热精品视频六| 精品人妻一区二区蜜桃视频| 校园春色中文字幕AV| 天天综合香 ld视频| 人妻在线中出视频| 久久熟女人| 黄色污污污污污污网站| 超碰av人人人| 屌色在线97视频| 99国产人成精品| 九九九九久久久| 黑丝内射一区二区三区| 九九热免费视频| 婷婷五月在线视频| 超碰人人妻| 极品五月天噜噜| 欧美亚洲激情小说| 嗯嗯啊啊操死我| 久久婷婷在线观看视频| 91色图片| 中文字幕97色| 99re这里| 加勒比性爱成人在线| 超碰偷拍| 国产9l 大屁股| 超碰免费人妻在线| 999久久久免费精品国产牛牛| av网站国产主播在线| 亚洲无码成人精品| 在线观看成人性爱免费小视频| 天天热精品|