亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Spring Boot + JPA 高并發(fā)選課系統(tǒng)實(shí)戰(zhàn):防超賣與重復(fù)選課

Spring Boot + JPA 高并發(fā)選課系統(tǒng)實(shí)戰(zhàn):防超賣與重復(fù)選課 1. 選課系統(tǒng)為什么值得認(rèn)真做一遍學(xué)生選課系統(tǒng)這個(gè)題目幾乎每個(gè)計(jì)算機(jī)專業(yè)的學(xué)生都碰過(guò)招聘面試?yán)镆渤1荒脕?lái)當(dāng)場(chǎng)景題。但真正把它當(dāng)回事、按生產(chǎn)標(biāo)準(zhǔn)做一遍的人并不多。大多數(shù)人寫(xiě)出來(lái)的版本是一張學(xué)生表、一張課程表、一張選課記錄表Controller 里調(diào)一下 ServiceService 里查一下有沒(méi)有余量有就插入一條記錄完事。本地跑起來(lái)沒(méi)問(wèn)題一放到幾百人同時(shí)點(diǎn)選課的場(chǎng)面立刻出現(xiàn)超賣、重復(fù)選課、數(shù)據(jù)庫(kù)連接打滿。我前后做過(guò)三版選課系統(tǒng)第一版是課程設(shè)計(jì)交作業(yè)的水平第二版給一個(gè)學(xué)院內(nèi)部試用第三版才真正把并發(fā)問(wèn)題處理干凈。這篇文章就把這三版踩過(guò)的坑、改過(guò)的方案完整講一遍從數(shù)據(jù)建模講到高并發(fā)防超賣。技術(shù)棧用的是Spring Boot MySQL JPA這套組合上手快、生態(tài)成熟適合作為練手項(xiàng)目也足夠撐起一個(gè)真實(shí)可用的系統(tǒng)。文章適合三類人看正在做課程設(shè)計(jì)、想拿一個(gè)能寫(xiě)進(jìn)簡(jiǎn)歷的項(xiàng)目練手的同學(xué)準(zhǔn)備面試、需要把“高并發(fā)”從八股文變成能講清楚實(shí)戰(zhàn)細(xì)節(jié)的人以及已經(jīng)寫(xiě)過(guò)選課系統(tǒng)、但被超賣問(wèn)題卡住的開(kāi)發(fā)者。我會(huì)把每一步為什么這么做講透參數(shù)怎么算、鎖怎么加、索引怎么建都給出可以直接抄的代碼和配置??赐曛竽銘?yīng)該能獨(dú)立復(fù)現(xiàn)一個(gè)扛得住并發(fā)選課的系統(tǒng)并且能說(shuō)清楚每個(gè)設(shè)計(jì)決策背后的理由。2. 整體架構(gòu)與數(shù)據(jù)建模思路2.1 為什么先定架構(gòu)再寫(xiě)代碼很多人一上來(lái)就打開(kāi) IDE 建 Spring Boot 工程邊寫(xiě)邊想表結(jié)構(gòu)結(jié)果寫(xiě)到一半發(fā)現(xiàn)字段不夠用回頭改表、改實(shí)體、改接口返工成本極高。選課系統(tǒng)雖然不大但它涉及的核心矛盾很典型讀多寫(xiě)少、寫(xiě)操作有強(qiáng)一致性要求、并發(fā)集中在少數(shù)熱門(mén)課程上。這三個(gè)特點(diǎn)決定了架構(gòu)和數(shù)據(jù)模型必須先想清楚。我的做法是先畫(huà)一張業(yè)務(wù)流轉(zhuǎn)圖在紙上畫(huà)就行不用工具學(xué)生登錄 → 瀏覽課程列表 → 點(diǎn)擊選課 → 系統(tǒng)校驗(yàn)資格與余量 → 扣減余量并生成選課記錄 → 返回結(jié)果。這條鏈路里真正需要保護(hù)的是“校驗(yàn)余量”和“扣減余量”這兩步它們必須是一個(gè)原子操作否則并發(fā)下必然超賣。想清楚這一點(diǎn)后面的技術(shù)選型就順了。分層上我采用經(jīng)典的 Controller → Service → Repository 三層但額外加了一層Domain Service專門(mén)處理選課這種跨實(shí)體的業(yè)務(wù)邏輯。這樣做的原因是選課邏輯既不屬于學(xué)生實(shí)體也不屬于課程實(shí)體硬塞進(jìn)任何一個(gè)實(shí)體里都會(huì)讓代碼變味。分層清晰之后單元測(cè)試也好寫(xiě)后面加緩存、加鎖都有明確的落點(diǎn)。2.2 數(shù)據(jù)表設(shè)計(jì)三張核心表加兩張輔助表選課系統(tǒng)的表不多但每張表的字段和索引都有講究。核心是三張學(xué)生表、課程表、選課記錄表。另外兩張輔助表是學(xué)期表和教師表看需求決定要不要。先看課程表這是并發(fā)爭(zhēng)搶的焦點(diǎn)CREATE TABLE course ( id BIGINT PRIMARY KEY AUTO_INCREMENT, course_code VARCHAR(32) NOT NULL COMMENT 課程編號(hào), course_name VARCHAR(128) NOT NULL COMMENT 課程名稱, teacher_id BIGINT NOT NULL COMMENT 授課教師, semester VARCHAR(32) NOT NULL COMMENT 學(xué)期, capacity INT NOT NULL DEFAULT 0 COMMENT 總?cè)萘? selected_count INT NOT NULL DEFAULT 0 COMMENT 已選人數(shù), version INT NOT NULL DEFAULT 0 COMMENT 樂(lè)觀鎖版本號(hào), status TINYINT NOT NULL DEFAULT 1 COMMENT 1開(kāi)放 0關(guān)閉, create_time DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP, update_time DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP, UNIQUE KEY uk_code_semester (course_code, semester), KEY idx_semester_status (semester, status) ) ENGINEInnoDB DEFAULT CHARSETutf8mb4;這里有幾個(gè)關(guān)鍵決策。第一容量和已選人數(shù)放在課程表里而不是每次去 count 選課記錄表。count 操作在并發(fā)下既慢又容易讀到不一致的數(shù)據(jù)用一個(gè)冗余字段selected_count直接維護(hù)配合事務(wù)保證一致性性能好得多。第二加了version字段用于樂(lè)觀鎖這是防超賣的核心手段之一。第三uk_code_semester唯一索引保證同一學(xué)期同一課程編號(hào)不重復(fù)idx_semester_status支撐按學(xué)期查開(kāi)放課程的常見(jiàn)查詢。選課記錄表的設(shè)計(jì)要點(diǎn)在于唯一約束CREATE TABLE course_selection ( id BIGINT PRIMARY KEY AUTO_INCREMENT, student_id BIGINT NOT NULL, course_id BIGINT NOT NULL, select_time DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP, status TINYINT NOT NULL DEFAULT 1 COMMENT 1有效 0已退選, UNIQUE KEY uk_student_course (student_id, course_id), KEY idx_course_status (course_id, status) ) ENGINEInnoDB DEFAULT CHARSETutf8mb4;uk_student_course這個(gè)唯一索引非常重要它是防止同一學(xué)生重復(fù)選同一門(mén)課的最后一道防線。即使應(yīng)用層的校驗(yàn)因?yàn)椴l(fā)出現(xiàn)漏洞數(shù)據(jù)庫(kù)這一層也會(huì)直接拒絕重復(fù)插入。我第一版就是漏了這個(gè)約束測(cè)試時(shí)用腳本并發(fā)提交同一個(gè)學(xué)生的選課請(qǐng)求結(jié)果插進(jìn)去好幾條重復(fù)記錄排查了半天才發(fā)現(xiàn)是應(yīng)用層校驗(yàn)有競(jìng)態(tài)。學(xué)生表相對(duì)簡(jiǎn)單但要注意密碼字段的存儲(chǔ)和學(xué)號(hào)的唯一性CREATE TABLE student ( id BIGINT PRIMARY KEY AUTO_INCREMENT, student_no VARCHAR(32) NOT NULL COMMENT 學(xué)號(hào), name VARCHAR(64) NOT NULL, password VARCHAR(128) NOT NULL COMMENT 加密存儲(chǔ), major VARCHAR(64), grade INT, create_time DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP, UNIQUE KEY uk_student_no (student_no) ) ENGINEInnoDB DEFAULT CHARSETutf8mb4;2.3 JPA 實(shí)體映射與幾個(gè)容易踩的坑用 JPA 做 ORM 映射代碼量比手寫(xiě) SQL 少很多但有幾個(gè)坑必須提前知道。第一個(gè)是關(guān)聯(lián)關(guān)系的加載策略。選課記錄關(guān)聯(lián)學(xué)生和課程如果默認(rèn)用 EAGER 加載查一次選課記錄會(huì)連帶把學(xué)生和課程全查出來(lái)N1 問(wèn)題立刻出現(xiàn)。我的做法是全部用FetchType.LAZY需要的時(shí)候再用JOIN FETCH顯式加載。Entity Table(name course) public class Course { Id GeneratedValue(strategy GenerationType.IDENTITY) private Long id; Column(name course_code, nullable false) private String courseCode; Column(name course_name, nullable false) private String courseName; Column(nullable false) private Integer capacity; Column(name selected_count, nullable false) private Integer selectedCount; Version private Integer version; // getter/setter 省略 }注意Version注解這是 JPA 樂(lè)觀鎖的開(kāi)關(guān)。加上它之后每次更新這條記錄JPA 會(huì)自動(dòng)在 where 條件里帶上 version并且把 version 加一。如果兩個(gè)事務(wù)同時(shí)讀到 version5一個(gè)先提交把 version 改成 6另一個(gè)提交時(shí)發(fā)現(xiàn) version 已經(jīng)不是 5 了就會(huì)拋OptimisticLockException。這就是樂(lè)觀鎖防超賣的底層機(jī)制。第二個(gè)坑是批量操作的性能。選課高峰期可能有大量查詢?nèi)绻織l都單獨(dú)發(fā) SQL數(shù)據(jù)庫(kù)壓力很大。JPA 提供了BatchSize和hibernate.jdbc.batch_size配置來(lái)優(yōu)化但對(duì)于選課這種單條寫(xiě)入為主的場(chǎng)景更重要的是把查詢緩存和連接池配好。2.4 技術(shù)選型為什么是 JPA 而不是 MyBatis-Plus網(wǎng)上關(guān)于 Spring Data JPA 和 MyBatis-Plus 的對(duì)比文章很多我的實(shí)際體會(huì)是選課系統(tǒng)這種領(lǐng)域模型清晰、以實(shí)體為中心的 CRUD 場(chǎng)景JPA 更合適。JPA 的實(shí)體映射和樂(lè)觀鎖支持是開(kāi)箱即用的Version一個(gè)注解就搞定MyBatis-Plus 雖然也有樂(lè)觀鎖插件但配置起來(lái)多幾步。而且 JPA 的方法名派生查詢比如findBySemesterAndStatus寫(xiě)起來(lái)非??焓〉舸罅亢?jiǎn)單 SQL。但 JPA 也有短板復(fù)雜查詢和批量更新不如 MyBatis 靈活。所以我的方案是混合使用常規(guī) CRUD 走 JPA防超賣的核心扣減操作用原生 SQL 或者M(jìn)odifying的 JPQL把控制權(quán)拿回來(lái)。這樣既享受了 JPA 的開(kāi)發(fā)效率又在關(guān)鍵路徑上保留了精細(xì)控制的能力。3. 防超賣的核心機(jī)制拆解3.1 超賣到底是怎么發(fā)生的先把問(wèn)題講清楚。假設(shè)一門(mén)課容量 50當(dāng)前已選 49。兩個(gè)學(xué)生 A 和 B 幾乎同時(shí)點(diǎn)選課。系統(tǒng)處理 A 的請(qǐng)求時(shí)讀到 selected_count49判斷 49 50通過(guò)準(zhǔn)備寫(xiě)入。就在 A 還沒(méi)提交事務(wù)的瞬間B 的請(qǐng)求也讀到了 selected_count49因?yàn)?A 還沒(méi)提交B 讀的是舊值同樣判斷通過(guò)。然后兩個(gè)事務(wù)先后提交selected_count 變成 51超賣發(fā)生。這個(gè)問(wèn)題的本質(zhì)是**“讀-判斷-寫(xiě)”這三步不是原子的**。解決思路無(wú)非幾種把這三步變成原子操作數(shù)據(jù)庫(kù)行鎖或原子更新或者讓并發(fā)的一方失敗重試樂(lè)觀鎖或者把并發(fā)擋在數(shù)據(jù)庫(kù)之外分布式鎖、消息隊(duì)列。選課系統(tǒng)的并發(fā)量通常在幾百到幾千用數(shù)據(jù)庫(kù)層面的方案就夠了不必上分布式鎖那么重。3.2 方案一悲觀鎖簡(jiǎn)單但要注意鎖粒度悲觀鎖的思路是“先鎖住再操作”。在 JPA 里可以用Lock(LockModeType.PESSIMISTIC_WRITE)實(shí)現(xiàn)對(duì)應(yīng)數(shù)據(jù)庫(kù)的SELECT ... FOR UPDATE。public interface CourseRepository extends JpaRepositoryCourse, Long { Lock(LockModeType.PESSIMISTIC_WRITE) Query(select c from Course c where c.id :id) OptionalCourse findByIdForUpdate(Param(id) Long id); }在選課服務(wù)里這樣用Transactional public void selectCourse(Long studentId, Long courseId) { Course course courseRepository.findByIdForUpdate(courseId) .orElseThrow(() - new BizException(課程不存在)); if (course.getSelectedCount() course.getCapacity()) { throw new BizException(課程已滿); } // 校驗(yàn)是否已選 if (selectionRepository.existsByStudentIdAndCourseId(studentId, courseId)) { throw new BizException(已選過(guò)該課程); } course.setSelectedCount(course.getSelectedCount() 1); courseRepository.save(course); CourseSelection selection new CourseSelection(); selection.setStudentId(studentId); selection.setCourseId(courseId); selectionRepository.save(selection); }悲觀鎖的優(yōu)點(diǎn)是邏輯直觀一定能防住超賣。但缺點(diǎn)也明顯鎖的粒度是整行而且持有鎖的時(shí)間覆蓋了整個(gè)事務(wù)。如果事務(wù)里還有其他耗時(shí)操作比如遠(yuǎn)程調(diào)用、發(fā)消息鎖會(huì)被長(zhǎng)時(shí)間占用其他學(xué)生選同一門(mén)課全部阻塞。所以用悲觀鎖的鐵律是事務(wù)里只做必要的數(shù)據(jù)庫(kù)操作越快越好。還有一個(gè)隱蔽的坑SELECT ... FOR UPDATE在沒(méi)有命中索引時(shí)會(huì)鎖表而不是鎖行。所以findByIdForUpdate必須走主鍵索引這一點(diǎn)要確認(rèn)執(zhí)行計(jì)劃。我第二版就遇到過(guò)因?yàn)椴樵儣l件沒(méi)走索引導(dǎo)致鎖范圍擴(kuò)大到全表整個(gè)選課接口響應(yīng)時(shí)間從幾十毫秒飆到幾秒。3.3 方案二樂(lè)觀鎖高并發(fā)下的更優(yōu)解樂(lè)觀鎖的思路是“先操作提交時(shí)檢查有沒(méi)有沖突”。JPA 的Version已經(jīng)幫我們實(shí)現(xiàn)了這套機(jī)制代碼寫(xiě)起來(lái)更自然Transactional public void selectCourseOptimistic(Long studentId, Long courseId) { Course course courseRepository.findById(courseId) .orElseThrow(() - new BizException(課程不存在)); if (course.getSelectedCount() course.getCapacity()) { throw new BizException(課程已滿); } if (selectionRepository.existsByStudentIdAndCourseId(studentId, courseId)) { throw new BizException(已選過(guò)該課程); } course.setSelectedCount(course.getSelectedCount() 1); courseRepository.save(course); // 提交時(shí)檢查 version CourseSelection selection new CourseSelection(); selection.setStudentId(studentId); selection.setCourseId(courseId); selectionRepository.save(selection); }當(dāng)并發(fā)沖突發(fā)生時(shí)save會(huì)拋OptimisticLockException。這時(shí)候不能直接把異常拋給用戶而是應(yīng)該捕獲異常并重試。重試次數(shù)一般設(shè) 3 次超過(guò)就返回“系統(tǒng)繁忙請(qǐng)重試”。public void selectWithRetry(Long studentId, Long courseId) { int maxRetry 3; for (int i 0; i maxRetry; i) { try { selectCourseOptimistic(studentId, courseId); return; } catch (OptimisticLockException e) { if (i maxRetry - 1) { throw new BizException(選課人數(shù)過(guò)多請(qǐng)稍后重試); } // 短暫退避后重試 try { Thread.sleep(50L * (i 1)); } catch (InterruptedException ignored) {} } } }樂(lè)觀鎖相比悲觀鎖的優(yōu)勢(shì)在于不阻塞讀、鎖持有時(shí)間短在沖突不激烈的場(chǎng)景下吞吐量更高。選課系統(tǒng)的沖突集中在少數(shù)熱門(mén)課程大部分課程沖突很少樂(lè)觀鎖整體表現(xiàn)更好。但要注意如果某門(mén)課被幾千人同時(shí)搶樂(lè)觀鎖的重試次數(shù)會(huì)急劇上升反而拖慢系統(tǒng)。這時(shí)候需要配合限流或者排隊(duì)機(jī)制。3.4 方案三原子更新 SQL把判斷和扣減合成一步前面兩種方案都是在應(yīng)用層做判斷還有一種更徹底的做法把判斷條件寫(xiě)進(jìn) SQL 的 where 里讓數(shù)據(jù)庫(kù)來(lái)保證原子性。public interface CourseRepository extends JpaRepositoryCourse, Long { Modifying Query(update Course c set c.selectedCount c.selectedCount 1 where c.id :id and c.selectedCount c.capacity) int incrementSelectedCount(Param(id) Long id); }調(diào)用時(shí)判斷返回值Transactional public void selectCourseAtomic(Long studentId, Long courseId) { if (selectionRepository.existsByStudentIdAndCourseId(studentId, courseId)) { throw new BizException(已選過(guò)該課程); } int updated courseRepository.incrementSelectedCount(courseId); if (updated 0) { throw new BizException(課程已滿); } CourseSelection selection new CourseSelection(); selection.setStudentId(studentId); selection.setCourseId(courseId); selectionRepository.save(selection); }這條 update 語(yǔ)句在數(shù)據(jù)庫(kù)層面是原子的selectedCount capacity這個(gè)條件在更新時(shí)求值天然避免了超賣。它的性能最好因?yàn)椴恍枰渔i也不需要重試。但有個(gè)前提必須保證選課記錄的唯一性校驗(yàn)也在同一個(gè)事務(wù)里并且唯一索引兜底。因?yàn)閑xistsByStudentIdAndCourseId這個(gè)檢查本身有競(jìng)態(tài)兩個(gè)并發(fā)請(qǐng)求可能都通過(guò)檢查然后都執(zhí)行 update最后靠唯一索引攔住其中一個(gè)。3.5 三種方案的對(duì)比與選型建議方案原理優(yōu)點(diǎn)缺點(diǎn)適用場(chǎng)景悲觀鎖SELECT FOR UPDATE邏輯直觀一定防住阻塞嚴(yán)重鎖粒度大并發(fā)低、事務(wù)短樂(lè)觀鎖Version 版本號(hào)不阻塞讀吞吐高沖突多時(shí)重試多沖突分散的場(chǎng)景原子更新UPDATE 帶條件性能最好無(wú)鎖邏輯分散需唯一索引兜底高并發(fā)搶課我的最終方案是原子更新為主唯一索引兜底配合限流。這是三版迭代下來(lái)最穩(wěn)的組合。原子更新解決了超賣唯一索引解決了重復(fù)選課限流解決了突發(fā)流量把數(shù)據(jù)庫(kù)打垮的問(wèn)題。4. 完整實(shí)操?gòu)牧愦罱ㄟx課系統(tǒng)4.1 環(huán)境準(zhǔn)備與工程初始化先把環(huán)境搭好。JDK 用 17 或 21MySQL 用 8.0Maven 3.8 以上。Spring Boot 版本選 3.2.x這個(gè)版本對(duì) Java 21 的虛擬線程支持比較好后面可以順手體驗(yàn)一下。用 Spring Initializr 建工程依賴勾選Spring Web、Spring Data JPA、MySQL Driver、Validation、Lombok。建好之后先改application.ymlspring: datasource: url: jdbc:mysql://localhost:3306/course_selection?useUnicodetruecharacterEncodingutf8serverTimezoneAsia/ShanghairewriteBatchedStatementstrue username: root password: your_password hikari: maximum-pool-size: 20 minimum-idle: 5 connection-timeout: 3000 max-lifetime: 1800000 jpa: hibernate: ddl-auto: validate show-sql: false properties: hibernate: format_sql: true jdbc: batch_size: 50 order_inserts: true連接池參數(shù)不是隨便填的。maximum-pool-size設(shè) 20 是基于這樣的估算假設(shè)單次選課事務(wù)耗時(shí) 20ms那么一個(gè)連接每秒能處理 50 個(gè)請(qǐng)求20 個(gè)連接就是 1000 QPS足夠應(yīng)對(duì)大部分校園場(chǎng)景。設(shè)太大反而會(huì)因?yàn)榫€程上下文切換和數(shù)據(jù)庫(kù)連接開(kāi)銷拖慢系統(tǒng)。connection-timeout設(shè) 3000ms意思是拿不到連接最多等 3 秒超過(guò)就快速失敗避免請(qǐng)求堆積。ddl-auto用validate而不是update這是生產(chǎn)環(huán)境的習(xí)慣。update會(huì)自動(dòng)改表結(jié)構(gòu)看著方便但線上環(huán)境自動(dòng)改表是災(zāi)難。表結(jié)構(gòu)用 SQL 腳本手動(dòng)管理啟動(dòng)時(shí)只校驗(yàn)實(shí)體和表是否匹配。4.2 核心選課接口的實(shí)現(xiàn)Controller 層保持輕薄只做參數(shù)校驗(yàn)和結(jié)果包裝RestController RequestMapping(/api/selection) public class SelectionController { private final SelectionService selectionService; public SelectionController(SelectionService selectionService) { this.selectionService selectionService; } PostMapping(/select) public ResultVoid select(RequestBody Valid SelectRequest request) { selectionService.selectCourse(request.getStudentId(), request.getCourseId()); return Result.success(); } }Service 層是核心把前面講的原子更新方案落地Service public class SelectionService { private final CourseRepository courseRepository; private final CourseSelectionRepository selectionRepository; public SelectionService(CourseRepository courseRepository, CourseSelectionRepository selectionRepository) { this.courseRepository courseRepository; this.selectionRepository selectionRepository; } Transactional(rollbackFor Exception.class) public void selectCourse(Long studentId, Long courseId) { // 1. 快速失敗已選過(guò)直接返回 if (selectionRepository.existsByStudentIdAndCourseId(studentId, courseId)) { throw new BizException(您已選過(guò)該課程); } // 2. 原子扣減條件不滿足返回 0 int updated courseRepository.incrementSelectedCount(courseId); if (updated 0) { throw new BizException(課程已滿或不存在); } // 3. 寫(xiě)入選課記錄唯一索引兜底 try { CourseSelection selection new CourseSelection(); selection.setStudentId(studentId); selection.setCourseId(courseId); selection.setStatus(1); selectionRepository.save(selection); } catch (DataIntegrityViolationException e) { // 唯一索引沖突說(shuō)明并發(fā)下重復(fù)選課回滾扣減 throw new BizException(請(qǐng)勿重復(fù)選課); } } }這段代碼有幾個(gè)細(xì)節(jié)值得說(shuō)。第一existsByStudentIdAndCourseId這個(gè)前置檢查是為了減少無(wú)謂的數(shù)據(jù)庫(kù)寫(xiě)操作它本身不能保證唯一性真正的保證是唯一索引。第二incrementSelectedCount返回 0 有兩種可能課程不存在或者已滿。為了給用戶更準(zhǔn)確的提示可以先查一次課程是否存在但那樣又多一次查詢。我的做法是統(tǒng)一提示“課程已滿或不存在”用戶體驗(yàn)上可以接受。第三捕獲DataIntegrityViolationException后拋業(yè)務(wù)異常事務(wù)會(huì)回滾扣減的 selected_count 也會(huì)恢復(fù)不會(huì)出現(xiàn)“扣了名額但沒(méi)選上”的情況。4.3 退選邏輯與名額回補(bǔ)退選比選課簡(jiǎn)單但也要注意并發(fā)。退選時(shí)把選課記錄狀態(tài)改成 0同時(shí)把課程已選人數(shù)減一Transactional(rollbackFor Exception.class) public void dropCourse(Long studentId, Long courseId) { int updated selectionRepository.updateStatus(studentId, courseId, 0); if (updated 0) { throw new BizException(未找到有效的選課記錄); } courseRepository.decrementSelectedCount(courseId); }decrementSelectedCount的 SQL 要加個(gè)保護(hù)避免減成負(fù)數(shù)Modifying Query(update Course c set c.selectedCount c.selectedCount - 1 where c.id :id and c.selectedCount 0) int decrementSelectedCount(Param(id) Long id);退選和選課如果同時(shí)發(fā)生可能出現(xiàn)“退了又選”的競(jìng)態(tài)但因?yàn)槎际窃痈伦罱K一致性是能保證的。這里有個(gè)經(jīng)驗(yàn)退選接口一定要做冪等用戶連點(diǎn)兩次退選第二次應(yīng)該返回“未找到有效記錄”而不是報(bào)錯(cuò)前端體驗(yàn)更好。4.4 用虛擬線程提升并發(fā)處理能力Java 21 的虛擬線程是個(gè)好東西Spring Boot 3.2 開(kāi)始支持。選課接口是 IO 密集型等數(shù)據(jù)庫(kù)用虛擬線程能顯著提升吞吐。開(kāi)啟方式很簡(jiǎn)單spring: threads: virtual: enabled: true開(kāi)啟后Tomcat 的請(qǐng)求處理會(huì)使用虛擬線程每個(gè)請(qǐng)求一個(gè)虛擬線程阻塞在數(shù)據(jù)庫(kù) IO 時(shí)不會(huì)占用平臺(tái)線程。實(shí)測(cè)在同樣的硬件上選課接口的 QPS 能提升 30% 到 50%。但要注意虛擬線程不是銀彈如果數(shù)據(jù)庫(kù)連接池只有 20 個(gè)連接虛擬線程再多也得排隊(duì)等連接。所以虛擬線程要和連接池大小配合調(diào)優(yōu)不能盲目開(kāi)大。4.5 壓測(cè)驗(yàn)證用 JMeter 模擬搶課寫(xiě)完代碼不壓測(cè)等于沒(méi)寫(xiě)。我用 JMeter 模擬 500 個(gè)并發(fā)用戶同時(shí)搶一門(mén)容量 50 的課驗(yàn)證防超賣是否生效。測(cè)試計(jì)劃這樣配線程數(shù) 500Ramp-up 時(shí)間 1 秒循環(huán) 1 次。HTTP 請(qǐng)求指向/api/selection/select參數(shù)用 CSV 數(shù)據(jù)文件提供不同的 studentId。跑完之后查數(shù)據(jù)庫(kù)SELECT selected_count, capacity FROM course WHERE id 1; SELECT COUNT(*) FROM course_selection WHERE course_id 1 AND status 1;正確的結(jié)果應(yīng)該是selected_count 50選課記錄數(shù)也是 50一條不多一條不少。如果 selected_count 大于 50說(shuō)明防超賣失效如果記錄數(shù)大于 50說(shuō)明唯一索引沒(méi)生效。我第一版壓測(cè)時(shí) selected_count 跑到了 63就是沒(méi)用原子更新導(dǎo)致的。壓測(cè)還要關(guān)注響應(yīng)時(shí)間。正常情況下選課接口的 P99 應(yīng)該在 200ms 以內(nèi)。如果超過(guò) 1 秒說(shuō)明有鎖競(jìng)爭(zhēng)或者連接池不夠需要排查。5. 常見(jiàn)問(wèn)題與排查技巧實(shí)錄5.1 超賣問(wèn)題的排查思路超賣是最常見(jiàn)也最要命的問(wèn)題。排查時(shí)按這個(gè)順序來(lái)先確認(rèn)扣減操作是不是原子的如果用的是“先查再改”的寫(xiě)法基本可以確定是競(jìng)態(tài)再看事務(wù)邊界對(duì)不對(duì)Transactional有沒(méi)有加在 public 方法上加在 private 方法上不生效這是新手常犯的錯(cuò)最后看數(shù)據(jù)庫(kù)隔離級(jí)別MySQL 默認(rèn)的 REPEATABLE READ 在并發(fā)下可能出現(xiàn)快照讀導(dǎo)致判斷用的是舊數(shù)據(jù)。一個(gè)實(shí)用的排查技巧是在扣減前后打日志記錄當(dāng)前 selected_count 和線程 ID壓測(cè)后分析日志能清楚看到哪些請(qǐng)求讀到了相同的值。我當(dāng)初就是靠這個(gè)定位到問(wèn)題的。5.2 重復(fù)選課的三種成因重復(fù)選課通常有三個(gè)原因。第一是唯一索引沒(méi)建這是最基礎(chǔ)的檢查SHOW INDEX FROM course_selection確認(rèn)。第二是唯一索引建了但沒(méi)生效可能是字段類型不一致或者字符集問(wèn)題比如 student_id 在兩張表里一個(gè)是 BIGINT 一個(gè)是 VARCHAR索引匹配不上。第三是應(yīng)用層用了saveOrUpdate之類的邏輯把已存在的記錄又更新了一遍這種情況要改成先查后插或者直接用 insert ignore。5.3 數(shù)據(jù)庫(kù)連接池打滿的處理壓測(cè)時(shí)如果看到HikariPool-1 - Connection is not available, request timed out說(shuō)明連接池打滿了。先別急著調(diào)大maximum-pool-size要分析連接被誰(shuí)占著。常見(jiàn)原因是事務(wù)里有慢查詢或者遠(yuǎn)程調(diào)用導(dǎo)致連接長(zhǎng)時(shí)間不釋放。用SHOW PROCESSLIST看數(shù)據(jù)庫(kù)端的連接狀態(tài)用 Arthas 的trace命令看哪個(gè)方法耗時(shí)最長(zhǎng)。如果確實(shí)是并發(fā)量太大可以調(diào)大連接池但要同步調(diào)大數(shù)據(jù)庫(kù)的max_connections否則應(yīng)用端連接多了數(shù)據(jù)庫(kù)端反而拒絕。我的經(jīng)驗(yàn)是應(yīng)用連接池總數(shù)不要超過(guò)數(shù)據(jù)庫(kù)max_connections的 70%留點(diǎn)余量給運(yùn)維和其他應(yīng)用。5.4 常見(jiàn)問(wèn)題速查表問(wèn)題現(xiàn)象可能原因排查方法解決方案超賣扣減非原子壓測(cè)后查 selected_count改用原子更新 SQL重復(fù)選課缺唯一索引SHOW INDEX加 uk_student_course連接超時(shí)連接池打滿SHOW PROCESSLIST優(yōu)化慢查詢或調(diào)大池接口變慢鎖競(jìng)爭(zhēng)看 P99 響應(yīng)時(shí)間縮短事務(wù)或改樂(lè)觀鎖事務(wù)不回滾異常被吞檢查 catch 塊拋 RuntimeException樂(lè)觀鎖重試多熱點(diǎn)課程看異常日志頻率改原子更新或限流5.5 幾個(gè)我踩過(guò)的坑第一個(gè)坑是在事務(wù)里做遠(yuǎn)程調(diào)用。我第二版在選課成功后調(diào)用了一個(gè)消息服務(wù)發(fā)通知結(jié)果消息服務(wù)偶爾超時(shí)導(dǎo)致選課事務(wù)被拖長(zhǎng)鎖一直不釋放其他學(xué)生全卡住。后來(lái)改成用事務(wù)同步回調(diào)事務(wù)提交后再發(fā)消息問(wèn)題解決。第二個(gè)坑是**Transactional和synchronized混用**。有同學(xué)想用 synchronized 保證并發(fā)安全但 synchronized 鎖的是 JVM 內(nèi)的對(duì)象多實(shí)例部署時(shí)完全失效而且和事務(wù)的提交時(shí)機(jī)配合不好容易出現(xiàn)“鎖釋放了但事務(wù)還沒(méi)提交”的情況。正確做法是把并發(fā)控制交給數(shù)據(jù)庫(kù)。第三個(gè)坑是索引失效導(dǎo)致鎖表。前面提過(guò)SELECT FOR UPDATE沒(méi)走索引會(huì)鎖全表。用EXPLAIN確認(rèn)執(zhí)行計(jì)劃確保 type 是const或eq_ref不要出現(xiàn)ALL。第四個(gè)坑是壓測(cè)數(shù)據(jù)不真實(shí)。一開(kāi)始我用 100 個(gè)學(xué)生壓測(cè)怎么都測(cè)不出問(wèn)題后來(lái)加到 500 個(gè)才復(fù)現(xiàn)超賣。壓測(cè)的并發(fā)數(shù)要接近真實(shí)峰值否則測(cè)了個(gè)寂寞。6. 性能優(yōu)化與擴(kuò)展方向6.1 緩存課程列表減輕數(shù)據(jù)庫(kù)壓力選課高峰期學(xué)生反復(fù)刷新課程列表這個(gè)讀操作量很大。用 Redis 緩存課程列表能顯著減輕數(shù)據(jù)庫(kù)壓力。緩存策略是課程列表緩存 30 秒選課成功后主動(dòng)刪除對(duì)應(yīng)課程的緩存。30 秒這個(gè)值是個(gè)權(quán)衡太短緩存沒(méi)意義太長(zhǎng)學(xué)生看到的名額不準(zhǔn)。Cacheable(value courseList, key #semester) public ListCourseVO listCourses(String semester) { return courseRepository.findBySemesterAndStatus(semester, 1) .stream().map(this::toVO).collect(Collectors.toList()); } CacheEvict(value courseList, allEntries true) public void selectCourse(Long studentId, Long courseId) { // 選課邏輯 }注意緩存和數(shù)據(jù)庫(kù)的一致性。選課成功后清緩存下次查詢會(huì)重新加載。這個(gè)方案在選課場(chǎng)景下夠用因?yàn)槊~的實(shí)時(shí)性要求沒(méi)那么高學(xué)生看到緩存里的名額稍微舊一點(diǎn)可以接受真正扣減時(shí)以數(shù)據(jù)庫(kù)為準(zhǔn)。6.2 限流保護(hù)數(shù)據(jù)庫(kù)突發(fā)流量是選課系統(tǒng)的常態(tài)開(kāi)放選課的那一秒可能有幾千人同時(shí)點(diǎn)。限流是保護(hù)數(shù)據(jù)庫(kù)的最后一道防線。用 Guava 的 RateLimiter 或者 Sentinel 都行我用的簡(jiǎn)單方案是基于 Redis 的令牌桶public boolean tryAcquire(String key, int limit, int windowSeconds) { String script local current redis.call(incr, KEYS[1]) if current 1 then redis.call(expire, KEYS[1], ARGV[1]) end if current tonumber(ARGV[2]) then return 0 else return 1 end; Long result redisTemplate.execute( new DefaultRedisScript(script, Long.class), Collections.singletonList(key), String.valueOf(windowSeconds), String.valueOf(limit)); return result ! null result 1; }限流的粒度可以按學(xué)生維度防止單個(gè)學(xué)生刷接口也可以按課程維度防止熱門(mén)課程被打爆。我兩個(gè)都做了學(xué)生維度限制每秒 5 次課程維度限制每秒 500 次。6.3 后續(xù)可以擴(kuò)展的方向這個(gè)系統(tǒng)做完之后還有幾個(gè)方向可以繼續(xù)深挖。一是選課排隊(duì)熱門(mén)課程用消息隊(duì)列削峰請(qǐng)求先入隊(duì)后臺(tái)按順序處理前端輪詢結(jié)果。二是分庫(kù)分表如果學(xué)生規(guī)模到幾十萬(wàn)選課記錄表可以按學(xué)期分表。三是多級(jí)緩存本地緩存加 Redis進(jìn)一步降低數(shù)據(jù)庫(kù)壓力。四是監(jiān)控告警用 Micrometer 加 Prometheus 監(jiān)控選課接口的 QPS、響應(yīng)時(shí)間、錯(cuò)誤率出問(wèn)題能第一時(shí)間發(fā)現(xiàn)。我個(gè)人在實(shí)際操作中的體會(huì)是選課系統(tǒng)這個(gè)項(xiàng)目最大的價(jià)值不在于功能多復(fù)雜而在于它把并發(fā)、事務(wù)、索引、緩存這些后端核心知識(shí)點(diǎn)串成了一條線。把這一條線走通比看十篇八股文都管用。最后再分享一個(gè)小技巧壓測(cè)的時(shí)候把數(shù)據(jù)庫(kù)的慢查詢?nèi)罩敬蜷_(kāi)long_query_time設(shè)成 0.1 秒跑完壓測(cè)分析慢查詢?nèi)罩就馨l(fā)現(xiàn)一些平時(shí)注意不到的索引問(wèn)題。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
熟妇人妻一区二区| 国产精品久久伊人| 久久久久九九九九| 69久久| 99re这里只有精品中心播放 | 精品九九国产无码| 91精品丝袜久久久久久| 传媒免费一区二区三区| 激情综合五月| 日本性爱网址| 成人av性爱电影在线观看| 日韩视频小说在线观看| 长长久久曰曰夜夜成人网| 国产精品白领在线观看| 婷婷精品国产欧美精品亚洲人人爽| 激情AV| 久久系列| 亚洲精品人伦一区二区| 亚洲日韩av一区二区三区百合| xxx0国产在线播放| 天天夜躁日日躁狠狠2002| 国产精品一区二区后入| 亚洲天堂女优在线| 亚洲老熟妇xxx| 秋霞成人做爱| 日韩有码 一区二区三区| 青青草原成人| 黄页网站成人免费| 亚洲精品国产精品成人| 欧美日韩插逼视频| 日本在线15p| 亚洲第一页欧美| 色色五月天婷婷| 国产人妖视频一区在线观看| 日B操| 97九色| 一级AAA片一区二区三区| 热久日综合| 有码免费观看| 欧美久久婷| 在线观看一卡二卡| 91久操| 黄色性爱网网| 亚洲少妇中文字幕网址| 久久五月份| 综合久久欧美| 五月天色五月| 久久欧美按摩999| 国产精品久久久久无码AV会牛| 成人无码电影在线观看网| 激情文学88| 97精品| 日韩肏逼视频| 亚洲婷婷综合网| 黄骗免费网站| 啊啊啊免费| 国产精品农村妇女| 麻豆国产97在线| 欧美v亚洲v综合v国产v妖精| 久久中文字幕一区不卡| 久久直播国产| 干婷婷综合网| 亚洲一区中文字幕久久,果冻传媒一区二区天美传媒 | 99精品视频在线观看免费| 午夜无遮挡男女啪啪视频| 亚洲男人综合| 日韩精品黄片免费观看| 色9999日韩国产| 成人AV在线电影| 日韩欧美视频青青| 天天天天做夜夜夜夜做| 免费97视频| 国产激情在线| 久久78| 国内偷自视频区视频综合| 日韩国产不卡在线视频| 国产99久久99热这里只有精品15| 蜜乳av首页| 欧美日不卡| 97青娱乐超碰久久| 久久婷婷一区| 五月天婷婷在线看| 日韩黄色一区二区三区| 久久a久久| 精品美女在线视频| 91美女视频在线观看| 亚洲AV麻豆Aⅴ无码电影一| 91午夜无码| 91精品微拍福利| 亚洲精品成人| 国产久久一区二区| 免费视频一二三区| 久久婷色| 欧洲小说色图视频另类| 女生91网站| 伊人久久在线视频观看| 九九碰九九爱97| 欧州激情视频在线一区二区| 伦理第一页| 国产多人在线观看视频| 中文字幕 码精品视频网站| 久久綜合很很很| 国产精品丝袜在线| 国内精品a| 中文字暮97| 无卡一区=区| 91精品丝袜在线观看| 伊人97超碰| 91亚洲丝袜熟女| 99久久久无码精品国产人| 日韩av乱伦| 久草在| 天天综合-91入口| 日本免费专区| 日本大香蕉| 97超碰中文在线| 高清国产av无码| 日日黄色三级网站| 国产操逼网站亚洲一级黄色| 色五月综合网| 玖草在线视频| 97资源超碰| 久久久久久人体| 思思热在线cao| 久操九九九九九九九九九九九九九九九九九九九九九九九九九九九九 | 日本999精品| 97天天综合| 淫淫总合网| 亚州欧美在线| 婷婷伊人綜合中文字幕| www.av家庭乱伦| www老逼91| 草草草视频| 五月丁香六月激情| 97国产精品一区二区传媒公司| JIZZJIZZ国产精品喷水| 后入日本1234| av强奸乱轮| 色哟哟1区2区| 91超碰人人操| 亚洲男人天堂2017| 亚洲精品一区中文字幕乱码| 人妻三级在线中文字幕| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 黄页大片在线观看| 免费观看成人www精品视频| 青青11操操操操操操操操| 亚洲91色| 后入 亚洲 美女 射| 校园春色五月天| 精品国产乱码久久久久久影片| 91性感在线| 天美国产三级传媒| 熟女精品va中文字幕| 欧洲精品人妻| 囯产乱伦一区二区三女 | 狠狠操官网| 欧美久久久| 色久桃花影院在线观看| 91N综合网在线| 国产精品三级视频网站 | 九九久久99| 欧美一级A一级a爱片久久| 久久精品72| 欧美亚洲色图另类国产| 国产乱子伦一区二区三区在线观看| www.91色综合| 手机在线中文字幕国产| 99热在线只有精品| 97超碰色屌| 自拍偷拍 日韩无码| 97欧美久久久久久久| 999岛国大片| 一级性爱网| 在线情色电影 91大 | 不卡视频一区蜜桃视频 | 日韩成人人妻网站| 精品四五区| 久久伊人亚洲AV无码网站| 男人天堂 天天射| 久久小视频| 久久精品国产亚洲AV高清演员表| 亚洲春色欧美| 日本超碰97日韩精品人妻| 性一交一乱一交A片久久四色| 加勒比综合| 91国精产品| 美女诱惑爱爱| 国产一区二区欧美日本| 午夜男女爽爽爽影院视频| 学生妹天天看| 国产老熟女| 婷婷色在线| 国产无码精品高清| 9118禁| 一区二区不卡免费| 少妇色综合| 日韩精品亚洲专区在线影视| 国产欧美美女免费观看视频| 国产日韩久久| 女人综合网| 玖玖超碰熟| 日本天堂网| 婷婷五月色| 欧美成人午夜免费福利785| 肉动漫无遮挡h在线观看| wuyechaopeng| AV99热18这里只有精品| 尤物av网站| 欧洲色色| www色色com| 强免费黄色网址| 老熟女乱子伦中文字幕一区二区| 欧美日韩插逼视频| 国产精品美女| 午夜超碰| 日本成a人v网站在线观看| 天天狂操夜夜狂日| 99无码狠狠久久| 97干在线视频| 91精品91久久久中77777| 欧亚 另类 久| 欧美色图片色哟哟| 亚洲狠狠入| 久久精品高清无码一区| 欧美综合 站| 一二三四视频在线社区中文字幕| 屁股久久久久久久久| 久插不卡| 97久久综合网| 久久久久夜夜夜夜| 欧美乱伦专区| 日韩av电影成人在线| 日韩综合色图| 国产传媒操逼视频| 久久九九国产精品| 97五月天| 日韩av熟女一区二区三区成人| 97青青操视频| 最新av在线| 麻豆人妻偷人精品无码视频| 精品国产乱码久久久久久蜜臀| 玖玖久久久| 欧美亚洲情色| 大香蕉www.超碰| 国产自产一区视频在线| 欧美日韩性爱精品| 女人天堂AV五区在线| 国产精品经典一卡久久久| 九九十八精品| 九九热午夜欧亚国产视频| 久久久精选| 激情综合网亚洲| 台湾成人无码AV| 欧美日韩操逼嗦吊| 绑缚麻绳人妻寝取完整版| 一牛一区二区三区久久| 精品制服美女中文一区二区三区| 老妇女91| 把腿张开老子CAO烂你| 爆操无码| 欧美美女在线高潮999| 亚州色图欧美| 色综合一区二区三区| 日韩精品在线放| 熟妇操花| 少妇99| 色臀AV| 操逼免费视频无码国产| 日韩性色b| 中文字幕综合人妻| 久久青青草在线视频| 黄色人人| 国产日韩精品一区二区三区| 青青草国产一区二区三区| 精品午夜福利| 久操视频资源站公开| 伊人AAA| 黑人精品久久97| 超清中文乱码字幕| 99久久精品国产高潮| 青青青青草av在线观看| 天天网综合| 美国aaaaa一级黄片| 91国产大片| 人人妻人人玩人人澡人人爽| 亚洲麻豆av一区二区| 国产18精品亚洲精品| 国产污视频麻豆传媒一区二区| 在线电影亚洲色图| 操屄不卡视频| 久久超碰av在线| 囯戸精品高潮呻吟旡码| 日本青青草在线| 999热日韩精品| 亚洲精品无码成人久久久99 | 天美麻豆黄色录像| 尤物视频视频官网| 人妻天天操天天爽视频免费| 日韩大香蕉AV影片| 丁香六月婷婷| 欧美性少妇| 国产 日韩 欧美 中文 另类,国产 欧美 另类 制服 变态,高清 日韩 欧美 中文,高 | 狠狠色五月亚洲91| 韩国一级做A片免费的| 麻豆天美在线喷水AV| 亚洲欧洲日本精品中文a∨| 久久午夜伦| 亚洲中文字幕av | 9 9精品一区二区三区| 久9久9久9久9久9久9| 日韩色欲久久一二三四区| 日本97久久久精品| 最新岛国大片| 热热色AV| 99热这里是精品| 超碰超碰超碰超碰的大鸡吧操黑丝袜 | 天天摸夜夜摸| 99久久久无码精品国产人| 亚洲精品国产AV天美传媒| 国产一级高清免费观看| 九九夜精品九九在线| 中文字幕在线免费观看2| 中文字幕二区日韩天堂| 国产精品麻豆成人av| 欧洲亚洲人妻无码中字久久三区四区| 国产一级高清免费观看| 日产中文字幕2020| 五十路三级片| 午夜福利 成人 91| 九九九九88| 三男一女不戴套的A片| 综合网久久| 久久久久久日韩| 一二三卡欧美日韩人妻免费精品| 久操B网| 福利社区午夜一区二区| 天天干18禁| 天天干天天日天天射黄色大片| 免费观看网黄| 亚洲激情欧美色图| 国产福利夜| 91强热人妻| 久久久久白虎| 密臀AV在线| 新版天堂中文资源8在线| 国产精品国产精品国产| 97就爱干| 人妻激情偷乱视频一区二区三区 | 欧美人妻久久精品二区三区| 久久9精品| 美女的肌被草喷水视频| 色999;丁香五月| 日产操逼| 欧美精品系列| 日日干男人的天堂| 一区二区你上我| 日本免费人成视频播放120秒| 9 1超碰九色| 中文字幕天天天天天| 欧美激情中文字幕另类小说| 狠狠干综合| 亚洲伊人久久综合97| 日韩中文9| 五月婷婷久久综合| 欧美人妻精品一区二区| 欧美操人视频| 干超碰碰熟女| 超碰吊日色| 欧美91精彩| www五月| 免费的很黄很污的全部视频| 久久久久久久97| 亚洲一区制服诱惑| 丁香婷婷激情五月天无毒不卡| 色五月亚洲| 亚洲精品一区二区三区在线播放| 亚洲av无码国产精品字幕| 97亚洲综合在线| 精人妻无码一区二区三区伊人直播 | 宅男午夜在线视频| 人妻-91porn| 亚洲免费成人在线高清无码视频| 亚洲牲交| 欧美色网络| 91蜜桃传媒精品久久久一区二区| 丝袜翘臀后入欧美校园亚洲自拍另类小说一区中文字幕少妇诱惑 | 我想要啊 啊 啊| 中国小夫妻勾搭露脸淫荡对白| 综合网欧美在线| 亚卅熟女乱色| 欧美综合娱乐久久| 国产一区自拍欧美日韩| 啪啪啪精品| 国内亚洲高清无码| 岛国A V在线免费看| 2020久久免费视频| 亚洲天堂精品日韩电影| 日韩无码极品| 日韩av电影成人在线| 超碰91在线| 亚洲欧美黄| 日躁天天爽爽| 免费a v| 久久久久久久免费A片国产成a人亚洲精∨品无码 | 日韩亚洲精品一区二区| 精品国产丝袜一区二区三区乱码| 手机在线视频国内精品| 国模无码一区二区三区在线| 狼人久草| 国产欧美美女免费观看视频| 久久久久久亚洲精品中文字幕人妻| 精品夜夜澡人妻无码| 国产高清1234区| 任我爽视频在线观看| 亚洲aw毛茸茸在线| 在线观看A啊啊啊| 亚洲色图欧美另类在线| 九九九热精品| 密臀在线视频| 国产三级在线现体验区| 太久视频| 大香蕉亚洲中文| 亚洲91亚洲| 97超碰精品成| 啊啊啊啊啊啊啊啊视频| 1级黄色夫妻对换性交免费看| 国产一级内射高清视频| 亚洲无992tv| 中国大陆国产高清AⅤ毛片| 国产白嫩漂亮KTV在线| 亚洲乱熟女一区二区三区大香蕉| 欧美 亚洲 偷拍自拍| 思思99热| 91 丝袜在线观看| 超碰美国| 欧美强奸一区二区诱惑| 亚洲综合激情五月久久| av亚洲天堂资源网站| 天天综合网合集91| 欧美精品久久久久久久丰满| 国产CHASE男男GAYGA 毛多色婷婷| 2024人人操人人摸| 久久久久久久久久久久久久久乱码 | 亚洲天天天| 成人国产视频在线观看| 婷婷中文网| 99操逼| 久久久久久久国产| 黄页网站成人免费| 久操视频在线观看| 99啪啪视频| 久久鲁夜| 日本2020一区二区| 黄网色一区二区三区四区精品| 国产精品天美传媒| 男人天堂导航| 亚洲一欧洲中文字幕在线| 激情综合久久| 97视频在线免费播放| 欧美黑人熟妇精品91| 青娱乐国产精品| 欧美久久久15P| 国内毛片四区| 日本日皮视频逼| 精品无码一二三四区| 老熟女综合| 久久五月视频| 欧美专区17页| 26uuu国产成人综合| 天堂日本亚洲欧美| 97香蕉网| 黄色片大香蕉| 天天日骚逼熟女| 国产东北女人在线视频| 夜夜夜久久| 人人操人人肉久久精品| 五月婷婷深深爱| 亚洲图片小说欧洲| 色婷五月| 女生看匆91网站| 人人看人人爰人人操| 75大香蕉| 天天操人人操狠狠插| 欧美日韩人人精品| 国产av激情无码久久天堂| 久久不卡一区二区 | 激情综合网五月婷婷| 国产日韩中文字幕欧美| 岛国在线免费视频| 超碰在97| 日本岛国黄色网址| 91日产桃蜜| 九九热精品| 国产日韩美女小穴视频网站不卡| 国产成人无码高清| 九七超碰人人乐| 国产精品色色| 秋霞午夜成人福利片片| 日本一二三高清| 天天懆天天日| 91女优在线观看| 久久久精品视频免费观看| 亚洲永久永久永久永久一级一级一级精品| 亚洲AV成人无码一二三久久| 91丝袜熟女| 天天做日日爱夜夜爽| 精品国产乱码久久久久久日本公司| 日韩欧美俄罗斯A片| 欧美第五页| 国产成人亚洲精品自产在线| 伊人网青青| 熟妇高潮精品一区二区三区下载| 精品高清一区二区三区三州| 一区超碰一区| 青青操综合网| 麻豆AV一区二区天美传媒| 一个人在线看的黄色电影网站| 国产隔壁老王影院在线| 大干人妻| 四虎影视在线| 手机看片1024你懂的国产| 中文字幕视频在线观看| 亚洲日韩肥臀视频在线观看| 中日韩免费看男女操逼大全| 色踪合AV| 九九视品黄色| 日本精品高清一二区一本到| 伊人天天久久动态图| 是还免费视频1727我| 99热官网| 首页中文字幕中文字幕免费| 久久超碰日韩精品| 九七毛片九九毛片| 欧美三级一级| 国产原创剧情在线丝袜| 亚洲无码精品AV久久久| 日韩成人人妻网站| 日韩午夜国产| 欧美色五月| 中日韩免费看男女操逼大全| 美女黄页网站| 99热日| 97久久精品亚洲中六字幕| 日本一区视频在线观看| 久久久久亚洲| 东京热av影院| 啊啊啊啊在线播放| 日本一区二区三区欧美日韩中文字幕| 黄色毛片A片| 国产精品99精品视频网站| 欧美人妻制服| 伊人aaa| 日本久操视频| 超踫中文字幕| 91久久婷婷| 18禁网站在线播放| 最新岛国大片| 日韩在线国产字幕| 玖玖爱伊人玖玖爱| 色香91| 伊人伊人LD| 熟女人妻一区二区三区| 日日操丁香五月天| 2019久久久久久久久福利| 亚洲欧美国产中文视频| 久久亚洲AV无码白度| 天天拍夜夜| 狠狠躁伊人中文字幕| aaa淫乱视频| 啊啊啊好湿久久| 青青青国产| 日韩国产品视频中文字| 91国产精品熟女| 午夜精品99久久久久传媒| 99激情视频| 久久99网站| 97色色视频| 99精品在线| 91大学精品激情戏| 俺去久久| 国产免费大片| 久久夜夜夜夜| 久9久精品视频| 男人精品天堂一区| 欧美激情亚洲情色| 国产综合久| 亚洲欧美日韩不卡人妻| 日韩图色| a'v在线资源| 一区操逼| 家庭乱伦国产| 欧美亚洲另类在线蜜桃| 日韩性爱播放| 日韩亚洲美州欧洲综三区一品在线| 亚洲欧美激情另类色图| 夜夜狼人妻| 日韩电影天堂视频一区二区| 熟妇一区,二区,三区。| 狠狠夜色午夜久久综合在线| 日本熟妇自慰性高潮一区二区三区| 熟女久久| 亚洲欧美日韩制服另类| 无码日韩人妻av一| 婷婷五月天社区| 亚洲色9| 天天综合网1| 九九国产热| 大色网久久| 国产激情视频一区区三区| 午夜国产乱伦视频| 97精品综合久久| 狠肏骚人妻| 日本亚欧爱爱| 日本熟女不卡视频| 午夜寂寞欧美| 五月天丁香欧洲日韩| 亚洲天天影视综合网| 91在线观看,天天综合| 国产免费黄色一级大片| 26uuu国产免费观看| 厕所偷拍在线| chaopen97久久| 八戒午夜福利理论片| 日本精品不卡一二三区| 一区二区三区男女操逼黄色小电影| 久久6热精品99视频| 欧美色宗合| 日本性爱不卡视频| www鬼畜国产男人的天堂| 香蕉久久精品| 在线综合 亚洲 欧美中文字幕 | 久久9 9 9精品| 99精品在线观看| 国产精品一级二级在线| 亚洲影院成人| 97福利视频| 超碰人妻中文在线| 欧美人妻制服| 9久精品| 四虎 精品 WWW| 91成人在线| 中日韩免费看男女操逼大全| 中文字幕av乱伦| 一区,二区,三区视频| 中文人妻av高清一区| 97精品一区二区视频在线观看| 国产丝袜一区二区三区| 精品在线78| 国产精品熟女一区二区三区| 亚洲欧美电影| 一区在线精品中文字幕| 国产肏逼网站| 小说区 图片区色 综合区| 久久久久久999| 视频不卡中文字幕| 妇女性内射冈站HDWWWCOM| 正在播放国产精品一区| 欧美性爱三区二区| 日日日日日| 久久草草欧美精品| 中文字幕日产av人| 美女主播色欲91抠b在线播放| 成人AV超碰免费在线| 伊人精品久久网站| 丁香五月综合| 色偷偷综合91久久噜噜| 色吧91| 亚洲无吗在线视频| 亚洲精品中文字幕一区在线视频| 亚洲欧美中文日韩视频中国语 | 日韩免费福利在线观看| 色色色色色色色色色色色色色色综合| 亚洲男人天堂网站| 超碰久热| 超碰欧美97| 天天添天天干电影| 久久精品国产精品一区| 亚洲精品 超碰| 蜜乳Av成人片网站| 呻吟 欧美 日本 中出| 日本日皮视频逼| 亚洲天堂资源在线| 啊啊啊用力在线观看| 果冻传媒A片麻豆熟妇人妻| 丁香五月天堂网| 天美精品原创av片国产| 91丝袜激情在线| 一区二区三区免费岛国片| 欧美洲精品一级| 一起草av| 男人的天堂网页| 91亚洲欧美色图| 成年人黄色小视频网站| 婷婷激情丁香| 用力操死我| 午夜无码精品免费看性色| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 看黑人AV不卡| 精品欧美А∨无码黑人大荫蒂| 精彩久久中文| 久久久久13| 亚洲国产婷婷在线播放| 欧美熟女丝袜| 亚洲av强奸乱伦| 新亚洲无码| 久久 久久国内精品亚洲| 大香蕉久久| 蜜乳AV.COM| 熟女少妇一区二区三区| 国产污视频麻豆传媒一区二区| 黄色区免费观看中文字幕| 久久区| 亚av顶级裸体一区二区三区四区五区| h在线看免费版在线看| 亚洲精品91| 91激情综合| 国产一级片| 操逼免费视频无码国产| 清纯唯美亚洲综合| 久久精品一区二区三区蜜桃臀| 欧美九九爱| 国产一区二区视频在线播放| 翔田千里爆乳巨臀无码| 老司机香蕉久久久久| 传媒免费一区二区三区| 久久国产精品一级二级三级| 玖玖玖玖精品国产剧情| av一区二区三区不卡| 18精品一二区| 欧美人人天天网| 极品粉嫩一区二区| 免费精品99| 无码在线亚洲| 懂色中文一区二区三区| 人妻一区二区三区四区视频| 亚洲综合在线91| 99re6在线视频精品免费完整版安卓版| 色999五月色| 亚洲无吗在线视频| 人妻一区二区三区视频| 天天躁日日躁狠狠狠躁| 欧美综合传媒| AV丝袜东京热| 久久久久久波多野吉衣高潮| 蜜色网色哟哟| 99re这里只有精品中心播放| 另类小说五月天| 成人网址在线观看| 亚洲一级特黄大片在线播放91| 人人弄人人摸| 无遮挡男女激烈动态图| 91在线视频国产网站| 亚洲开心网| 玖玖爱影院| 欧美久久人体| 国内毛片四区| 亚洲视频精选| 超碰97欧美| 在线免费观看高清无码视频| 成·人免费午夜在线观看| 午夜精品久久99蜜桃的功能章节| 欧美碰碰综合色| 色香天天| 欧美亚州综合网图片| 色婷婷日韩精品一区二区三区| 欧美爆操91| 白丝少妇一区二区| 老鸭窝黄色视频网站| 91在线/欧洲| 97视频新免费| 欧美青青视频| 蜜臀久久99'精品久久久| 伊人97色天使| 国产精品suv一区| 国产情色第一第二页在线观看| 试看60秒| 高潮9999外国| 久久精品无码熟妇一区二区三区视频导航| 中文字幕av片| 99热日| 天天综合网~91| 亚洲毛片基地专区| 欧美人人曰人人操人人射射 | 懂色中文一区二区三区| 人妻9117c| 亚洲中文日韩欧美大香蕉视频| 成人性爱美曰韩| 国内毛片无码一级毛片| 91人人看| 秋霞鲁丝午夜无码一区二区三| 亚洲精品国产av天美传媒| 亚洲情色在线| 亚州欧美另类| 翔田千里爆乳巨臀无码| 日韩精品人妻一区二区| 超碰97玖玖爱| 国产2.3.4区| 曰韩人妻中文字幕在线| 亚洲97久久精品亚洲| 中国乱伦一区二区| 91oumei| 日日日骚女人精品| 变态综合色| 日韩激情毛片一级久久久| 国产在线强奸视频| 国产成人网| 色噜噜人妻丝袜AV资源| 精品乱码久久久久| 天天日夜干| 强歼乱伦资源网| 电影69乱码96| 日韩专区久久久| AAAA欧美日韩| 国产白嫩漂亮KTV在线| 蜜臀少妇一区二区| 曰韩香蕉97| 亚洲一区二区在线观看91| 91成人久久| 国产久久日韩网站导航| 欧美成人贴图| 国产精品96| 精品v日韩欧美国产| 国产成人无码网站在线视频| 激情终合网| 麻豆天美一区二区| av国产无码| 天天插夜夜爽| 中国和日本人色哪个不下载能放| 偷拍盗拍亚洲色图图片| 久久透逼视频| 小草三级久久观看| 校园春色 亚洲| V A在线| 在线观看无码三级少妇| 午夜男人一级A片7777| 99国内熟女露脸视频| 翔田千里Av在线| 凹凸久久人人| 熟女欧美日韩综合婷婷| 99热大香蕉伊在线| 精爱久久| 成年人黄色| 2020视频1区2区3区| 东京热91| 亚洲欧美校园另类春色| 三四中文字幕| 天美国产精品| 97超碰日韩| 69AV女优男人的天堂| 91视频在线观看18| 大香蕉免| 日欧操屄| 久久精品国产精品| 十八禁的黄污污免费网站| se,,,亚洲欧美| 色综合99999| 日韩图区 偷拍| 免费97视频| 无码聚合| 成年在线视频日本亚洲在线视频区精品江靖宇公司| 伊人久久大香线蕉无码| 加勒比少妇AV婷婷六月天超碰超碰| 欧美精品99久久久**| 亚洲日韩少妇一道本视频| 国产精品免费日韩| 在线观看A啊啊啊| www.av在线视频| 2017天天透天天通天天擦| 中国乱伦一区二区| 久久久久久久| 大鸡吧尹人在线| 激情网色| 欧美色91| 日本 免费 一区二区三区 久久香蕉 | av一区二区三区四区| 吊色| 这里只有精品视频在线| 欧美在线永久天堂| 精彩久久中文| 91人人爽人人爽人人人,gav福利视频导航,日韩欧美亚洲国产字幕四区 | 国产乱码久久久久久| 五月天综合在线| 96精品久久| 色九九九九| 亚洲最大网站av| 欧美成人一级麻豆| 不卡一区视频| 人人乐大香蕉| 无码最新| 国产色产精品在线观看| 超碰97最新人妻| 一区二区 韩日AV| 自拍偷拍草一草| 亚洲资源一区| 久久最新视频免费观看| 天天干美少妇一区| 中文字幕人成乱码熟女香港| 少妇淫妇久久久久久久| 亚洲天堂第一页| 花野真衣| 色色毛片| 巨乳特殊服务按摩| 国产人妻精品一区二区三区秋霞| 久久小视频| 精品久久人妻成人网| 在线日韩日本亚洲国产| 天堂亚洲欧美| 超碰久久草| 亚洲AV高潮| 这里都是精品在线观看| 国产精品一区午夜福利| 中日韓欧美高清| 后入合集| 色老牛| 久久曰曰| 日韩免费人妻色情网站| 六月婷婷色综合| 逼操网站| 久久性爱精品一区| 国产狂喷潮在线精品| 日韩成人小视频| 久久精品一区二区三区蜜桃臀| 蜜臀精品1区2区| 久久婷婷一区二| 极品极品色影院| 在线观看av区| www..com操老师| 亚洲密乳AV| 天天澡天天爽日日AV| 九九亚洲| 一本久道久久综合狠狠爱一密臀精| 婷婷探花久久精品一区| 97久久精品亚洲| 精品久久視頻在线| 天天综合网国产| 亚洲激情综合| 夜夜一区二区| 欧洲熟妇xxXx欧美老妇裸体 | 玖玖爱一区在线| 午夜精品久久久99| 1区2区3区中文字幕日韩| 中文字暮97| 亚洲丝袜天堂| 夜夜操夜夜爽夜夜高潮| 久热精品色情| 射丝袜高跟鞋99| 色综合中文字幕不卡| 亚洲s在线观看| 91精品电影18| 亚洲自拍欧美国产首页网曝| 亚洲97P| 色九九综合AV| 中文字幕伊人| 欧美日韩中文字幕不卡| 天天爱综合网| 欧美色图自拍| 老熟女网站| 日韩肏逼视频| 天天摸夜夜添无码小视频| 波多野结衣一级视频| 伊人久操| 制服乱伦| 日本九九久久99播| 色偷综合| 日本一二三免费久久| 欧美牲| 人妻一区二区三区视频| 全免费a敌肛交毛片免费| 国产中文字幕曰本毛片| 黑丝少妇| 精品免费1| 人妻熟女一区二区三区在线| 欧美色图97| 欧美色蜜桃97| 日韩中文字幕视频| 国产精品蜜乳AV| 中文高清一区二区的| 成人熟女区| 夜夜嗨一区| 日本高清免费一本视频在线观看| 麻花豆传媒剧国产MV出差| 日本理论在线| 91久久精品国产| 色阁阁AV综合网| 日产成人久久| 欧美国产精品久久九九| 欧美激情中文字幕另类小说| 一起草AV| 98福利在线视频| 91熟女网| 另类一区| 五月天婷婷色色| 高清肉丝中文无码| av网站免费看| 日韩一区二区三区四区五区| 97网址www| 99热日| 欧美A片中文字幕| 狠狠干综合| 人妻熟女一区二区三区在线| 色综合天天爱去电影网| 一个国产在线综合网站| 欧亚洲精品有视频| 天美传媒av在线| 十八禁视频一区二区| 97人人干| 99久热精品99re6热| 少妇久久久久久| 强奸乱伦动态污图免费 | 亚洲久9| 欧美另类综合久久| 日本啊啊啊啊啊视频| 蜜桃天美传媒AV一区二区三区| 欧美 日韩 亚洲 春色| 麻豆久久视频在线地址| 色路综合| 动漫爆乳3D奶水一区在线观看 | 免费成人在线熟妇网| 超碰97极品9| 日韩一级成人毛片免费观看| 亚洲一本色码中文字幕| 九九九九9999| 亚洲天堂,男人| 亚洲色图综合网| 天天操天天干一区二区| 久久精品72| 性综合网| 亚洲精品97在线| 亚洲午夜蜜臀| 91精品啪在线观看国产城中村| 牛牛久久国产精品视频一二三 | 懂色AV中文| 97资源站国产精品| 婷婷伊人网| 亚洲色婷婷综合久久一区二区三区| 在线综合 亚洲 欧美中文字幕| 蜜臀AV一区二区三区激情综合| 国产在线激情| a网站免费观看| 精品对白久久不卡| 亚洲综合婷婷| 日本三级精品| 欧美疯狂做爰xxxx| 抽插一区二区视频| 极品尤物在线观看| 人澡逼| 操人91| 天堂资源站| 日本五十路熟女一区二区| 久久国产999| 欧美顶级黄色大片免费| 2020中文字幕在线| 岛国色情视频在线观看| 美性中文综合网| 婷婷丁香五月天亚洲天堂网| 欧美97视频| 操逼操操操91| 色妇综合网| 中文字暮97| 国内伊人久久久久久网站视频| 人人人人人人少妇| 亚洲97综| 一道本东京热加勒比一区二区三区| 综合网亚洲在线| 亚洲色偷偷色噜噜狠狠99网| 97色色色| 夜夜操夜夜爽夜夜高潮| 欧美性爱第一页久久| 欧美少妇色综合| 99久久e免费热视| 91白虎| 欧美亚洲影视| 九月丁香婷婷色| 2017天天操天天日| 欧美美女啪啪视频| 永久免费av无码网站国产app| 极品色电影院| 性爱av网站| 色色毛片| 久久风骚城市| 亚洲第一页色| 日韩欧美aⅴ综合网站发布| 蜜臀Av一区二区三区| 天天看综合网| 91三级理论片播放器| 大香交| 99少妇精品视频| 亚洲AV无码AV吞精久久久久| 日本黄色天堂| 精精夜夜| 俺去俺来也在线www| 啊啊啊免费| 日韩二区三四区五区六区在线看| 天天色综合图片| 久久无码一区二区二三区性色| 蜜桃午夜视频一区二区 | 91国产操逼视频| 竹菊一区二区三区AV线| 欧美 亚洲 制服 精品| 国岛片视频| 五月天婷婷在线看| 久久精品99| 午夜精品久久久99| 夜夜爽33333| 性色生活片久久毛片婬片免费放女人一级毛片| 安微少妇操BBB| 久久丁香| 久久久久国产精品片区无码直播| 无遮挡男女激烈动态图| 国产亚热在线久久| 91久久18禁| 精品久久在线区一区| 91人人臊| 99久久婷婷丁香| 中文字幕在线免费观看2| 99热国产精品| 日本天天干天天搞一区| 99999精品视频| 女人被添高潮免费视频| 韩日性爱av| 99久久精品无码一区二区毛片免费| 99热线麻豆| 午夜精品久久久99热蜜桃的功能特点 | 欧美在线|亚洲| 色超碰综合| 欧美日韩人人精品| 综合日本女人伊人| 狠狠干综合| 8050无码八戒| 国产精品久久久无码AV网站| 国内精品久久人妻性色av| 啪啪自拍九九综合| 蜜屁Av| 亚洲日韩国产精品| 我要色综合网站| 无码人妻精品一区二区三区九九| 美腿色图| 免费伦费视频在线观看| 国产操逼视频在线观看| 看免费一级在线播放毛片| 国产丝袜高跟美女av免费观看| 1204金沙人妻懂旧版免费| 欧美熟女妇同| 欧美亚男人的天堂| 精品人妻一区二区三区-国产| 91男女啊啊啊| 夜夜操二区| 天天欧美色| 男人天堂站| 91N五十路| 天天日天天舔东京热| 亚洲人妖网| 97人肏| 欧美亚洲丝袜美女电影| 国产高清不卡视频| 91美女视屏| 亚洲日韩肥臀视频在线观看| 思思99热| 国产欧美精品日韩区二区麻豆天美|