日韩精品一区二区三区在线视频放-无码中文字幕V?一区二区-成年片免费观看视频-国内少妇人妻丰满av-国产精品中文字幕免费观看-亚洲成人久久一区二区三区-国内少妇偷人精品视频无缓冲-一区二区国产精品日本一区二区三区在线网

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Spring Boot + JPA 高并發(fā)選課系統(tǒng)實(shí)戰(zhàn):防超賣與重復(fù)選課

Spring Boot + JPA 高并發(fā)選課系統(tǒng)實(shí)戰(zhàn):防超賣與重復(fù)選課 1. 選課系統(tǒng)為什么值得認(rèn)真做一遍學(xué)生選課系統(tǒng)這個(gè)題目幾乎每個(gè)計(jì)算機(jī)專業(yè)的學(xué)生都碰過(guò)招聘面試?yán)镆渤1荒脕?lái)當(dāng)場(chǎng)景題。但真正把它當(dāng)回事、按生產(chǎn)標(biāo)準(zhǔn)做一遍的人并不多。大多數(shù)人寫(xiě)出來(lái)的版本是一張學(xué)生表、一張課程表、一張選課記錄表Controller 里調(diào)一下 ServiceService 里查一下有沒(méi)有余量有就插入一條記錄完事。本地跑起來(lái)沒(méi)問(wèn)題一放到幾百人同時(shí)點(diǎn)選課的場(chǎng)面立刻出現(xiàn)超賣、重復(fù)選課、數(shù)據(jù)庫(kù)連接打滿。我前后做過(guò)三版選課系統(tǒng)第一版是課程設(shè)計(jì)交作業(yè)的水平第二版給一個(gè)學(xué)院內(nèi)部試用第三版才真正把并發(fā)問(wèn)題處理干凈。這篇文章就把這三版踩過(guò)的坑、改過(guò)的方案完整講一遍從數(shù)據(jù)建模講到高并發(fā)防超賣。技術(shù)棧用的是Spring Boot MySQL JPA這套組合上手快、生態(tài)成熟適合作為練手項(xiàng)目也足夠撐起一個(gè)真實(shí)可用的系統(tǒng)。文章適合三類人看正在做課程設(shè)計(jì)、想拿一個(gè)能寫(xiě)進(jìn)簡(jiǎn)歷的項(xiàng)目練手的同學(xué)準(zhǔn)備面試、需要把“高并發(fā)”從八股文變成能講清楚實(shí)戰(zhàn)細(xì)節(jié)的人以及已經(jīng)寫(xiě)過(guò)選課系統(tǒng)、但被超賣問(wèn)題卡住的開(kāi)發(fā)者。我會(huì)把每一步為什么這么做講透參數(shù)怎么算、鎖怎么加、索引怎么建都給出可以直接抄的代碼和配置??赐曛竽銘?yīng)該能獨(dú)立復(fù)現(xiàn)一個(gè)扛得住并發(fā)選課的系統(tǒng)并且能說(shuō)清楚每個(gè)設(shè)計(jì)決策背后的理由。2. 整體架構(gòu)與數(shù)據(jù)建模思路2.1 為什么先定架構(gòu)再寫(xiě)代碼很多人一上來(lái)就打開(kāi) IDE 建 Spring Boot 工程邊寫(xiě)邊想表結(jié)構(gòu)結(jié)果寫(xiě)到一半發(fā)現(xiàn)字段不夠用回頭改表、改實(shí)體、改接口返工成本極高。選課系統(tǒng)雖然不大但它涉及的核心矛盾很典型讀多寫(xiě)少、寫(xiě)操作有強(qiáng)一致性要求、并發(fā)集中在少數(shù)熱門(mén)課程上。這三個(gè)特點(diǎn)決定了架構(gòu)和數(shù)據(jù)模型必須先想清楚。我的做法是先畫(huà)一張業(yè)務(wù)流轉(zhuǎn)圖在紙上畫(huà)就行不用工具學(xué)生登錄 → 瀏覽課程列表 → 點(diǎn)擊選課 → 系統(tǒng)校驗(yàn)資格與余量 → 扣減余量并生成選課記錄 → 返回結(jié)果。這條鏈路里真正需要保護(hù)的是“校驗(yàn)余量”和“扣減余量”這兩步它們必須是一個(gè)原子操作否則并發(fā)下必然超賣。想清楚這一點(diǎn)后面的技術(shù)選型就順了。分層上我采用經(jīng)典的 Controller → Service → Repository 三層但額外加了一層Domain Service專門(mén)處理選課這種跨實(shí)體的業(yè)務(wù)邏輯。這樣做的原因是選課邏輯既不屬于學(xué)生實(shí)體也不屬于課程實(shí)體硬塞進(jìn)任何一個(gè)實(shí)體里都會(huì)讓代碼變味。分層清晰之后單元測(cè)試也好寫(xiě)后面加緩存、加鎖都有明確的落點(diǎn)。2.2 數(shù)據(jù)表設(shè)計(jì)三張核心表加兩張輔助表選課系統(tǒng)的表不多但每張表的字段和索引都有講究。核心是三張學(xué)生表、課程表、選課記錄表。另外兩張輔助表是學(xué)期表和教師表看需求決定要不要。先看課程表這是并發(fā)爭(zhēng)搶的焦點(diǎn)CREATE TABLE course ( id BIGINT PRIMARY KEY AUTO_INCREMENT, course_code VARCHAR(32) NOT NULL COMMENT 課程編號(hào), course_name VARCHAR(128) NOT NULL COMMENT 課程名稱, teacher_id BIGINT NOT NULL COMMENT 授課教師, semester VARCHAR(32) NOT NULL COMMENT 學(xué)期, capacity INT NOT NULL DEFAULT 0 COMMENT 總?cè)萘? selected_count INT NOT NULL DEFAULT 0 COMMENT 已選人數(shù), version INT NOT NULL DEFAULT 0 COMMENT 樂(lè)觀鎖版本號(hào), status TINYINT NOT NULL DEFAULT 1 COMMENT 1開(kāi)放 0關(guān)閉, create_time DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP, update_time DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP, UNIQUE KEY uk_code_semester (course_code, semester), KEY idx_semester_status (semester, status) ) ENGINEInnoDB DEFAULT CHARSETutf8mb4;這里有幾個(gè)關(guān)鍵決策。第一容量和已選人數(shù)放在課程表里而不是每次去 count 選課記錄表。count 操作在并發(fā)下既慢又容易讀到不一致的數(shù)據(jù)用一個(gè)冗余字段selected_count直接維護(hù)配合事務(wù)保證一致性性能好得多。第二加了version字段用于樂(lè)觀鎖這是防超賣的核心手段之一。第三uk_code_semester唯一索引保證同一學(xué)期同一課程編號(hào)不重復(fù)idx_semester_status支撐按學(xué)期查開(kāi)放課程的常見(jiàn)查詢。選課記錄表的設(shè)計(jì)要點(diǎn)在于唯一約束CREATE TABLE course_selection ( id BIGINT PRIMARY KEY AUTO_INCREMENT, student_id BIGINT NOT NULL, course_id BIGINT NOT NULL, select_time DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP, status TINYINT NOT NULL DEFAULT 1 COMMENT 1有效 0已退選, UNIQUE KEY uk_student_course (student_id, course_id), KEY idx_course_status (course_id, status) ) ENGINEInnoDB DEFAULT CHARSETutf8mb4;uk_student_course這個(gè)唯一索引非常重要它是防止同一學(xué)生重復(fù)選同一門(mén)課的最后一道防線。即使應(yīng)用層的校驗(yàn)因?yàn)椴l(fā)出現(xiàn)漏洞數(shù)據(jù)庫(kù)這一層也會(huì)直接拒絕重復(fù)插入。我第一版就是漏了這個(gè)約束測(cè)試時(shí)用腳本并發(fā)提交同一個(gè)學(xué)生的選課請(qǐng)求結(jié)果插進(jìn)去好幾條重復(fù)記錄排查了半天才發(fā)現(xiàn)是應(yīng)用層校驗(yàn)有競(jìng)態(tài)。學(xué)生表相對(duì)簡(jiǎn)單但要注意密碼字段的存儲(chǔ)和學(xué)號(hào)的唯一性CREATE TABLE student ( id BIGINT PRIMARY KEY AUTO_INCREMENT, student_no VARCHAR(32) NOT NULL COMMENT 學(xué)號(hào), name VARCHAR(64) NOT NULL, password VARCHAR(128) NOT NULL COMMENT 加密存儲(chǔ), major VARCHAR(64), grade INT, create_time DATETIME NOT NULL DEFAULT CURRENT_TIMESTAMP, UNIQUE KEY uk_student_no (student_no) ) ENGINEInnoDB DEFAULT CHARSETutf8mb4;2.3 JPA 實(shí)體映射與幾個(gè)容易踩的坑用 JPA 做 ORM 映射代碼量比手寫(xiě) SQL 少很多但有幾個(gè)坑必須提前知道。第一個(gè)是關(guān)聯(lián)關(guān)系的加載策略。選課記錄關(guān)聯(lián)學(xué)生和課程如果默認(rèn)用 EAGER 加載查一次選課記錄會(huì)連帶把學(xué)生和課程全查出來(lái)N1 問(wèn)題立刻出現(xiàn)。我的做法是全部用FetchType.LAZY需要的時(shí)候再用JOIN FETCH顯式加載。Entity Table(name course) public class Course { Id GeneratedValue(strategy GenerationType.IDENTITY) private Long id; Column(name course_code, nullable false) private String courseCode; Column(name course_name, nullable false) private String courseName; Column(nullable false) private Integer capacity; Column(name selected_count, nullable false) private Integer selectedCount; Version private Integer version; // getter/setter 省略 }注意Version注解這是 JPA 樂(lè)觀鎖的開(kāi)關(guān)。加上它之后每次更新這條記錄JPA 會(huì)自動(dòng)在 where 條件里帶上 version并且把 version 加一。如果兩個(gè)事務(wù)同時(shí)讀到 version5一個(gè)先提交把 version 改成 6另一個(gè)提交時(shí)發(fā)現(xiàn) version 已經(jīng)不是 5 了就會(huì)拋OptimisticLockException。這就是樂(lè)觀鎖防超賣的底層機(jī)制。第二個(gè)坑是批量操作的性能。選課高峰期可能有大量查詢?nèi)绻織l都單獨(dú)發(fā) SQL數(shù)據(jù)庫(kù)壓力很大。JPA 提供了BatchSize和hibernate.jdbc.batch_size配置來(lái)優(yōu)化但對(duì)于選課這種單條寫(xiě)入為主的場(chǎng)景更重要的是把查詢緩存和連接池配好。2.4 技術(shù)選型為什么是 JPA 而不是 MyBatis-Plus網(wǎng)上關(guān)于 Spring Data JPA 和 MyBatis-Plus 的對(duì)比文章很多我的實(shí)際體會(huì)是選課系統(tǒng)這種領(lǐng)域模型清晰、以實(shí)體為中心的 CRUD 場(chǎng)景JPA 更合適。JPA 的實(shí)體映射和樂(lè)觀鎖支持是開(kāi)箱即用的Version一個(gè)注解就搞定MyBatis-Plus 雖然也有樂(lè)觀鎖插件但配置起來(lái)多幾步。而且 JPA 的方法名派生查詢比如findBySemesterAndStatus寫(xiě)起來(lái)非??焓〉舸罅亢?jiǎn)單 SQL。但 JPA 也有短板復(fù)雜查詢和批量更新不如 MyBatis 靈活。所以我的方案是混合使用常規(guī) CRUD 走 JPA防超賣的核心扣減操作用原生 SQL 或者M(jìn)odifying的 JPQL把控制權(quán)拿回來(lái)。這樣既享受了 JPA 的開(kāi)發(fā)效率又在關(guān)鍵路徑上保留了精細(xì)控制的能力。3. 防超賣的核心機(jī)制拆解3.1 超賣到底是怎么發(fā)生的先把問(wèn)題講清楚。假設(shè)一門(mén)課容量 50當(dāng)前已選 49。兩個(gè)學(xué)生 A 和 B 幾乎同時(shí)點(diǎn)選課。系統(tǒng)處理 A 的請(qǐng)求時(shí)讀到 selected_count49判斷 49 50通過(guò)準(zhǔn)備寫(xiě)入。就在 A 還沒(méi)提交事務(wù)的瞬間B 的請(qǐng)求也讀到了 selected_count49因?yàn)?A 還沒(méi)提交B 讀的是舊值同樣判斷通過(guò)。然后兩個(gè)事務(wù)先后提交selected_count 變成 51超賣發(fā)生。這個(gè)問(wèn)題的本質(zhì)是**“讀-判斷-寫(xiě)”這三步不是原子的**。解決思路無(wú)非幾種把這三步變成原子操作數(shù)據(jù)庫(kù)行鎖或原子更新或者讓并發(fā)的一方失敗重試樂(lè)觀鎖或者把并發(fā)擋在數(shù)據(jù)庫(kù)之外分布式鎖、消息隊(duì)列。選課系統(tǒng)的并發(fā)量通常在幾百到幾千用數(shù)據(jù)庫(kù)層面的方案就夠了不必上分布式鎖那么重。3.2 方案一悲觀鎖簡(jiǎn)單但要注意鎖粒度悲觀鎖的思路是“先鎖住再操作”。在 JPA 里可以用Lock(LockModeType.PESSIMISTIC_WRITE)實(shí)現(xiàn)對(duì)應(yīng)數(shù)據(jù)庫(kù)的SELECT ... FOR UPDATE。public interface CourseRepository extends JpaRepositoryCourse, Long { Lock(LockModeType.PESSIMISTIC_WRITE) Query(select c from Course c where c.id :id) OptionalCourse findByIdForUpdate(Param(id) Long id); }在選課服務(wù)里這樣用Transactional public void selectCourse(Long studentId, Long courseId) { Course course courseRepository.findByIdForUpdate(courseId) .orElseThrow(() - new BizException(課程不存在)); if (course.getSelectedCount() course.getCapacity()) { throw new BizException(課程已滿); } // 校驗(yàn)是否已選 if (selectionRepository.existsByStudentIdAndCourseId(studentId, courseId)) { throw new BizException(已選過(guò)該課程); } course.setSelectedCount(course.getSelectedCount() 1); courseRepository.save(course); CourseSelection selection new CourseSelection(); selection.setStudentId(studentId); selection.setCourseId(courseId); selectionRepository.save(selection); }悲觀鎖的優(yōu)點(diǎn)是邏輯直觀一定能防住超賣。但缺點(diǎn)也明顯鎖的粒度是整行而且持有鎖的時(shí)間覆蓋了整個(gè)事務(wù)。如果事務(wù)里還有其他耗時(shí)操作比如遠(yuǎn)程調(diào)用、發(fā)消息鎖會(huì)被長(zhǎng)時(shí)間占用其他學(xué)生選同一門(mén)課全部阻塞。所以用悲觀鎖的鐵律是事務(wù)里只做必要的數(shù)據(jù)庫(kù)操作越快越好。還有一個(gè)隱蔽的坑SELECT ... FOR UPDATE在沒(méi)有命中索引時(shí)會(huì)鎖表而不是鎖行。所以findByIdForUpdate必須走主鍵索引這一點(diǎn)要確認(rèn)執(zhí)行計(jì)劃。我第二版就遇到過(guò)因?yàn)椴樵儣l件沒(méi)走索引導(dǎo)致鎖范圍擴(kuò)大到全表整個(gè)選課接口響應(yīng)時(shí)間從幾十毫秒飆到幾秒。3.3 方案二樂(lè)觀鎖高并發(fā)下的更優(yōu)解樂(lè)觀鎖的思路是“先操作提交時(shí)檢查有沒(méi)有沖突”。JPA 的Version已經(jīng)幫我們實(shí)現(xiàn)了這套機(jī)制代碼寫(xiě)起來(lái)更自然Transactional public void selectCourseOptimistic(Long studentId, Long courseId) { Course course courseRepository.findById(courseId) .orElseThrow(() - new BizException(課程不存在)); if (course.getSelectedCount() course.getCapacity()) { throw new BizException(課程已滿); } if (selectionRepository.existsByStudentIdAndCourseId(studentId, courseId)) { throw new BizException(已選過(guò)該課程); } course.setSelectedCount(course.getSelectedCount() 1); courseRepository.save(course); // 提交時(shí)檢查 version CourseSelection selection new CourseSelection(); selection.setStudentId(studentId); selection.setCourseId(courseId); selectionRepository.save(selection); }當(dāng)并發(fā)沖突發(fā)生時(shí)save會(huì)拋OptimisticLockException。這時(shí)候不能直接把異常拋給用戶而是應(yīng)該捕獲異常并重試。重試次數(shù)一般設(shè) 3 次超過(guò)就返回“系統(tǒng)繁忙請(qǐng)重試”。public void selectWithRetry(Long studentId, Long courseId) { int maxRetry 3; for (int i 0; i maxRetry; i) { try { selectCourseOptimistic(studentId, courseId); return; } catch (OptimisticLockException e) { if (i maxRetry - 1) { throw new BizException(選課人數(shù)過(guò)多請(qǐng)稍后重試); } // 短暫退避后重試 try { Thread.sleep(50L * (i 1)); } catch (InterruptedException ignored) {} } } }樂(lè)觀鎖相比悲觀鎖的優(yōu)勢(shì)在于不阻塞讀、鎖持有時(shí)間短在沖突不激烈的場(chǎng)景下吞吐量更高。選課系統(tǒng)的沖突集中在少數(shù)熱門(mén)課程大部分課程沖突很少樂(lè)觀鎖整體表現(xiàn)更好。但要注意如果某門(mén)課被幾千人同時(shí)搶樂(lè)觀鎖的重試次數(shù)會(huì)急劇上升反而拖慢系統(tǒng)。這時(shí)候需要配合限流或者排隊(duì)機(jī)制。3.4 方案三原子更新 SQL把判斷和扣減合成一步前面兩種方案都是在應(yīng)用層做判斷還有一種更徹底的做法把判斷條件寫(xiě)進(jìn) SQL 的 where 里讓數(shù)據(jù)庫(kù)來(lái)保證原子性。public interface CourseRepository extends JpaRepositoryCourse, Long { Modifying Query(update Course c set c.selectedCount c.selectedCount 1 where c.id :id and c.selectedCount c.capacity) int incrementSelectedCount(Param(id) Long id); }調(diào)用時(shí)判斷返回值Transactional public void selectCourseAtomic(Long studentId, Long courseId) { if (selectionRepository.existsByStudentIdAndCourseId(studentId, courseId)) { throw new BizException(已選過(guò)該課程); } int updated courseRepository.incrementSelectedCount(courseId); if (updated 0) { throw new BizException(課程已滿); } CourseSelection selection new CourseSelection(); selection.setStudentId(studentId); selection.setCourseId(courseId); selectionRepository.save(selection); }這條 update 語(yǔ)句在數(shù)據(jù)庫(kù)層面是原子的selectedCount capacity這個(gè)條件在更新時(shí)求值天然避免了超賣。它的性能最好因?yàn)椴恍枰渔i也不需要重試。但有個(gè)前提必須保證選課記錄的唯一性校驗(yàn)也在同一個(gè)事務(wù)里并且唯一索引兜底。因?yàn)閑xistsByStudentIdAndCourseId這個(gè)檢查本身有競(jìng)態(tài)兩個(gè)并發(fā)請(qǐng)求可能都通過(guò)檢查然后都執(zhí)行 update最后靠唯一索引攔住其中一個(gè)。3.5 三種方案的對(duì)比與選型建議方案原理優(yōu)點(diǎn)缺點(diǎn)適用場(chǎng)景悲觀鎖SELECT FOR UPDATE邏輯直觀一定防住阻塞嚴(yán)重鎖粒度大并發(fā)低、事務(wù)短樂(lè)觀鎖Version 版本號(hào)不阻塞讀吞吐高沖突多時(shí)重試多沖突分散的場(chǎng)景原子更新UPDATE 帶條件性能最好無(wú)鎖邏輯分散需唯一索引兜底高并發(fā)搶課我的最終方案是原子更新為主唯一索引兜底配合限流。這是三版迭代下來(lái)最穩(wěn)的組合。原子更新解決了超賣唯一索引解決了重復(fù)選課限流解決了突發(fā)流量把數(shù)據(jù)庫(kù)打垮的問(wèn)題。4. 完整實(shí)操?gòu)牧愦罱ㄟx課系統(tǒng)4.1 環(huán)境準(zhǔn)備與工程初始化先把環(huán)境搭好。JDK 用 17 或 21MySQL 用 8.0Maven 3.8 以上。Spring Boot 版本選 3.2.x這個(gè)版本對(duì) Java 21 的虛擬線程支持比較好后面可以順手體驗(yàn)一下。用 Spring Initializr 建工程依賴勾選Spring Web、Spring Data JPA、MySQL Driver、Validation、Lombok。建好之后先改application.ymlspring: datasource: url: jdbc:mysql://localhost:3306/course_selection?useUnicodetruecharacterEncodingutf8serverTimezoneAsia/ShanghairewriteBatchedStatementstrue username: root password: your_password hikari: maximum-pool-size: 20 minimum-idle: 5 connection-timeout: 3000 max-lifetime: 1800000 jpa: hibernate: ddl-auto: validate show-sql: false properties: hibernate: format_sql: true jdbc: batch_size: 50 order_inserts: true連接池參數(shù)不是隨便填的。maximum-pool-size設(shè) 20 是基于這樣的估算假設(shè)單次選課事務(wù)耗時(shí) 20ms那么一個(gè)連接每秒能處理 50 個(gè)請(qǐng)求20 個(gè)連接就是 1000 QPS足夠應(yīng)對(duì)大部分校園場(chǎng)景。設(shè)太大反而會(huì)因?yàn)榫€程上下文切換和數(shù)據(jù)庫(kù)連接開(kāi)銷拖慢系統(tǒng)。connection-timeout設(shè) 3000ms意思是拿不到連接最多等 3 秒超過(guò)就快速失敗避免請(qǐng)求堆積。ddl-auto用validate而不是update這是生產(chǎn)環(huán)境的習(xí)慣。update會(huì)自動(dòng)改表結(jié)構(gòu)看著方便但線上環(huán)境自動(dòng)改表是災(zāi)難。表結(jié)構(gòu)用 SQL 腳本手動(dòng)管理啟動(dòng)時(shí)只校驗(yàn)實(shí)體和表是否匹配。4.2 核心選課接口的實(shí)現(xiàn)Controller 層保持輕薄只做參數(shù)校驗(yàn)和結(jié)果包裝RestController RequestMapping(/api/selection) public class SelectionController { private final SelectionService selectionService; public SelectionController(SelectionService selectionService) { this.selectionService selectionService; } PostMapping(/select) public ResultVoid select(RequestBody Valid SelectRequest request) { selectionService.selectCourse(request.getStudentId(), request.getCourseId()); return Result.success(); } }Service 層是核心把前面講的原子更新方案落地Service public class SelectionService { private final CourseRepository courseRepository; private final CourseSelectionRepository selectionRepository; public SelectionService(CourseRepository courseRepository, CourseSelectionRepository selectionRepository) { this.courseRepository courseRepository; this.selectionRepository selectionRepository; } Transactional(rollbackFor Exception.class) public void selectCourse(Long studentId, Long courseId) { // 1. 快速失敗已選過(guò)直接返回 if (selectionRepository.existsByStudentIdAndCourseId(studentId, courseId)) { throw new BizException(您已選過(guò)該課程); } // 2. 原子扣減條件不滿足返回 0 int updated courseRepository.incrementSelectedCount(courseId); if (updated 0) { throw new BizException(課程已滿或不存在); } // 3. 寫(xiě)入選課記錄唯一索引兜底 try { CourseSelection selection new CourseSelection(); selection.setStudentId(studentId); selection.setCourseId(courseId); selection.setStatus(1); selectionRepository.save(selection); } catch (DataIntegrityViolationException e) { // 唯一索引沖突說(shuō)明并發(fā)下重復(fù)選課回滾扣減 throw new BizException(請(qǐng)勿重復(fù)選課); } } }這段代碼有幾個(gè)細(xì)節(jié)值得說(shuō)。第一existsByStudentIdAndCourseId這個(gè)前置檢查是為了減少無(wú)謂的數(shù)據(jù)庫(kù)寫(xiě)操作它本身不能保證唯一性真正的保證是唯一索引。第二incrementSelectedCount返回 0 有兩種可能課程不存在或者已滿。為了給用戶更準(zhǔn)確的提示可以先查一次課程是否存在但那樣又多一次查詢。我的做法是統(tǒng)一提示“課程已滿或不存在”用戶體驗(yàn)上可以接受。第三捕獲DataIntegrityViolationException后拋業(yè)務(wù)異常事務(wù)會(huì)回滾扣減的 selected_count 也會(huì)恢復(fù)不會(huì)出現(xiàn)“扣了名額但沒(méi)選上”的情況。4.3 退選邏輯與名額回補(bǔ)退選比選課簡(jiǎn)單但也要注意并發(fā)。退選時(shí)把選課記錄狀態(tài)改成 0同時(shí)把課程已選人數(shù)減一Transactional(rollbackFor Exception.class) public void dropCourse(Long studentId, Long courseId) { int updated selectionRepository.updateStatus(studentId, courseId, 0); if (updated 0) { throw new BizException(未找到有效的選課記錄); } courseRepository.decrementSelectedCount(courseId); }decrementSelectedCount的 SQL 要加個(gè)保護(hù)避免減成負(fù)數(shù)Modifying Query(update Course c set c.selectedCount c.selectedCount - 1 where c.id :id and c.selectedCount 0) int decrementSelectedCount(Param(id) Long id);退選和選課如果同時(shí)發(fā)生可能出現(xiàn)“退了又選”的競(jìng)態(tài)但因?yàn)槎际窃痈伦罱K一致性是能保證的。這里有個(gè)經(jīng)驗(yàn)退選接口一定要做冪等用戶連點(diǎn)兩次退選第二次應(yīng)該返回“未找到有效記錄”而不是報(bào)錯(cuò)前端體驗(yàn)更好。4.4 用虛擬線程提升并發(fā)處理能力Java 21 的虛擬線程是個(gè)好東西Spring Boot 3.2 開(kāi)始支持。選課接口是 IO 密集型等數(shù)據(jù)庫(kù)用虛擬線程能顯著提升吞吐。開(kāi)啟方式很簡(jiǎn)單spring: threads: virtual: enabled: true開(kāi)啟后Tomcat 的請(qǐng)求處理會(huì)使用虛擬線程每個(gè)請(qǐng)求一個(gè)虛擬線程阻塞在數(shù)據(jù)庫(kù) IO 時(shí)不會(huì)占用平臺(tái)線程。實(shí)測(cè)在同樣的硬件上選課接口的 QPS 能提升 30% 到 50%。但要注意虛擬線程不是銀彈如果數(shù)據(jù)庫(kù)連接池只有 20 個(gè)連接虛擬線程再多也得排隊(duì)等連接。所以虛擬線程要和連接池大小配合調(diào)優(yōu)不能盲目開(kāi)大。4.5 壓測(cè)驗(yàn)證用 JMeter 模擬搶課寫(xiě)完代碼不壓測(cè)等于沒(méi)寫(xiě)。我用 JMeter 模擬 500 個(gè)并發(fā)用戶同時(shí)搶一門(mén)容量 50 的課驗(yàn)證防超賣是否生效。測(cè)試計(jì)劃這樣配線程數(shù) 500Ramp-up 時(shí)間 1 秒循環(huán) 1 次。HTTP 請(qǐng)求指向/api/selection/select參數(shù)用 CSV 數(shù)據(jù)文件提供不同的 studentId。跑完之后查數(shù)據(jù)庫(kù)SELECT selected_count, capacity FROM course WHERE id 1; SELECT COUNT(*) FROM course_selection WHERE course_id 1 AND status 1;正確的結(jié)果應(yīng)該是selected_count 50選課記錄數(shù)也是 50一條不多一條不少。如果 selected_count 大于 50說(shuō)明防超賣失效如果記錄數(shù)大于 50說(shuō)明唯一索引沒(méi)生效。我第一版壓測(cè)時(shí) selected_count 跑到了 63就是沒(méi)用原子更新導(dǎo)致的。壓測(cè)還要關(guān)注響應(yīng)時(shí)間。正常情況下選課接口的 P99 應(yīng)該在 200ms 以內(nèi)。如果超過(guò) 1 秒說(shuō)明有鎖競(jìng)爭(zhēng)或者連接池不夠需要排查。5. 常見(jiàn)問(wèn)題與排查技巧實(shí)錄5.1 超賣問(wèn)題的排查思路超賣是最常見(jiàn)也最要命的問(wèn)題。排查時(shí)按這個(gè)順序來(lái)先確認(rèn)扣減操作是不是原子的如果用的是“先查再改”的寫(xiě)法基本可以確定是競(jìng)態(tài)再看事務(wù)邊界對(duì)不對(duì)Transactional有沒(méi)有加在 public 方法上加在 private 方法上不生效這是新手常犯的錯(cuò)最后看數(shù)據(jù)庫(kù)隔離級(jí)別MySQL 默認(rèn)的 REPEATABLE READ 在并發(fā)下可能出現(xiàn)快照讀導(dǎo)致判斷用的是舊數(shù)據(jù)。一個(gè)實(shí)用的排查技巧是在扣減前后打日志記錄當(dāng)前 selected_count 和線程 ID壓測(cè)后分析日志能清楚看到哪些請(qǐng)求讀到了相同的值。我當(dāng)初就是靠這個(gè)定位到問(wèn)題的。5.2 重復(fù)選課的三種成因重復(fù)選課通常有三個(gè)原因。第一是唯一索引沒(méi)建這是最基礎(chǔ)的檢查SHOW INDEX FROM course_selection確認(rèn)。第二是唯一索引建了但沒(méi)生效可能是字段類型不一致或者字符集問(wèn)題比如 student_id 在兩張表里一個(gè)是 BIGINT 一個(gè)是 VARCHAR索引匹配不上。第三是應(yīng)用層用了saveOrUpdate之類的邏輯把已存在的記錄又更新了一遍這種情況要改成先查后插或者直接用 insert ignore。5.3 數(shù)據(jù)庫(kù)連接池打滿的處理壓測(cè)時(shí)如果看到HikariPool-1 - Connection is not available, request timed out說(shuō)明連接池打滿了。先別急著調(diào)大maximum-pool-size要分析連接被誰(shuí)占著。常見(jiàn)原因是事務(wù)里有慢查詢或者遠(yuǎn)程調(diào)用導(dǎo)致連接長(zhǎng)時(shí)間不釋放。用SHOW PROCESSLIST看數(shù)據(jù)庫(kù)端的連接狀態(tài)用 Arthas 的trace命令看哪個(gè)方法耗時(shí)最長(zhǎng)。如果確實(shí)是并發(fā)量太大可以調(diào)大連接池但要同步調(diào)大數(shù)據(jù)庫(kù)的max_connections否則應(yīng)用端連接多了數(shù)據(jù)庫(kù)端反而拒絕。我的經(jīng)驗(yàn)是應(yīng)用連接池總數(shù)不要超過(guò)數(shù)據(jù)庫(kù)max_connections的 70%留點(diǎn)余量給運(yùn)維和其他應(yīng)用。5.4 常見(jiàn)問(wèn)題速查表問(wèn)題現(xiàn)象可能原因排查方法解決方案超賣扣減非原子壓測(cè)后查 selected_count改用原子更新 SQL重復(fù)選課缺唯一索引SHOW INDEX加 uk_student_course連接超時(shí)連接池打滿SHOW PROCESSLIST優(yōu)化慢查詢或調(diào)大池接口變慢鎖競(jìng)爭(zhēng)看 P99 響應(yīng)時(shí)間縮短事務(wù)或改樂(lè)觀鎖事務(wù)不回滾異常被吞檢查 catch 塊拋 RuntimeException樂(lè)觀鎖重試多熱點(diǎn)課程看異常日志頻率改原子更新或限流5.5 幾個(gè)我踩過(guò)的坑第一個(gè)坑是在事務(wù)里做遠(yuǎn)程調(diào)用。我第二版在選課成功后調(diào)用了一個(gè)消息服務(wù)發(fā)通知結(jié)果消息服務(wù)偶爾超時(shí)導(dǎo)致選課事務(wù)被拖長(zhǎng)鎖一直不釋放其他學(xué)生全卡住。后來(lái)改成用事務(wù)同步回調(diào)事務(wù)提交后再發(fā)消息問(wèn)題解決。第二個(gè)坑是**Transactional和synchronized混用**。有同學(xué)想用 synchronized 保證并發(fā)安全但 synchronized 鎖的是 JVM 內(nèi)的對(duì)象多實(shí)例部署時(shí)完全失效而且和事務(wù)的提交時(shí)機(jī)配合不好容易出現(xiàn)“鎖釋放了但事務(wù)還沒(méi)提交”的情況。正確做法是把并發(fā)控制交給數(shù)據(jù)庫(kù)。第三個(gè)坑是索引失效導(dǎo)致鎖表。前面提過(guò)SELECT FOR UPDATE沒(méi)走索引會(huì)鎖全表。用EXPLAIN確認(rèn)執(zhí)行計(jì)劃確保 type 是const或eq_ref不要出現(xiàn)ALL。第四個(gè)坑是壓測(cè)數(shù)據(jù)不真實(shí)。一開(kāi)始我用 100 個(gè)學(xué)生壓測(cè)怎么都測(cè)不出問(wèn)題后來(lái)加到 500 個(gè)才復(fù)現(xiàn)超賣。壓測(cè)的并發(fā)數(shù)要接近真實(shí)峰值否則測(cè)了個(gè)寂寞。6. 性能優(yōu)化與擴(kuò)展方向6.1 緩存課程列表減輕數(shù)據(jù)庫(kù)壓力選課高峰期學(xué)生反復(fù)刷新課程列表這個(gè)讀操作量很大。用 Redis 緩存課程列表能顯著減輕數(shù)據(jù)庫(kù)壓力。緩存策略是課程列表緩存 30 秒選課成功后主動(dòng)刪除對(duì)應(yīng)課程的緩存。30 秒這個(gè)值是個(gè)權(quán)衡太短緩存沒(méi)意義太長(zhǎng)學(xué)生看到的名額不準(zhǔn)。Cacheable(value courseList, key #semester) public ListCourseVO listCourses(String semester) { return courseRepository.findBySemesterAndStatus(semester, 1) .stream().map(this::toVO).collect(Collectors.toList()); } CacheEvict(value courseList, allEntries true) public void selectCourse(Long studentId, Long courseId) { // 選課邏輯 }注意緩存和數(shù)據(jù)庫(kù)的一致性。選課成功后清緩存下次查詢會(huì)重新加載。這個(gè)方案在選課場(chǎng)景下夠用因?yàn)槊~的實(shí)時(shí)性要求沒(méi)那么高學(xué)生看到緩存里的名額稍微舊一點(diǎn)可以接受真正扣減時(shí)以數(shù)據(jù)庫(kù)為準(zhǔn)。6.2 限流保護(hù)數(shù)據(jù)庫(kù)突發(fā)流量是選課系統(tǒng)的常態(tài)開(kāi)放選課的那一秒可能有幾千人同時(shí)點(diǎn)。限流是保護(hù)數(shù)據(jù)庫(kù)的最后一道防線。用 Guava 的 RateLimiter 或者 Sentinel 都行我用的簡(jiǎn)單方案是基于 Redis 的令牌桶public boolean tryAcquire(String key, int limit, int windowSeconds) { String script local current redis.call(incr, KEYS[1]) if current 1 then redis.call(expire, KEYS[1], ARGV[1]) end if current tonumber(ARGV[2]) then return 0 else return 1 end; Long result redisTemplate.execute( new DefaultRedisScript(script, Long.class), Collections.singletonList(key), String.valueOf(windowSeconds), String.valueOf(limit)); return result ! null result 1; }限流的粒度可以按學(xué)生維度防止單個(gè)學(xué)生刷接口也可以按課程維度防止熱門(mén)課程被打爆。我兩個(gè)都做了學(xué)生維度限制每秒 5 次課程維度限制每秒 500 次。6.3 后續(xù)可以擴(kuò)展的方向這個(gè)系統(tǒng)做完之后還有幾個(gè)方向可以繼續(xù)深挖。一是選課排隊(duì)熱門(mén)課程用消息隊(duì)列削峰請(qǐng)求先入隊(duì)后臺(tái)按順序處理前端輪詢結(jié)果。二是分庫(kù)分表如果學(xué)生規(guī)模到幾十萬(wàn)選課記錄表可以按學(xué)期分表。三是多級(jí)緩存本地緩存加 Redis進(jìn)一步降低數(shù)據(jù)庫(kù)壓力。四是監(jiān)控告警用 Micrometer 加 Prometheus 監(jiān)控選課接口的 QPS、響應(yīng)時(shí)間、錯(cuò)誤率出問(wèn)題能第一時(shí)間發(fā)現(xiàn)。我個(gè)人在實(shí)際操作中的體會(huì)是選課系統(tǒng)這個(gè)項(xiàng)目最大的價(jià)值不在于功能多復(fù)雜而在于它把并發(fā)、事務(wù)、索引、緩存這些后端核心知識(shí)點(diǎn)串成了一條線。把這一條線走通比看十篇八股文都管用。最后再分享一個(gè)小技巧壓測(cè)的時(shí)候把數(shù)據(jù)庫(kù)的慢查詢?nèi)罩敬蜷_(kāi)long_query_time設(shè)成 0.1 秒跑完壓測(cè)分析慢查詢?nèi)罩就馨l(fā)現(xiàn)一些平時(shí)注意不到的索引問(wèn)題。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
日本高清电影欧美色图| 最新精品久久蜜桃| 亚洲欧洲小说图片视频| 嗯嗯不要 视频| 国产精品熟女一区二区三区| 五月综合婷婷久久网站| 91色伦综合| 九九热只有精品| 婷婷去俺也去六月色| 九九九午夜| 亚洲图片91| 牛黄色久午久| 综合网少妇| α√在线| 亚洲精品1区| 麻豆成人影音在线| 另类小说五月天| 亚洲综合贴图91| 欧美一区二区男人天堂| 久操九九九九| 亚州精品人妻一二三区| 日韩少妇一区二区三区| 亚洲精品蜜桃久久久| 久久一区二区高清免费| 动漫av中文| 亚洲无码超碰免费| 国产第二页| 懂色av色欲av蜜臀av| 91综合国产精品| 国产在线强奸视频| 综合天天。| www.久久最新地址| 国产风韵犹存熟妇三区| 黄色高清无码无码破解免费暗网 | 国产久9| 欧美精品成人在线播放| 蜜桃狠狠色伊人亚洲综合| 亚洲精品无码久久AV| 色网1| 777琪琪午夜免费A片| 久久中日麻豆| 男女啪啪网站免费视频| 2017天天透天天通天天擦| 国产精品点击进入在线影院| 欧美亚州色的图| 国人欧美精品一区二区| 欧美三级偷拍| 超碰在线99| 老妇女91| 综合 青草 伊久久 影院 综合| 国产精品第一区第一页| 久热大香蕉网站| 激情接吻视频久久久久久| 校园春色美腿丝袜| 欧洲一区二区三区免费| 日韩午夜啪啪视频| 国产呦精品系列在线观看| 性爱动态120秒| 无码 黑人一区二区三区| 日本欧美色| 中文字幕aⅴ在线视频| 极品出轨视频网站| 91 国产丝袜在线放观看| 欧美日韩另类激情图片| 色诱中文字幕| 天天射网| www.99中文字幕| 激情小说亚洲视频| 日本三级久| 国产兽交视频在线播放| 国产丝袜高跟美女av免费观看| 丁香啪啪| 翔田千里爆乳巨臀无码| 羞答答AV中文字| 神马久久久久眼| 试看日韩黄片| 快播久久人人aV| 婷婷中文字幕| 99精品欧美一区二区三区桃色| 大香蕉伊人75| 国产精品3| 色老汉玖玖爱| 404操逼福利视频| 性爱av在线免费观看| 99久草| 亚av顶级裸体一区二区三区四区五区| 日本久久久久久久久| 久久五月天婷婷丁香中文字幕| 东京太热男人的天堂久久久| 国产乱弄免费在线视频。| 色欲日韩欧美在线一区| 免费a级毛片av无码久久精品中文字幕| 91欧美丝袜| 无码欧美有限公司| 五月婷久久| 国产综合色精品在线观看| 99爱爱| 人妻在线大香蕉| 狠狠干狠狠干| 黄色视频特级毛片| 色香色欲天天综合网天天来吧 | 老熟妇一区二区三区| 性站| 五月婷婷色色| 丁香五月天啪啪| 日韩免费三级黄片电影| 天天看天天日天天操| 久久久成人免费av电影| 麻豆伊人网| 午夜激情床戏激情| 国产精品自产拍在线观看社区| 国产成年女黄特黄| 一区二区高清视频| 超碰爽人妻熟女Av| 亚洲天堂区| 色色色欧美| 边做饭边操逼逼| 久久免费9| 国产97av| 久肏视频字幕| 午夜久久久| 动漫av中文| 国产60区。| 欧美美女自慰一区二区三区| 日产狠狠干| 日韩性爱高清免费视频| 午夜大香蕉| www.av在线观看| 欧美区亚洲区偷拍区| 97久久网| 精品亚洲一区在线观看| 国产一国产一级毛片古装| 偷拍盗拍亚洲色图图片| 欧美高清第一页| 不卡在线观看视频| 精品91| 婷婷午夜清品久久久久久久性色视频观| 日本性一区| 欧美视频激情久久久久久| 色噜噜综合在线| 丁香五月av| 99热免费| 国产传媒午夜理伦精品| 先锋影音av先锋一区| 男人天堂网址| 日韩 国产 欧美自拍| 免费A片三p视频| 中文字幕欧美日韩三级| 久久精品一区二区三区四区五区| 亚洲天堂久久久久久粉红视频| 亚洲在线91| 九九AV| 玖玖久久久| 久久亚洲日韩熟女精品| 九九九九九精品视频| 亚洲自拍97| 欧美—性—交—色| 亚洲国产成人精品999| 老司机深夜18禁污污网站| 国内精品a| 综合影视国产无码| 狠狠爱综合网| 一区二区三区男女操逼黄色小电影| 日韩精品三区四区| 亚洲男人的天堂网| 亚洲综合在线91| 久草这里只有精品 | 国产动漫操逼视频| 国产伦精品一区二区三区在线观| 国产精品一区人妻精品阁在线| 精品四五区| 国产青视频| 99福利社| 久久久久9999| 密乳AV免费观看| 亚洲天堂7777| 91美女视屏| 久久同城AV| 天天久久久久久| 日韩三级伊人| 91黑丝在线| 国产精品白丝在线播放| 美日韩成人| 亚洲天堂自拍| 91美女精品| www.91视频网| 伊人精品久久网站| 一区二区三区四区色图| 亚洲视频一二区| 久啪视频| 亚洲高清无码在线桃色| 日本天堂网| 欧美高潮| 亚洲精品国产熟女| 91美女中出| 久久久9品一区二区三区| 九九九九九九九九九九九九九九九女| 国产精品一区二区三区四区五区| 日韩欧美一级特黄大片| 91啪9色| 青青草久草AV| 思思热一热婷婷热一热| 国产福利合集| 婷婷视频在线免费观看| 麻豆区99999| 人人摸人人舔一区二区| 搡老女人老91妇女老熟女| 国产精品久久久久久久黄无码 | 人妻黑丝袜电影| 男人久久天堂| 熟女被操视频网址| 清清草影| 啊啊啊免费视频| 玖玖爱免费观看视频| 亚洲精品丝袜| 91中出视频| 最新日产中文在线麻豆| 91撸色网 玖玖网 欧美| 中文字幕一区二区三区50路| 久久一级无码精品毛片6| 美女露胸露奶头| 亚洲欧美天| 伊人久久大香线蕉无码| 夜夜騷av、一區二區| 亚洲九九九九| 极品五月天噜噜| 内射黑丝袜| 日韩av性爱在线播放| 欧美一级三级| 美女性91| 性吧在线视频| 97色综合中文网| 色婷婷视频| 日本高清一本二本免费不卡| 999精品国产高清一区二区| 天天91~综合入口| 岛国不卡超碰护士AV在线播放| 超碰国产精品无码| 欧美综合97www| 91丨人妻丨国产丨丝袜| 手机不卡视频不卡在线一二三区| 日本影视久久免费| 一类无码操逼视频| 六月丁操逼| 无码137片内射在线影院| 亚洲人在线成线成人| 欧美天天综合网版| 中文字暮97| 亚洲男人电影天堂| 日本啊啊啊啊啊视频| 最新日本中文字幕| 九九九九日本 | 色婷婷五月综合| 欧美在线天堂| www五月| 最新AV在线| 日韩中文字幕视频在线观看| 丝袜视频网国产90| 五月天社区| 后入国产| 884t在线| 亚洲综合一区二区| 久久伊人东京热| 五月婷婷综合在线| 欧美日韩制服| 午夜免费视频1000| 天天视频黄| 九九拍拍精品视频在线播放| 强奸乱伦大香蕉网| 91精品导航| 精品国产自在在线99| 久久久111| 久久久久久日韩| 日韩人妻精品| 一二三四免费视频| 人人看人人插| 欧美综合777| 八人操人人摸人人看| 国产九九九九九九| 中文字幕精品资源在线| 天美传媒AV在线| 久草资源在线视频官方总站日韩丝袜美腿 | 久九干| 国产毛片久久久久久久| AV女资源| 97精品久久久久久久| 大香蕉强奸乱伦| 少妇大屁屁| 91超碰人人| 日本成人免费一区二区三区| 精品一区二区2| 亚洲无套久久嗯嗯| 国产亚洲日韩在线三区黑人| 97免费视频在线| 久久欧洲| 久久丁香| 操高情无码| 超碰九7| 色老牛| 熟妇人妻精品一区二区视频色欲| 人人插人人摸人人| 久久精品国产精品一区 | 91日日夜夜| 2020中文字幕| 图片区小说区| 另类TS人妖一区二区三区| 操逼999| 国产超碰在线| 色伊人91| 日韩在线欧美精品一区二区| 97在线观看免费| 暖暖精品二区三区观看| 国产小u女在线观看| 国产精品精品系列在线观看| 2017,超碰| 日韩钢筋无码高清啾啾啾| 亚洲精品日日夜夜52| a亚洲欧美色欲| 亚洲人妻日日日| 亚州色图片在线色| 麻豆AV96熟妇人妻| 色人久久| 成人性爱高清视频免费看| 天天日天天操天天射河南省| 天天干夜夜鈤| 99爱爱| 亚洲 欧美 另类 综合 偷拍| 激情五月天色播| 日韩AV无码中文一区二区| 国产家庭乱伦表演| 肥佬影院91| 人澡逼| 国产久久一区二区| 亚洲日韩乱码中文无码蜜桃臀网站 | 伦理弟一页| 欧美少妇一区二区三区| 欧美日韩超碰在线| 99色热| 亚洲成a人片在线观看中文!!!| 肏逼视频日本| 天天影视色香欲综合网小说| 麻豆精品一区二区三区四区免费观看| 综合久久99| 骚熟女AV网| 国产十八禁视频| 亚洲AV资源| 色嘟嘟人妻天堂网| 97精品国产97久久久久久| 亚洲精品三| 图片区小说区| 午夜高清成人在线视频| 国产精品蜜乳AV| 精品视频免费在线一区| 国产无码久久高清| 日韩精品在线视频在线观看| 日韩欧美操逼xxx| 玖玖爱在线视频免费观看| 神马久久久久| 99久久亚洲精品无码毛片潘甜甜| 国产精品视频内谢女人| 乱伦一二三区| 国产精品女久久久久av爽| 亚洲精品国产熟女久久久久久| a亚洲欧美色欲| 免费a v| 国产精品人妻一区二区| 乱伦av麻豆| 青娱乐久久艹| 综合色色网| 亚洲国产激情国产av| 色九九综合| 99性爱| 狼人综合婷婷激情四射 | 日本免费一区二区不卡| 不卡六六在线91| 夜夜久久久| 亚洲欧美另类图片| 国产精品九九九| 久久久久久久9| 色网站导航大全| 亚洲男人久久综合天堂| 天天视频综合在线观看视频| 国产精品视频精品一二| 欧美另类色图片| 日日日啊啊啊| 欧美九一精品久久久熟妇| 亚洲天堂久| 阿姨一区二区免费视频-高清正片西瓜视频下载app-T450AV | 国产女上位好爽在线| 亚射在线| 成年人免费观看网站| 久久久久久久9999| 另类亚洲一区二区三区| 久久久久国产一区二| 骚逼高潮久久精品| 96免费视频在线| 欧洲一区二区三区四区在线观看| 国产精品乱码久久| 亚洲啪啪综合?v一区综合精品区| 日韩无码黄色片| 色噜噜狠狠色综合日日| 精品人人| 九一精品牛牛一区二区| 久久九九99| 日韩成人精品| 成人日本片久久久蜜桃| 91精品电影18| 曰韩少妇无码| 欧美亚男人的天堂| 天天天堂影视日韩亚洲91| 夜夜 中文视频rt| 人妻娇喘 激情视频| 中国AAAAAA黄色片| 在线播放成人网站| 九九热免费国产视频婷婷伊人五月| 青草香蕉网| 精品综合久久久久久97| 人人模人人看| 激情综合婷婷| 学生妹天天看| 无码78| 高清成年美女黄网站免费大全| 国产AV久久野战精品| 人妻av在线| 欧美午夜视频| 肏逼视频日本| 99热精品在线| 日韩国产九九精品一区二区三区毛片| 97超碰人人操人人操| 天天躁日日躁AAAXX| 天天做天天爱| 亚洲和欧美裸体美女双飞视频| 亚洲中文字幕熟女少妇一区二区| 日韩不卡毛片Av免费高清| AND人妻系列| 欧美日韩亚洲少妇寂寞影院正在播放| 精品视频免费在线一区| 人人操AV| 97中文综合| 国产成人99久久亚洲综合| 97精品国产97久久久久久| 久久久久深夜无码| 日本免费专区| 91国产美女丝袜足交精品视频 | 色欲人妻一区二区在线| 欲香欲色| 国产女人高潮视频| 91精品导航| 久久精品国产欧美日韩亚洲欧美日韩中文久久国产一区 | 欧美18禁91| 四方色播| 亚洲人妻一区二区三区| 久热伊人| 天综合网| 老熟女综合| 天天操狠狠日夜夜干超碰撸com视频在线观看 | 99色视频| 日本2020一区二区| 成年女人黄网站| 欧美亚洲日韩16色| 欧美大干日韩| 日韩人妻制服丝袜av| 激情亚洲天堂| 免费一级性爱久久| 人妻少妇色综合| 岛国天天午夜影院传媒网| 高清国产性猛交xxxx乱大交| 1204金沙人妻懂旧版免费| 国产午夜福利专区综合| 欧洲亚洲人妻无码中字久久三区四区| 日本东京热久久久电影| 老熟女熟妇| 日韩无码极品| 99re这里只有精品3| 日韩有码 一区二区三区| 久久只有精品一区二区三区| 日小BB小视频| 黄色十八禁| 在线性黄高清免费视频| 亚洲在线A| 99色热| 亚洲综合97| 久悠悠av| 久久久精品电影| 精品国产国产AV| 欧亚性爱啪啪| 久久欧美激情| 真实高潮91| 国产精品人人爽人人做可爱福利| 99国内熟女露脸视频| 操逼操操操91| 亚洲九九视频| 国产尹人在线视频免费| 亚洲丝袜综合| 精品97精品97| 乱伦色图网址是多少| 亚洲啪啪啪啪视香蕉| 亚洲制服欧美另类内射| 97色在线视频| 欧色性第一页| 伊人激情| 婷婷激情四射| 欧美操逼视频二区| 激情色色| 免费岛国一级片| 91在线/欧洲| 婷婷九月色| 色香综合| 啊啊啊啊好大好硬啊啊啊啊啊 | 午夜福利无毒不卡| 日日干夜夜骑| 五月丁香啪啪| 亚洲精品三区在线观看| 97鸡把在线视频| 99色在线| 在线观看亚洲成人精品| 国产一| 91oumei| 久久亚洲AV成人精品无码| 超碰 国产熟女精品一区| 中文字幕一区av| 国产日韩在线播放av| 1024午夜激情男人的天堂| 亚洲精品九九九| 亚洲精品蜜桃久久久久久久| 九九aV| 97欧美精品| 中文字幕伊人| 亚洲丝袜色图| 91久热| 日韩精品人妻一| 国产97亚洲| 日韩精品99久久久久久中文字幕 | 亚洲91网站| 日本 欧美 亚中文字幕| 丰满少妇乱子伦精品无| 九九九九九九视频免费| 中文一区二区| 欧美综合制服在线| 午夜精品99久久久久传媒| 久久精品国产亚洲AV无码电影| 午夜性生活av免费在线看 | 蜜桃臀一区二区三区久久| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 91在线视频免费中出| 日韩综合成人免费视频| 一区二区乱码福利| 91性网| 天操天操夜操夜月操月年年操操| 看黑丝美女操逼青青网站| 中文字幕成人| 人人操人人摸人| 久久久一区二区三区三州| 校园春色五月天| 中文字幕av一区二区三区人妻少妇| 男女激情中文字幕| 韩国女主播青草福利视频| 婷婷99| 日韩欧美经典在线观看| 欧美人妻久久精品二区三区 | 日韩综合97P| 91人人看| 日本三级黄页| 色婷婷丁香五月| 亚洲午夜AV| 亚洲精品aa久久伊人| 国产人妖视频一区在线观看| 欧美偷拍区| 国产91亚洲精品一区二区三区| 78久久| 男人久久天堂| 麻豆天美一区二区| 亚洲久久久久| 淫荡网址| a级免费在线观看| 亚洲欧美日韩激情不卡| 亚洲欧美首页| 亚洲成a人v欧美综合天堂下载| 欧美综合网在线| 国产97亚洲| 亚洲高清自拍| a片久久久久久久久久久久| 男人的天堂 在线一区| 国产色图乱伦| 大二网站亚洲| 精品午夜福利国产一区二区在线观看| 成人精品一区二区91毛片不卡| 翔田千里AⅤHD无码| 亚洲精品国产专区在线观看| 国产区91柔拿会所技师| 高清无码在线播放网站| 黄色电影观看久久9| 黄片aaaaa一区| 丁香五月天激情网站| 婷婷久久网| 亚洲男人天堂Av| 欧美性爱97超碰| 久久嫩草国产成人一区| 亚洲黄色网址视频| 91三级理论片播放器| 五月色网| 偷拍欧美激情| 中文幕97| 久9久9久9久9久9久9| 国产91美女视频| 国产400孕妇孕交群| 日韩免费高清大片在线| 黄片aaaaa一区| 婷婷五月在线视频| 欧美美女在线高潮999| 人妻少妇精品久久久| 影音资源男人日韩| 午夜αv| 99re免费视频精品全部| 日本三级R| 9/A片| 精品人妻一区二区三区视频| 97超碰这里只有精品| 亚洲猛交| 色屁屁影院www国产| 欧美性爱视频免费一区一A| 亚洲天堂久久| 91精品人妻一区二区三区蜜桃臀 | 岛国人妻少妇av在线观看| 伦理弟一页| 国产熟码AV| 操屄日韩| 黄色免费网页无码| 人人乐大香蕉| 午夜精品人妻二区三区| 久久九色| 久久性爱大全| 欧美 青青草| 国产三级中文字幕粉嫩| 在线日韩日本亚洲国产| 自慰白浆在线观看| 久久男人网| 亚洲 欧美 第一页| 美国人人操人人操| 国产免费一区二区三区最新不卡| 啊好大好舒服| 97久久久网站| 国产绿奴视频在线观看| 水野优香在线观看| 97久久精品不卡| 激情黄色片在线观看| 色情五月综合婷婷| av东京热男人的天堂| 97日韩| 国产女人成人精品视频| 青草香蕉网| 四虎精品一区二区| 久久精品国产免费观看99| 神马午夜久久久| 91天堂网| 久久婷婷五月综合| 无卡一区=区| 宅男影院久久久,99| 好湿好紧好爽 视频| 中文字幕免费在线观看| 99精品欧美一区二区三区桃色| 中日无幕一二三四区| 全国男人天堂网| 99久久婷婷丁香| 亚洲精品一二三四区| 国产中午字一暮区| 草草影院日本第一页| 91 丝袜在线| 精品丰满熟妇人妻一区| 日日操丁香五月天| 天美精品一区二区三区四区在线观看| 天堂v无码免费视频| 久热这里| 久久精品操| 久久男女激情视频网站 | 国产精品视屏| 亚洲综合另类| 国产精品久久泡妞网站| 欧美极度丰满熟妇hd| 丝袜色综合| 成人三一级一片aaa| 美女诱惑在线一区| 午夜无遮挡男女啪啪视频| 中文字幕在在线观看网站| 干超碰碰熟女| 天天摸天天插天天日| 激情一区二区| 国产乱伦搜索结果91P| 久草成人福利导航| 99热在线播放| 大香蕉亚洲中文| 超碰九区| 九色 人妻 大香蕉| 天天干人人看综合| 午夜天天碰综合视频| 91美女网站| 国产suv精品一区二区四区999| 久久久久久九九九| 亚洲91av| 久久草草亚洲蜜桃臀| 国产美女91视频| 亚洲精品三区在线观看| 我中文字幕6区| 精品一区二区综合熟妇| 97操综合| 国产亚洲在线观看| 久久久久久综合久久伊人蜜月| 国产精品一二三区福利| 秋霞 色色| 熟妇艹鸡八| 波多野42部无码喷潮在线观看| 99re在线精品78| 亚洲AV无线| 亚洲中文字幕av | 亚洲春色一区二区三区| 伊人一区二区三区| 国产成人免费观看在线视频| 96超碰网| 旡码电影特区| 思思热久久成人| 日韩无码服务区| 91久精品| 青青久久手机线视频| 日韩中文9| 丰满人妻一区二区三区| 人妻久久一区二区三区 | JuliaAnn丝袜熟女系列| 95人妻爽爽人人做人人澡| 色欲天天综合久久久无码网中文| 亚洲蜜臀懂色| 国产精品亚洲免费| 美女被啪到深处抽搐视频| 偷拍在线观看视频| 一区二区三区欧美激情| 日韩操啪| 亚洲欧美变态| 床上啊啊啊一区二区三区| 国产丝袜欧美在线视频| 久久久免费懂色| 五月丁香狠狠爱| 色y情视频免费看| 欧洲一区二区三区四区在线观看| 爱爱60秒免费视频| av网页一区二区三区| 蜜屁av| 亚洲吊色| 美女黄色一级A视频| 午夜精品久久久久久久久久蜜桃| 日本一卡二区在线| 精品久久久久黄少妇| 熟女六十路| 夜夜草天天| 亚春色色| 蜜臀99999| 国产欧美第五页| 国产精品日本无码A片| 深夜激情 | 青青草玖玖爱| 欧美|91色综合| 欧美亚洲中文字幕| 精品美女少妇一区二区三区| 日日夜夜干| 奇米狠999| av网站免费看| 欲色啪| 麻豆天美制片厂网站视频| 激情开心五月天| 久久亚洲AV无码专区国产精品| 91少妇人妻| 中文字幕久久亚州无码| 啊啊啊好湿国产一二| 女人高潮大叫一级毛片| 精品欧美А∨无码黑人大荫蒂| 久久久性少妇| 久久九九一区二区三区成人| 1024香蕉视频| 蜜乳AV网址| 欧亚性爱在线视频| 99中文字幕| 校园春色综合香蕉| 啊啊啊啊啊啊好湿好爽视频| 久久人妻丝袜一区二区三| 国产九九九九九九九九| 欧美不卡在线一区二区| 国产捆绑一区| 亚洲图片欧美色| 99操逼| 久久久免费视频18| 精品久久大胆人体| 久久久9品一区二区三区| www久| 韩国一级婬片A片AAAAA| 懂色AV蜜臀无码精品APP | 欧美一级久久久久久久大片动画| 热思思免费视频| 亚洲天堂欧美| 天天噜| 亚洲色婷婷综合久久一区二区三区| 精品成人女人久久| 中文字幕十五区| 青娱乐手机日韩在线视频| 99精品久久久久久| 天天干夜夜肏| 日韩欧美中文字幕搭讪巨乳美人妻视频| 综合自拍| 国产91 丝袜在线播放00-百度| 久久午夜色播影院免费高清| 成人精品在线免费视频| 精品日韩人妻精品一二三区| 亚洲伊人a线观看视频| 国产久久av| 日韩性爱高清免费视频| 日韩欧美女优电影| 亚洲欧美九九九| 91路www| 99超碰碰| 26uuu久久| 久久精品国产亚洲AV嘿嘿| 国产精品一区二区黄片| 久热69九色熟妇97| 嗯嗯啊啊视频一区二区三区| 97资源站久久| 97视频在线播放| 日本操逼视频不卡直接放| 可以免费观看的日韩av毛片| 欧美性爱五月天| 国产精品久久久亚洲一区| 狠狠搞 亚洲91| 熟女91网| 欧美狠狠干| 亚洲系列第一页| 久久综合五月天| 亚洲 欧美 小说| 夜夜春夜夜操| 欧美极品美女aaaaaa级黄片| 91天天美女| 久久久96| 亚洲天堂AV在线播放| 综合激情五月天| 久久曰曰| 日本熟妇人妻一区二区三区| 日本国产亚洲一区在线观看| 无码在线亚洲| 宅男91视频在线播放| 中文字幕欧美日本乱码一线二线| 天天噜| 国产黄片在线免费观看| 日韩另类色图| 亚洲色图 图片| 97欧美| 成人性爱高清视频免费看| 欧美日韩m| 黑人综合色| 乱抡国产91| 日韩999| 久久99草| 欧美中文字幕精品人妻| av无码精品久久久久| 91女网站| 97亚洲色图| 草草网站影院白丝内射| 欧美另类色| 玖玖无码超碰| 芊芊操逼视频无码| 人妻夜夜爽天天爽麻豆三区网站 | 国产精品96| 操逼逼无码| 传媒免费一区二区三区| 久久久久国产精品久久久| 国产日韩在线播放| 狠综合网| 精品无码欧美三级| 99综合视频一体| 成人久久久精品| 成人无遮挡毛片免费看| 婷婷久草一区二区三区| 久久九九久精品国产尤物|国产精品爽黄69天堂A片潘金莲,国产亚洲精品第一综合 | 久久中出| 天天做天天爱| 91精品国产长腿丝袜美女| 日韩在线性爱免费视频| 国产suv精品一区二区四区999| 久久大香蕉97| 日韩精品永久在线观看| 一区二区视频你懂的| 国产精品久久久吖| 91亚洲黑人| 亚洲三级。日韩三级| 丰满人妻av一区二区三区| 日韩性爱高清免费视频| 久久熟女久| 国产精品久久久久久久AV大片| 亚洲 中文 女同| 欧美高清色| 另类图片五月天| 久久久久久人体| 无遮挡猛进视频免费无限观看| 任你干在线视频| 久久东京伊人一本到鬼色| 亚洲成人精品久久久| 韩国免费播放一级毛片| 亚洲日本韩国极品一区二区| 欧美成人精品一区| 丁香婷婷色五月| 久久午夜神马| 综合色播| 超碰诱惑| 九九九九久久久| 国产精品9999| 猛交交| 夜夜嗨视频| 九九这里只有精品| 大香蕉黄色一区| www99热| 日韩免费性爱视频在线观看| 免费中文在线| 清柠毛片| 熟女丰满人妻一区| 97蜜桃综合| 区一二区日韩亚洲乱码av电影| 国产成人无码久久精品| 国产传媒av天美传媒在线| 欧美日韩超碰在线| 100啪啪视频大全| 无卡一区=区| 日本人妻一区二区| 黄色视频特级毛片| 极品国产内射| 久久精品国产97欧美精品亚洲 | 极品色社| www.黄色在线| 蜜桃狠狠色伊人亚洲综合网站| oumeizonghese,www| 久久人妻视频网| 欧亚在线视频| 人人超碰在线观看黄| 777奇米影视777四色| 影音先锋每日最新资源在线观看| avav青青草久久夜| 天操老女人| 特级大荫道BBwBBwBBW| 黄色av一区二区在线| 亚洲国产精品9999在线观看| 97Ai亚洲| 97伦综合| 一本色道久久综合亚洲二区三区| 2019AV天堂| 综合久欧洲| 国产视频一区二区在线| 伊人AAA| 99re国产中文字幕| hd成人一区二区在线| 精品人妻中文字幕4399| 偷拍 欧美 日韩| 精品91| 亚洲国产精品久久AV| 欧美色青| 永久电影三级在线观看| 97免费在线视频| 精品国产乱码久久| 26uuu久久| 国产区日韩区在线观看| 色吧5亚洲| 操逼视频国产无套| 亚洲AV成人无码一二三久久| 91精品国产91久久福利| 无码久久亚洲高清,| 亚洲国产成人7777| 白丝被操91| 国产传媒操逼视频| 九月丁香综合网| 国语对白在线播放视频| 亚洲日韩精品在线播放| 日韩AV电影网站| 一区二区三区四区五区高清无码永久视频| 在线观看十八禁| 人人摸人人干| 99re在线视频这里只有精品| 后入人妻无码| 老熟妇乱轮| 日本东京热加勒比久久| 天天色综亚洲91污| 理论久久婷婷网 8| 天天α片| 麻豆熟妇乱妇熟色A片在线看| 欧美综合另类| 亚洲自拍天堂| 吻戏激情性巴克| 91高跟美女在线播放| 色偷偷2020免费视频播放| 97干97色| 秋霞免费AV| 色女99一级片在线观看| 国产精品久久久久久9999| 酒色综合网| 国语精品内射在线观看| 2011国产精品| 死我十八禁| 亚洲精品一区二区精品| 色999;丁香五月| 亚洲男人的天堂在线看| 蜜臀99久久精品久久久久| 国产网红精品| 影音先锋每日最新资源在线观看| 操逼无码一区| 欧美精品久久96人妻无码| 日本在线999| 综合免费无码中文| 久久e6只有精品| 久久啊啊| 中文字幕日本久久| 久久AV色| 日韩无码三级影院| 国产一区麻豆免费观看| 午夜精品久久久久久久久久久久久| 国产av美女被艹的乱叫| 成人熟女区| 另类小说综合网| 日本99一区二区| 免费观看网黄| 国产男女无套97| 成人自拍三级在线观看| 青苹果影院男人的天堂| 熟女乱3伦999| 久久25| 操逼天美3区| 美女淫穴| 999 久久久| 久久久久久国产无码精品| 高清肉丝中文无码| 97在线观看播放视频| 超碰97亚洲区| 在线可观看的黄色网址| 色偷偷2020免费视频播放| 在线啊v一区| 97亚洲色图| 欧美亚洲玖玖玖| 亚洲一区操| 大香蕉之青青草原| 91黑人无码激情在线| 97资源亚洲| 国产精品 亚洲情色| 欧美高清无码免费视频高清版| 中文字幕老熟妇黄色视频| 超碰欧美| 国产诱惑| 天天欧美色| 亚洲精品天堂久久A∨51成人漫 | 亚洲黄色a级片| 999久久久九九九九| 美腿丝袜偷拍亚洲欧美| 岛国AB视频| 人妻铁牛TV| 久久宗合亚洲| 久久狠狠色噜噜狠狠狠狠97| 闷骚老熟女15P| 岛国片在线观看视频亚洲| 日本一级特级毛片视频| 伊人少妇久久久| 久久久久久久九九九九九九| 老熟妇一区二区三区…| 91亚洲影视| 精品一区99999| 久久一留热品黄| 夜夜草网站| 欧美区亚洲区偷拍区 | 97超碰免费人人性爱| 天天做天天爱天天爽| 亚洲情色中文字幕一区| 在线视频亚洲无码| 国产激情在线| 欧美日本不卡| 九草在线大香蕉| 色 婷97| 男人天堂久久精品| 7777欧美成是人在线观看| 日韩性爱毛片操骚逼| 国产偷拍网站| 外国91| 丰满人妻一区二区三区四区| 亚洲熟妇综合久久久久久| 亚洲AV高潮| 午夜福利久久久噜久噜久久综合| 熟女精品一区二区三区| 一区二区三区精品视频| 99精品视频在线观看免费| 人人做,人人操,人人摸| 日韩性爱一级片| 91在线免费精品视频| 鸥美中出| 超碰78| 日韩兔费看黄片| 成人五月天丁香激情综合| 性色亚洲| 久久国产逼| 午夜啪| 亚州综合色| 丰满欧美放荡少妇在线| 国产欧美日韩女同性恋ww喷水精品| 一牛影视成人片免费| 欧美日韩国产成人高清| 日韩精品一区二区人人人| 国产和美国毛片| 亚洲精品蜜桃久久久久久久| 青娱乐大香蕉| 日韩视频小说在线观看| 亚州一区二区| 日本一二区不卡| 国产精品久久久久亚洲av| 亚洲国产精品久久久久久久久久| 亚洲免费97免费| 猛猛干| 最新中文字幕精品在线| 在线啊啊啊啊| 日本在线15p| se吧提供91精品国产91久久久久久 | 欧美性第1页| 黄片qw| 久久女人一区二区三区| 91精品国产乱码| 老熟妇乱轮| 99久久9| 嗯嗯啊啊好大好爽| 人妻少妇久久中文字幕一区二区 麻豆 | 青青操在线亚洲视频观看欧美在线| 国产乱码久久久| 超碰色男人操熟女| 色蜜AV| 热热色青青草| 91碰超| 一区二区三区日韩欧美| 亚洲美女精品九九视频| 白嫩国模丰满一二三区| 白丝少妇一区二区| 天天综合亚洲综合| 超碰av在线| 91网站18+| 福利社区午夜一区二区| 97激情97激情| 青青草中文字幕| 99综合网| 亚洲欧美天| 亚洲成熟国产精品美女| 亚洲色图美腿丝袜| 中英熟女操女| 操少妇很爽av| 蜜臀久久99精品久久久久久婷婷| 欧美特大黄一级片片免费| 日韩资源网| 日本三级A片网站com| 99国产在线绯色一区| 激情综合网亚洲| Julia在线播放亚洲久久| 国产精品一级特黄aaa大片在线观看| 在线精品福利免费播放| 国产美女激情| 国内毛片无遮挡国产| 国产极品999| 精品人妻一二三| 精品妇女一区二区三区|