亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Hibernate N+1問題全解析:從原理到實戰(zhàn),徹底告別SQL爆炸

Hibernate N+1問題全解析:從原理到實戰(zhàn),徹底告別SQL爆炸 先說一個真實場景。某天深夜我負(fù)責(zé)的服務(wù)突然被數(shù)據(jù)庫CPU告警刷屏上去一看一條列表接口在高峰期每秒打出幾百條一模一樣的SQL骨架只是IN參數(shù)不同。翻代碼就是Hibernate的默認(rèn)懶加載配上循環(huán)遍歷把訂單查出來后逐條去get買家、get商品、get收貨地址。當(dāng)時我就意識到N1這個問題不踩一次永遠(yuǎn)記不牢踩過一次就會在寫每一個關(guān)聯(lián)映射之前先問自己三遍這里到底會發(fā)幾條SQL這篇文章我把Hibernate里N1問題的來龍去脈、排查套路、常用解法和實戰(zhàn)取舍一次性講透。適合正在用JPA/Hibernate做持久層開發(fā)的同學(xué)尤其適合被列表接口性能問題折磨過、或者面試前想把這個點徹底搞清楚的朋友。文中所有示例我都基于一個模擬電商項目X的訂單域模型來講代碼風(fēng)格貼近日常業(yè)務(wù)開發(fā)不是教科書版簡化Demo。1. N1問題的本質(zhì)不是查詢慢而是查詢次數(shù)失控1.1 一個最簡單的復(fù)現(xiàn)場景先定義兩個實體。訂單OrderEntity和訂單項OrderItemEntity一對多關(guān)系這是電商系統(tǒng)里最常見的模型。Entity Table(name t_order) public class OrderEntity { Id private Long id; private String orderNo; private Long buyerId; OneToMany(mappedBy order) private ListOrderItemEntity items new ArrayList(); } Entity Table(name t_order_item) public class OrderItemEntity { Id private Long id; private Long productId; private Integer quantity; ManyToOne(fetch FetchType.LAZY) JoinColumn(name order_id) private OrderEntity order; }需求很簡單在訂單列表頁展示10個訂單同時要顯示每個訂單里有多少個商品項。于是代碼這樣寫ListOrderEntity orders orderRepository.findLatestOrders(10); for (OrderEntity order : orders) { int itemCount order.getItems().size(); ... }只要items上的抓取策略是默認(rèn)的LAZY這10個訂單就會觸發(fā)10次額外的select * from t_order_item where order_id ?。再加上最開始的1次訂單查詢一共是1 10 11條SQL。列表只有10條數(shù)據(jù)體感不明顯但當(dāng)你把列表改成100條、每頁50條時就是1 100條SQL其中99條都是重復(fù)結(jié)構(gòu)。這就是N1的經(jīng)典形態(tài)一次查詢得到N條主數(shù)據(jù)隨后逐條訪問關(guān)聯(lián)屬性又發(fā)出N條查詢。N越大問題越猙獰而且它不會在開發(fā)環(huán)境暴露因為開發(fā)時數(shù)據(jù)量少性能差異完全被網(wǎng)絡(luò)延遲和本地數(shù)據(jù)庫的快速響應(yīng)掩蓋了。1.2 為什么Hibernate特別容易踩中這個坑很多從MyBatis轉(zhuǎn)過來的同學(xué)覺得奇怪我寫個關(guān)聯(lián)查詢把結(jié)果一次性取出來不就行了嗎問題的根源在于Hibernate的實體加載模型。Hibernate引入了“持久化上下文”和“代理對象”這套機制。懶加載關(guān)聯(lián)屬性時返回的不是真實集合而是一個被委托的PersistentBag。你對這個集合調(diào)用size()、iterator()、contains()時Hibernate才臨時決定哦還沒初始化我發(fā)一條SQL現(xiàn)取。也就是說N1不是Hibernate的bug而是懶加載機制在“循環(huán)遍歷”這種代碼形態(tài)下的必然產(chǎn)物。我之前在某公司排查過一個線上問題代碼里只是把List 的查詢結(jié)果做了stream().map(Order::getItems).count()這類操作結(jié)果SQL數(shù)量直接爆炸。表面上看是框架的問題實際是開發(fā)者對“什么時候觸發(fā)查詢”完全無感。Hibernate把這條邊界藏得太深你寫了order.getItems()根本看不出來這里會打DB。另一個容易忽略的點是事務(wù)邊界。只要Session還開著懶加載隨時可能觸發(fā)額外查詢Session關(guān)了再訪問直接拋LazyInitializationException。很多人為了解決這個異常粗暴地改成EAGER這就把N1問題從“可能發(fā)生”變成了“必然發(fā)生”。后面會詳細(xì)講為什么EAGER是飲鴆止渴。1.3 怎么量化你到底發(fā)了多少條SQL不把SQL數(shù)量量化優(yōu)化就無從談起。我有兩個常用手段都是低成本高收益的。先看Hibernate自己的日志。在application.yml里把show_sql和format_sql打開同時把日志級別調(diào)到DEBUG或者TRACEspring: jpa: show-sql: true properties: hibernate.format_sql: true hibernate.use_sql_comments: true其中use_sql_comments非常有用它會在生成的SQL里附帶一段Hibernate內(nèi)部注釋標(biāo)注這條SQL是哪一行Java代碼觸發(fā)的。線上排查時能直接定位到service層的某個方法省去逐行打斷點的麻煩。不過show_sql輸出到控制臺有時候會混在業(yè)務(wù)日志里很難看我在正式環(huán)境會引入數(shù)據(jù)源代理工具比如p6spy。它的思路是攔截所有JDBC執(zhí)行統(tǒng)一格式化打印還能統(tǒng)計每條SQL的耗時。配置很簡單引入依賴后替換driverClassName和jdbcUrl前綴就行。p6spy還支持自定義LogMessageFormat把SQL和執(zhí)行時間拼在一起排查N1時非常直觀。還有一個偏門但很好用的辦法查數(shù)據(jù)庫端的連接會話數(shù)。如果某個接口在短時間內(nèi)對同一張表發(fā)起了幾十條結(jié)構(gòu)相似的查詢數(shù)據(jù)庫的information_schema.processlist里能看到一長串同類SQL。這也是快速確認(rèn)N1是否存在的鐵證。2. 先搞清楚映射設(shè)計再談優(yōu)化關(guān)聯(lián)關(guān)系是怎么變成SQL的2.1 FetchType的默認(rèn)值是個陷阱很多開發(fā)者對ManyToOne、OneToOne、OneToMany、ManyToMany四種關(guān)聯(lián)的默認(rèn)fetch策略記不準(zhǔn)確這里我把它整理成一張表關(guān)聯(lián)類型默認(rèn)Fetch策略默認(rèn)情況下訪問關(guān)聯(lián)屬性時的行為ManyToOneEAGER主查詢時立即JOIN查詢OneToOneEAGER主查詢時立即JOIN查詢OneToManyLAZY首次訪問集合時額外查詢ManyToManyLAZY首次訪問集合時額外查詢看到?jīng)]有ManyToOne默認(rèn)是立即抓取也就是說你查訂單列表時訂單上那個ManyToOne的買家對象已經(jīng)跟著一起查出來了。這不是N1但它會帶來另一個問題多余的、可能根本用不到的大字段關(guān)聯(lián)被強行加載。更糟糕的是如果多個ManyToOne互相指來指去Hibernate生成SQL時可能產(chǎn)生笛卡爾積式的多表JOIN行數(shù)膨脹非常嚇人。所以我個人的鐵律是無論哪種關(guān)聯(lián)一律顯式寫成fetch FetchType.LAZY。好處有兩個。第一避免默認(rèn)EAGER導(dǎo)致的無謂查詢和超大JOIN第二把“什么時候加載關(guān)聯(lián)數(shù)據(jù)”的決定權(quán)從映射配置移交到業(yè)務(wù)代碼中配合JOIN FETCH或者EntityGraph精確控制思路才清晰。你可能擔(dān)心全改成LAZY之后某些地方訪問關(guān)聯(lián)屬性會報LazyInitializationException。這個問題的正確解法不是改回EAGER而是保證關(guān)聯(lián)屬性在事務(wù)范圍內(nèi)被初始化或者用實體圖明確指定要查詢的關(guān)聯(lián)。這點放在后面方案部分細(xì)說。2.2 集合委托機制為什么getItems().size()不觸發(fā)查詢這里有個很有意思的細(xì)節(jié)。對于被懶加載的集合屬性Hibernate返回的不是ArrayList而是PersistentBag。這個類繼承了AbstractCollection但它內(nèi)部維護了一個尚未初始化的狀態(tài)。當(dāng)你調(diào)用size()時它可能不需要訪問數(shù)據(jù)庫——因為無論集合里有多少元素一個空的或者未初始化的PersistentBag的size()都可以憑內(nèi)部的queuedOperations判斷。但當(dāng)你調(diào)用iterator()、toArray()或者stream()時它就必須確定真實數(shù)據(jù)從而觸發(fā)初始化SQL。這個機制解釋了為什么有些代碼看起來遍歷了集合卻沒發(fā)SQL另一些代碼明明只是取個數(shù)卻發(fā)了SQL。這也引出一個優(yōu)化小技巧如果你只需要判斷集合是否為空優(yōu)先用!order.getItems().isEmpty()而不是order.getItems().size() 0在某些情況下能少接一次數(shù)據(jù)庫往返。不過這只是錦上添花真正解決N1還是得靠下面的方案。理解了委托機制后你再看N1問題本質(zhì)上就是“代碼觸發(fā)了一個又一個集合/實體的初始化請求”。優(yōu)化的方向其實就兩條路要么一次性把需要的關(guān)聯(lián)數(shù)據(jù)查出來讓初始化不發(fā)生在循環(huán)里要么減少初始化發(fā)生的次數(shù)延遲到批量場景統(tǒng)一處理。2.3 事務(wù)邊界是放大器同一個代碼塊事務(wù)邊界不同N1的嚴(yán)重程度完全不同。如果循環(huán)訪問集合屬性的代碼在一個長事務(wù)里那么N次額外查詢都發(fā)生在同一條數(shù)據(jù)庫連接上占用連接時間變長連接池壓力驟增最終影響整個應(yīng)用的吞吐。更隱蔽的是如果配合了讀寫分離一次請求里發(fā)出的每一條SQL都可能被路由到不同的只讀副本N1會讓各副本之間的負(fù)載嚴(yán)重不均。事務(wù)還會放大另一個問題延遲加載不只是查詢還可能是數(shù)據(jù)不一致。比如你先查出訂單列表事務(wù)中途其他線程修改了某個訂單的items數(shù)據(jù)你再訪問該訂單的items集合時Hibernate發(fā)出的查詢可能拿到不同的數(shù)據(jù)造成同一個事務(wù)內(nèi)讀到“前后不一致”的結(jié)果。這也是我建議在事務(wù)邊界內(nèi)盡早把關(guān)聯(lián)數(shù)據(jù)初始化完整的原因之一。3. 解決方案實戰(zhàn)對比JOIN FETCH、實體圖和批量抓取3.1 第一板斧JOIN FETCH先看最直觀的方案用JPQL寫顯式關(guān)聯(lián)抓取Query(value select distinct o from OrderEntity o left join fetch o.items order by o.id desc) ListOrderEntity findOrdersWithItems();這條JPQL翻譯成SQL后會一次性把訂單和訂單項通過LEFT JOIN查出來Hibernate根據(jù)結(jié)果集里的OrderEntity主鍵去重把items正確組裝到每個訂單上。最終SQL只有1條N1直接消失。JOIN FETCH的適用場景非常廣但它有幾個必須知道的注意事項。第一分頁問題。left join fetch一對多關(guān)聯(lián)時如果同時使用setFirstResult/setMaxResultsHibernate會直接在內(nèi)存中分頁而不是走數(shù)據(jù)庫的LIMIT。因為結(jié)果集的行數(shù)已經(jīng)被關(guān)聯(lián)表放大數(shù)據(jù)庫層面的分頁語義會錯亂。如果你在訂單列表頁既要一次性查出items又要分頁JOIN FETCH并不合適這種情況我后文會講替代方案。第二distinct的去重語義。不加distinct如果關(guān)聯(lián)子表有多條記錄同一個訂單實體在結(jié)果集里會出現(xiàn)多行Hibernate雖然能根據(jù)主鍵識別為同一實體但如果你用的是普通JPQL返回可能得到重復(fù)的訂單引用。distinct能保證結(jié)果集層面的去重但要注意distinct不是SQL層面的行去重而是Hibernate實體去重的語義。第三多級關(guān)聯(lián)。如果訂單還要關(guān)聯(lián)買家信息可以繼續(xù)在JPQL里加left join fetch o.buyer。但如果同時fetch兩個集合結(jié)果集行數(shù)會變成兩個集合行數(shù)的笛卡爾積數(shù)據(jù)量立刻膨脹。我的經(jīng)驗是同一查詢中fetch的集合不要超過1個實在要多個集合時優(yōu)先考慮改為分批查詢或二級緩存。3.2 第二板斧EntityGraph更優(yōu)雅的聲明式方案EntityGraph是JPA 2.1引入的規(guī)范Spring Data JPA對它支持得非常好。它的思路和JOIN FETCH類似都是通過一條SQL把關(guān)聯(lián)數(shù)據(jù)join出來但它是聲明式的不需要寫JPQL對代碼侵入更小。EntityGraph(attributePaths {items}) Query(select o from OrderEntity o order by o.id) ListOrderEntity findOrdersWithItems();也可以在Repository方法名上直接加EntityGraph或者定義在實體類上。用起來非常靈活。它和JOIN FETCH的基本原理一致我在實際項目中通常優(yōu)先用EntityGraph原因是維護成本低避免一堆JPQL字符串散落在代碼里。EntityGraph也支持子圖比如同時抓取訂單的itemsitems又關(guān)聯(lián)product可以這么寫EntityGraph(attributePaths {items, items.product})這個場景如果某個產(chǎn)品的ManyToOne默認(rèn)是LAZY那么把product加進attributePaths后會在一條SQL里把兩層關(guān)系全部join出來。但同樣不要濫用子圖。我見過一個同事把整條對象鏈全都塞進attributePaths結(jié)果一條查詢join了五張表返回的數(shù)據(jù)行數(shù)呈笛卡爾積爆炸接口從幾十毫秒變成了幾秒。記住EntityGraph是精確按需加載不是把所有可能用到的關(guān)系都塞進去。還有一個隱藏知識點當(dāng)EntityGraph和實體上的fetch配置沖突時以EntityGraph的配置為準(zhǔn)。所以哪怕你在實體里全設(shè)了LAZY也不影響EntityGraph工作。這也是我推薦全LAZY策略的一個支撐點。3.3 第三板斧BatchSize批量初始化的黑馬有些場景你根本不想動JPQL和Repository只想讓現(xiàn)有的懶加載代碼少發(fā)幾條SQL。這時候BatchSize就派上用場了。Entity Table(name t_order) public class OrderEntity { OneToMany(mappedBy order) BatchSize(size 50) private ListOrderItemEntity items new ArrayList(); }當(dāng)Hibernate檢測到多個未初始化的集合需要加載時它會根據(jù)BatchSize的大小一次性把多個order_id拼到IN條件里select * from t_order_item where order_id in (?, ?, ?, ...)。假設(shè)你有10個訂單的items需要初始化BatchSize50時就會把10個訂單的id放進同一個INSQL從10條變成1條。BatchSize真正厲害的地方在于它不需要改變調(diào)用方代碼。循環(huán)遍歷、stream操作這些代碼原封不動Hibernate在幕后自動幫你合并查詢。對于存量項目改造這是侵入性最小的方案。但要注意BatchSize生效的前提是Hibernate能推斷出“這些集合要一起加載”通常發(fā)生在一次flush/per-rollback的懶加載初始化階段。如果業(yè)務(wù)代碼在每次訪問集合前手動清空了SessionBatchSize就失效了。BatchSize也有一個局限它不會減少訪問集本身時發(fā)起的查詢邏輯只是把N次查詢合并成N/size次。如果N1000BatchSize50仍然有20條SQL。它能極大緩解問題但不能根除。所以更徹底的做法還是讓業(yè)務(wù)代碼不觸發(fā)額外的集合訪問。3.4 第四板斧二級緩存和Cacheable如果N1場景是“同一批訂單的數(shù)據(jù)在短時間內(nèi)被反復(fù)查詢”比如緩存熱點數(shù)據(jù)、配置類數(shù)據(jù)二級緩存可以有效地把重復(fù)SQL攔在應(yīng)用層之外。Spring Data JPA里配合Cacheable或者Hibernate的二級緩存可以讓相同的查詢走緩存不查數(shù)據(jù)庫。二級緩存的坑在于它是弱一致性緩存如果數(shù)據(jù)更新了緩存沒有及時失效就會讀到臟數(shù)據(jù)。所以我一般只把“很少變化、被高頻讀取”的數(shù)據(jù)放進二級緩存比如商品分類、地區(qū)表。訂單這種高頻變更的數(shù)據(jù)強行放二級緩存只會帶來一致性災(zāi)難。另外二級緩存需要你顯式配置CacheConcurrencyStrategy不同策略的讀寫行為完全不同新手很容易用錯。3.5 四種方案的選型建議我把這幾種方案的使用場景歸納成一張表方便你做決策方案最佳場景注意事項JOIN FETCH列表頁需要展示單層關(guān)聯(lián)明細(xì)可接受1條大SQL一對多分頁時謹(jǐn)慎多集合fetch會導(dǎo)致行膨脹EntityGraph多層關(guān)聯(lián)、按需指定查詢路徑代碼可維護性要求高attributePaths不要塞太多按需選擇BatchSize存量代碼改造、無法修改業(yè)務(wù)遍歷邏輯只能減少SQL條數(shù)不能根除批量大小需測試二級緩存高頻只讀、極少變更的數(shù)據(jù)如字典配置注意一致性不適用頻繁寫的數(shù)據(jù)沒有什么銀彈。我見過一些團隊一刀切要求所有列表查詢必須JOIN FETCH結(jié)果分頁接口反而出現(xiàn)內(nèi)存分頁OOM也有人迷信BatchSize結(jié)果寫入場景下集合初始化時機不受控性能依然抖動。正確做法是先看清楚這個接口的IO模式再決定用哪一種。4. 分頁場景下的N1一對多查詢的正確打開方式4.1 為什么JOIN FETCH和分頁水火不容前面埋了一個伏筆現(xiàn)在展開講。訂單列表頁通常需求是這樣的每頁展示20條訂單每條訂單下面要顯示items數(shù)量。用firstResult(page * size)配合JOIN FETCH會出什么問題假設(shè)第2頁的20條訂單每個訂單有5個訂單項。數(shù)據(jù)庫LEFT JOIN后產(chǎn)生的行數(shù)是20×5100行。Hibernate拿到結(jié)果集后要先把100行拆成20個訂單實體再對items賦值。問題是分頁的LIMIT應(yīng)該加在哪個SQL上正確的語義是先找20個訂單再把這些訂單的items查出來。但如果SQL本身是JOIN形態(tài)LIMIT就會被應(yīng)用到100行上你得到的前N行可能只包含幾個完整訂單甚至某個訂單被截斷了一半的items。Hibernate在這條路上的實現(xiàn)選擇是如果它檢測到JPQL中有一對多fetch且有分頁參數(shù)它干脆不做數(shù)據(jù)庫分頁把所有數(shù)據(jù)查出來后在內(nèi)存里做分頁。這個行為在數(shù)據(jù)量大時是致命的——一張百萬行的訂單表你要查第100頁它會把所有訂單及所有items全部加載到堆內(nèi)存然后丟棄掉前面1999條。你會看到接口OOM或者GC頻繁導(dǎo)致Full GC。4.2 方案一先分頁主實體再批量初始化關(guān)聯(lián)既然JOIN FETCH不能和分頁共存那就拆成兩步第一步用普通查詢只查訂單本身分頁交給數(shù)據(jù)庫第二步拿到當(dāng)前頁的訂單ID集合用IN查詢把關(guān)聯(lián)數(shù)據(jù)一次性裝回來。PageOrderEntity orderPage orderRepository.findByStatus(OrderStatus.PAID, pageable); ListLong orderIds orderPage.getContent().stream() .map(OrderEntity::getId) .toList(); ListOrderItemEntity items orderItemRepository.findByOrderIdIn(orderIds); MapLong, ListOrderItemEntity itemsGrouped items.stream() .collect(Collectors.groupingBy(item - item.getOrder().getId()));這里有一個細(xì)節(jié)findByOrderIdIn返回的關(guān)聯(lián)對象它的order屬性如果還是懶加載代理你可能在后續(xù)訪問item.getOrder()時發(fā)起額外的查詢。但因為你已經(jīng)有orderIds了某些場景下可以直接用id構(gòu)造一個引用Entity或者用loadById批量預(yù)置到當(dāng)前事務(wù)的持久化上下文里Hibernate就不會發(fā)SQL了。這也是“會話內(nèi)先占坑”的思路。我實際項目中更常用的方式是在主實體分頁查詢時就用EntityGraph抓單層關(guān)聯(lián)再單獨做一層明細(xì)匯總。這兩種操作各自可控不會在內(nèi)存里做大集合的笛卡爾積。4.3 方案二冗余字段或統(tǒng)計字段電商訂單列表這個場景真正要顯示的往往不是完整的訂單項列表而是“有多少種商品、共幾件、總金額”。強行把items實體加載出來只是為了算個數(shù)非常不劃算。我見過不少架構(gòu)為了省事就這么做了結(jié)果列表接口成了DB的噩夢。合理設(shè)計是在訂單主表增加冗余字段比如item_total_count、item_sku_summary事務(wù)中寫訂單項時同步維護冗余字段。查詢列表時直接查主表不需要碰關(guān)聯(lián)集合。這個方案的代價是寫入邏輯必須保證冗余數(shù)據(jù)一致但在絕大多數(shù)業(yè)務(wù)里訂單項一旦寫入數(shù)量和金額不會頻繁變化一致性風(fēng)險完全可控。這也算是用空間換時間的經(jīng)典思路。如果連冗余字段都不想設(shè)計還有一個退路單獨寫統(tǒng)計查詢不做實體關(guān)聯(lián)。Query(select o.id, count(i.id) from OrderEntity o left join o.items i where o.status :status group by o.id) ListObject[] findItemCountGroupByStatus(Param(status) String status);這種查詢返回的是標(biāo)量數(shù)據(jù)不會觸發(fā)任何懶加載也不會產(chǎn)生實體快照性能很好。缺點是拿到的數(shù)據(jù)要自己組裝到DTO里但相比N1帶來的痛苦這點麻煩不值一提。4.4 超大結(jié)果集游標(biāo)是最后手段有些報表類接口一次要導(dǎo)出幾萬條訂單并附帶每條訂單的明細(xì)。這類場景就算用IN批量查詢幾萬條實體的加載和組裝也會讓內(nèi)存吃緊而且Hibernate的一級緩存會持續(xù)膨脹。這時可以考慮用Stream配合readOnly和fetchSize逐批讀取或者直接用原生的FORWARD_ONLYJDBC游標(biāo)。Hibernate里可以這樣QueryHints(QueryHint(name org.hibernate.fetchSize, value 500)) Query(select o from OrderEntity o join fetch o.items where o.status :status) StreamOrderEntity streamOrdersWithItems(Param(status) String status);注意流式查詢要求事務(wù)保持打開狀態(tài)連接不能被提前釋放。另外如果一對多join fetch加stream結(jié)果集會因為join而放大所以要確保沒有分頁。這類查詢適合后臺任務(wù)不適合同步接口。我建議不到萬不得已不要上這一層先把前幾種方案做扎實。5. 實戰(zhàn)案例一個訂單列表接口的完整優(yōu)化過程5.1 現(xiàn)場問題模擬項目X上線第二周訂單列表接口開始出現(xiàn)偶發(fā)超時。監(jiān)控數(shù)據(jù)顯示該接口打到數(shù)據(jù)庫的SQL總量占整個服務(wù)SQL總數(shù)的65%其中大量SQL形如select * from t_order_item where order_id 123 select * from t_order_item where order_id 456 select * from t_order_item where order_id 789一個典型的N1。負(fù)責(zé)這個接口的是一個剛轉(zhuǎn)JPA不久的同學(xué)他在Repository里寫了這樣一個方法Query(select o from OrderEntity o where o.status :status) PageOrderEntity findByStatusWithPage(Param(status) String status, Pageable pageable);然后在Service層遍歷Page里的訂單打印訂單項數(shù)量。就這么簡單知識盲區(qū)直接變成生產(chǎn)事故。5.2 排查鏈路我當(dāng)時按下面幾步排查花了一整個下午現(xiàn)在把步驟復(fù)盤給你。第一步開SQL日志。一開始show_sql和format_sql打開發(fā)現(xiàn)日志里大量重復(fù)SQL。第二步確認(rèn)是否為N1統(tǒng)計單次請求SQL總數(shù)。用p6spy打印帶耗時的SQL日志確認(rèn)一次分頁請求每頁20條發(fā)出1條分頁SQL 20條order_item查詢。第三步定位觸發(fā)點。開啟use_sql_comments能看到類似/* load one-to-many OrderEntity.items */的注釋直接鎖定到Service層的for循環(huán)。第四步分析數(shù)據(jù)模型。發(fā)現(xiàn)OrderEntity.items用的是默認(rèn)LAZY沒有被任何fetch策略覆蓋。第五步確認(rèn)分頁場景。這一步最關(guān)鍵因為分頁場景不能直接用join fetch否則會觸發(fā)Hibernate內(nèi)存分頁我當(dāng)時測過把上面那個分頁查詢直接改成join fetch items后Hibernate直接把所有訂單讀入內(nèi)存再分頁一次請求加載了全表數(shù)據(jù)數(shù)據(jù)庫的臨時連接瞬間滿了。5.3 優(yōu)化落地方案最終我采用了兩步走策略。第一步主頁面分頁查詢保持普通查詢不加join fetch分頁交給數(shù)據(jù)庫LIMIT。第二步拿到當(dāng)前頁的訂單列表后收集所有orderId用一條IN查詢批量查出所有items然后在Service層按orderId分組組裝成Map。public ListOrderListVO getOrderList(int page, int size) { Pageable pageable PageRequest.of(page, size); PageOrderEntity orderPage orderRepository.findByStatus(OrderStatus.PAID, pageable); if (orderPage.isEmpty()) { return Collections.emptyList(); } ListLong orderIds orderPage.getContent().stream() .map(OrderEntity::getId) .collect(Collectors.toList()); ListOrderItemEntity itemList orderItemRepository.findByOrderIdIn(orderIds); MapLong, Long countMap itemList.stream() .collect(Collectors.groupingBy(i - i.getOrder().getId(), Collectors.counting())); return orderPage.getContent().stream() .map(order - new OrderListVO(order.getId(), order.getOrderNo(), countMap.getOrDefault(order.getId(), 0L))) .toList(); }優(yōu)化后一個完整請求的SQL數(shù)量從21條降為2條接口P99從800ms降到120ms。5.4 這類排查的通用套路事后我把這套排查總結(jié)成四條經(jīng)驗也分享給你。第一N1問題一定是在“主查詢 循環(huán)訪問”這個結(jié)構(gòu)下發(fā)生。見到for循環(huán)、stream、mapgetXxx、集合訪問這類代碼就要本能警惕。第二SQL日志里重復(fù)率超高的SQL是最大嫌疑。用p6spy的耗時輸出一眼就能看出累計耗時最多的SQL模板是什么。第三不要一上來就改代碼。先在紙上畫清楚這個接口要查幾層實體哪些層真正需要哪些層只是“順便”。N1很多時候是“用不到的數(shù)據(jù)被強行加載”造成的。第四優(yōu)化完一定要用日志驗證SQL條數(shù)。很多同事改完說“應(yīng)該好了”我問一句“日志里幾條SQL”答不上來。沒有SQL條數(shù)對比的優(yōu)化都是自我安慰。6. 容易忽略的N1變種與常見誤區(qū)6.1 單向關(guān)聯(lián)也能引發(fā)N1很多資料講N1都拿雙向關(guān)聯(lián)舉例容易讓人以為單向關(guān)聯(lián)就安全。實際完全不是。比如你有一個Service類只依賴OrderItemRepository通過ListOrderItemEntity findByOrderId(String orderId)查出訂單項每個item上都有ManyToOne private OrderEntity order當(dāng)你遍歷item并訪問item.getOrder().getOrderNo()時同樣會產(chǎn)生N1。這里的order是懶加載代理每訪問一個都會觸發(fā)查詢。解決辦法同樣簡單要么在這個查詢的EntityGraph里抓取order要么先把訂單信息按id批量查出來放一個Map里再替換引用。重點是單向關(guān)聯(lián)只是減少了映射的書寫量并不減少懶加載觸發(fā)次數(shù)。6.2 Open Session in View是N1的幫兇很多Spring Boot項目默認(rèn)開啟了spring.jpa.open-in-viewtrue。這個配置的意思是每個Web請求的整個生命周期都保持同一個Hibernate Session打開。好處是Controller層訪問懶加載屬性不會報LazyInitializationException代價是你會無意識地在任何地方觸發(fā)懶加載N1問題被這個開關(guān)徹底掩蓋。我在檢查項目時有個習(xí)慣新項目強烈建議把open-in-view設(shè)為false徹底斷了“偷懶”的念想。這樣在Service層不把關(guān)聯(lián)數(shù)據(jù)查全到Controller層就必然報錯逼著你在數(shù)據(jù)訪問層把關(guān)聯(lián)關(guān)系設(shè)計清楚。對于存量項目逐接口排查比一鍵改配置更穩(wěn)妥因為當(dāng)你把open-in-view關(guān)掉后可能出現(xiàn)一大堆LazyInitializationException需要逐個修復(fù)。6.3 誤區(qū)把LAZY改成EAGER就萬事大吉我前文已經(jīng)說過這是飲鴆止渴。原因有三。第一EAGER導(dǎo)致查詢持久化實體時無論你需不需要關(guān)聯(lián)數(shù)據(jù)都會JOIN查詢SQL可能變成多表大JOINcase量翻倍。第二多個EAGER集合疊加時結(jié)果集行數(shù)會指數(shù)膨脹產(chǎn)生笛卡爾積。第三列表頁、詳情頁、導(dǎo)出任務(wù)對關(guān)聯(lián)數(shù)據(jù)的需求完全不同EAGER是“全都要”沒有任何取舍余地。Hibernate官方文檔其實早就建議盡量避免EAGER默認(rèn)全部LAZY在查詢時精確控制。記住一句話映射層只定義關(guān)系不定義查詢計劃查詢計劃應(yīng)該由Repository上的fetch策略決定。6.4 分批查詢之后又出現(xiàn)的二級N1有時候你以為優(yōu)化完了結(jié)果在“批量初始化”這一步里又踩了新坑。舉個例子我用findByOrderIdIn批量查出訂單項后為了給前端返回商品名稱遍歷item訪問item.getProduct().getName()。如果product的關(guān)聯(lián)是LAZY這里馬上又觸發(fā)N1只是目標(biāo)從t_order_item變成了t_product。這類問題很好復(fù)現(xiàn)優(yōu)化方案本身引入了新的實體訪問路徑但沒有把新路徑一次性加載全。解決方式還是在批量查詢上做文章把product也加進EntityGraph或者用另一個批量查詢把product全部查出來做Map。我總結(jié)了一個實用經(jīng)驗法則每次對一個實體的List做關(guān)聯(lián)屬性訪問前都問一下“這個關(guān)聯(lián)屬性背后的實體我是不是已經(jīng)把它在當(dāng)前上下文里弄齊了”齊了就是安全的沒齊就是N1溫床。6.5 二級緩存誤用帶來的混亂最后提一個常見翻車現(xiàn)場為了優(yōu)化N1有人把訂單、訂單項都配上了Cacheable。結(jié)果訂單更新后關(guān)聯(lián)的訂單項緩存沒失效用戶看到的是“改了訂單狀態(tài)但明細(xì)還是舊的”。因為Hibernate二級緩存默認(rèn)是基于實體主鍵和集合的更新主表時不一定級聯(lián)清理關(guān)聯(lián)集合的緩存。這種數(shù)據(jù)一致性問題比性能問題嚴(yán)重得多查起來又是一整天的活。二級緩存存在的意義是緩存“不太會變化”的數(shù)據(jù)。訂單、庫存、余額這類數(shù)據(jù)我從來不放二級緩存。寧可多查幾次數(shù)據(jù)庫也不要讓用戶看到臟數(shù)據(jù)。7. 從框架層面根治組織層面的防御手段7.1 Repository層設(shè)計規(guī)范N1問題不是靠某一招就能永遠(yuǎn)避免的它更多是編碼習(xí)慣問題。我所在團隊沉淀了一套持久層開發(fā)規(guī)范這里分享給你參考。第一Repository方法上禁止直接返回實體集合統(tǒng)一返回DTO/VO或帶EntityGraph的投影。這樣做能強制讓開發(fā)者思考“我需要哪些字段”而不是“把整個實體給我”。很多字段根本用不上加載進來純屬浪費。第二所有關(guān)聯(lián)的fetch策略一律顯式LAZY禁止出現(xiàn)默認(rèn)EAGER。這個可以通過Code Review守住也建議在實體基類上寫統(tǒng)一注釋。第三如果Service層要在同一個事務(wù)里訪問多個關(guān)聯(lián)屬性盡量在查詢階段就用EntityGraph抓全。實在做不到就用批量查詢Map組裝。7.2 SQL審計自動化代碼審查防不住每一個漏網(wǎng)之魚更可靠的是自動化監(jiān)控。我有兩個比較推薦的做法。第一個在測試環(huán)境或預(yù)發(fā)環(huán)境打開SQL日志統(tǒng)計對單接口做SQL數(shù)量斷言。比如用JUnit的DataJpaTest集成測試在測試結(jié)束后統(tǒng)計Hibernate的SessionFactory.getStatistics().getEntityLoadCount()或者getCollectionLoadCount()超過閾值就報錯。這能保證新增代碼不會引入無休止的N1。第二個對關(guān)鍵接口做流量錄制或網(wǎng)關(guān)層的SQL監(jiān)控。把接口每分鐘的SQL總次數(shù)畫成曲線如果某個發(fā)布版本后曲線突然升高大概率引入了N1或大循環(huán)加載。我在項目中用過數(shù)據(jù)庫中間件的SQL審計能力效果很好能精確定位到機器和接口URL。7.3 團隊培訓(xùn)的價值看似是技術(shù)問題實際上是知識盲區(qū)。Hibernate的初學(xué)門檻低于MyBatis很多新手上手特別快但對懶加載機制缺乏敏感度。我建議團隊里定期做一次“SQL日志閱讀”的workshop拿一段真實日志讓大家猜這個接口里循環(huán)了多少次、查了幾次庫。這個訓(xùn)練做三輪之后團隊至少會養(yǎng)成“寫完查詢先看日志”的習(xí)慣。有一句話我在Code Review時經(jīng)常說你以為你寫的是一行Java代碼其實你寫的是三條SQL。把這句話內(nèi)化成團隊的默認(rèn)認(rèn)知N1的復(fù)發(fā)率會大幅下降。7.4 兜底方案全局懶加載監(jiān)控開關(guān)如果團隊規(guī)模較大、水平參差可以在框架層面加一個兜底保險。比如實現(xiàn)一個Spring AOP切面監(jiān)控Service方法執(zhí)行期間發(fā)起的SQL數(shù)量當(dāng)單方法SQL數(shù)超過閾值時打印告警日志并拋異常。這樣即使有人不小心寫了循環(huán)查庫的代碼也不會無聲無息上線。但這類兜底方案不能作為常規(guī)手段依賴。因為“SQL多”不等于“有問題”有些合法查詢本身就涉及很多子查詢。建議把閾值設(shè)得寬一些只做告警不做阻斷避免誤殺正常業(yè)務(wù)。8. 我踩過這些坑之后的一些最終體會N1問題看起來是個性能話題本質(zhì)上是個“控制意識”的問題。Hibernate給了你很大的自由度同時也把查詢計劃的責(zé)任移交給了你。你用MyBatis寫關(guān)聯(lián)查詢時每一條SQL都是你自己寫出來的代價直觀用JPA/Hibernate時SQL是隱式生成的代價藏在方法調(diào)用后面。這意味著你的心智模型必須跟上框架的抽象層。我個人的建議是剛接觸Hibernate時一定把所有懶加載信息摸透把SQL日志當(dāng)成日常開發(fā)的一部分不要等到線上告警才追悔莫及。我甚至?xí)诒镜亻_發(fā)時把show_sql常開配合一個不錯的日志格式化工具每寫一個查詢就停下來看一眼SQL條數(shù)。這個習(xí)慣幫我在很多項目里提前擋住了潛在問題。最后分享一個小技巧如果你的接口確實需要完整的實體圖數(shù)據(jù)又不方便使用EntityGraph可以考慮用DTO投影加對象組裝。不要總覺得DTO麻煩在性能問題面前一點類型轉(zhuǎn)換的開銷遠(yuǎn)比幾十條網(wǎng)絡(luò)往返便宜。把“少發(fā)SQL”作為指標(biāo)代碼多寫幾行完全值得。希望這篇經(jīng)驗對你正在處理的N1問題有實際幫助。如果在優(yōu)化過程中也遇到了奇怪的SQL膨脹問題歡迎多交流Hibernate這潭水多踩踩總會摸清底。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
..日韩av毛片精品久久久| 亚州精人品大香蕉| 亚洲色图综合| 懂色AV网| 久久噜噜噜精品国产亚洲综合| 91视频国品一二三区| 综合激情二| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 久久成人午夜精品影院 | 混色激情av| 国产精品香蕉热久久新品| 五月婷亚洲精品天堂| 国产av色网| 无码人妻精品一区二区三区九九| 天天综合网91入口| 黄色大片一区二区密桃丝袜| 亚洲丝袜二区| 婷婷亚洲天堂| av在线资源| 操高情无码| 无码高清操逼| 天天看天天日天天操| 亚洲欧美综合图片| 精品国产乱码久久久久久日本公司| 综合 青草 伊久久 影院 综合 | 在线观看午夜婷婷久久久久清性观看| 国产传媒美日韩av| 亚洲AV高潮| 欧美夜夜狠| 婷婷中文字幕| 亚洲欧洲小说图片视频 | 久噜噜| 高清不卡一二三区视频......| 久久99网站| www色色com| 黑人干亚洲| 91天天c| 亚洲永久永久永久永久一级一级一级精品 | 国产一级高跟丝袜| 久久精彩免费视频| 91 丝袜在线| 欧美第38页| 中文字幕超碰CAO| 91夜夜蜜桃臀1区2区3区| 精产国品一区二三产品| 天天综合~91| 精品人妻一区二区三区日产乱码| 中文乱码字字幕在线第5页| 欧美亚洲激情| 九月丁香婷婷色| 手机在线A片| 色婷婷香蕉| 青草视频在线看看看看看看看看看| 99无码视频| www色色com| 97人肏| 九九热男人天堂| 96久久科窝| 中文字幕二区日韩天堂| 亚洲激情天堂网| 国产精品久久久久久9999| 欧美女同在线| 日韩成年人性爱视频| 五月婷婷丁香六月丁香| 亚洲成人免费电影| 久久111| 欧美日韩97在线| 欧美精品自慰系列寂寞少妇| 91碰碰| 天天日日日射| 久久三区四区| 久久高清欧美国产| 丝袜亚洲91| 国产2.3.4区| 日日夜夜精品视频| 丁香六月东京热| 天天操天天射青青草| 超碰97久久国| 国产精品成久久久久午夜午夜| 在线观看免费视频国产| 日韩免费人妻色情网站| 国产在线激情| 精品国产肉丝袜在线拍国语| 天天天乱色综合全| 91色宗合| 中文字幕 国产区| 99久久com免费视频′| 97在线观视频免费观看| 三级日韩一区二区三区| 色情五月丁香| 国产精品午夜精品| 男女性感激情网站| 大香蕉伊利av| 欲色综合| 亚洲天堂 视频你懂的| 欧美日韩资源在线| 超碰九7| 女人双腿搬开让男人桶| 九九拍拍精品视频在线播放 | 在线人人人人人人精品超| 九九九久千久久激情蜜桃在线看 | 中文字幕在线日亚州9| 射欧美综合| 免费视频97| 久久女婷| 91色欧美| 99天堂网| 91国产丝袜白虎| 成人精品一区二区91毛片不卡| 熟妇女伦乱视频| 国产强上视频在线观看| 日韩无码AB| www熟女乱伦com| 五月丁香啪| 91欧美少妇| 国产一区在线免费播放| 日韩综合97P| 国产自产自拍| 色悠久久久av| 国产女人成人精品视频| 亚洲怡春院| www.久久最新地址| 好爽免费视频,| 国产黄色影片在线观看| 蜜桃久久精品一区二区三区| 亚洲黄色a级片| 日日干男人的天堂| 三级网色| 国产精品禁久久久精品| 超碰亚洲97| 亚洲不卡三级手机播放| 中文字幕文字幕无码一区二区三区电影99| xxxx网站亚洲精品| 九九免费影片| 91人妻丝袜无码| 亚洲自拍偷拍视频在线| 久久精品国产久精国产| 免费AV播放| 欧美少妇色图| 东北老女人的激情视频| 国产精品一二三在线看| 亚洲国产欧美中文永久| 成人国产视频在线观看| 欧洲精品久久| 超AV色女| 国产亚洲精品美女久久久久久2021| 91超碰碰在线| 五月天婷婷综合网| 人妻另类 专区 欧美 制服| 97大色网| 亚洲国产成人高清在线| 国产特级毛片AAAAAA高潮流水| 青青草久久| 黄污污污污| 男女做爰猛烈动高潮A片免费应用 少妇厨房愉情理伦片bd在线观看 不卡中文字幕aⅴ在线 | 一起草三级AV电影在线观看 | 午夜呻吟欧美| 精品成人av一区二区三区在线| 久久久亚洲熟妇资源| 久久国色天香香蕉| 成人午夜小视频手机在线看| 尤物av网站免费在线播放| 欧美精品在线观看| 成人网站 免费观看| 欧美精品97| 九九九九免费高| 日本一级一级一级一级| 911av网站免费观看| 欧美 亚洲| 国产精品密臀网在线观看| 99综合| 日韩久久.一级黄色片| 99热销国产这里有精品| 91 国产丝袜在线播放-百度| 青青三级视频| 无码日韩网站| …中文字幕亚洲乱,97人妻无码费视…| 国产精品激情久久久久久久| 东京热毛片调教| 在线小视频| 99热97| 91成人久久| 麻豆国产精品午夜视频| 伊人性在线视频| 97超碰精品成| 色www精品视频在线观看| 亚洲天堂人妻一区二区| www久久99| 国产美女销魂在线观看不卡| 新久久AV| 在线毛片片免费观看| 欧美偷拍| 99少妇| 偷拍综合亚洲| 美女黄色91| 欧美综合传媒| chaopen97久久| 老司机午夜精品福利视频一区二区| 国产suv精品一区二区四| 小泽玛利亚一二三| 99综合| 亚洲精品成人激情在线| 尤物一级在线免费观看| av午夜影院在线播放| 久久久久久亚洲中文| 久久久久久久免费A片国产成a人亚洲精∨品无码 | 亚洲午夜福利视频| 国产一级片| 极品色www影院| 日韩欧美中文日韩欧美色| 日韩欧美国产一区二区三区四区| 先锋色眉乱伦资源| 96久久精品一二三区色欲| 操逼无码一区| 欧美 亚洲 另类 综合| 国产白嫩精品久久| 性九九九九九九| 国内外毛片在线观看| 无码精品啪啪啪一区二区三区三州| 无码久| A男人的天堂| 97久久久精品| 精品久操| 超碰免费人妻在线| 亚洲乱色熟女一区| 精品一区二区成人| 六十路日本| 大香蕉色十月| 亚洲欧美setu| 青青青草原| 91成人久久| 蜜区区视频79 | 在线观看无码三级少妇| 久久久 国产精品| 深爱五月婷婷| 青青草精玖玖69精品| 欧美91在线+|+欧美| 国产欧洲精品亚洲午夜拍精品| 国产精品一二三| 九九九九精品九九九九| 中文字幕日韩人妻视频一区二区三区 | 久久人妻办公室视频| 人妻久热在线| 人人操人人操人妻人| 久热69九色熟妇97| 中文字暮97| 精品无人区麻豆乱码久久久| 久久精品成人| av强奸乱轮| www.天天干| 三级网站超变态精品| 黄页网站成人免费| 国产一区二区三区白丝| 欧美熟妇视频| 青青青草原| 在线免费观看高清无码视频| 亚洲欧综合另类无码一区| www.色婷婷.com| 91天堂视频| 国内毛片四区| 久久精品28| 97精品熟女少妇一区| 天天综合色| 91九九九吃| 蜜乳AV免费观看| 在线观看综合精品亚洲| 成人欧美日超碰| 91色图| 亚洲一区日韩| 夜夜嗨视频| 亚洲欧美一区二区三区一猛片| 久久一区无码| 国产999精品久久久| 亚洲AV无码翔田千里网站| 91原创在线观看| 亚洲91射| 国产精选三级在线观看| 九九热在线精品视频| 国产精品操| 尹人大香蕉视频在线| 中文字幕第95页| 曰韩操B| 99国产精品免费| 久久国产在线一区二区| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区 | 黄网色一区二区三区四区精品| 欧美性后入| 毛片一区二区| 大香蕉伊人亚洲| 热99这里有精品综合久久 | 日韩国语字幕| 91在线免费精品视频| 色婷视频| 欧美亚洲首页| 91neishe| 91性高朝久久久久久久久| 亚洲色图91欧美日韩| 加勒比综合| 午夜呻吟欧美| 免费少妇一区二区| 99色骚| 成人网站 免费观看| 91国产丝袜美女| 欧美三级中文字幕hd| 日本黄色XXX| 日本123区操B视频| 日骚逼视频| 91亚洲青青草原精品1区| 国产在线视频午夜精华在| 欧美熟妇乱码在线一区| 午夜福利一区二区影院| 2019午夜福利视频| 无码又爽又硬又激情免费视频| 亚洲无码日韩电影| 精品久久久久黄少妇| 久久久久久久伊人精品| 精品人妻一区二区三区蜜桃视频| 乱精品一区字幕二区| 美女天天干| 麻豆一区在线| 成人在线视频网| 操逼网站网站| 色香综合天天影视综合 | 99国产精品在线观看| 可以在线观看的黄色网址| 热热色国产一二区AV| 五月丁香色婷婷| 亚洲中文字幕精品一区| 日韩八十路老熟女| 日韩ab网| 五月婷婷综合网| 欧美日韩免费性爱| 玖玖综合网| 午夜福利区| 婷婷色色网| 日操粉逼逼| 97久精品| 一区二区三区欧美激情| 亚洲国产精品成人综合| 欧美亚洲特P| 最新精品久久蜜桃 | 91精品久久久久久| 欧美暴力猛交| 旡码电影特区| 久久一二三四五六七八九区区区| 高跟丝袜AV专区国产| 立川理惠加勒比无码| 91老熟妇| 欧美碰碰综合色| 欧美A√综合网| 亚洲天堂区| 1024人妻熟女一区二区三区| 放黄片放3级黄片没穿衣服| 亚州图片第一页| 有码人妻系列| 欧美日日夜夜| 伊人青青一区成人视频在线观看区 | 五月丁香影院| 操逼操网| 99在线无码精品秘 入口黑人| 午夜精品久久一区二区| 美女久久久| 男人的天堂三级| 久草在| 久久精品视频28| 狠狠狠一区二区三区| 去干网最新版| 欧美 亚洲 偷拍自拍| 波多野结衣先锋影音| 国模无码人体一区二区三| 啊啊啊草死我| 超碰在线一区| 99久久99久久免费精品蜜臀| 国产精品另类| 日韩大香蕉AV影片| 91精品丝袜久久久久久| 中文字幕1区2区| 美女上床网站| 日本道人妻久久久在线不卡色视频| 色男人色天堂东京热| 色爱欲亚洲| 加勒比日本在线| 99www.bibizy香蕉资源国产一区二区三区高清 | 欧美1727免费观看视频| 91久久国产综合久久| 国产 日韩 欧美 人妻 熟女 中文| 色小视频蜜乳| 热久久91婷婷| 欧美伦乱爱| 韩日精品福利视频一区不卡在线免 | 91老司机视频| 免费视频在线一区二区不卡| A片大香蕉在线| 精品国模无码| 日韩精品人妻一| 亚洲美女自拍偷拍视频| 日韩久久三区| 免费网站观看www在线观| 精产国品一区二三产品| 曰韩少妇无码| 精品久久97观看在线视频| 五月天亚洲色图| 大香蕉免费3| 18禁免费视频| 狠狠操狠狠插| 天天干天天日天天射黄色片| 精品久久9| 伊人宅男大香蕉| 91久久久久久| 亚洲综合另类欧美久久久| 诱惑人妻欧美一区在线播放| 在线观看 99热| 我爱操| 在线综合 亚洲 欧美中文字幕 | 久插综合| 黄色工厂这里只有精品| 人妻献身系列第54部| 欧美成人一级免费电影| 激激五月| 乱码人妻一区二区三区| 日韩欧美性爱电影在线观看| 91 亚洲 欧美 日韩 国产 综合| 不卡啪啪视频| 蜜臀99999| 尤物视频新赏网鲜网色诱网| 国产乱伦亚洲色图高清无码| 97碰在线视频| 搞中出视频在线观看| 中文字幕乱妇免费视频| 欧美大香蕉同搞| 亚洲第一页色| 亚洲国产精品久久久久婷婷老年| 中文字幕精品探花视频| 亚洲国产麻豆一区二区三区| 精品国产99| 九七超碰人人乐| 性久久| 看看小穴| 9Ⅰ超碰| 最新的亚洲无吗| 亚洲、日韩、综合、另类| 色与欲影视天天看综合网| 欧美性爱18观看| 91碰碰| 死我十八禁| 人妻丰满熟妇一区二区三| 天天综合91在线| 亚洲色综网| 亚欧成人综合影院| 91丝袜激情在线 | 日本久久超碰| 啪一啪免费视频| 最新av在线| 88xx成人精品视频| www四虎| 爱逼综合| 丝袜六区| 一二三区操逼国产91| 人妻啊啊人妻啊| 69久久| 在线播放成人网站| 国产91丝袜 在线播放| 免费看日产一区二区三区| 天天操天天日青青草超碰av| 美女午夜福利免费视频| 五十路人妻在线| 欧美日韩亚洲一区二区在线观看| 97超碰久久色| 婷婷视频在线免费观看| 涩亚洲欧洲| 亚洲五月婷| 大白逼三四级| 四色永久成人网站| 天天肏视频| 日韩中字av一区| 日韩电影在线观看网址| 女人被添高潮免费视频| 欧美亚州色的图| 日韩黄色av中文字幕| 国产乱弄免费在线视频。| 性爱视频免费网址| 精品国产国产AV| 二男一女成人A片| 91丝袜在线视频| 国产精品视频一区二区三区八戒| 麻豆区久久久久亚| 婷婷大香蕉| 男女无套 免费网站| 少妇被玩视频二三区| 亚欧无码线免费观看视频| 大香蕉天天看妹子| 69精品久久久久中文字幕| 夫妻AV网站| 91青青| 开心激情站| 精品综合久久久久久五月天| 色天堂综合| 牛牛aV| 91综合网| 日本久操视频| av网站在线看| 欧美女同在线| 91在线视频免费中出| 欧美极品美女aaaaaa级黄片| 亚洲电影91| 亚洲 欧美 91| 国产成人亚洲精品无码古代早漏男| 啊啊啊水好多| 国产熟女精品区| 日韩成人精品中文字幕| 高清无码一区二区三区| 78久久| 婷婷久草| 色 婷97| 欧美成人性爱视频大全| a片在线播放| 久久精品一区一起草| 欧洲免费一区二| 国产成人无码高清| 东北丰满熟女国产一区| 9久精品| 国产欧美日产一区二区三区 - 国产欧美日 | 国产Aα| 蜜臀久久99精品久久久| 九九热只有精品| 日韩噜噜69| 欧美第一页性| 99综合视频一体| 美国aaaaa一级黄片| 一起草三级AV电影在线观看 | 91Chinese在线| 欧美性爱日韩性爱| 亚洲一区二区三区春色| 鸥美中出| 97久久久久| 亚洲国产亚洲天堂| 91老熟女老女人国产老太| 伊人久久亚洲中文字幕| 蜜臀久久99精品久久久久久久久| 免费精品福利在线观看| 少妇高潮对白在线观看| 18禁中文字幕| 99精品欧美一区二区三区桃色| 一区| 91高跟美女在线播放| 成人精品视频一区二区| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 久神马| 好湿好紧好爽 视频| 久久久国产三级黄色片| 爱av免费| 九九热AV| 丁香六月婷| 91超级碰碰| 九九热视频在线观看| 五月天激情影院| 人人扣人人操| 99久久久| 丰满人妻一区二区三区在线| 蜜桃久久久久久久| 九九热五区| 丁香婷婷激情五月天无毒不卡| 亚洲高清欧美总合| 极品色综合| 亚洲国产精品成人久久蜜臀| 免费观看日本操逼视频| 成人蜜乳小视频网站| 国产福利一区二| 人妻丰满熟妇一区二区三| 草草影院日本第一页| 国产女人操逼视频| 婷婷五月天丁香花| 欧美亚洲激情小说| 国产小炒后入式| 老鸭窝日丰县女人| 免费视频97| 自拍偷拍第26| 亚洲成熟国产精品美女| 丁香色色网| 亚洲 中文 女同| 啪一啪免费视频| 成人aⅴ一区二区三区| 97超碰色色| 99久久国产精品免费高潮| 青春草莓视频在线观看网址| 天天干天天燥| 天天精品| 日韩影片中文字幕一区二区三区| 欧美色图成人网一区二区| 91美女视频电影| 97鸡把在线视频| 1769成人国产精品视频| 国产精品欧美日韩久久| 屌逼麻豆| 天天操天天谢| 九久9精品| 五十路六十路七十路熟婆| 日本高清有码网址视频| 精品夜夜澡人妻无码| 夜夜操中文字幕| 国产97在线 | 亚洲| 丁香六月激情| 日韩97视频!在线| 欧美偷偷网| 中文?日韩?免费?精品| 91强热人妻| 国产精品青青草| 亚洲精品久久一区二区三区蜜桃臀| 综合色91| 欧美日韩国产色图在线| 久久超碰、| 亚洲人久久久久日| 亚洲精品亚洲人成在线麻豆| 欧美亚洲丝袜美女电影| 国产日韩怡红院| 久久久久九九九| 亚洲 图片 欧美 色图| 日比av无码| 亚洲蜜桃V妇女| 亚洲av热热色| 国产毛片片精品天天看视频| www.色五月| 97精品在线| 影音先锋日本乱伦| 91亚洲不卡一区| 国产欧美另类久久久精品课程| 国产精品呦一区二区三区| 一区,二区,三区网站| 国产9l 大屁股| 手机看片1025| 九久久精品| 人妻 丝袜美腿 中文字幕| 一区中文字幕二区日韩| 日韩兔费看黄片| 97 九色| 成人性爱免费播放| 九九久久一区二区三区| 校园春色综合网| 91熟女熟妇视频网站| 久久黄黄黄| 另类天堂| 久久二| 久久精品国产精品亚洲艾通辽熟妇| 伊人久日| 一区二区三区视频| 97久久国产精品女不卡| 久久久爆乳翘臀一线天伦理视频| 欧美日韩亚洲天堂| 蜜臀久久久久久999| 夜夜爽夜夜| 大香蕉伊利av| 国产在线综合福利网站| 欲色影视综合吧| 欧美日韩大黄片| 吉川爱美亚洲二区在线| 51一区二区三区| 亚洲91射| www五月| 亚洲欧美日韩中文播放| 天天天肏屄欧美| 国产一区二区三区视频在线看| 欧美少妇性乱| 日韩不卡a级视频专区| 后入式福利| 囯产精品一区二区三区线|亚洲人成无码网WWW动漫|国产精品免费一级... | 亚洲无码99| 日本熟妇人妻一区二区三区| 97色冈| 天天上日日上日韩精品| 国产小炒后入式| 国产高清无码一区二区三区四区皇冠| 日韩内| 久久久噜噜噜久久久| 人妻献身系列第54部| 4虎在线视频| 在线日韩视频| 国产狂喷潮在线精品| 欧美大片一区二区三区 | 国产91美女视频| 高精欧美色| 九九毛片这里只有精品| 国产一在线观看| 精品日韩产品在线,日韩在线不卡视频,欧美日韩免费专区/久, | 中文字幕日韩精品久久| 久9爱经典视频| 夂久色| 国产一级高跟丝袜| 中文区中文字幕免费看| 麻豆精品A片免费观看| av天堂5| 日韩日本欧美在线观看| 综合大香蕉美。| 任我爽视频在线观看| 中文字幕精品区先锋资源| 国产深喉视频一区二区| 亚洲精品97中文字幕| 欧美色三级片91| 亚洲综合中文字幕有码| 精品一区二区国产日韩| 男人天堂毛片| 在线情色电影 91大 | 蘋果手機免費看成人Av| 中文啪啪视频| 伊人五月天| 国产精品亚洲无码| 欧美极品| 久久αⅴ| 亚洲图片偷拍欧美| 超碰在线97国产| 蜜色网色哟哟| 狠狠干综合| 岛国艾薇凹凸视频天堂| 亚洲日本激情| 精品蜜乳AV免费观看| 亚洲美女精品九九视频| 久超碰这里只有精品| 欧美成人综合| 神马久久中文字幕| 99999精品视频| 青草视频在线看看看看看看看看看| 黄色区免费观看中文字幕| 乱伦熟妇一区二区| 亚洲九九九九| 色欧美亚洲| 東南亚性呦成人伦理资源在线视频| 亚洲精品97中文字幕| 亚洲高清内射| 久久做97| 美女97超碰| 亚洲限制级在线| 国产精品青青草| 欧亚综合一卡二卡中文字幕| 志村玲子视频一区二区| 婷色五月| 久久精品小视频| 婷婷五月天网| 一区二区三区精品黑丝白丝酒店对鸡 | 八戒无码国产午夜福利| 强被迫伦姧在线观看无码网站| 日本不卡二区| 日韩一级欧美一级国产一级台湾| 网友自拍第一页| 尤物视频视频官网| 人妻9117c| 人人操人人摸人人看人人插| 最新亚洲人成网站在线影院| 国产黄片精品在线| 日本女优在线视频福利| 美国日韩黄色片| 91人妻Pr| 夜色五月天| 67194无码不卡| 色五月天AV| 97精品久久久久中文字幕| 国产精品一级二级在线| 超碰久草| 青青草中文字幕| 另类图片欧美激情综合| 日韩国产欧美伦理在线| 美国一区二区免费视频| 狠狠色综合网| 97超碰天天| 日韩精品国模| 中文字幕日本久久| 婷婷丁香六月| 欧美爆操91| 99久在线精品99re8热视频在线| 天堂av最新电影网| 加勒比伊人| 黄色在线网站| 色婷久久| 麻豆精品A片免费观看| 精品人妻伦一区二区三区久久| 日日躁天天躁狠狠躁| 日韩成人无码| 欧美一区二区观看在线| 懂色综合久久久| 日本中文字幕一区| 日韩综合色图| 日韩色| 91蜜臀在线久久久久| 91 综合 色| 精品人妻一区二区三区在线视频不卡| 久久国产免费激情视频| 狠狠色丁香| 大香蕉啪啪啪啪在线| 男人的天堂99| www.99中文字幕| 超碰亚洲欧美日韩无| 国产1727欧美| 欧美精品精品一区二区| 欧美啪啪女女| 久久久网一区| 97亚洲综合| 黄片在线免费在线观看| 男人久久精品| 97色碰| 色999五月色| 亚洲资源网| 人妻9117c| 红杏大香蕉| 黄久久| 韩日性爱av| 嗯啊不要啊啊在线观看视频| 久久日韩肥臀| 国产亚洲日本精品在线| 日韩在线97| 亚洲中字幕日本一区二区三区| 国产成人久久久精品免费AV| 精品国产久久乱码| 老子午夜伦不卡影院| 蜜桃色色网站视频三区| 草B在线| 久久精品国产亚洲AV高级北京| 亚州综合电影| 性综合网| 草草影院在线视频| 嗯嗯不要 视频| 欧美大香蕉专区网| 麻豆国产第一| 日本精品网站在线中文| www.一本大99| www.av家庭乱伦| 无码99| 国产精品自拍视频| 夜夜一区二区| 熟妇熟女一区二区三区| 综合婷婷| 91丝袜在线播放| 日本一级一级一级一级| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 无码操逼网| 亚洲图片 激情小说| 精品国产一区二区三区香蕉欧美| 日本青青草在线| 9久在线视频只有精品| 视频在线观看一二三区| 免费观看日本操逼视频| 欧美久久婷| 蜜乳视频网站| 大香蕉之青青草原| 一区二区三区 日韩欧美| 搡老女人老91妇女熟女| 多乙久久久久久| 国产2.3.4区| 人人爱操| 男女啪啪网站免费视频| 亚洲国产一级中文综合久久天堂在线免费观看| 九七超碰| 色情亚洲日本成人| 成人 日本A片无码8888| 国产三级中文字幕粉嫩| 六月丁丁香| yw尤物av无码点击进入麻豆| 91欧美美女日韩国产婷婷| 久久五月天婷婷丁香中文字幕| 高清肉丝中文无码| 制服乱伦| 蜜臀久久99精品久久久| 9久久美女首页| av天堂5| 久久久96| 熟女网站最新| 久久激情视频| 日本人妻最新在线中| 国产又大又粗又色生活片亚洲国产精品成人久久久综合免费 | 婷婷激情四射| 欧美大香蕉97| 激情久久av一区av二区av| 九热中文字幕| 伊人久久亚洲中文字幕不卡| 亚洲午夜av| 91丨国产丨白浆秘 洗澡动漫| 熟女网站最新| 人妻熟女午夜精品在线| 国内偷自视频区视频综合| 少妇人妻在线| 激情文学 国产一二三aV| 2021久久国产综合精品青草| 天天做天天爱| 色拍偷亚洲| 殴美性色a级欧美| 国产大学生口爆吞精合集| 欧美日韩中文字幕人妻| 欧美天天综合站| 99久久这里只有精品| 久久一级无码精品毛片6| 日本一级特级毛片视频| 天操天操夜操夜月月年年操操| 亚洲天天艹| 国产精品自拍欧美在线| 99婷婷一区二区| 中文字幕欧洲有码| 日韩人妻无码精品系列| 亚洲天堂电影精品一区| 伊人五月天激情| 五月天婷婷在线看| 欧美亚洲中文字幕| 99re在线视频国产| 欧美精品偷拍| 91 亚洲 欧洲| 噜噜吧,噜噜色,噜噜| 亚洲综合另类小说色区亚洲成av人片在www| 加勒比色99999| 日本一久是| 久久中出在线| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 蜜乳AV.COM| 人人操人人摸人人骑| 日韩精品一区二区人人人| 欧美大色交| 亚洲第91页| 久久夜色一区二区| 天美麻豆精品视频99| 婷婷六月色开| 韩国三级理论在线| 国产亚洲日韩在线三区黑人| 极品欧美一区二区三区| 人妻三级在线中文字幕| 99热这里只有精品18| 91大香蕉伊人| 97操综合| 成人日本片久久久蜜桃| 中出在线视频| 美国三级日本三级久久99| 韩日精品福利视频一区不卡在线免| 天天日日日射| 国产性刺激| 九X超碰| 日逼五月天| 97免费免费视频网| 国产精品网站免费| 日韩9999| 330dv亚洲成年视频网| 亚洲欧洲日产国产综合网| 亚洲综合99999| 99色日| 亚洲欧洲无码一区夜| 999 久久久| 91九九九吃| 加勒比久久av| 日本久久久久久久久久| 2017,超碰| 蜜桃久久一区二区| 亚洲国产美女久久久久| 丁香五六月啪啪| 黄色片,com| 国产一区二区三区导航| 精品亚洲国产成人AV制服丝袜 | 五月天亚洲网| 深喉吞精| 国产高清成人免费视频| V A在线| 国产一级高跟丝袜| 久久久久亚洲Aⅴ无码| 国产精品久久久久综合| 丁香五月激情综合| 亚洲AV乱码专区国产噜噜亚洲 | 操逼操逼逼操操逼91| 麻豆国产96在线| 国产剧情一区在线观看| 老熟女熟妇| 啊啊啊啊啊啊啊网址在线观看| 久草色在线观看| av网站免费看| 亚洲欧美综合区自拍另类| 去干网最新版| 日韩紧密久久| 国产成人啪一区二区| 色五月AV| 美女尤物人人操| 人妻久久久久久| aaa淫乱视频| 999久久久久久久久| 欧美黄页| 91 亚洲 欧美 日韩 国产 综合| 丁香五月天激情综合| 97色97好| 欧美综合色图片| 亚洲av综合伊人久久| 日本在线视频导航| 日本少妇va7777| AV在线播放网址| 强奸乱伦 亚洲一区| 久久久 国产精品| 亚洲乱色视频一区、二区在线| 99日免费视频中文字幕| 啊啊啊在线观看| 日本一本道A级黄色毛片试看60分钟| 伊人亚洲国产一成人久久精品,久久| 欧美一二在线| 丝袜足交视频| 高跟丝袜AV专区国产| 亚殴在线| 国产白丝网站| 国产操操日韩三级黄| 狼人综合婷婷激情四射| 久热这里| 亚洲国产尤物yw在线观看| 中文啪啪视频| 在线观看啊啊啊啊啊| 日韩综合成人免费视频| 久久极品一区二区| 日本二区不卡| 啊啊啊啊啊啊好湿好爽视频| 欧美亚洲高清晰| WWW操逼| 国产av白丝| 四虎在线视频| 粉嫩在线一区二区懂色| 99久在线精品99re8a| av网站免费看| 欧美视频在线第3页| 后入精品| WWW黄片COM| 国产亚洲日本| 天天操夜夜操狠很操| 在线 亚洲 网爆 自拍| 大香蕉欧美| 熟妇在线视频一区二区| 校园春色美腿丝袜| 国产亚洲精品玖玖玖在线观看| 九一精品牛牛一区二区| 久久丁香久草综合网| 色女女女导航| 国产一级内射高清视频| 日本在线一二| 亚洲精品少妇| 亚洲精品男人的天堂| 中文字幕国产| 日本一级性爱| 欧美亚洲清纯| 亚洲最大网站av| 欧美后入式| 九色视频91| 久久久久久久久久久久色网| 亚洲av乱伦色图网站| 久久久月天| 精品成人av一区二区三区在线| 怡红院亚洲怡春院av| 插欧洲美女欧美精品| 伊人网在线点播| 激情五月综合| 99re98| 精品久久久久瑟瑟| 国产精品com| 97超碰逼| 天天操天天干一区二区 | 一级岛国大片| 久久这里| www网站黄| www.91视频网| 按摩中文字幕| 日韩免费在线视频观看| 亚欧美综合网。| 手机看片1024你懂的国产| 国产9熟妇视频网站| 五月开心网| 无遮挡男女激烈动态图| WWW.加勒比人妻一区不卡.com| 91c色| 97超级久久| 亚洲s在线观看| 99精品欧美一区二区三区桃色| 成年人免费观看网站| 淫妻综合网| 永久免费av无码网站国产app| 96久久久精品| 丁香五月天社区| 以及麻豆国产入口在线观看免费| 日本人妻天堂网站在线播放| 亚洲aV性爱| 97在线免费| 欧美论理片| 九色97| 18禁中文字幕| 猛猛干| 国产视频大全| 麻豆国产尤物AV| 免费观看国产小粉嫩喷水精品午| 国产精品一二三| 区一在线观看| 成人av动漫在线观看| 人人性爱视频免费| 天天综合站| 日本中文字幕高跟| 婷婷丁香五月激情啪啪| PMv在线观看| 九九九九一区| 超碰综合色| 欧美综合站| 欧美丝袜制服久久| 波多野结衣之双飞调教在线播放 | 九九探花视频在线观看| 97超碰色| av日韩中文字幕| 97天天做| 男人天堂一区二区| 人人操人人uiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiii | 久9re热视频这里只有精品| 天天操狠狠日夜夜干超大胆开放com大香蕉视频在线观看 | 欧美一级三级| 秋霞免费AV| 少妇厨房愉情理伦片bd在线观看| 亚洲精品电影| 久欲AV| 男人久久精品| 91精品电影18| 婷婷综合久久| 婷婷五月天激情网| 中文字幕人成乱码熟女香港| 超清中文乱码字幕| 欧美操逼录像国产黄色国产| 小草av不卡亚洲二区| 中文字幕加勒比海高清无码免费视频| 大香蕉人妻| 亚洲 欧美 手机在线观看| Av手机版天堂网| 国产精品福利资源在线尤物| 国产精品网址| 欧美中日韩XXXX| 亚洲美腿丝袜香蕉影视欧美成人| 亚洲淫色网中文| 麻豆天美制片厂网站视频| 欧美制服网站美腿丝袜| 六月丁香五月婷婷| 日本女人操逼| 超碰碰激情97+久| 91日韩| 伊人九九九| 久夜操| 无码二级三级| 亚洲干B| 丝袜视频网国产90| 超碰偷拍| 综合天天。| 亚洲加勒比色图| 老熟妇一区二区三区| 99re在线视频| 亚洲 欧美 综合 91| 午夜AV污污污| 欧美色图自拍| 亚洲激情欧美色图 | 国产精品久久久久中文字幕| 亚洲精品毛片在线观看| 日本熟女免费視颖| 国产毛片在线| 中日韩久久久| 天天干人妇| 五月婷婷啪啪| 久久久人体| 日韩天堂av电影在线观看| 熟妇最新先锋一二三区| 久久这里精品国产99丫e6| 欧美有码亚洲中文字幕一区二区三区四区| 中文伊人大香蕉视频| 日本中文字幕高跟| 欧美激情久久久久| 欧美色图自拍| 欧美翘臀视频网站一区二区三区|