亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

分布式會(huì)話共享方案:Redis+Spring Session實(shí)戰(zhàn)解析

分布式會(huì)話共享方案:Redis+Spring Session實(shí)戰(zhàn)解析 說(shuō)實(shí)話寫(xiě)這篇東西的起因很直接我接手過(guò)一個(gè)訪問(wèn)量正在往上走的項(xiàng)目系統(tǒng)之前一直是單機(jī)部署內(nèi)網(wǎng)壓測(cè)、外網(wǎng)訪問(wèn)都挺正??梢坏┌褢?yīng)用從1個(gè)實(shí)例擴(kuò)到3個(gè)實(shí)例線上立刻出問(wèn)題。用戶前一個(gè)請(qǐng)求還在正常操作下一個(gè)請(qǐng)求回來(lái)就被引導(dǎo)去重新登錄客服那邊一天能收到幾十條“為什么老讓我重新登錄”的反饋。我排查了整整兩天中間試過(guò)調(diào)負(fù)載均衡策略、改Tomcat配置效果都不徹底最后拍板換成了標(biāo)題里這套組合Redis Spring Session。這不是網(wǎng)上常說(shuō)的“臨時(shí)繞過(guò)”而是把Session的存儲(chǔ)位置從根本上搬到了應(yīng)用之外讓每一個(gè)實(shí)例都變成無(wú)狀態(tài)節(jié)點(diǎn)。如果你正在做微服務(wù)拆分、多實(shí)例部署或者只是單純想把單機(jī)應(yīng)用水平擴(kuò)容這套思路應(yīng)該能給你一個(gè)比較徹底、能直接落地的解決路徑。下面我把整個(gè)問(wèn)題的來(lái)龍去脈、原理、實(shí)操步驟和上線后踩過(guò)的坑都梳理一遍內(nèi)容會(huì)偏“實(shí)戰(zhàn)記錄”風(fēng)格你可以邊看邊在本地復(fù)現(xiàn)。1. 單機(jī)Session的局限性多實(shí)例部署后為什么用戶被瘋狂踢下線1.1 一個(gè)真實(shí)故障輪詢策略導(dǎo)致用戶批量掉線先說(shuō)當(dāng)時(shí)的現(xiàn)象。系統(tǒng)從單機(jī)擴(kuò)到3個(gè)實(shí)例前面掛了負(fù)載均衡策略是最常用的“輪詢”。邏輯上沒(méi)什么問(wèn)題3臺(tái)機(jī)器平均分擔(dān)流量哪臺(tái)都能處理請(qǐng)求。結(jié)果用戶一登錄請(qǐng)求被分到實(shí)例A登錄成功JSESSIONID寫(xiě)進(jìn)瀏覽器Cookie刷新頁(yè)面后下一個(gè)請(qǐng)求被輪詢到實(shí)例B實(shí)例B在自己的本地內(nèi)存里根本找不到這個(gè)Session于是判定用戶未登錄直接重定向到登錄頁(yè)。最迷惑人的是這個(gè)問(wèn)題不是100%必現(xiàn)。同一個(gè)用戶點(diǎn)幾次有時(shí)能保持登錄有時(shí)被踢出來(lái)完全取決于當(dāng)前請(qǐng)求被分發(fā)到哪臺(tái)機(jī)器。我在本地復(fù)現(xiàn)的時(shí)候開(kāi)著開(kāi)發(fā)者工具看Network面板清一色的302跳轉(zhuǎn)Cookie明明沒(méi)丟服務(wù)器就是不認(rèn)。后來(lái)往日志里加了節(jié)點(diǎn)信息才發(fā)現(xiàn)所有“登錄無(wú)效”的請(qǐng)求都落在非登錄節(jié)點(diǎn)上。到這一步問(wèn)題的定位已經(jīng)很明確HttpSession默認(rèn)只存在于單個(gè)JVM進(jìn)程內(nèi)實(shí)例之間互相不知道對(duì)方手里的Session。1.2 理解HttpSession的“本地宿命”狀態(tài)為什么只在單個(gè)實(shí)例里Java Web開(kāi)發(fā)里HttpSession的默認(rèn)實(shí)現(xiàn)類是存在應(yīng)用服務(wù)器內(nèi)存里的也就是Tomcat、Jetty這類容器的JVM堆。當(dāng)你在代碼里執(zhí)行request.getSession().setAttribute(user, user)底層就是在當(dāng)前實(shí)例的堆內(nèi)存里維護(hù)一個(gè)Map結(jié)構(gòu)key是Session IDvalue是屬性集合。這個(gè)Map的生命周期被死死綁定在單個(gè)JVM上。單機(jī)部署時(shí)沒(méi)有問(wèn)題因?yàn)樗姓?qǐng)求都打到同一個(gè)JVMSession數(shù)據(jù)天然可見(jiàn)。但一旦拆成多個(gè)實(shí)例每個(gè)實(shí)例都有自己獨(dú)立的內(nèi)存A實(shí)例保存的Session對(duì)B實(shí)例來(lái)說(shuō)就是“不存在的數(shù)據(jù)”。負(fù)載均衡把請(qǐng)求撒到不同實(shí)例上時(shí)用戶會(huì)話自然就“丟”了。本質(zhì)是會(huì)話狀態(tài)Session State和計(jì)算節(jié)點(diǎn)Application Instance被綁死在一起橫向擴(kuò)容時(shí)狀態(tài)沒(méi)有跟著擴(kuò)容。1.3 ip_hash和Session復(fù)制為什么只是“緩解”而不是“修復(fù)”我第一反應(yīng)是改負(fù)載均衡策略把輪詢改成ip_hash讓同一IP的請(qǐng)求固定打到同一臺(tái)實(shí)例。這個(gè)方案在內(nèi)部辦公網(wǎng)絡(luò)環(huán)境下驗(yàn)證是有效的但放到公網(wǎng)環(huán)境就露餡了。移動(dòng)網(wǎng)絡(luò)下用戶經(jīng)常切換基站出口IP會(huì)變化公司、家庭、4G/5G網(wǎng)絡(luò)來(lái)回切換時(shí)IP也不固定還有一些代理和NAT場(chǎng)景同一個(gè)用戶每次請(qǐng)求的源IP根本不是同一個(gè)。IP一變化ip_hash就把請(qǐng)求分到另一臺(tái)實(shí)例用戶一樣被踢。更麻煩的是即使IP一直穩(wěn)定如果某臺(tái)實(shí)例要做滾動(dòng)發(fā)布或重啟固定在這臺(tái)實(shí)例上的所有在線用戶會(huì)在重啟期間集體掉線。ip_hash本質(zhì)上是在“請(qǐng)求入口”層面想辦法把用戶留在同一個(gè)節(jié)點(diǎn)上它沒(méi)有解決“Session狀態(tài)不共享”的根因只是降低了狀態(tài)串臺(tái)的概率。我也看過(guò)Session復(fù)制方案。Tomcat支持把Session變更廣播到集群中的其他節(jié)點(diǎn)這樣每個(gè)實(shí)例都復(fù)制一份全量Session。但復(fù)制帶來(lái)的問(wèn)題同樣明顯隨著在線用戶增多集群內(nèi)需要同步的數(shù)據(jù)量成倍增長(zhǎng)廣播風(fēng)暴、網(wǎng)絡(luò)開(kāi)銷、延遲抖動(dòng)很快會(huì)出現(xiàn)。而且這個(gè)方案強(qiáng)依賴具體應(yīng)用服務(wù)器廠商的實(shí)現(xiàn)換容器、換云平臺(tái)時(shí)兼容成本很高。Session復(fù)制把狀態(tài)從一個(gè)節(jié)點(diǎn)復(fù)制到所有節(jié)點(diǎn)本質(zhì)上還是在“單機(jī)Session”的框架里打轉(zhuǎn)治標(biāo)不治本。2. Redis Spring Session的組合原理這為什么算“最終方案”2.1 Spring Session接管了Session的生命周期而不是存?zhèn)€key那么簡(jiǎn)單要理解為什么這套組合能解決問(wèn)題先搞清楚Spring Session干了什么。Spring Session不是一個(gè)簡(jiǎn)單的“Session工具類”它的核心是通過(guò)一個(gè)Servlet過(guò)濾器——SessionRepositoryFilter——把應(yīng)用原本使用的HttpSession實(shí)現(xiàn)整個(gè)替換掉。具體流程是這樣的請(qǐng)求進(jìn)入Servlet容器后SessionRepositoryFilter會(huì)先把原始的HttpServletRequest包裝成一個(gè)SessionRepositoryRequestWrapper。當(dāng)你調(diào)用request.getSession()時(shí)它不再?gòu)娜萜鞅镜氐腟essionManager里拿對(duì)象而是從Spring Session配置好的SessionRepository里去取。這個(gè)SessionRepository可以是基于Redis、JDBC、MongoDB等任意持久化存儲(chǔ)實(shí)現(xiàn)我們這里用的是RedisSessionRepository。整套機(jī)制對(duì)外暴露的接口仍然是標(biāo)準(zhǔn)的HttpSession所以業(yè)務(wù)代碼基本不用改動(dòng)以前怎么用session.setAttribute()現(xiàn)在還是怎么用。Spring Session在背后幫你完成了Session的創(chuàng)建、讀取、寫(xiě)入、過(guò)期刪除并且把數(shù)據(jù)序列化后存到Redis。這里有一個(gè)關(guān)鍵點(diǎn)Session的狀態(tài)不再存放在應(yīng)用實(shí)例的本地內(nèi)存而是被抽離到一個(gè)獨(dú)立的、所有實(shí)例都能訪問(wèn)的存儲(chǔ)層。2.2 Redis里到底存了哪些key一個(gè)登錄用戶的數(shù)據(jù)結(jié)構(gòu)長(zhǎng)什么樣光說(shuō)“把Session存到Redis”有點(diǎn)抽象看完Redis里的實(shí)際數(shù)據(jù)結(jié)構(gòu)你會(huì)有更直觀的理解。Spring Session在Redis中主要維護(hù)以下幾類key。第一類是主數(shù)據(jù)key默認(rèn)前綴是spring:session:sessions:sessionId類型是Hash。這個(gè)Hash里存了Session的創(chuàng)建時(shí)間、最后訪問(wèn)時(shí)間、最大不活躍間隔、以及你通過(guò)setAttribute寫(xiě)入的每一個(gè)業(yè)務(wù)屬性。比如你用session.setAttribute(loginUser, userInfo)Redis里就會(huì)多出一個(gè)fieldfield名是sessionAttr:loginUservalue是序列化之后的用戶信息。第二類是過(guò)期索引key格式是spring:session:expirations:timestamp類型是Set。這里面保存了一批即將在指定時(shí)間點(diǎn)過(guò)期的Session ID供后臺(tái)任務(wù)定點(diǎn)掃描使用。Spring Session并不是完全依賴Redis的key過(guò)期機(jī)制來(lái)清理Session因?yàn)镽edis key過(guò)期事件并不可靠可能丟失、可能延遲。它的策略是每個(gè)被訪問(wèn)的Session都會(huì)刷新自己的最后訪問(wèn)時(shí)間同時(shí)由一個(gè)專門(mén)的維護(hù)任務(wù)在到達(dá)過(guò)期時(shí)間點(diǎn)時(shí)把還在集合里的Session ID找出來(lái)做顯式刪除。第三類是查詢索引key格式是spring:session:findByIndexName:索引名:索引值比如按用戶名建立索引之后可以快速查出某個(gè)用戶當(dāng)前對(duì)應(yīng)的Session列表。做強(qiáng)制下線、在線用戶列表這類功能時(shí)這個(gè)索引很有用。通過(guò)這幾種key的組合Spring Session把Session的讀寫(xiě)、過(guò)期、查詢都安排得明明白白。Redis本身就是KV存儲(chǔ)Hash結(jié)構(gòu)天然適合存儲(chǔ)“屬性集合”這種數(shù)據(jù)形態(tài)TTL機(jī)制又和Session的過(guò)期時(shí)間能對(duì)應(yīng)上。選Redis的根本原因不是因?yàn)樗芫彺娑且驗(yàn)樗峁┝艘徽追植际江h(huán)境都能訪問(wèn)的、帶超時(shí)能力的、結(jié)構(gòu)足夠靈活的數(shù)據(jù)存儲(chǔ)能力。2.3 這套組合帶來(lái)的三個(gè)直接收益收益是很直觀的。第一是實(shí)例徹底無(wú)狀態(tài)化。應(yīng)用節(jié)點(diǎn)不再持有用戶狀態(tài)新增機(jī)器、縮減機(jī)器、滾動(dòng)重啟對(duì)在線用戶沒(méi)有任何影響。用戶在某臺(tái)機(jī)器上登錄下一次請(qǐng)求被負(fù)載均衡分到另一臺(tái)機(jī)器依舊能從Redis里拿到同一個(gè)Session。擴(kuò)容從“有狀態(tài)擴(kuò)容”變成了“無(wú)狀態(tài)擴(kuò)容”技術(shù)上輕松了一個(gè)量級(jí)。第二是故障影響面大幅縮小。以前如果一臺(tái)實(shí)例宕機(jī)那臺(tái)機(jī)器上的所有在線用戶集體掉線?,F(xiàn)在實(shí)例宕機(jī)只要Redis集群還穩(wěn)著用戶根本感知不到后端少了一臺(tái)機(jī)器請(qǐng)求被自動(dòng)分發(fā)到其他健康實(shí)例Session照??捎谩5谌墙y(tǒng)一了會(huì)話管理能力。你可以通過(guò)Redis里的Session數(shù)據(jù)做全局的用戶登錄態(tài)清理比如后臺(tái)強(qiáng)制踢人下線、限制賬號(hào)同時(shí)在多端登錄、構(gòu)建實(shí)時(shí)在線用戶列表。這在單機(jī)Session時(shí)代幾乎不可想象但在多個(gè)微服務(wù)共享同一個(gè)Redis時(shí)這些功能實(shí)現(xiàn)起來(lái)非常順手。很多團(tuán)隊(duì)最后選這套方案不只是為了“解決掉線”而是為了把會(huì)話能力沉淀成一套基礎(chǔ)設(shè)施。3. 實(shí)操落地從依賴引入到雙實(shí)例驗(yàn)證3.1 依賴和版本選型Spring Boot 2.x/3.x別搞混直接給可用的依賴清單我用的是Maven。假設(shè)你的項(xiàng)目是標(biāo)準(zhǔn)的Spring Boot Web應(yīng)用需要引入三個(gè)starterdependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-web/artifactId /dependency dependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-data-redis/artifactId /dependency dependency groupIdorg.springframework.session/groupId artifactIdspring-session-data-redis/artifactId /dependency版本號(hào)我沒(méi)有手動(dòng)指定而是交給Spring Boot的依賴管理統(tǒng)一控制。這里要特別提醒spring-session-data-redis的版本必須和Spring Boot版本匹配最省心的做法就是讓Spring Boot BOM來(lái)管理它。自己?jiǎn)为?dú)指定版本很容易踩到API不兼容的坑尤其是Spring Boot 3.x和2.x之間包名、配置項(xiàng)差異很大。我這里本地驗(yàn)證用的是Spring Boot 2.7環(huán)境但下面的配置我會(huì)同時(shí)給出Spring Boot 3.x需要調(diào)整的地方。Spring Boot 3.x把Redis配置的前綴從spring.redis.*改成了spring.data.redis.*Session相關(guān)的配置不變。碰到3.x項(xiàng)目別慣性照著舊文檔抄否則配置項(xiàng)根本不會(huì)生效。3.2 關(guān)鍵配置Redis連接、Session存儲(chǔ)與命名空間配置文件是重頭戲。先說(shuō)一個(gè)最容易出錯(cuò)的點(diǎn)Spring Boot 2.x和3.x的Redis連接配置前綴不一樣。Spring Boot 2.x的配置spring: redis: host: 127.0.0.1 port: 6379 password: abc123 database: 0 timeout: 3s lettuce: pool: max-active: 16 max-idle: 8 min-idle: 2 max-wait: 3sSpring Boot 3.x的配置spring: data: redis: host: 127.0.0.1 port: 6379 password: abc123 database: 0 timeout: 3s lettuce: pool: max-active: 16 max-idle: 8 min-idle: 2 max-wait: 3s兩段配置的內(nèi)容幾乎一樣唯獨(dú)嵌套層級(jí)從spring.redis變成了spring.data.redis。我用的是Lettuce客戶端“Lettuce連接池”需要單獨(dú)啟用spring.redis.lettuce.pool.*或3.x的spring.data.redis.lettuce.pool.*才會(huì)生效。如果不配連接池高并發(fā)下Lettuce很容易出現(xiàn)連接等待超時(shí)生產(chǎn)環(huán)境一定要配。Session本身的配置如下spring: session: store-type: redis timeout: 30m redis: namespace: demo-session flush-mode: on_save save-mode: on_set_attribute這里解釋幾個(gè)參數(shù)背后的含義。store-type: redis是明確告訴Spring Boot用Redis存儲(chǔ)Session不帶這個(gè)參數(shù)時(shí)Spring Boot可能會(huì)根據(jù)classpath自動(dòng)推斷但顯式寫(xiě)出來(lái)更可控。timeout: 30m是Session最大不活躍間隔單位是m代表分鐘這個(gè)值最終會(huì)寫(xiě)入Redis的TTL。生產(chǎn)環(huán)境要根據(jù)業(yè)務(wù)形態(tài)設(shè)置純管理后臺(tái)可以設(shè)短一點(diǎn)電商網(wǎng)站購(gòu)物車場(chǎng)景可能需要更長(zhǎng)。redis.namespace是給當(dāng)前應(yīng)用設(shè)置Redis key前綴如果多個(gè)應(yīng)用共用同一個(gè)Redis實(shí)例一定要設(shè)置不同的namespace否則不同應(yīng)用的Session數(shù)據(jù)會(huì)互相干擾。flush-mode: on_save表示Session每次請(qǐng)求處理結(jié)束時(shí)才把數(shù)據(jù)寫(xiě)回Redis這是默認(rèn)模式。還有一個(gè)模式是immediate每次調(diào)用setAttribute時(shí)立刻寫(xiě)Redis實(shí)時(shí)性高但性能差一般不建議生產(chǎn)環(huán)境使用。save-mode: on_set_attribute表示只要Session屬性發(fā)生變化就標(biāo)記為需要保存這是默認(rèn)行為通常不需要改動(dòng)。如果要通過(guò)Java配置類來(lái)開(kāi)啟Redis Session存儲(chǔ)可以加上一個(gè)EnableRedisHttpSession注解Configuration EnableRedisHttpSession(maxInactiveIntervalInSeconds 1800) public class SessionConfig { }這個(gè)注解里可以配置最大不活躍間隔秒數(shù)和spring.session.timeout是等價(jià)的。我個(gè)人更推薦用配置文件來(lái)管理改參數(shù)時(shí)不用重新編譯打包。3.3 自定義Cookie序列化器Cookie名字、HttpOnly與SameSiteSpring Session默認(rèn)使用名為SESSION的Cookie來(lái)傳遞Session ID但很多老項(xiàng)目前端約定的是JSESSIONID。為了兼容業(yè)務(wù)系統(tǒng)通常要自定義一個(gè)CookieSerializerBean public CookieSerializer cookieSerializer() { DefaultCookieSerializer serializer new DefaultCookieSerializer(); serializer.setCookieName(JSESSIONID); serializer.setCookiePath(/); serializer.setUseHttpOnlyCookie(true); serializer.setSameSite(Lax); return serializer; }setCookiePath(/)要特別注意。如果項(xiàng)目部署在/api這類子路徑下Cookie path設(shè)置不對(duì)瀏覽器會(huì)在跨路徑請(qǐng)求時(shí)不再攜帶Cookie導(dǎo)致Session丟失。setUseHttpOnlyCookie(true)能防止JavaScript讀取Cookie降低XSS攻擊后的信息泄露風(fēng)險(xiǎn)。setSameSite(Lax)用于控制Cookie在跨站請(qǐng)求時(shí)的發(fā)送策略對(duì)前后端分離的部署方式影響很大。如果你的系統(tǒng)還有HTTPS環(huán)境可以開(kāi)啟serializer.setUseSecureCookie(true)確保Cookie只通過(guò)HTTPS傳輸。3.4 雙實(shí)例聯(lián)調(diào)腳本證明Session真的共享了配置全部搞定后驗(yàn)證邏輯很簡(jiǎn)單本地起兩個(gè)應(yīng)用實(shí)例端口分別設(shè)為8081和8082然后在8081上登錄獲取Cookie再用這個(gè)Cookie去訪問(wèn)8082的接口。如果8082能返回當(dāng)前登錄用戶的信息說(shuō)明Session已經(jīng)成功共享。第一步先在一個(gè)終端啟動(dòng)第一個(gè)實(shí)例mvn spring-boot:run -Dspring-boot.run.arguments--server.port8081第二個(gè)終端啟動(dòng)第二個(gè)實(shí)例mvn spring-boot:run -Dspring-boot.run.arguments--server.port8082假設(shè)項(xiàng)目里有一個(gè)登錄接口/api/login和一個(gè)獲取當(dāng)前用戶的接口/api/user/info。用curl先登錄curl -i -X POST http://localhost:8081/api/login \ -H Content-Type: application/json \ -d {username:admin,password:123456}響應(yīng)頭里能看到Set-Cookie: JSESSIONIDxxxxx; Path/; HttpOnly。把這個(gè)Cookie值記下來(lái)再去請(qǐng)求8082的接口curl -i http://localhost:8082/api/user/info \ -H Cookie: JSESSIONIDxxxxx正常返回用戶信息就是驗(yàn)證通過(guò)。這時(shí)再去Redis里檢查一下redis-cli keys demo-session:* hgetall demo-session:sessions:xxxxx能看到Session屬性已經(jīng)落在Redis里而且8082實(shí)例讀取的底層數(shù)據(jù)源是同一個(gè)Redis。這套驗(yàn)證在本地大概10分鐘就能跑完比純看理論踏實(shí)得多。4. 生產(chǎn)環(huán)境下踩過(guò)的坑亂碼、覆蓋、網(wǎng)關(guān)和內(nèi)存4.1 序列化亂碼與JSON反序列化失敗看懂根因比替換配置更重要上線運(yùn)行不到一周我就發(fā)現(xiàn)一個(gè)隱蔽問(wèn)題Redis里存的Session屬性值有一大堆看不懂的字節(jié)。直接用hgetall查看某個(gè)Session時(shí)field的值長(zhǎng)這樣\xac\xed\x00\x05t\x00\x03com...這種以\xac\xed開(kāi)頭的亂碼是Java標(biāo)準(zhǔn)JDK序列化機(jī)制的產(chǎn)物。Spring Session默認(rèn)使用JDK自帶的序列化器把對(duì)象轉(zhuǎn)成二進(jìn)制字節(jié)后再塞進(jìn)Redis。它的問(wèn)題有兩個(gè)一是不可讀排查問(wèn)題時(shí)瞪大了眼也看不出里面存的是什么二是兼容性差如果對(duì)象類的結(jié)構(gòu)發(fā)生變化比如新增字段、刪除字段舊數(shù)據(jù)反序列化時(shí)直接拋InvalidClassException。解決辦法是替換Redis序列化器。Spring Session默認(rèn)從springSessionDefaultRedisSerializer這個(gè)Bean獲取序列化器所以我只需要覆蓋這個(gè)Bean即可Bean public RedisSerializerObject springSessionDefaultRedisSerializer() { return new GenericJackson2JsonRedisSerializer(); }注意這里必須叫springSessionDefaultRedisSerializer不是隨便定義個(gè)RedisTemplate的序列化器。很多人在這里踩坑配置了RedisTemplateString,Object的序列化方式結(jié)果Session數(shù)據(jù)還是JDK序列化因?yàn)镾pring Session內(nèi)部根本不走RedisTemplate的默認(rèn)序列化邏輯。換JSON序列化之后還有一個(gè)更深的坑要提醒JSON串里默認(rèn)會(huì)帶上類信息class字段用來(lái)反序列化時(shí)確定目標(biāo)類型。一旦你的用戶類從User改名為Account或者在包里移動(dòng)了位置Redis里舊數(shù)據(jù)的類路徑已經(jīng)不存在了反序列化直接失敗。我后來(lái)定的規(guī)矩是涉及Session里保存對(duì)象的字段變更時(shí)要么提前清空線上Redis的Session前綴要么在代碼里寫(xiě)一個(gè)兼容的轉(zhuǎn)換處理器。老數(shù)據(jù)有時(shí)候舍不得清但Session本來(lái)就是“丟了就讓用戶重新登錄”的臨時(shí)數(shù)據(jù)優(yōu)先保證系統(tǒng)可用比死守?cái)?shù)據(jù)更實(shí)際。4.2 用戶的并發(fā)請(qǐng)求導(dǎo)致Session覆蓋一個(gè)被低估的丟失更新問(wèn)題這個(gè)坑不是馬上暴露的而是上線后功能越加越多才慢慢顯現(xiàn)?,F(xiàn)象是用戶同時(shí)打開(kāi)多個(gè)瀏覽器標(biāo)簽頁(yè)在一個(gè)標(biāo)簽頁(yè)里更新了Session中的用戶資料隨后在另一個(gè)標(biāo)簽頁(yè)里操作時(shí)第一次更新“消失”了。根因要從Redis的讀寫(xiě)模式說(shuō)起。Spring Session在請(qǐng)求結(jié)束后把整個(gè)Session對(duì)象寫(xiě)回Redis這個(gè)操作不是原子更新局部字段而是讀出Session、反序列化、修改屬性、整體寫(xiě)回的過(guò)程。當(dāng)兩個(gè)請(qǐng)求分別落在兩個(gè)不同的實(shí)例上兩邊幾乎同時(shí)從Redis讀出同一個(gè)Session的同一個(gè)字段各自在本地做修改然后先后寫(xiě)回Redis。后寫(xiě)的那個(gè)會(huì)把先寫(xiě)的覆蓋掉其中一個(gè)請(qǐng)求的修改就丟了。這種問(wèn)題場(chǎng)景和并發(fā)寫(xiě)數(shù)據(jù)庫(kù)記錄時(shí)的“丟失更新”完全一致只是很多人沒(méi)意識(shí)到Session也會(huì)遇到。我當(dāng)時(shí)的排查思路是確認(rèn)哪些數(shù)據(jù)會(huì)被高頻并發(fā)寫(xiě)。比如用戶每次訪問(wèn)時(shí)更新“最近訪問(wèn)時(shí)間”這個(gè)字段就在并發(fā)時(shí)頻繁觸發(fā)覆蓋。解決辦法分兩路走一是把并發(fā)寫(xiě)頻率最高的數(shù)據(jù)從Session里挪出去比如“最近訪問(wèn)時(shí)間”這種數(shù)據(jù)完全可以通過(guò)Redis單獨(dú)記錄一個(gè)user:online:userId的key來(lái)管理不必塞進(jìn)Session二是盡量減少Session里的可變屬性總量Session只保留登錄憑證、用戶主鍵這類低頻變化的標(biāo)識(shí)性數(shù)據(jù)其余高頻業(yè)務(wù)數(shù)據(jù)走專門(mén)設(shè)計(jì)的Redis key。如果確實(shí)需要保留并發(fā)寫(xiě)場(chǎng)景可以考慮把Session的存儲(chǔ)粒度做細(xì)或者引入分布式鎖來(lái)控制同一Session的寫(xiě)并發(fā)。但我的真實(shí)感受是最佳策略不是“控制并發(fā)”而是“減少寫(xiě)入”——Session的屬性越少、越穩(wěn)定這套方案就越穩(wěn)。它本質(zhì)上是一個(gè)定位標(biāo)識(shí)不是內(nèi)容倉(cāng)庫(kù)。4.3 網(wǎng)關(guān)轉(zhuǎn)發(fā)與前后端分離下的Cookie透?jìng)黜?xiàng)目改造到一定階段前端從服務(wù)端渲染換成了前后端分離請(qǐng)求統(tǒng)一走API網(wǎng)關(guān)。網(wǎng)關(guān)部署完之后又冒出一個(gè)新問(wèn)題用戶明明登錄成功了緊接著請(qǐng)求業(yè)務(wù)接口卻返回401。瀏覽器里Cookie明明還在后端Session也存在Redis里但請(qǐng)求就是帶不到后端。排查下來(lái)發(fā)現(xiàn)是網(wǎng)關(guān)這一層把Cookie信息丟掉了。網(wǎng)關(guān)在轉(zhuǎn)發(fā)HTTP請(qǐng)求時(shí)如果配置里沒(méi)有顯式轉(zhuǎn)發(fā)Cookie頭后端拿到的請(qǐng)求里就不會(huì)包含JSESSIONID。后端的SessionRepository完全不知道該查找哪個(gè)Session自然判定未登錄。解決方式是在網(wǎng)關(guān)的轉(zhuǎn)發(fā)配置里把Cookie頭原樣透?jìng)鳌R猿R?jiàn)的網(wǎng)關(guān)配置為例在路由規(guī)則里加一行轉(zhuǎn)發(fā)Headerfilters: - PreserveHostHeader - RewritePath/api/(?segment.*), /$\{segment} default-filters: - DedupeResponseHeaderAccess-Control-Allow-Credentials Access-Control-Allow-Origin核心是確保轉(zhuǎn)發(fā)請(qǐng)求時(shí)保留瀏覽器提交的Cookie頭同時(shí)響應(yīng)時(shí)不要重復(fù)添加互相沖突的CORS頭。跨域配置也是個(gè)關(guān)鍵點(diǎn)。前后端域名不一致時(shí)后端必須配置CORS允許攜帶憑證Bean public CorsWebFilter corsWebFilter() { CorsConfiguration config new CorsConfiguration(); config.setAllowCredentials(true); config.addAllowedOrigin(https://frontend.example.com); config.addAllowedHeader(*); config.addAllowedMethod(*); return new CorsWebFilter(source - config); }這里有一個(gè)安全限制必須要知道allowCredentials(true)時(shí)allowedOrigins不能寫(xiě)成*必須指定具體域名。瀏覽器規(guī)范明確禁止攜帶憑證的跨域請(qǐng)求使用通配符來(lái)源。前端調(diào)用時(shí)也要設(shè)置withCredentials: true否則即使后端允許瀏覽器也不會(huì)主動(dòng)攜帶Cookie。這個(gè)跨域問(wèn)題排查起來(lái)比較費(fèi)時(shí)我每次都會(huì)先看瀏覽器Network面板里請(qǐng)求是否帶上了Cookie再看響應(yīng)頭里Access-Control-Allow-Credentials是否為true兩步能定位90%的問(wèn)題。4.4 Redis內(nèi)存持續(xù)增長(zhǎng)與session過(guò)期回收失效還有一個(gè)經(jīng)典問(wèn)題系統(tǒng)跑了一段時(shí)間后Redis內(nèi)存占用越來(lái)越高明明設(shè)置了Session過(guò)期時(shí)間數(shù)據(jù)卻沒(méi)有按預(yù)期釋放。這通常不是Spring Session沒(méi)做清理而是清理機(jī)制依賴某些前提條件。Spring Session的過(guò)期清理依賴兩個(gè)關(guān)鍵機(jī)制一個(gè)是通過(guò)spring:session:expirations:timestamp集合定時(shí)掃描另一個(gè)是Redis的過(guò)期key事件通知。如果Redis實(shí)例關(guān)閉了notify-keyspace-events配置Spring Session就無(wú)法收到key過(guò)期事件來(lái)觸發(fā)后續(xù)的刪除操作。雖然掃描任務(wù)也能兜底但事件通知關(guān)閉時(shí)清理效率和實(shí)時(shí)性都會(huì)下降內(nèi)存里會(huì)殘留更多等待淘汰的Session數(shù)據(jù)。建議在Redis配置里打開(kāi)必要的事件通知notify-keyspace-events Exgx這個(gè)配置項(xiàng)開(kāi)啟了過(guò)期key事件和通用命令事件。生產(chǎn)環(huán)境調(diào)整Redis配置后要記得驗(yàn)證生效用config get notify-keyspace-events確認(rèn)。更需要注意的另一個(gè)坑是Redis內(nèi)存淘汰策略。如果Redis配置的maxmemory-policy是allkeys-lru那么當(dāng)內(nèi)存達(dá)到上限時(shí)Redis會(huì)從所有key里挑選最久未用的key來(lái)淘汰Session數(shù)據(jù)也會(huì)被當(dāng)成普通緩存清掉哪怕它還沒(méi)到過(guò)期時(shí)間。結(jié)果就是用戶明明還在活躍Session卻被Redis強(qiáng)制刪除用戶被莫名其妙踢下線。這種情況特別難排查因?yàn)槿罩纠锟床坏饺魏螆?bào)錯(cuò)就是偶發(fā)掉線。后來(lái)我把Redis的內(nèi)存淘汰策略改成了volatile-lru這個(gè)策略只淘汰設(shè)置了TTL的key。Session主key自帶TTL業(yè)務(wù)緩存如果不需要被淘汰可以不帶TTL。這樣既能保證Redis內(nèi)存可控又不會(huì)誤傷活躍Session。同時(shí)我還寫(xiě)了一個(gè)定時(shí)巡檢腳本每天檢查一次Redis內(nèi)存增長(zhǎng)曲線和spring:session:*的key數(shù)量如果發(fā)現(xiàn)Session數(shù)量異常增多基本都是某個(gè)接口在瘋狂創(chuàng)建新Session這時(shí)會(huì)去檢查業(yè)務(wù)代碼里是不是有“一登錄就訪問(wèn)request.getSession(false)并觸發(fā)創(chuàng)建新Session”的邏輯。結(jié)尾改動(dòng)之外我留下的一點(diǎn)心得整套方案落地后再回看技術(shù)層面的難度其實(shí)不算高真正的難點(diǎn)在于兩處一是意識(shí)到“Session狀態(tài)必須和實(shí)例解耦”這個(gè)根本前提二是上線后通過(guò)實(shí)際問(wèn)題把方案打磨到符合業(yè)務(wù)特性。如果你還在單機(jī)架構(gòu)里提前把Session遷到Redis并不是過(guò)度設(shè)計(jì)而是一筆很劃算的“架構(gòu)保險(xiǎn)”因?yàn)榈鹊綌U(kuò)容當(dāng)天再處理緊迫感和故障壓力會(huì)讓你沒(méi)有充足時(shí)間考慮細(xì)節(jié)。我個(gè)人的體會(huì)是遷到Redis Spring Session之后最需要改變的其實(shí)是“往Session里亂塞東西”的習(xí)慣。單機(jī)時(shí)代往Session塞什么都能跑但分布式環(huán)境下Session變成了分布式共享存儲(chǔ)每一次寫(xiě)入都對(duì)應(yīng)一次網(wǎng)絡(luò)請(qǐng)求加一次序列化濫用會(huì)直接把Redis拖成瓶頸。我現(xiàn)在定的原則很簡(jiǎn)單Session里只放穩(wěn)定且低頻使用的核心標(biāo)識(shí)數(shù)據(jù)比如用戶ID、登錄令牌、少量偏好設(shè)置所有需要業(yè)務(wù)計(jì)算和頻繁變化的數(shù)據(jù)單獨(dú)設(shè)計(jì)Redis緩存key或落庫(kù)。這套原則比任何技術(shù)選型都更影響長(zhǎng)期穩(wěn)定。最后分享一個(gè)實(shí)用小技巧本地開(kāi)發(fā)環(huán)境可以保留內(nèi)存存儲(chǔ)只把生產(chǎn)環(huán)境切到Redis避免每個(gè)開(kāi)發(fā)同學(xué)都依賴一個(gè)共享的Redis實(shí)例。具體做法是在application.yml里用多環(huán)境配置區(qū)分dev和proddev環(huán)境不配spring.session.store-type讓它走Spring Boot默認(rèn)的內(nèi)存Sessionprod環(huán)境顯式配置成redis。這樣開(kāi)發(fā)調(diào)試不受Redis狀態(tài)影響線上又能享受無(wú)狀態(tài)擴(kuò)容的紅利。兩套環(huán)境隔離好開(kāi)發(fā)效率和系統(tǒng)穩(wěn)定性都可以兼得。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
国产亚洲日本| 成人精品一区二区三区| www久久国产精品| 秋霞鲁丝午夜无码一区二区三| 亚洲国产高清福利视频| 黄色片A级一区二区三区| 精品人妻少妇| 色九色久| 91性| 久久精品高清无码一区| 99最新日韩偷拍视频| 中文字日本乱码| 婷婷色网| 五月婷婷色| 成人性爱视频在线看| 试看60秒 爽| 久久久96精品| 91老熟女老女人国产老太| 成人熟女视频一区二区三区| 亚洲精品一区二区三区新线路| 久久人人爽爽人人爽人人片αV| 中文字幕乱码在线| 国产白丝av| 夜夜高潮夜夜爽夜夜爱爱一区| 9久久美女首页| 神马久久久久久久久久| 裸体女人草逼视频播放一区,二区,三区,四区,五区 | 精品熟女一区=区三区| 激情五月天丁香| 国产中文大片资源中文字幕| heyZO天然素人无码AⅤ专区| 男女啪啪网站免费视频| 中文字幕久久婷婷丁香五月天| 国产精品伦理| 嗯嗯啊啊好爽| 97在线看| 亚洲欧美国产va在线播放频| 十八禁视频一区二区| 国产真实子伦对白| 久久久亚洲熟妇熟女| 噜噜噜噜久久久精品免费| 美女91网址 | 日韩精品碰碰| 色噜噜精品一区二区三| 欧美日韩国产色图在线| 伊人99热| 亚洲最大的黄色电影网站。 | 麻豆天美91| 91熟女视频| 色吧5亚洲| 91在线超高颜值国产| 成年人三级黄色片视频| 亚洲精品成人激情在线| 嗯啊不要啊在线| 欧美日韩99精品麻豆传媒| 久久久久久性爱视频| 亚洲av热热色| 舔舔啊| 精品少妇一区二区| 亚洲欧美999| 九九九九热| 国产欧美岛国精品一区| 色五月婷婷麻豆在| 中文字幕乱碼在线| 久久久精品一区二区| 天天干夜夜操一区二区| 欧洲性爱无码区| 在线有码中文字幕| 日韩中文欧美| 91色黑人少妇| 欧美乱色| 中文欧丝袜诱惑| 99re视频在线播放青草| 女性喷水高潮在线观看| 黄aaaaaaaaaaaaaaaaaa色网站| 玖玖爱免费观看视频| 91中文在线| 国产精品经典一卡久久久| 农村妇女精品一区二区| 91内射| AA级电影三区| 久久人妻四季| 男人的天堂2018| 女人被男人桶爽视频网站| 亚洲第一无码播放立川理惠| 97色在线观看| 亚洲 欧美 日韩另类 麻豆| 日本中文字幕不卡视频 | 婷婷五月综合在线| 午夜国产乱伦视频| 日韩精品99久久久久久中文字幕 | 日本大片日本一区二区免费高清| 中文字幕版| 免费超碰97久久| 色悠久| 国产精品黄色三级av| 男人的天堂啪啪| 热久日综合| 密臀视频三区免费网站| 色婷婷丁香五月| 中文字幕精品乱码| 亚洲AV麻豆Aⅴ无码电影一| 亚欧高清在线| 欧美一区二区三熟女剧情| 欧洲在线性爱视频| 久超碰在| 98超碰欧美| 91成人久久| 熟女中出视频| 麻豆天美传媒毛片| 国产精品视频电影| 少妇一级无码精品| 97操97色| 国产精品久久久久久久AV大片| 精品超碰中文在线| 91欧美色| 3571色综合一区二区二区| 美女91av| 日韩欧美一级特黄大片| 美女丝袜激情小说| 人妻激情偷乱视频一区二区三区 | av网站免费看| 丝袜六区| 中文字幕一二区二三区人妻专区| 丰满少妇高潮无码| 天天操夜夜嗨| 精品无码少妇| 中文高清一区二区的| 激情在线青青操| 91粉芽高清在线一区二区| 深喉吞精| 国产精品天美传媒| 自拍偷拍国产欧美日韩韩| 成人无码专区精品视频| 午夜视频好爽啊| 日本九九久久99| 久久久无码av精| 97日韩欧美亚洲| 日本久久网| 日本综合色图| 九九热五区| 国产精品国产自产高清AV| 97er欧美性| yiren97| 欧美亚洲中文| 香蕉免费一区二区三区不读| 欧美性爱一级操| avav青青草久久夜| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 亚洲一二三四区| 精品国产一区二区三区久久久蜜臀| 尤物视频视频官网| 久久6热精品99视频| 牛黄色久午久| 无码高清少妇久久| 香蕉大久久久| AV天天在线观看| 视频一区二区三区精品| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 人人妻人人爽| AV老汉| 可以免费观看的日韩av毛片| 超碰色综合| 青青草精品| 99久久九九| 国产精品蜜臀久久久久无码AV| 夜夜免费视频| 九九久久国产精品| 5月婷婷6月六月丁香| 91一区二匹| 婷婷美人网| 超碰狠狠操| 伦激情人妻另类人妻| 97精品视频在线播放| 性色一线| 亚洲四虎熟女精品| 天天色天天干天天爱| 黄站在线免费观看| 日韩欧美水蜜桃人妻| 小少妇| 18禁免费视频| 日韩精品国产一区二区| 乱伦熟女论坛| 久久精品国产亚洲av水密被窝| 国产盗摄美女如厕大神作品在线观看| 丁香六月婷婷久久综合| 在线国产探花| 欧美视频边做饭边橾| 思思热在线视频免费| 日日摸日日弄日日拍| 国产小炒后入式| 老熟女综合网| 懂色av中文字幕一区二区三区天美 | 嗯嗯啊中文字幕| 一牛影视成人片免费| 思思热在线视频免费| 中国特猛少妇色xxx| 欧美综合 站| 欧美亚洲影视| 欧美精品第四五页中文字幕在线观看| 一牛一区二区三区久久| 国产精品久久久三级无码| 国产亚洲日韩在线三区黑人| 亚洲AV成人精品网站在AV| 九九热av| 亚洲欧美高清无码| 国产区日韩区在线观看| 精品国产乱码| 一级@啪啪视频| 思思热国产高清| 东京热双插| 东京热双插| 精品免费一区| 国产精品99精品视频网站| 日本操逼aaaaa| 亚洲国产成人精品久久久国产成人一区二区 | 精品久久久无码| 婷婷久久久| 动漫爆乳3D奶水一区在线观看 | 97se综合| 久久久性少妇| 97国产|免费| 婷婷精品久久av影视| 女人18精品一区二区三区| 日本道日本道中文字幕日本道最新日本道在线观看 | 超碰97久久国| 蜜臀99久久精品| 男人的天堂com| 91精品导航| 精品久久97| 精品在线蜜臀| 中文字幕一区二区三区高清| 亚洲色 国产 欧美 日韩| 国产精品成人福利在线| 欧美毛片在线网| 久久精品视频久久久| 啊啊啊好舒服好爽啊啊啊视频| 国产精品久久久蜜臀| 日韩中文字幕av在线播放| 日韩三级性| 老熟妇一区二区三区…| 温婉少妇玩3p| 日韩精品一二三四| WWW美腿丝袜香蕉中文| 97精品一区二区三区免费| 成年无码动漫av片无尽在线| 黑人美精品 A片| 天天肏夜夜肏| 97精品国产手机| 亚州精品人妻一二三区| 中文字幕精品探花视频| 國產尤物AV尤物在線觀看| 嗯嗯啊在线视频| 亚洲凸凹超碰成人| 91在线精品| 性性欧美| 激情综合五月天| 免费看片黄| 久久性爱视频| 另类图片五月| 国产自偷自拍一区| 色噜噜精品一区二区三| 金莲网址| 操操逼操操逼操操逼逼| 夜草网站| 超碰色综合| 夜夜狼人妻| 国产无马在线| 久久久久久中文| 五月天激情小说| V A在线| 国产精品。| 日韩中文字幕精品一区在线| 狠狠操狠狠燥| 婷婷操逼| 一本色道综合久久欧美| 秋霞一区二区三区四区五区六区七区| 不卡免费av在线播放| 亚洲色悠悠久久88| 九九热这里只有在线精品视 伊人草 成人菠萝蜜视频在线观看 | 91精品人妻五十路| 中字幕人妻一区二区三区| 神马福利久草| 日本三级网页| 亚州性色| 成人十八禁日韩欧美一二三| 综合久久六月久久婷婷| 日夜伊人网| 日本精品国产视频| 嗯啊不要啊在线 | 91美女在线| 97干com| 偷拍自拍在线视频观看| 超碰97 线线 在现| 综合网久久| 国产一区二区欧美日本| 久久久久九九九九| 夜夜嗨一区二区三区三州加勒比| 精品精品精品| 亚洲精品国产日韩无码AV永久免| 东北女人性交| 性色av一区二区| 国产不卡免费在线视频| 亚洲加勒比久久日本道| 四季av一区二区凹凸精品小说| 欧美熟妇视频| 久久婷婷五月综合| 欧州色图区| 欧美黄色片在线播放| 可乐操在线| 操b网站亚洲无码| 激情小说五月天| 久操凹凸视频| 亚洲欧美日韩免费电影| 老司机福利青青草| 欧美姓爱综合网| 色五月AV在线| 男人的天堂久久狠| 91熟女.com| a人片中文字幕一区二区| 亚州色站 日韩电影| 草草影院在线视频| 久久五月份| 亚洲激情网一二三四区| 天天操夜夜操| 精品人妻1237| 天天内射| 欧美啪啪啪91| 久操精品| 亚洲一区二区三区中文字幕| 欧美色性爱| 黄色av一区二区在线| 久久久无码av精| 六月丁香久久| 97国产亚洲中文在线| 欧美性爱日韩高清| 一级啊性爱在线视频| 日本色婷婷| 久久久草成人网站久久久草成人久久久草久久久 | 强奸熟女一区二区三区| 九九九综合精品| 国产久久一区二区三区野外在线| 91久久久老司机| 国内毛片四区| 精品免费1| 国产精品久久久久久久久久久久久久久久 | 中文字幕第页| 2017超碰| 视频一区二区免费在线| 亚洲少妇综合在线播放| 麻豆天美国美国产| 一本一道久久综合久久| 亚欧毛片基地国产毛片基地| 久久一级无码精品毛片6| 色哟哟的毛片| AV天黑人| 日韩在线一区二区| 亚洲男人天堂2019| 97超色| 91大神精品长腿在线观看网站| 乱伦3P视频| 婷婷情色五月天| 亚欧美综合网| 婷婷五月天基地| 久久99深爱久久99精品| 国产美女口爆吞精视频| 伊人97色天使| 国产精品人妻一区二区| 91亚·色| 丰满人妻一区二区三区色-百度| 久久‘黄片视频| 超碰97欧美日韩| 激情网色| 亚洲伊人青青草| av午夜玫瑰| 中日韩免费看男女操逼大全| 嗯嗯啊中文字幕| 啊啊啊爽爽| 黄色大片一区二区密桃丝袜| 又大又大又大又粗爽高潮观看| 性爱视频久久| 亚洲精品国产精品成人| 亚洲激情 欧美色图| 国产福利视频精品视频| 91久久国产综合精品| 奇米狠999| 新怡红院| 乱理日韩中文| 国产www色在线观看| 91老熟女91老女人| 丁香五月激情网| 91被操| 97av,com| 美日韩一卡二卡三卡免费人妻精品| 亚州熟女乱伦| 性高潮久久久| 伊人久久国产免费观看视频| 国产AV无码AV| 91福利网在线观看| 欧美日韩狠狠爱| 九九热超碰97亚洲最新香蕉| 福利在线黄片| 被窝影院午夜看片无码| 天天操福利视频综合网站| 免费的av网| 欧美强奸一区二区诱惑| 人妻干天天| 中文字幕在线免费观看 | 久久久久久久久女黄| 婷婷五月天激情网| 操比国产| 欧美日韩性爱无码| 久久精品福利影院| 青草综合| 91色色网站| 中国和日本人色哪个不下载能放| 中文字幕-区二区三区四区视频中国| 717影院理论午夜伦八戒| 欧美的性爱网站免费| 中英熟女操女| 欧美v日韩v亚洲v最新在线| 久久久啊啊啊| 另类欧美色| 超碰吊日色| 亚洲综人| 中文字幕成人乱码熟女精品国50 | 日天天九九天堂666| 精品女同一区| 日韩精品 欧美激情| 尤物视频偷拍免费| 视频二区美腿制服人妻欧美| 日韩有码专区| 中文字幕日韩专区精品系列| 18啪啪手机免费性爱| 国产亚洲性生活视频播放| 国产又色又粗又黄又爽| 日韩A优精品在线观看| 色天使亚洲综合在线观看| 国产无码精品高清| 激情五月天社区| 久久草大香蕉| 啊啊啊好舒服好爽啊啊啊视频| 极品少妇99| 97精品97久久| 欧美第一页| 最新中文字幕精品在线| 超碰人人妻| 麻豆精品A片免费观看| 欧美人妻一区二区| 欧美激情性爱视频网站| www.久久| 亚州高清av| 91在线欧美| 留下AⅤ黄色片| 午夜呻吟欧美| 女优大全 - 91n| 四虎国产精品永久地址入口| 好吊妞转入那个网| 九九九九欧美| se吧提供91精品国产91久久久久久| 精品久久久久久中文| 屌逼麻豆| 超碰97国产欧美| 亚洲一级特黄大片在线播放91| 欧美九9 9 9| av草草在线电影| 6080YYY午夜理论片在线观看| 国产亚洲色婷婷久久99精品91| 国产精品网站www| 亚春色色| 天天躁日日躁XXXXYY| 精品无人区麻豆乱码久久久| 日日摸天天爽夜夜欢| 极品极品色影院| 国产久久久久影院老熟女| 极品综合| 嗯嗯啊啊好疼| 国产精品成人久久一区二区三区 | 97在线视频网站| www狠狠| 久9综合在线| 欧亚免费视频| 欧美综合1性辶| 欧美熟女操屄| 亚洲超碰综合网| 亚洲精品毛片在线观看| 日本天天干天天搞一区| 中文字幕aⅴ在线视频| 91色堂| 国产一在线观看| 欧美激色| 久久婷婷影院| 美女诱惑久久| 国产传媒1234区| 国产探花精品在线| 四虎视频在线观看| 成人福利视频网| 色天天野狼综合社区| 色墦五月丁香| 亚洲啪啪视频免费| 加勒比久久av| 一区二区久久天天干狠狠| αⅴ天堂| 日产操逼| 啊啊啊啊啊啊啊啊要喷了| 色婷婷丁香| 女人被男人桶爽视频网站| 欧日韩一二三f区| 青娱乐蜜桃臀AV色婷| 大香蕉久久| 五十路三级片| 欧美不卡在线一区二区| 国产精品网址| 亚洲狠狠入| 330dv亚洲成年视频网| 婷婷五月综合激情| 久久这里只精品99re66图| 国产乱伦性爱区| 91伊人| 日韩欧美中文字幕搭讪巨乳美人妻视频| 啊啊啊啊啊操我视频| 色婷婷影视| A 天堂| 极品人妻少妇综合| 久操视频在线| 欧美天堂超碰97| 91欧美网| 黄色人人| 男人的天堂在线有码| 走光一区92下载| 人人搞人人插人人操| 综合欧美日韩在线观看| 啊啊啊啊啊在线观看网址 | 大黄片做爱的大的| 日韩三级一区| 亚洲天堂区| 国产精品在线网站| 丝袜美腿制服人妻二区中文字幕| 久久久无码精品人妻二区 | 另类小说五月天| 少妇啪啪自拍| 日韩免费一级性爱视频| 伊人超碰97| 97碰碰日本乱偷人妻中文的| 久久女人一区二区三区| 日韩中文字幕视频在线观看| 国产精品露脸在线观看| 视频不卡中文字幕| 四虎影视 亚洲无码| 东京热男人的天堂网| 人妻精品一区二区三区| 国产三级多多影院2022国产AA一级毛片无码 | 国产精品自在自拍视频| 宅男午夜在线视频| 91女网站| 日韩美女高潮喷水视频| 国产午夜在线观看| 日本片日本片祼观看网站在线看中文版网页在线看 | 熟妇人妻一区二区三在线| 精品国产91av一区二区三区 | 天天综合网在线| 天欧美在线| 粉嫩久久久久| 亚洲有码视频二区| 高清国产性猛交xxxx乱大交| 日本3级一区二区免费| 黄色大片一区二区密桃丝袜| 久久久久七视频| 一本一道久久综合久久| av一区二区三区不卡| 国产熟女乱论| 9 7超碰在线免费观看| 欧美少妇色综合| 九久精品| 久99热| 强奸熟女一区二区三区| 欧美色91| 国产精品欧美日韩久久| 国产超碰在线一区| 亚洲精品九九九| 国产亚洲日本精品在线| 久久m| 九九热AV| 97亚洲性爱| 亚州性色| 天天操综合网| 精品玖九九久| 天天摸,夜夜摸| 欧美,日韩,中文,另类| av天堂精品久久| 欧美久久人体| 懂色天天爱天天日天天射天天澡| 青青草十区九区爱夜| 久久超碰网| 97精品一二区| 久久久久久99AV无码免费网站| 一区二区三区精品黑丝白丝酒店对鸡| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 色狠狠综合噜一二三区| 亚洲一区中文精品| 成人欧美日超碰| 两性色网| 超碰人妻久久| 精品国产一区二区久久| 嫩草在线视频| 欧美线天码中字| 狠狠干婷婷| 伊人天天久久动态图| 黄网站黄视频网站进入口| 精品一区二区综合熟妇| rion磁力链接| yazhousetuoumei| 多毛小伙内射老太婆| 好爽要喷了| 青青草原人妻| 欧美日韩国产高清在线一二三区| 欧美日动态视频| 淮穴色AV| 精品日韩人妻视频| 五月天丁香欧洲日韩| 天天射影院| 日本熟人妻中文字幕在线|...久久国产精品-国产精品_日本一区二区三区中文字幕 | 欧美熟女逼久久久久久| 大香蕉手机在线视频| 国产一进一出视频网站| 国产AV中文| 伊人少妇久久久| 按摩中文字幕| 日韩精品99999| 无码高清专| 26UUU欧美激情一区二区| 色噜噜狠狠色综无码久久合欧美| 99re在线视频国产| 欧美精品双插| 夜夜騷av、一區二區| 99综合| 日本操BAV| 神马麻豆福利院| 国产精品在线一区二区| 女人的天堂大香蕉网| 色穴精品| 青青草亚洲一区| 欧美亚洲综合色| 久青草影院| 婷婷伊人| 97香焦色区| renqi久久久久久久久久久久| 午夜男女爽爽爽在线视频| 日韩人妻 中文字幕| Blackedraw视频一区二区| 无遮挡一级毛片视频免费的| 国产乱色国产精品免费视| 岛国黄片网站| 粉嫩粉嫩一区性色AV片| 日韩精品中文字幕一| 精品毛片久久久精品毛片| 国产99久久99热这里只有精品15| 欧美性爱视频免费一区一A| 国产成人亚洲精品无码古代早漏男 | 3p国产色噜噜一区| 超碰人人色| 人人玩人人添人人澡免费| 久操网视频| 桃花色涩综合影院| 99999精品成人| 亚洲自拍欧美色综合| 98超碰欧美| 亚洲另类欧美精品| 日本高清免费一本视频在线观看| 国产9 9在线 | 亚洲| 中文字幕精品区先锋资源| 天天综合色电影| 中文久久96| 国产高清自拍视频| 色官网在线| 乱码熟妇人妻久久久| 91久久九九精品国产综合| 日本成a人v网站在线观看| 亚洲成a人在线观看久| 熟妇综合一区二区三区| 色综合尤物| 97精品国产精品免费观看| 激情在线青青操| 亚洲精品xxx| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 欧洲乱码一区二区| 最新制服中文第一页| 唐山老熟妇露脸啪啪叫| 少妇人妻精品| 欧美伊人久久综合网| 嗯嗯啊啊视频在线看| 人妻少妇精品无码专区二区密桃| 国产高清午夜成人在线观看| 六月婷婷综合| 天天干人人乐| 在现视频女上位好爽| 操逼操逼逼操操逼91| 你懂的在线观看区国产 | 日韩资源网| 人人操肉肉| Julia Annxxxxx| 在线无码操| 亚洲自拍青操视频| 日韩AV熟女乱伦| 九久久精| 人人喜人人妻| 国产最新小视频在线播放下载 | 男人天堂导航| 国产亚洲 中文欧美久久| 性爱视频无打码在线观看| 91大神电影天堂| 日本成人A片免费看| AV色图| 亚洲九九夜夜| 无码久久亚洲高清,| 久久久99999久网站| 120分钟婬片免费看| 麻豆精品一区二区三区四区免费观看| 91 丝袜在线| 亚洲少妇中文字幕网址| JuliaAnnXXX888| 嗯……啊…嗯嗯…啊…好舒服| 人人操人人摸人人看人人干| 亚洲区 欧美区| 少妇内射www在线观看视频| 精品一区二区成人动漫| 久久受www免费人成| 熟人人妻少妇精品久久| 97超碰巨乳| 国内91熟女人妻丝袜天天精品视频在线| 中文字幕,人妻,日韩| 麻豆天美在线| 久热精品在线| 熟女网站最新| 人妻酒店出差被中出免费在线播放| 国产女人成人精品视频| 亚洲日韩美国人妻| 在线视频亚洲无码| 天天夜躁日日躁狠狠2002| 九九九九一级| renqi久久久久久久久久久久| 色婷婷婷五月天激情四射| 五月丁香| 久久久久人妻| 丁香色婷婷| 亚洲激情四射| 久久久久久人妻| 激情婷婷五月天| 一起草av| 亚洲熟妇图片| 婷婷色香| 四虎免费看黄| 超碰视97中文| 91美女精品| 人妻天堂网| 亚洲福利影院一区久久| 91亚洲综合| 色操逼网| 国产 v乱码一区二| av在线资源| 熟妇在线视频一区二区| 午夜呻吟欧美| 久久免费老司机精品| 九九九久久久久| 欧美女同在线| 国产白丝av| 美女午夜福利免费视频| 亚洲第一在线视频| 超碰激情808| 色亚州人久干视频在线观看免费版| 色综合1991| 天天综合97| 人妻系列无码专区中文有码| 嗯嗯啊中文字幕| 久久爱超碰网| 欧美亚洲自拍另类人妻| aaaa少妇高潮大片| 91狠婷| 高清孕妇孕交 交孕妇| 91欧美经典| 无色无码| 97国产亚洲中文在线| 欧美一级二级三级| 在线人妻熟女一区二区三区四区五区| 日韩性爱1级片视频| 99自拍视频在线观看| 黄色不卡视频| 亚洲日韩人妻中文字幕一区| 五月天激情影院| 91丝袜熟女| 亚洲美女AV无码| 99热综合| 淫纸中9区| 爽 好舒服 无码刺激久久| 99精品伊人| 久久精品人体| 日日日日做夜夜夜夜做无码97| 亚洲人人操| 夜夜嗨一区| 在线观看岛国有码| 日日骚精品视频| 乱伦a片视频| 91精品免费| 欧美日韩国内不卡| 大香蕉日亚洲日本亚大| 强奸乱伦大香蕉网| 久久亚洲欧美一区二区三区-亚洲国产精品第一区二区 | av日韩在线观看电影| 香蕉国产精品麻豆亚洲欧美日韩| 在线黄页看毛片| 69视频入口| 青木玲在线不卡| 强奸乱伦av电影| 97欧美日韩| 久久久穴999| 妺妺跟我一起洗澡没忍住| 成人怡红院| 屌妞视频久久久久久久久久久久| 麻豆激情综合| 亚洲精品一二三四区| 久久亚码| 情色大香蕉| 97天天爽| 国产亚州高清国产拍精| 啊啊啊爽爽| 青青草久久| 欧美色图亚洲特色| 五月香婷婷| 国产特级毛片AAAAAA高潮流水| 亚洲好色人妻| 97视频www| 日本伦理一区二区| 国产懂色精品国产av| 色屁屁影院www国产| 夜夜做夜夜爽精品视频| 亚洲天堂自拍| 98色网| 久久五月天婷婷| 日韩色欲久久一二三四区| 啊v在线观看视频| 丝袜美腿丝袜| 色777999综合| 97干综合网| 91男同| 无码操逼天堂| 久久精品视频一区三区小泽玛利亚| 美女啊啊啊啊pc| 2010男人的天堂| 97色婷| 97干在线| 天堂精品在线| 无码heyzo高清一区| 97AV爱| 九九夜精品九九在线| 国产老熟女| 狠狠久久四虎| 久草婷婷| 欧美日韩国产人人| 大但人体久久久久| 最新AV在线| 大JI巴好深好爽又大又粗视频| 亚洲色人| 无码高清操逼网址| 中文字幕亚韩| 五月丁香影院| 国产精品熟女九九九| 大乔未久88一区| 97超碰精品图片| 大肥女高潮bbwbbwhd视频| 日本人妻中文字幕精品| 日韩一级特黄av毛片| 91精品国产麻豆国产自产在| 亚洲美乱| 97欧美色| 日韩免费中文字幕视频| 色欲日韩欧美在线一区| 东京热男人的天堂网| 天天插夜夜爽| 一本色道久久综合精品婷婷| 国产成人拍国产亚洲精品| 国产精品久久久久久久黄无码| 丁香五月天激情综合| 美女干逼2| av网站免费看| 国产亚洲在线| 国产成人啪一区二区| 无码一区免费在线不卡| 欧美久久伊人| 日噜夜夜夜夜夜夜夜夜夜夜爽爽爽爽爽爽爽爽爽爽爽爽 | 日韩国产九九精品一区二区三区毛片 | 飘花国产午夜精品不卡| 久久免费精彩视频| 欧美性天天影视| 男女国产精品| 婷婷色婷婷| 欧美黑人168页欧美黑人167| 日本一区二区三区午夜观看| 日韩人妻少妇 一区二区三区| 午夜福利 成人 91| 囯产操逼片| 另类图片五月天| 在线视频日韩欧美国产| 人妻大香蕉| 国产九九九九九九九九| 无码精品啪啪啪一区二区三区三州| 97资源视频| 精品一区二区三区免费古装毛片香港三级日本三级人妇 | 亚洲自拍天堂| 国产天美传媒精品| 天天弄天天操| 丝袜视频网国产90| 俺去也婷婷| 亚洲伊人成综合成人网| 青青草在线视频人人想人人上| 日韩一级欧美一级国产一级台湾| 久操99| 日本色色视频网站| 久久超碰av在线| 六月丁丁香| 亚洲无码精品AV久久久| 久久久久网站-538在线视频-欧美永久乱码 | 亚洲91极品| 日韩欧美成人综合在线| 欧美在线亚洲| 德国一二三不卡| 99热只有这里有精品| 国产91 丝袜在线播放00-百度| 91成人在线| 99操逼| 男人a天堂手机在线版| 97鸡把在线视频| 欧美影音在线| 超碰亚洲97| 色色色色综合网| 特级特黄一级毛片免费| 葡萄牙性视频一二区| 强奸熟女一区二区三区| 国产熟女少妇一区| 国产精品亚洲免费| 大香蕉一区二区在线观看.| 天天看天天日| 超碰在线日韩一区| 中文字幕乱偷人妻久久艾草网| 91 手机在线播放 绯色| 婷婷91| www.av在线观看| 69精品人人人人| 亚洲日韩黑丝| 你草精品在线视频| 曰韩欧美国产传媒麻豆第一区| 欧美日韩性爱精品| 多乙久久久久久| 亚洲欧洲日韩天堂av| 日韩无码精品综合久久| 蜜臀一区二区三区在线| 欧美亚洲综合高清在线| 亚洲图片欧美偷拍| 极品少妇久久久久| 天天欧美| 色婷婷国产精品一区在线观看| 97国产超碰| 国产一级内射高清视频| 激情小说亚洲色图| 免费家庭乱伦视频| 免费在线黄片视频| 国产精品久久久久久片| 中文字幕免费看大片| 色婷婷五月综合激情中文字幕| 国产女性无套 免费观看| 91站街按摩店老熟女熟女| 五月婷婷色| 亚洲棕合电彰| KK色在线影院| 污色区网站| 8050午夜少妇无码| 大香蕉AV丝袜| 亚洲高清男人天堂| 懂色av一区二区三区天美传媒| 国产亚洲色停停久久99精品91| 国产精品点击进入在线影院| 蜜桃无码AV一区二区| 4141514逼喷水三级片| 999熟女精品| 综合影院永久入口国产| 大伊香蕉在线视频免费| 人妻精品综合中文字幕在线 | 天天摸天天操视频| 日日操免费视频| 人妻啊啊人妻啊| 亚洲男人天堂2| 欧美18 在线观看| 口爆综合网| 少妇的嫩逼图片| 黄色大香焦1级‘′‘| 蜜臀在线免费观看在线免费观看| 亚洲骚男同com| 久久无码电影| 试看福利| 欧美人妻精品一区二区| 97chaopenrihan| 国产强上视频在线观看| AA特级绝黄| 婷婷视频网| 超碰天天去日穴| 性爱乱伦一区| 99热日| 在线色导航| 97欧美色资源| 艹少妇网站| 中文字幕伊人| 一本一道波多野毛片中文在线| 内射白嫩美女| 亚洲欧美高清无码| 国产高清1234区| 亚洲巨爆乳一区二区三区四季网| 超碰免费在线| 翔田千里AV无码秘 三区| 特污免视频| 51久久夜色精品国产麻豆| 天天综合有色网| 国产一级137片内射麻豆| 日韩激情视频| 亚洲女毛多水多21P| 久久精品无码熟妇一区二区三区视频导航 | 啪啪91| 蜜臀久久99精品久久久| 综合网欧| 探花在线免费观看视频国产一区| 98福利在线视频| 久久亚洲婷婷| 国产亚洲精品A在线观看下载| 大吊色| 欧美黄色大香蕉一区二区| 美女91在线| 老鸭窝黄色视频网站| 91精品国产麻豆国产自产在| 大色综合| 熟女熟妇伦久久影院毛片一区二区| 丁香五月天堂网| 正在播放国产精品一区| 亚洲操操操无码| 麻豆天美制片厂网站视频| 国产亚洲禁久一区二区| 十八禁视频一区二区| 偷拍亚洲视频一区二区三区四区| 中文字幕一区二区三区人妻少妇在线 | 日本三级日本三级99| 亚洲国产精品无码AV久久久| 亚洲丝袜二区在线| 色偷偷男人的天堂麻豆| 97干色天堂| 欧美日日夜夜| 欧美另类色图片| 亚洲老熟妇xxx| 91丨九色丨国产打屁股| 伊人黄色视频免费观看| 中文字幕乱在线伦视频中文字幕乱码在线 | 精品国产www久久| 少妇无码av专区线| 亚洲国产奇米影视久久| 黑人精品XXX一区一二区| 天天综合91| 亚洲在线网站| 自拍偷拍第26| 日本免费一级AAA大片器 | 日本免费二区三区| 怡春院久久| 校园春色五月天| 97香蕉网| 污污汅18禁网站在线永久免费观看| 日韩成人在线性爱视频| 青娱乐欧美激情一区二区| 日韩乱中文| 伊人久久婷婷| 中文字幕一区二区三区人妻少妇在线| 女人妻一区| 99只有精品| 欧美综色欧| 激情综合网亚洲| 尤物视频一区| 99九九精品| 免费9 1久久| 国产风韵犹存熟妇三区| 亚州综合色| 7777奇米影视久久| 日韩性爱小视频在线观看| 又大又白奶子| 九9精品| 日婷婷| 亚洲激情网| 青青草日韩免费观看高清在线| 日韩十八禁| 蜜乳AV一区| 东京成人一区| 欧美色图91| 粉嫩在线一区二区懂色| 九九九久久久久| 天美传媒精品一区二区| 国产粉嫩出水在线播放| 国产精品蜜乳AV| wuyechaopeng| 一个国产在线综合网站| 亚洲日本加勒比在线| 尤物视频偷拍免费| 欧美精品一区二区少妇免费A片 | 青青草中出视频| 久久久久亚洲AV无码专区少妇| 欧美成不卡网| 国产JDAV无码视频在线观看| 亚洲色综合| 中文字幕青青草| 亚洲无码99| 日日超碰亚洲| 欧美激情亚洲色图| 国内毛片热久久思思热| 嗯嗯,啊啊,国产精品| 国产又黄又爽| 蜜臀久久99精品久久久久免费观| 爱妃国产亚洲视频中文字幕| 久操九九九九| 26uuu欧美日韩| 搡老女人老91妇女熟女| 无码在线亚洲| 黄色成年| 老熟女熟妇| 久久毛卡| 综合 亚洲 欧美| 美女啪欧美一区| 国产精品嫩草影院免费| 人人操超碰在线| 伊人97色天使| 日韩不卡毛片Av免费高清| 天天躁日日躁狠狠狠躁| 草伊人高潮喷水超碰| 日韩一性一交一A片俄罗斯| 欧美姓爱综合网| 精品97久久综合| 国产超碰| 黄色激情电影在线观看| 麻豆熟妇乱妇熟色A片在线看 | 成人性爱av.com| 中文久久久| 婷婷精品久久av影视| 日韩9999| 亚洲熟妇丝袜在线观看| 亚洲色图亚洲无码强奸乱伦| 超碰在线人人射| 精品人妻一区二区三区蜜桃视频| 日本一区99| 国产久久久9999| 99热精品在线播放| 思思性爱| 青娱乐国产精品| 国产操偷| 日韩性爱1级片视频| 欧美日韩午夜精品一区二区三区| 欧美97色| 久久东京热久久| 熟女人妻一区二区三区| 亚洲丝袜少妇在线|