亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

nginx 1.29.6 新特性解讀:官方粘性會話與性能優(yōu)化實(shí)踐

nginx 1.29.6 新特性解讀:官方粘性會話與性能優(yōu)化實(shí)踐 nginx 1.29.6 發(fā)布了作為主線版本這算得上是今年值得仔細(xì)看的一次更新。我在生產(chǎn)環(huán)境里維護(hù)著一批 nginx 網(wǎng)關(guān)從 1.16 一路追到 1.28每次主線版本發(fā)版我都會先翻 changelog再拿測試機(jī)驗(yàn)證確認(rèn)沒有坑之后才考慮要不要跟。這次 1.29.6 最讓我關(guān)注的有兩件事一是 upstream 終于支持原生粘性會話二是性能與穩(wěn)定性方向有一批改進(jìn)。這兩個點(diǎn)對搞負(fù)載均衡、多節(jié)點(diǎn)部署的朋友來說屬于能直接改變架構(gòu)選型的內(nèi)容。粘性會話這個詞搞過后端的人應(yīng)該不陌生。應(yīng)用多節(jié)點(diǎn)部署之后用戶的登錄狀態(tài)、購物車數(shù)據(jù)、臨時上傳進(jìn)度都存在某臺服務(wù)器上如果負(fù)載均衡把請求隨機(jī)分到不同節(jié)點(diǎn)輕則用戶反復(fù)掉線重則直接把業(yè)務(wù)打崩。以前 nginx 官方不支持這個能力大家只能用第三方模塊或者用 ip_hash、hash 指令硬湊?,F(xiàn)在 1.29.6 官方主線直接支持意味著以后在標(biāo)準(zhǔn)環(huán)境里就能做會話保持不用再為了一個 sticky 模塊去編譯維護(hù)一堆第三方代碼了。這篇文章我會先把這次更新的核心內(nèi)容拆開講清楚然后重點(diǎn)聊粘性會話的原理和配置再補(bǔ)上性能調(diào)優(yōu)和升級后的常見坑。適合正在用 nginx 做反向代理和負(fù)載均衡的運(yùn)維、后端開發(fā)以及準(zhǔn)備升級主線版本但心里沒底的團(tuán)隊(duì)參考。1. 1.29.6 的核心看點(diǎn)官方粘性會話為何等了這么久1.1 為什么粘性會話此前一直靠第三方模塊nginx 官方在很長一段時間里反代負(fù)載均衡只有輪詢、權(quán)重、ip_hash、最少連接這幾種策略。這些策略的共同點(diǎn)是“負(fù)載均衡優(yōu)先”每個請求盡量均勻分發(fā)給后端不關(guān)心請求來自哪個用戶、和之前的請求有沒有關(guān)聯(lián)。這在純 API 網(wǎng)關(guān)場景沒問題但一旦涉及 Session、Cookie、長連接就很容易捅婁子。社區(qū)很早就有解決方案。老牌的 nginx-sticky-module-ng很多人編譯過稍微新一點(diǎn)的做法是用 hash 指令自己按 Cookie 或 Header 做一致性哈希。但這些方案都有比較明顯的毛病。第三方模塊要跟隨 nginx 版本重新編譯每次 nginx 升級模塊編譯失敗的情況我都遇到過不止一次。hash 方案呢能用但對節(jié)點(diǎn)增刪不友好調(diào)整后端的瞬間會有大量請求漂移到其他節(jié)點(diǎn)Session 直接丟失。這背后其實(shí)有 nginx 官方的取舍。官方對核心模塊的穩(wěn)定性要求極高一個新特性要進(jìn)主線得先解決權(quán)限模型、模塊加載機(jī)制、與健康檢查的協(xié)作方式等一系列問題。粘性會話不像輪詢那樣無狀態(tài)它天然引入“用戶和后端節(jié)點(diǎn)綁定”的概念這會和故障轉(zhuǎn)移產(chǎn)生沖突——如果用戶綁定的那臺后端掛了請求到底該轉(zhuǎn)發(fā)到哪里這個問題處理不好官方寧可不做。所以這次 1.29.6 上線粘性會話從產(chǎn)品決策到協(xié)議設(shè)計都花了不少心思。1.2 新增粘性會話后哪些場景直接受益第一類明顯受益的場景是帶登錄態(tài)的傳統(tǒng) Web 應(yīng)用。比如企業(yè)內(nèi)部系統(tǒng)、CMS、電商網(wǎng)站用戶登錄之后 Session 存在本機(jī)內(nèi)存里Session 沒有做共享這種架構(gòu)下粘性會話幾乎是剛需。以前沒有官方支持要么在應(yīng)用層做 Session 復(fù)制要么引入 Redis 共享 Session要么就忍著用戶隨機(jī)掉線?,F(xiàn)在只需要在 nginx 層做一次配置把同一個用戶的請求固定到同一臺后端節(jié)點(diǎn)應(yīng)用層基本不用動。第二類是 WebSocket 和長連接場景。nginx 代理 WebSocket 已經(jīng)非常成熟但長連接比普通 HTTP 請求更需要會話保持。一個 WebSocket 連接建立之后后端的進(jìn)程和前端是保持雙向通信的一旦連接被轉(zhuǎn)發(fā)到另一臺節(jié)點(diǎn)這條鏈路就會斷裂。比如用 nginx 代理 FreeSWITCH 的 WS 端口、IM 服務(wù)的推送通道這類業(yè)務(wù)天然需要粘性會話。第三類是文件上傳下載、分片傳輸這類有狀態(tài)流。大文件分片上傳每一片都希望落到同一臺后端否則合并的時候找誰要數(shù)據(jù)粘性會話能把同一用戶的流式請求穩(wěn)穩(wěn)固定在一臺節(jié)點(diǎn)上省掉很多應(yīng)用層的合并邏輯。1.3 性能與穩(wěn)定性提升的實(shí)際價值其實(shí)每次主線版本更新changelog 里都會有一批性能優(yōu)化和穩(wěn)定性修復(fù)。這種更新通常不會大張旗鼓宣傳但對生產(chǎn)環(huán)境的影響非常直接。從我追蹤版本的經(jīng)驗(yàn)來看這類改動主要集中在這幾個方向。一是連接生命周期相關(guān)的問題。包括連接復(fù)用、空閑連接回收、異常連接釋放等。生產(chǎn)環(huán)境中經(jīng)常出現(xiàn)的 TIME_WAIT 堆積、worker 連接數(shù)緩慢上漲、長時間運(yùn)行后連接池膨脹基本都是這類問題引起的。新版本往往會在 upstream 連接的復(fù)用策略和等待隊(duì)列上做調(diào)整讓整個并發(fā)連接模型更平滑。二是 HTTP/2 和 HTTP/3 的實(shí)現(xiàn)完善。HTTP/2 已經(jīng)普及但多路復(fù)用下的流量控制問題、連接并發(fā)導(dǎo)致的性能回退問題不同版本的表現(xiàn)差異很大。HTTP/3 也就是 QUIC 協(xié)議nginx 一直在推進(jìn)每一次主線更新都會帶上 QUIC 相關(guān)的修復(fù)和改進(jìn)。如果你打算開啟 HTTP/3這類底層的協(xié)議棧完善對穩(wěn)定性幫助很大。三是內(nèi)存使用和 worker 進(jìn)程的穩(wěn)定性。nginx 對內(nèi)存的控制一直很嚴(yán)格但應(yīng)對極端流量、大量非法請求、畸形報文的時候偶發(fā)的高內(nèi)存占用和 worker 崩潰也沒有完全絕跡。主線版本通常會在這些邊緣場景上打補(bǔ)丁所以“穩(wěn)定性全面提升”這種說法其實(shí)是落到這些具體場景里的。2. 粘性會話的原理與選型從 Cookie 到一致性哈希2.1 粘性會話解決的核心矛盾負(fù)載均衡的核心邏輯是把流量分散開讓每臺后端都能吃飽但又不能撐死。問題來了請求可以隨便分用戶的數(shù)據(jù)狀態(tài)卻不能隨便分。用戶登錄之后Session 存在 A 節(jié)點(diǎn)下一次請求如果被負(fù)載均衡分到 B 節(jié)點(diǎn)B 節(jié)點(diǎn)查不到這個 Session就只能讓用戶重新登錄。粘性會話的思路很簡單在負(fù)載均衡層加一個“綁定關(guān)系”讓同一個用戶的請求盡量落到同一臺后端。這與 Session 共享是兩種不同的解決路徑。Session 共享是讓所有節(jié)點(diǎn)都能訪問同一份狀態(tài)屬于“數(shù)據(jù)搬家”粘性會話則是把用戶綁死在固定的節(jié)點(diǎn)上屬于“人不搬家”。兩種方式?jīng)]有絕對的好壞但粘性會話在改動成本上更低尤其適合改造老系統(tǒng)。只要 nginx 層配置一下業(yè)務(wù)代碼完全不用動不香嗎2.2 Cookie 粘性如何工作Cookie 粘性是實(shí)現(xiàn)粘性會話最常見的方式。流程大概是這樣的用戶第一次訪問某個服務(wù)nginx 所在的負(fù)載均衡層發(fā)現(xiàn)這個請求沒有攜帶粘性 Cookie就按照當(dāng)前策略選擇一臺后端節(jié)點(diǎn)接收請求并在響應(yīng)里種一個 Cookie比如 srv_idbackend-a。用戶接下來的請求都會帶著這個 Cookienginx 看到 Cookie 里的值之后直接把請求轉(zhuǎn)發(fā)到 backend-a完成綁定。這里有個細(xì)節(jié)需要理解nginx 并不需要真的去后端存儲里確認(rèn)這個 Cookie 是否有效。它維護(hù)的是一個映射關(guān)系即“某個 Cookie 值對應(yīng)哪個后端節(jié)點(diǎn)”。這個映射可以放在共享內(nèi)存里也可以把后端節(jié)點(diǎn)信息直接編碼在種下去的 Cookie 值中后者避免了大量連接狀態(tài)占用內(nèi)存。生產(chǎn)環(huán)境里更推薦后一種方式即使 nginx 重啟、worker 重新調(diào)度Cookie 值仍然有效不影響粘性。還有一類是基于一致性哈希的實(shí)現(xiàn)。不種 Cookie而是根據(jù)請求里的某個穩(wěn)定標(biāo)識比如用戶 ID、來源 IP、特定的 Header做哈希計算算出來的結(jié)果就是后端節(jié)點(diǎn)的編號。這種方式的優(yōu)點(diǎn)是沒有額外的 Cookie也不依賴瀏覽器是否支持 Cookie缺點(diǎn)是如果后端節(jié)點(diǎn)數(shù)量變化哈希結(jié)果會大面積漂移。2.3 幾種粘性策略怎么選不同策略的選型主要看你的業(yè)務(wù)形態(tài)和現(xiàn)有基礎(chǔ)設(shè)施我整理了一個對比表格策略實(shí)現(xiàn)方式優(yōu)點(diǎn)缺點(diǎn)適用場景Cookie 粘性種 Cookie 并映射到節(jié)點(diǎn)精確、用戶經(jīng)驗(yàn)好、不受代理 IP 影響依賴瀏覽器 Cookie無 Cookie 客戶端不適用帶登錄態(tài)的 Web 應(yīng)用、購物車、企業(yè)系統(tǒng)ip_hash按來源 IP 哈希無需額外配置天然支持多出口 IP 會把用戶全塞到一臺節(jié)點(diǎn)出口 IP 單一的內(nèi)網(wǎng)服務(wù)、IPv6 場景Hash Key按 Header/參數(shù)/指定 key 哈希靈活可針對業(yè)務(wù)標(biāo)識進(jìn)行哈希節(jié)點(diǎn)變更時哈希漂移Session 容易丟無 Cookie 的 API 網(wǎng)關(guān)、需要按租戶隔離的場景第三方 sticky 模塊編譯第三方模塊功能成熟可自定義升級跟隨成本高模塊質(zhì)量參差不齊舊環(huán)境暫時無法升級到新版本我在實(shí)際項(xiàng)目里給電商類站點(diǎn)用的是 Cookie 粘性種一個短期 Cookie 就好給內(nèi)部 API 網(wǎng)關(guān)用的是基于 Header 的哈希比如按 X-User-Id 哈希不用管 Cookie也不會因?yàn)闉g覽器禁用 Cookie 而失效。這個選擇邏輯很簡單有明確用戶身份的優(yōu)先用 Cookie 粘性按來源 IP 和入口網(wǎng)關(guān)做聚合的就用 ip_hash 或 Hash Key。3. 升級 1.29.6 與粘性會話配置實(shí)操3.1 升級前的檢查與備份升級之前我習(xí)慣先做三件事。第一明確當(dāng)前版本。命令是nginx -v如果發(fā)現(xiàn)當(dāng)前是某個很老的穩(wěn)定版跳版本升級要格外注意配置兼容性。第二完整備份配置。不僅僅是復(fù)制一份 nginx.conf而是把 conf.d 下的所有 conf 文件、證書目錄、還有編譯時的模塊列表全部記錄下來。第三確認(rèn)回滾路徑。git 里留一份當(dāng)前可用的 nginx 二進(jìn)制和配置萬一新版本有兼容性問題能在一分鐘內(nèi)回到舊版本。還有一點(diǎn)容易被忽略就是確認(rèn)第三方模塊兼容性。如果你當(dāng)前環(huán)境編譯過第三方模塊升級到 1.29.6 之后這些模塊大概率要重新編譯。有些模塊原作者已經(jīng)不怎么維護(hù)了在新版本上編譯可能直接報錯。建議升級前先在新版本源碼上跑一次./configure加上原有參數(shù)看看模塊能不能編譯通過。這一步卡住的話就別急著上生產(chǎn)先解決模塊兼容性問題。3.2 平滑升級的完整流程如果你用的是官方源碼編譯方式平滑升級流程相對成熟。先把 1.29.6 的源碼包下載下來解壓沿用之前的編譯參數(shù)重新 configure 并編譯新二進(jìn)制然后用新二進(jìn)制替換舊二進(jìn)制。保險起見替換前可以把舊二進(jìn)制備份為 nginx.old。替換完成后執(zhí)行kill -USR2 舊master進(jìn)程PID讓新老版本同時運(yùn)行再kill -WINCH 舊master進(jìn)程PID優(yōu)雅關(guān)閉舊 worker最后kill -QUIT 舊master進(jìn)程PID退出舊的 master。用系統(tǒng)自帶軟件源安裝的 nginx升級方式會更簡單直接執(zhí)行包管理器的升級命令就行。但要注意RedHat 系和 Debian 系默認(rèn)的 nginx 版本往往比主線版落后不少。如果你等不到官方源更新可以自行添加 nginx 官方源或者直接使用編譯安裝的方式。我這里更推薦編譯安裝因?yàn)榭梢跃_控制編譯參數(shù)還能把第三方模塊一起編進(jìn)去。升級完成之后我的驗(yàn)證順序是nginx -t校驗(yàn)配置nginx -V確認(rèn)版本和編譯參數(shù)然后 reload 一次觀察 error.log 有沒有新增告警再通過壓測或者線上小流量驗(yàn)證基礎(chǔ)功能。3.3 配置一個帶粘性會話的 upstream假設(shè)我們有兩個后端節(jié)點(diǎn)部署了同一個 Java Web 應(yīng)用用戶登錄狀態(tài)存在本機(jī) Session。配置粘性會話之后同一用戶的請求會穩(wěn)定落到同一臺節(jié)點(diǎn)。生產(chǎn)環(huán)境下的配置大致長這樣upstream app_backend { zone app_backend 64k; sticky cookie srv_id expires1h maxage1h; server 192.168.1.10:8080 max_fails2 fail_timeout10s; server 192.168.1.11:8080 max_fails2 fail_timeout10s; } server { listen 80; server_name app.example.com; location / { proxy_pass http://app_backend; proxy_set_header Host $host; proxy_set_header X-Real-IP $remote_addr; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; } }這里有一個我踩過的坑升級到 1.29.6 之后如果配置sticky指令報 unknown directive說明你使用的這個版本可能還沒編譯粘性會話模塊或者指令名有細(xì)微差異。畢竟 nginx 不同版本的模塊名和參數(shù)會有調(diào)整保險做法是先看當(dāng)前版本的官方文檔確認(rèn)模塊名再按文檔語法來配置。我在測試機(jī)上試過第一次配置時就是因?yàn)橹噶蠲麑戝e導(dǎo)致 nginx -t 直接報錯。另一個關(guān)鍵參數(shù)是expires。Cookie 粘性會給客戶端種一個 Cookie這個 Cookie 的過期時間要設(shè)計好。太短的話用戶沒過多久就失效還得重新綁定太長的話后端節(jié)點(diǎn)要下線維護(hù)時用戶可能還掛在舊節(jié)點(diǎn)上請求頻繁失敗。我的經(jīng)驗(yàn)是業(yè)務(wù) Session 持續(xù)多久Cookie 就設(shè)置多久最多不要超過一天。電商場景設(shè)置 30 分鐘到 1 小時比較合適管理后臺這類長會話可以設(shè)置 8 小時。3.4 驗(yàn)證粘性是否生效的兩種方法配置完粘性會話怎么確認(rèn)是真的生效了我常用的方法是先看 Set-Cookie 響應(yīng)頭再用帶 Cookie 的請求做連續(xù)性驗(yàn)證。第一步不帶 Cookie 請求一次登錄接口打開抓包工具或者直接用 curlcurl -sI http://app.example.com/login | grep -i set-cookie正常響應(yīng)里應(yīng)該能看到 nginx 下發(fā)的 Cookie比如srv_idbackend-a。如果看到的是業(yè)務(wù)自己種的其他 Cookie沒有 srv_id說明粘性模塊可能沒生效或者被業(yè)務(wù)層覆蓋了。第二步把第一步拿到的 Cookie 值原樣帶回去連續(xù)請求幾次業(yè)務(wù)接口curl -s -b srv_idbackend-a http://app.example.com/api/user/info curl -s -b srv_idbackend-a http://app.example.com/api/order/list這時候去后端的 access log 里查請求來源 IP 或者響應(yīng)時間兩個請求應(yīng)該都落在 backend-a 節(jié)點(diǎn)上。如果第二次請求落到了 backend-b說明粘性配置有問題或者 Cookie 在瀏覽器側(cè)被清了。多節(jié)點(diǎn)場景最好給每個后端節(jié)點(diǎn)配置獨(dú)立的 access_log方便做這種驗(yàn)證。4. 性能與穩(wěn)定性調(diào)優(yōu)的落地姿勢4.1 長連接與 keepalive 的正確參數(shù)nginx 1.29.6 這類主線版本在 upstream 長連接處理上通常會有改進(jìn)但你的配置如果一直沒調(diào)再好的改動也發(fā)揮不出來。之前排查過一次線上問題后端 Tomcat 的連接數(shù)經(jīng)常被打滿后來發(fā)現(xiàn) nginx 每次請求都重新建連沒有啟用 upstream keepalive。補(bǔ)上之后連接數(shù)和后端負(fù)載同時降了不少。upstream app_backend { zone app_backend 64k; sticky cookie srv_id expires1h; server 192.168.1.10:8080; server 192.168.1.11:8080; keepalive 32; } server { listen 80; location / { proxy_pass http://app_backend; proxy_http_version 1.1; proxy_set_header Connection ; } }這里有兩個容易忽略的細(xì)節(jié)。第一必須設(shè)置proxy_http_version 1.1否則 nginx 到后端默認(rèn)走 HTTP/1.0連接無法復(fù)用。第二proxy_set_header Connection 必須清空不然頭信息里留著 Connection: closekeepalive 照樣不生效。這兩個點(diǎn)少一個keepalive 就等于沒配。keepalive 參數(shù)也不是越大越好。32 條空閑連接看后端能承受多少。后端 Tomcat 并發(fā)線程通常就 200 左右你在一臺 nginx 上 keepalive 設(shè)置 100意味著每臺后端要維護(hù) 100 條空閑連接后端連接池的負(fù)擔(dān)會很大。合理的設(shè)置是先看后端連接池上限再給 nginx 配一個合適的值一般 16 到 64 之間比較穩(wěn)妥。4.2 HTTP/3 要不要現(xiàn)在就上1.29.6 主線版本里 HTTP/3 和 QUIC 的支持又往前走了一步很多朋友已經(jīng)開始糾結(jié)要不要開啟。我的判斷是HTTP/3 確實(shí)能提升弱網(wǎng)環(huán)境下的用戶體驗(yàn)尤其針對移動端和跨地域用戶但生產(chǎn)環(huán)境直接全量上線安全隱患和兼容性問題都不少。最常見的坑是中間設(shè)備攔截。運(yùn)營商網(wǎng)絡(luò)或者企業(yè)防火墻里有些老設(shè)備不認(rèn)識 QUIC 報文直接把 UDP 443 丟掉導(dǎo)致瀏覽器報net::err_quic_protocol_error。這個問題在辦公網(wǎng)、校園網(wǎng)尤其明顯。另一個坑是監(jiān)控體系。HTTP/3 的請求在抓包工具和 Web 日志里的形態(tài)和 TCP 完全不一樣監(jiān)控、日志分析都要跟著調(diào)整如果監(jiān)控沒跟上出了問題定位會很痛苦。我建議的做法是漸進(jìn)式開啟。先在某個測試域名或者對部分用戶開啟 HTTP/3觀察訪問成功率、報錯率、頁面加載時間跑一段時間穩(wěn)定之后再逐步擴(kuò)大流量。如果業(yè)務(wù)對網(wǎng)絡(luò)穩(wěn)定性要求極高暫時不開也不丟人HTTP/2 TLS1.3 在絕大多數(shù)場景下已經(jīng)夠用了。4.3 SSL 握手性能優(yōu)化清單升級到新版本之后SSL/TLS 相關(guān)的優(yōu)化也值得重新過一遍。nginx 默認(rèn)配置在手寫環(huán)境下往往沒有展示出真正的性能幾個改動能明顯減少握手時間和 CPU 占用。第一個是ssl_session_cache。這個參數(shù)非常關(guān)鍵它讓 nginx 在本地緩存 TLS 會話票據(jù)后續(xù)客戶端重新建連可以直接復(fù)用省掉一次完整的 TLS 握手。生產(chǎn)環(huán)境建議設(shè)置為shared:SSL:10m10MB 共享內(nèi)存大約能存 8 萬多個會話。如果你發(fā)現(xiàn)客戶端頻繁握手、頁面加載偏慢多半是這個沒設(shè)好。第二個是ssl_protocols和ssl_ciphers。建議只開啟 TLSv1.2 和 TLSv1.3把 SSLv3、TLSv1.0、TLSv1.1 全部關(guān)閉。TLSv1.3 在握手輪次和加密效率上比老版本強(qiáng)太多只要客戶端兼容優(yōu)先開啟。這個操作放在 nginx 配置里只是一個指令但對安全合規(guī)和性能都有實(shí)際提升。第三個是證書鏈優(yōu)化。證書鏈里有中間證書和根證書nginx 每次握手要發(fā)送整條證書鏈。證書鏈太長、證書文件過大握手時間就會增加。把證書文件整理成 PEM 格式并檢查證書鏈完整性雖然不起眼但訪問速度會有體感提升。5. 升級后常見問題與排查實(shí)錄5.1 排查工具與應(yīng)急思路升級過程中不管做多少準(zhǔn)備上線后還是可能出問題。我的排查思路一般都是自底向上先看 error.log再看 access.log最后才動具體請求驗(yàn)證。查看 error.log 時建議帶上時間線定位到一個比較長的時間窗口用tail -f或者grep篩選關(guān)鍵字。常見的錯誤信息格式大概是[error]、[crit]、[emerg]等嚴(yán)重級別從低到高。[emerg]出現(xiàn)意味著配置錯誤nginx 起不來[crit]出現(xiàn)在磁盤寫滿、內(nèi)存不足等系統(tǒng)級問題[error]則多是業(yè)務(wù)請求相關(guān)的錯誤。看到報錯先別急著百度先認(rèn)真讀一遍日志內(nèi)容大多數(shù)情況下報錯信息已經(jīng)很明確了。排查連接問題時nginx -T非常有用。它可以導(dǎo)出 nginx 加載后的完整配置比直接看散落的配置文件更清楚能看清sticky、keepalive、proxy_pass這些指令最終生效的值避免因?yàn)?include 引入多個配置文件時出現(xiàn)覆蓋和沖突。配合curl -v看請求頭能直接確認(rèn) Cookie、響應(yīng)頭是否符合預(yù)期。5.2 高頻問題速查表問題可能原因解決辦法配置 sticky 后 nginx -t 報 unknown directive粘性模塊未編譯或模塊名寫錯確認(rèn)當(dāng)前版本是否包含對應(yīng)模塊查閱官方文檔修正指令名粘性會話不生效用戶反復(fù)掉線瀏覽器禁用了 Cookie、多個域名間 Cookie 未共享、代理層多次轉(zhuǎn)發(fā)檢查 Set-Cookie 路徑和域名用 curl 模擬帶 Cookie 請求驗(yàn)證后端節(jié)點(diǎn)添加或刪除后大量 Session 丟失節(jié)點(diǎn)變更導(dǎo)致哈希映射漂移舊用戶被重定向到新節(jié)點(diǎn)規(guī)劃好維護(hù)窗口結(jié)合一致性哈希的前綴保留策略逐步調(diào)整升級后部分接口 403/404配置文件不兼容server_name、location 匹配規(guī)則有變化grep 對比新舊配置文件差異重點(diǎn)檢查 location 和 rewrite 規(guī)則開啟 HTTP/3 后瀏覽器訪問報 err_quic_protocol_error中間網(wǎng)絡(luò)設(shè)備攔截 UDP 443 報文暫時關(guān)閉 HTTP/3或限制到測試域名小流量驗(yàn)證高并發(fā)下 error.log 出現(xiàn) worker_connections are not enoughworker_connections 設(shè)置過小根據(jù)系統(tǒng) ulimit 調(diào)大 worker_connections配合調(diào)整 worker_processesreload 后連接瞬間斷掉worker 進(jìn)程重啟長連接被回收業(yè)務(wù)側(cè)實(shí)現(xiàn)重連機(jī)制避免在流量高峰時 reload5.3 幾個來自實(shí)踐的避坑經(jīng)驗(yàn)第一升級前一定要在一臺獨(dú)立測試機(jī)跑一遍全量回歸。我在一次升級中吃過虧新版本配置校驗(yàn)通過但舊配置里的某個第三方指令在新版本中行為變化了上線后即時接口出現(xiàn)了路徑漂移?;貧w用例要覆蓋至少一遍登錄、上傳、WebSocket 連接等核心場景不能只壓測不驗(yàn)功能。第二粘性會話的 Cookie 名稱不要和業(yè)務(wù) Cookie 沖突。業(yè)務(wù)本身可能種了一個名為 srv_id 的 Cookienginx 又種了一個同名 Cookie后種的值會覆蓋前種的值導(dǎo)致粘性失效。我在一次配置時把粘性 Cookie 命名為 app_srv_id從源頭上避免沖突。第三升級后不要立即清空舊版本二進(jìn)制。保留 nginx.old保留舊配置備份至少保留到新版本穩(wěn)定運(yùn)行一周以上再清理。真出了兼容性問題回滾路徑遠(yuǎn)比修復(fù)問題更可靠。6. 從 1.29.6 看主線版本選型與演進(jìn)6.1 主線版和穩(wěn)定版怎么選nginx 的版本發(fā)布節(jié)奏里主線版本和穩(wěn)定版本是并行的。主線版本更新頻繁新功能都在主線里先出現(xiàn)但并不意味著不穩(wěn)定只是更新迭代速度快。穩(wěn)定版本更保守只做嚴(yán)重安全修復(fù)和 bug 修復(fù)不引入新功能。很多團(tuán)隊(duì)對主線版本有心理顧慮覺得“穩(wěn)定版才適合生產(chǎn)”這個觀念在早期確實(shí)是主流但現(xiàn)在 nginx 官方對主線版本的定位已經(jīng)非常成熟生產(chǎn)環(huán)境用主線版本的團(tuán)隊(duì)越來越多。如果你所在團(tuán)隊(duì)對新技術(shù)接受度較高且有一定的測試能力我建議直接跟隨主線版本。粘性會話、HTTP/3 改進(jìn)這些新東西只有主線版本才有穩(wěn)定版要等很久才會合入。如果你所在的行業(yè)對變更極度敏感或者你只有一臺核心網(wǎng)關(guān)、沒有測試環(huán)境那還是保守一點(diǎn)等穩(wěn)定版發(fā)布之后驗(yàn)證沒問題再升級也不遲。我的個人習(xí)慣是測試環(huán)境永遠(yuǎn)用最新主線版本生產(chǎn)環(huán)境比主線版本滯后一個版本等社區(qū)反饋穩(wěn)定之后再跟進(jìn)。這樣既不會錯過新特性又能用社區(qū)的問題反饋?zhàn)鳛楸芸右罁?jù)。6.2 nginx 在網(wǎng)關(guān)生態(tài)里的位置從 1.29.6 這次的更新其實(shí)能看到 nginx 的演進(jìn)方向官方對網(wǎng)關(guān)層能力越來越重視。粘性會話過去是商業(yè)版 nginx Plus 的賣點(diǎn)之一現(xiàn)在進(jìn)了主線說明官方在把一些高頻需求逐步下沉到開源版本里。這對開發(fā)者來說肯定是個好消息。但也要清醒看到nginx 核心的定位始終是高性能反向代理和 Web 服務(wù)器它不會變成一個功能冗雜的應(yīng)用網(wǎng)關(guān)。像灰度發(fā)布、熔斷限流、服務(wù)發(fā)現(xiàn)集成、自定義鑒權(quán)這類能力純 nginx 配置會越寫越復(fù)雜維護(hù)成本很高。如果你的業(yè)務(wù)發(fā)展到那個階段可以考慮在 nginx 生態(tài)的基礎(chǔ)上引入 OpenResty 或 APISIX、Kong 這類基于 nginx 的 API 網(wǎng)關(guān)它們復(fù)用 nginx 的高性能內(nèi)核同時在上層提供了更豐富的擴(kuò)展能力。還有一部分團(tuán)隊(duì)在使用 KubernetesIngress Controller 底層很多就是 nginx。這種情況下粘性會話的能力可以通過 Ingress 注解來配置不一定直接操作 nginx.conf。理解 nginx 底層的粘性會話實(shí)現(xiàn)對排查 Ingress 場景下的會話問題依然有幫助畢竟最終干活的是同一套引擎。聊到最后我還是想強(qiáng)調(diào)一點(diǎn)任何新版本、新功能都不要急著全量上生產(chǎn)。這次的粘性會話我就是在測試環(huán)境先跑了一周覆蓋了登錄、購物車、文件上傳幾個核心場景確認(rèn) Cookie 流轉(zhuǎn)、故障轉(zhuǎn)移都符合預(yù)期之后才在新項(xiàng)目里啟用。因?yàn)?nginx 是流量入口改出問題影響的就是所有業(yè)務(wù)。升級前備份好配置規(guī)劃好回滾路徑先把變化控制在最小范圍等驗(yàn)證通過再一步步擴(kuò)大。這比追求新版本帶來的性能數(shù)字更重要生產(chǎn)環(huán)境穩(wěn)定跑著比什么都值。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
日韩熟女乱伦中出| 日本 欧美 国产一区| 91精品人妻一区二区三区蜜桃臀| 国产精品盗摄 偷窥盗摄| 四季AV一区二区凹凸精品小说| 国产精品久久久久久照片| 91中文字幕在线观看| 人妻在线中出视频| 高清无码久操视频| 欧美精品不卡一二三四在线91| 久草精品热视| 亚洲熟女av日韩熟女| 亚洲网站一区二区在线| 婷婷人妻激情| 国产日产欧产美韩系列麻豆免费| SS久久| 中文久久一区| 5月婷婷6月六月丁香| 免费精品国偷自产在线在线 | 国产综合久久久鬼色| 日本一区二区三区四区免费观看| 五十路三级片| 国产精品久久久吖| 日韩大香蕉| 国产精品久久久蜜臀| 久久草草欧美精品| 国产精品爽爽va在线观看98| 欧美日韩 强奸乱伦| 欧美精品宗合| 97国产精品视频| 三四中文字幕| 清纯唯美综合| 天天综合色图| 蜜臀AV午夜精品久| 性91| 亚洲高清综合网| 亚洲激情欧美色图| 2020天天色综合| 加勒比人妻综合| 久操在97| 欧美男人亚洲天堂| 婷婷20月天青娱乐| 欧美组图日韩亚洲中文字幕| 久久精品操| 玖玖爱伊人玖玖爱| 久久精品成人一区二区三区蜜臀| 亚洲精品乱码久久久久久蜜桃麻豆| 久久m| 亚洲熟女一区| 欧美日韩系列| 九九九九九精品视频| 欧美精品黑人猛交高潮| 992大香蕉| 四虎在线视频| 亚洲国产91精品一区二区久久| 蜜臀无码视频在线观看| 高清国产成人无码| 女人高潮抽搐喷水视频网站| 日韩人妻一二三区视频| 亚洲高清无码AAA久久久精品| 久久青青草原免费视频| 天天做日日爱夜夜爽| 99e久久国产精品| 国内毛片无遮挡国产| 国产成年女人免费视频播放a| 久久国产成人精品国产成人亚洲 | 欧美黄色大香蕉一区二区| 国产一区二区三区高清视频| 成人av福利在线观看| 丰满岳乱妇一区二区三区| 97碰| 口爆吞精在线观看| 久久99国产综合精品女同| 又摸又舔在线观看网站| 日本道人妻久久久在线不卡色视频| 色欲天香天天综合网-成年人三级片网站-欧美乱妇狂野-日韩国产专区-久久久久久 | 亚洲国产精品久久久男人的天堂| 婷婷10月天青娱乐| 东京热一区二区中文字幕| 久久国产逼| 亚洲无码久久久久久久| 91ise欧美| 精品乱子一区二区三区99| 自拍视频大全亚洲专媒视频/一区二区三区 | 久久精品国产亚洲AV无码电影| 在线啊v一区| 亚洲情色婷婷五月天| 一区,二区,三区视频| 欧美高清在线| 亚洲图片激情综合另类| 六九九九| 欧美日韩国产色五月综合在线| 另类图片五月天| 日韩欧美~中文字| 夜色91| 91丨豆花丨熟女| www狠狠| 老熟女中文字幕高清| 玖玖无码超碰| 国产精品宅男免费| 六月婷婷一区二区三区| 欧美日韩插逼视频| 另类综合另类| 日韩色香| 婷婷综合在线| 9997se| av无码精品久久久久| 欧美色偷拍| 超碰一区二区| 日韩人妻一二三区视频| 亚洲一二三精品久久网 | 亚洲麻豆18发?| 久草午夜| 久久九九综合| 熟女熟妇伦久久影院毛片一区二区| 中文字幕后石码四区五区| 色欲日韩欧美在线一区| 久射吧| 操高情无码| 91伊人大香蕉| 日韩免费在线观看不卡| 性色高清在线| 91伊人久| 欧美老妇综合网| 欧洲精品一二三在线| 日韩性爱一级片| 丁香五月综合| 亚洲男人的天堂va亚洲男人社| 老熟妇一区二区三区…| 日本孕妇孕交| 日韩无码黄色片| 久久、1234| 污色区网站| 欧亚洲精品有视频| 国产精品片| 天天插天天插| 男女啪啪啪18禁网站| 成人影 天天操 亚洲| 亚洲中文字幕久久人妻| 亚洲欧洲视频小说在线观看| 三男一女不戴套的A片| 嗯啊啊啊轻点视频 | 国产精品福利资源在线尤物| 97这里都是精品| 国产美女销魂在线观看不卡| www.男人天堂| 久久女婷| 91欧洲国产成人久久精品网站| 色哟哟-国产专区| 东京热男人的天堂精品| 91色亚洲| 午夜免费视频1000| 日韩免费看在线黄色片| 亚洲色欧| juliaann丝袜大战黑鬼| 啪一啪免费视频| 中文字幕免费看| 亚洲精品成人| 日韩一级成人毛片免费观看| 超碰久在线天天做| www.99在线| 少妇久久| 综合网亚洲在线| A V少妇特黄三级| 精品蜜乳AV免费观看| 天天享受天天看| 中文人妻av高清一区| 操人妻逼91| 18禁精品网站在线看| 色五月激情AV在线| 国精品一区二区三| 美女操逼福利视频| 中文字幕日韩专区精品系列| 高潮9999外国| 欧美aⅴ99久久黑人专区| 91超碰人人操| 干干干天天| 久久久久久免费电影| 操我无码| 日韩啊V| 久久精品成人| 国产盗摄美女如厕大神作品在线观看| 亚洲天堂,男人| 亚洲天堂人妻熟妇视频| 欧美 精品国产制服第一页| 九九超碰综合网| 久久鲁夜| 日本一区99| 啊v视频在线观看| 性暴力欧美猛交在线直播| 97久操| 成人黄页| 美女91在线观看| 碰碰在线视频| 久久九九网| 18禁精品网站在线看| 日本成人在线不卡一区二区三区 | 超碰日韩人妻| 呦呦一区| 天天综合网~91| 亚洲天堂日本| 麻豆九九九| 91啪9色| 五月激情综合网| 国语精品内射在线观看| 精品国产Av无码久久久伦古装| 亚欧美色图| 色综合超碰超| 99热国产精品| 综合97亚洲| 歐美性天天| 日韩三级在线观看mp4| 七久久久| 爆乳免费黄网站| 超碰AV在线| 伊人96在线| 麻豆福利视频导航| 亚洲色棕合| 青青操视频在线| 欧美日日夜夜| 亚州乱码中文字幕综合久久久| 国产精品麻豆成人AV艾秋| 成人小说视频在线精品欧美| 人人操人人色网| 五月天伊人网| 99久久精品国产系列| 亚洲高清欧美总合| 青青草久草| 中文乱码字幕观看视频| 久久久新亚洲AV| 久久久999| 日熟女| 午夜操逼不卡| 青青操狠狠撩| Julia在线播放亚洲久久| 久久久久成人蜜桃精品| 精品视频97| 乱色老一区二区三区的观看方式 | 又大又大又大又粗爽高潮观看| 亚州综合色| 97免费视频在线观看| 欧美视频一| 黄色大片免费在线| 五月丁香六月婷| 四虎AV在线观看| 国产这里只有精品| 狼天天狼天天大香蕉| 日韩一999精品| 人妻少妇精品久久久| 激情文学欧美| 婷婷人妻激情| 国产成年免费大片黄在线观看| 亚洲精品官网在线观看| 一区二区日韩欧美久久| 综合久草| 精品久久視頻在线| 欲射影视| 天天日天天干少妇日| 91精品国产91综合久久蜜臀| 欧洲亚洲人妻无码中字久久三区四区 | 97在线视频免费观看| 欧美亚洲图片| 欧美一区二区三区互相| 色婷婷五月综合激情中文字幕| 69人妻精品一区二区绯色| 97综合在线观看| 91福利网在线观看| 色婷视频| 中文字幕第23区| 九九九九AV| 久久国产性爱| 亚码激情| 色天天野狼综合社区| 91色色网站| 入口操逼网站| 九九热超碰97亚洲最新香蕉| 中文字幕成人乱码熟女精品国50| 一级性爱aaaa| 插老姨肥穴| 97鸡把在线视频| 岛国网址国产 | 亚洲国产亚洲天堂| 欧美翘臀视频网站一区二区三区| www.亚洲黄色| 嗯嗯啊在线视频| 美女毛片999| 欧美激情专区| 爱爱动态120秒| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 92福利社视频| 啊啊啊水好多| 99热超碰在线| 人妻久久| 91亚洲不卡一区| 91性网| 91粉嫩萝控精品福利网站_精品影音先锋国| 97爱欧美| 欧美精品三区| 人人爽天天爽| 人人妻人人玩人人澡人人爽| 92福利社视频| 日日嗷| 高清无码 国产精品| 日韩av三四区| 国产精品高清2021在线| 欧美三级一级| 老司机福利青青草| 成人无码专区精品视频| 天天亚洲| 另类在线| 在线天堂资源亚洲| 欧美性后入| 日韩激情无码影院| 天天综合网1| 国产精品久久久久久高清无码免费看 | 草B在线| 色丁香五月婷婷| 中国和日本人色哪个不下载能放| 亚洲欧洲另类| 精品久久久久久中文| 极品内射| 亚洲91在线播放影院| 91熟女综合| 亚洲 自拍偷拍 欧美| 青青网三级视频| 无码人妻精品酒店| 久久久久久久一级黄色打同平台| 日韩视频中文字幕| 色999亚洲人成色| 992视频一区| 丝袜AV一二三区| 91福利网在线观看| 91成人在线| 户外裸露刺激视频第一区| 草B在线| 久久极品伊人| 你想操日本小逼吗| 91精品少妇搡搡搡| 99这里有精品| 99老司机精品视频在线观看| 麻豆影音天美视频| 操逼免费视频无码国产| 亚洲成成熟女人综合一区二区| 97五月天| 艹比视频国产精品| 26uuu最新| 亚洲欧美九九九| 八人操人人摸人人看| 97在线视频免费看| 97色涩| 亚洲乱熟女一区二区三区大香蕉| 久久久国产av美女私房| 精品一区二区2| 91肏屄网| av资源在线播放天堂| 日欧操屄| 91无码西班牙视频在线| 在线观看无码三级少妇| 久久精品国产亚洲粉嫩| 亚洲区限制级| 欧美香蕉视xxx| 欧美啪啪女女| 亚欧成人综合影院| 亚洲乱码精品一区二区| 大香蕉狠狠爱| 不卡视频一区蜜桃视频| 情色五月天就去干| 国产精品大屁股999| 国产久久久9999| 欧美性爱十八禁| 国产一区二区三区白丝| 久久区| 日韩BBN| 久久视频少妇美女| 欧美白嫩女HD| 吉田爱美AV在线| 超踫中文字幕| 红杏大香蕉| 中文字幕精品资源在线| 日韩欧美中文| 日韩欧美经典在线观看| 日韩性爱小视频在线观看 | 97超碰69| 色妺妺在线视频| 欧美黑人精品一区二区| 五月天综合在线| 国产亚洲日本精品在线| 999亚洲国产视频| 国产黄色在线播放观看| 亚洲国产一级黄色视频| 亚洲AV无码秘 蜜桃臀国精产品| 男人的天堂三级| 国产乱码久久久久久| 在线视频一区二区传媒| 人妻精品4K4K4K4K4| 青青国产精品在线| 91逼逼女人91| 色九九九综合| 国产少妇与亚洲av| 亚洲图片欧美制度| 中文字幕丝袜美腿| 丝袜天堂| 亚州欧美综合| 校园春色AV天堂| 极品另类| 日韩高清黄片| 国产女人和拘做爰视频| 郑州宾馆老熟女露脸啪啪| 日本视频在线观看污污污| 欧美aa一级片| 久久香蕉综合一本到3atv| 人人操人人操草草| 黑丝少妇| 欧美一二三区四五区| 中出789在线视频| 欧美天天综合站| 日本高清视频在线观看黄已三辽| 超碰超碰超碰超碰的大鸡吧操黑丝袜 | 综合色图区| 大香蕉伊人亚洲| 午夜性| 夜夜操中文字幕| 插B在线观看| 夜夜做夜夜爽精品视频| 精品人妻一区二区三区日产| 欧美极品性爱天天射| 粉嫩av在线一区二区| 一区三区啪啪| 亚州精品丝袜-不卡成人免费| WWW.加勒比人妻一区不卡.com| 99热精品国产| 97这里有精品| 欧美国产欧美在线观看| 99在线免费观看| 精品免费1| 国产情色第一第二页在线观看| 欧日韩一二三f区| 天天激清| 婷婷亚洲综合| 一区二区三区日韩欧美 | 一区二区无码视频| 成 人 A V免费视频在线观看| 温婉少妇玩3p| 91色图片| 伊人九九九| 性在久久久久久| 色欧美天天| 91男人天堂网| 一区二区三区亚洲| 九九久久久久久爱| 9 7超碰在线免费观看| 天天碰久久入| 蜜乳AV网址| 99999精品成人| 97精品全部| 亚洲中文日韩欧美大香蕉视频| 日本 欧美 亚中文字幕| 美女丝袜激情小说| 天天色黄色影院天天操| 精品一区二区三区最新| 国产97色在线| 九九久久精品| 九99久久| 偷拍自拍在线视频观看| 青青草字幕AV| 无码丰满熟妇一区二区浪潮AV| 国产乱码久久| 亚洲男人天堂网站| 色99视频| 亚洲欧洲第二视频在线观看色图| av一区二区三区不卡| 蜜桃视频精品一区二区| 久午视频| 99无码| 伊人网高清| 国内外色色色色色成人视频| 97资源站国产精品| 日本三级日本三级99| 色网站导航大全| 亚州伊人色综台| 天天综合~91| 久久美女福利是上海美女| 久久视频,这里只有精品| 强奸乱伦亚洲第一页| 欧洲乱码一区二区| av网站国产主播在线| 精品久久久久黄少妇| 啪啪视频免费在线观看| 五月久久HDAV| 国产第12页| 97视频620| 精品高清一区二区三区三州| 国产精品在线网站| 伊人黄色视频免费观看| 午夜福利 成人 91| 性站 | 九九碰九九爱97超碰| 福利天天都操| 国产99热| 亚洲色图日韩丝袜制服一区二区五月在线| 色婷婷综合网站| 男人天堂欧美| 久久中日麻豆| 欧美国产欧美在线观看| 色哟哟av| 天美国产精品| 强奸乱伦亚洲第一页| 在线播放欧洲免费av| 六九九九| 嫩草一区二区在线观看| 欧综合网| 成人色女网| 岛国大片国产| 亚洲自拍小说| 污污污8888| 国产呦精品一区二区三区下载| 啊啊啊啊啊好舒服视频| 色色色网站| 两女互慰AV高潮喷水在线观看| 欧美影音在线| 天天操天天舔| 男人女人18禁片免费看网站| 综合97久久| 欧美日韩国产中文精品字幕自在自线,| 人人潮人人摸| 综合另类| 四虎884| 综合网~91综合网| 巨爆乳肉感一区二区三区竹菊影视| 国产无码成人无码| 偷拍亚洲情色| 少妇69中文| 亚洲一区中文字幕一区| 无码动漫av中文字幕| 美女天天干| 91殴美大片| 五月婷婷丁香六月| 日本天天操| 亚洲黑人在线| 超碰色美女| 精品无码久久久久| 动漫片子网站3黄| 婷婷伊人网| 日本成人A片免费看| 97超碰超碰| 亚洲久草AV色图| 婷婷另类小说| 嗯嗯,啊啊,国产精品| 亚洲av强奸乱伦| 日本精品无码三级网站| 久热在线精品免费观看| 囯产精品久久久久久久久久梁医生| 天天干夜夜| av东京热男人的天堂| 亚 欧 美 综合| 激情丁香婷婷| 韩国一级婬片A片AAAAA| 色999五月色| 黄色性爱网网| 亚洲无码?第一页| 欧美日产国产在线成人第一区| 国产福利一区二| 快播电影网日韩新片| 青青久操| 久久 亚洲 日韩 人妻| 六月婷婷激情| 国产黄色av大片网站| 国产亚洲日韩在线三区黑人| 国产又黄又爽| 丝袜人妻av一区二区| 97视频在线| 日韩兔费看黄片| 日本黄色精品| 九久久精| 成人久久久| 神马久久久久久| 中文字幕后石码三区四区| 久久精品国产精品一区| 夜夜草天天| 国产美女口爆吞精视频| 九九九九热| 五码视频在线观看| 欧美日韩另类在线| 欧美经典一区二区三区| 国产1769在线| 欧美日韩第一页| 色色色热| 伊人久久国产免费观看视频| 亚洲永久永久永久永久一级一级一级精品 | 天天操妹子| 久久春色| 欧美日韩黄片精品在线| 无码WWW免费视频网站| 欧美日本中字另类在线| 亚洲成人综合在线| 精品久一区免费| 亚州欧美一区| 亚洲色图A| 91精品国产91久久福利| 四虎国产精品永久地址入口| 中文字幕性感少妇av| 天天色综亚洲91污| 中文字幕一二三区| 97超碰逼| 美日韩一二三区| 高颜值美女口爆高潮浪叫| 97亚洲综合| 久久社区一区二区三区| 成人七区| 精品少妇后入一区二区三区四区人妻巨乳 | 亚洲欧综合另类无码一区| 亚洲福利中文字幕在线| 欧美性战999| 好看的91视频| 亚洲色性| se01国产在线视频| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴 | 国产91福利小视频在线观看| 国产浮力影院第1页| 日本三级韩国三级99| 99蜜桃臀亚洲成人在线观看| 亚洲无码一区成人免费午夜| 高清无码一区二区三区| 国产在线76页| 91熟女丨91老女人| 国产亚洲中文不卡二区| 狼人综合婷婷激情四射 | 日本福利社| 久久人妇| 黄色免费网| 99色在线视频| 丝袜视频网国产90| 日本三级一区二区 在线| 人妻加勒比东京热| 精品久久久久成人码免| 色在线亚洲视频www| 久久啊哟| 国产午夜精品一区二区三区牛牛| 欧美不卡二区| 中国黑人三级片网站上区| 天天综合~91| 丁香色婷婷| 国产三级中文字幕粉嫩| 久久久久国产精品喷潮免费观看臀| 久久久久久久久久久97| 欧美日韩欧美| 国产丝袜欧美在线视频| 啊啊啊com| 精品999一区二区| 色婷婷丁香| 久久人妻一区二区三区高清| 国产福利在线视频网站| 天综合网| 日日干天天干夜夜爽| 国产超碰国产97| 久九色| 啊啊啊不要好疼视频| 啊啊啊慢点| 九九色逼| 哈哈操电影| 色色操| 亚洲 日本 不卡| 99久久99九九99九九九| 国产97/欧美| 蜜乳av首页| 香港日本韩国人妇99www.wccm20| 天天躁日日躁AAAAXXXX国产| 黄呦呦在线| 欧美不卡二区| 日逼97| 久久国产99精品72福利| 国产v亚洲v日韩v欧美v片另类| 亚洲影视综合网| 亚洲 欧美 精品专区 极品| 伊人五月天青青草婷婷| 日韩强奸av| 欧美大战久久久伊人| 欧美强奸乱能| JuliaAnnXXX888| 91蜜臀熟女| 強姦亂倫a| 精彩久久中文| 综合熟女| 无码久久亚洲高清,| 欧洲精品一区二区三区| 国产精品激情久久久久久久| 欧美亚洲天天| 亚洲一二三精品久久网| 九九精品99| 麻豆一区二区三区在线看| 精品免费一区二区三区在线亚洲人成| 免费日韩黄片| 色天堂综合| 操人91| 色综合一本| 日本三级韩国三级美三级91| 婷婷五月成人| 性色生活片久久毛片婬片免费放女人一级毛片 | 国产成人超碰在线| 无码九九| 天色综合网| 欧美日韩国产在线| 色就色综合| 婷婷激情四射| 秋霞鲁丝午夜无码一区二区三| 色欲天天综合网| 先锋影音av先锋一区| 久久99干一本高清| 一区二区三区日韩欧美 | 99亚洲国产精品色一区二区三区| 国产九九九九九九| 内射中出日韩在线观看视频| 婷婷五月天AV| 亚洲 自拍偷拍 欧美| 91男女| 激情文学欧美| 久久人妻少妇| 9l视频自拍9l九色成人| 国产麻豆91欧美一区二区久久婷婷国产精品| av绯色| 免费av高清无码| 色婷久久| 精品久久久久久AV无码| 新91视频.cmp| 97精品久久久久中文字幕| 天天流夜夜操| 嫩草影院性色| A级片日韩欧美国产欧美视频精选观看| 亚洲色图综合网| 无码人妻一区二区一牛影视| 91精品国产高清久久久久久,亚洲成人 | 精品视频一区二区| 天天综合网~91| 欧美在线色| 另类av天堂| 日本天天吊| www.婷婷| 国产无套粉嫩白浆在| 99re黄| 五十路成人在线视频二区三区| 麻豆性爱视频在线播放| 久久婷婷色综合一区二区三区| 国产精品久久久久av| 天天天天天干夜夜夜夜夜操| 亚洲AV无码AV吞精久久久久| 天天躁日日躁成人字幕aⅴ| 成人免费视瓶| 操国产逼| 国产精品视频内谢女人| 2017天天拍大香蕉| 伊人操| 欧美性爱超碰97| 东京男人天堂| 人人操人人精品影片| 亚洲日韩久久精品一区| 妇人噜噜| 日本九九久久99| 超碰久久草| 亚洲图片偷拍欧美| 欧美青青草视频| 亚洲精品国产熟女久久久| nuu12国产麻豆精品| 大但人体久久久久| 亚洲男人天堂2016| 激情四射熟女丝袜| 色色青青久久| 日韩无码服务区| 中文字幕熟女人妻丝袜丝| 欧美日韩亚洲少妇寂寞影院正在播放| 91精品人妻一区二区三区蜜桃| 9 1果冻精品视频| 欧美性色网| 91精品久久久久| 成人久久久| 国产偷拍网站| 日韩性爱1级片视频| 日韩国产乱子伦App| 91精品无码人妻系列| 亚洲超碰在线| 国产av高清版| 99re6国产精品99re在线| 亚洲中文字幕乱码无码一区二区| 99re8超碰| 91欧美性| 人人操人人摸人人骑| www.久久制服糖| 天天夜躁日日躁狠狠2002| 国产传媒午夜理伦精品| 懂色AV蜜臀无码精品APP | 台湾佬中文娱乐自偷自拍| 日韩欧视频| 中文乱码字幕观看| 国产第25页在线观看| 大香蕉啪啪啪| 免费网站观看www在线观| 黑人精品久久97| 九九热av| 精品中文字幕一区二区| 日本123区操B视频| 国产久久一区二区三区野外在线| 久久久久久久久久精| 欧美性性性| 午夜操逼不卡| 成 人 影视 一区 二区 三区 四区| 97在线观视频免费观看| 本道综合精品| 亚洲AV无码成人精品久久| 久久久9视频| 夜夜做夜夜爽精品视频| 色偷偷超碰亚洲| 懂色中文一区二区三区| 天天插天天射| 日日噜噜夜夜久久亚洲一区二区 | 男人的天堂午夜av| 婷婷中文网| 日本一区二区三区欧美日韩中文字幕| 天天影视之亚洲综合网| 天天弄天天操| 97久久精品亚洲| 亚洲色图片区| 日韩性爱免费观看视频| 超碰av人人人| 国内一级精品| 新婚人妻扶着粗大强行坐下| 少妇六月天| A片大香蕉在线| 啪啪啪综合网| 欧美96交| 强奸乱伦动态污图免费 | 国产超碰97| 99精品视频在线观看免费| 澳门人妻久久| 91n欧美| 天天影视色香色欲| 午夜经典| 国产精品成久久久久午夜午夜| 欧美激情总合网| 老司机香蕉| 国产大学生高潮在线播放| 激情露脸爱| 国内外内射高清视频| 激情小说五月天| 丰满熟妇大乳做爰| 欧美性爱五月天| 男人天堂毛片| 色一情一乱一乱一区91Av| 久久久偷拍| 欧美激情综合| 91痴汉| 婷婷久久五月| 国产日本顶级一区二区三区| 亚洲精品乱码久久久久久蜜桃麻豆| 男人的天堂.com| 熟人人妻少妇精品久久| 91狼人| 欧美亚州综合网图片| 日韩草久视频| 日韩视频中文字幕| 亚洲精品蜜桃久久久一区二区三区| 天天影视色香欲综合网小说| 中文字幕精品人妻丝袜| 麻豆国产97在线| 99国产人成精品| 欧美综合另类| 日日夜夜骚| 人妻一二三区| 日韩日韩日韩-国产乱码精品一区二区| 午夜寂寞欧美| 加勒比综合88| 国产丰满少妇久久久精品影院| 国产无码高清操逼视频| 98福利在线视频| 亚洲综合一区二区| 91精品人妻一品二品三品| 色婷婷五月天| 亚洲丝袜二区在线| 欧美色图私拍91| 思思热影视| 色踪合AV| 日本一二区免费| 性爱视频啪啪啪啪| 国产91丝袜在线播放蜜月| 日本久久网| 99re免费| 亚洲诱惑| 五月激情啪啪| 青娱乐999| 十八禁一区二区无码观看| 97天天在线| 亚洲第一综合| 国产精品高清2021在线| 日本不卡免费二区| 久久久久骚| 欧美亚洲尤物久久| 麻豆av一区二区| 欧美综合自拍成人自拍第二十页| 日韩欧美性吧婷婷乱伦大香蕉| 亚洲色图 图片| www.yw尤物| 国产高清精品一区二区三区毛片| 精品黄色电影| 蘋果手機免費看成人Av| 日韩人妻大香蕉| 色久桃花影院在线观看| 大香蕉中文| 福利天天都操| 青青草亚洲一区| 97人人模人人爽人人| 小说区 图片区色 综合区| 九九九九九九免费视频| 欧美日韩情色一区二区| 九九探花视频在线观看| 操逼片国产| 草草电影院| 熟女熟妇伦久久影院毛片一区二区| 天天综合~91入口| 白嫩国模丰满一二三区| 久久久久久99AV无码免费网站| 丰满熟女人妻一区二区三五十一路| 国产专区路线| 噜噜在线| 国产成人bd在线观看| 欧美天天搞| 国产熟码AV| 色大香蕉97N| 99自拍B亚洲| 99热这里都是精品| 国产91啪| 久久国产AⅤ| 天天综合网网欲色| 天天日天天干天天摸天天操| 97在线观看免费视频l| 女人妻一区| 中文字幕视频一区视频二区| 精品一区二区三区蜜桃臀赵总 | 久久手机好看网站| 亚洲一区日韩| 熟女字幕| 少妇高潮对白在线观看| 中文字幕123| 精品人体无圣光凹凸| 亚洲日韩精品久久久久一区壹牛| 精品天堂| 久久人妻熟女一区二区| 黄色成年| 中文熟女五十乱码在线| 超碰日韩美妻| 天天色怡春院| 久久久久密臀视频| 亚洲天堂日本| 正宗无毛一线天嫩逼| 性色高清..……| 啊啊啊啊啊操我视频| 日韩AV中文字幕电影| 久久美女福利是上海美女| 综合免费无码中文| 日本Xx性爱| 每日更新AV| 天天看,天天做| 五月婷婷AV| 久/久精品99看9| 9久久9综合| 夜夜狠狠躁日日躁色视频| 99少妇精品视频| 99国产在线绯色一区| 伊人久久大香蕉线AV五月天| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 欧美一级国产一级| 中国一区二区亚洲人妻| 色色色色网站| 女优免费一区二区永久| 香一区二区三区| 美女91在线观看| 久久风骚城市人| 亚洲情欲| 欧美影院一区二区三区| 欧美人人操人人插| 性爱边摸边日免费AV| 九月激情婷婷| 北约熟女超碰| 中文字幕av乱伦| 狠狠激情综合狠狠操中文字幕| 午夜丁香婷婷| 亚洲一二三精品久久网| 人人爽夜夜玩视频| 我要色综合网| 欧美综合天天| 国产精品毛片?v一区二区三区 | 亚洲黑丝在线| 大香蕉国产中文自拍| 91男同| 九九九九九九九九九国产精品| 五码视频在线观看| 午夜福利成人免费视频| 伊人97超碰| 国产在线精品电影观看| 欧美性爱一区二区三区| 91中文字幕制服丝袜免费视频| 干B网| 日本性爰一道本| 狠狠狠狠狠干| 99re只有精品| 国产白丝网站| 亚洲精品一区二区三区在线播放| 亚洲第一页色| 嗯嗯啊好大| 东京热双插| 一,爱啪啪,在线免费视频| 久久黄黄| 亚洲情色综合网| 综合另类| 色啪网| 日日摸日日碰| 国产黄色影片在线观看| 亚洲黑丝在线| 亚洲天堂另类| 操逼不卡中文字幕| 很黄很污的免费网站| 中日韩久久久免费看| 天天日天天搞天天干| 国产一区在线免费播放| 欧美激情综合| 五月天欧美色图| 成人免费毛片| 97超碰美国| 最新av在线| 欧美探花网| 精品国产网站| 中文字幕精品探花视频| 色色婷婷丁香| 亚洲脚交| 亚欧成人中文字幕一区| 91成人在线| 一级二级在线观看| 99久热| 99久在线精品99re8a| 人人看黄色视频| 精品四五区| 国产高清成人免费视频| 激情久久久| 亚州色综合| 五月丁香| 99精品九九九九九九| 天天做日日爱夜夜爽| 美日韩在线不卡人妻| 秋霞一级鲁丝片A片| 久久久久久久久久久人妻| 久久99九九九九6666免费观看软件| AV中文在线| 加勒比无码毛片| 屌逼传媒| 久久内射| 啊啊啊啊啊操我视频| 精品免费视频国产一区| 亚洲一区二区三区久久 亚洲一区二区| 久久风骚城市| 国产激情视频在线观看| 欧中美三级一区二区三区| 人人天天干干| 男人天堂最新手机版在线青青草| 大香蕉综合在线| AV女优男人的天堂| 手机不卡视频不卡在线一二三区 | 五月婷丁香| 国产精品一区二区三区四区五区| 青青草天天亲夜夜操网| ...日韩成人一区二区三区字幕| 五月综合婷婷久久网站| 97伦乱| 插入综合网| 秋霞怕怕片| 色偷综合| 精品一区二区亚洲国产| 亚州色图片在线色| 精品久久久av无码免费| 啊啊啊97视频| 午夜福利免费福利视频| 91操熟女视频| 91亚州日韩高清| 日韩成年人性爱视频| 99热超碰| 91人妻素女| 夜夜爽夜夜操| 国产天美欧美| 国产精品自拍视频| 亚洲天堂第一页| 久久久久国产精品喷潮免费观看臀| 91美女视频在线免费观看| 一级做a爰片久久毛片图片| 啊啊啊啊二区好大| 黄色片大香蕉| …亚洲黄色厕厕女女在线播…| 国产久久一区二区三区野外在线| 岛国黄| 天天影视91看看| 久久久一级| 天天日天天操天天射河南省| www.AV有限公司一区| 色丁香五月婷婷| 黄片免费视频2019| 日夜尻逼网| 一区中文字幕二区日韩| 午夜欧美女人操逼| 国产精品精品系列在线观看| 骚女高跟AV在线| 无码国产Av| 国产精品视频内谢女人| 91无摭挡| 国产欧美一区二区| 亚洲精品啪视频| 一区二区高清视频| 丝袜色综合| 欧美熟妇视频| 色牛牛AV| 成人性爱视频在线看| 日本不卡五区| 久日91在线| 999在线电影香蕉| 操逼啊啊啊91| 百度百度日本操逼| 91色射| 免看60秒涩涩视频| 欧美综合色站| 超碰爽人妻熟女Av| 激情专区综合| 干婷婷综合网| 国产美女高潮| 91天天综合日韩欧美| 青青草国产一区二区三区| 久久中出在线| 国产精品老熟女一区二区| 国模少妇一区二区三区| 国产成人午夜视频网址| 婷婷丁香人妻| 欧美亚洲色的图| 蜜臀久久99精品久久综合| 人人做人人妻人人夜视频| 无码高清操逼网址| 成人羞羞视频国产| 性一级黄色录像片网站导航| 蜜臀一二三区| 69久久久久久久久久久久久| 国产精品九9| 精品人人| 精品综合久久久久久五月天| 玖色av| 欧美情色亚洲| 日韩美女高潮喷水视频| 精品999日本| 大香网伊人久久综合网eew| 啊啊啊啊啊在线观看网址 | 日本不卡二区| 高清无码学生妹高潮| 啊啊啊在线观看免费视频| 好吊色一区| 91丨九色丨43老版熟女| 91超级碰碰| 一区二区三区四区免费视频| 精品国产一区二区三区四区在线看| 日韩成人人妻网站|