亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Nacos集群搭建實戰(zhàn):Raft共識、MySQL調(diào)優(yōu)與國產(chǎn)化適配

Nacos集群搭建實戰(zhàn):Raft共識、MySQL調(diào)優(yōu)與國產(chǎn)化適配 1. 為什么必須搞懂Nacos集群搭建——不是為了“配出來”而是為了“扛得住”Nacos作為當(dāng)前國內(nèi)微服務(wù)架構(gòu)中事實上的注冊中心與配置中心雙模主力幾乎已經(jīng)滲透到所有中大型Java技術(shù)棧項目里。但凡你參與過兩個以上Spring Cloud Alibaba項目就一定會遇到那個讓人頭皮發(fā)麻的時刻單機(jī)Nacos在壓測時CPU飆到95%服務(wù)注冊延遲從50ms跳到2秒健康檢查開始批量超時緊接著整個服務(wù)發(fā)現(xiàn)鏈路雪崩——而此時運維同事盯著監(jiān)控大屏說“別慌我們有集群?!笨蓡栴}是這個“集群”真能扛住流量洪峰嗎還是只是三臺機(jī)器上各自跑著standalone模式靠前端Nginx做簡單輪詢連節(jié)點間心跳同步都沒通這就是為什么“Nacos集群搭建”絕不是一份照著官網(wǎng)復(fù)制粘貼的安裝文檔而是一場對分布式系統(tǒng)底層邏輯的實戰(zhàn)檢驗。它直擊三個核心痛點服務(wù)高可用的物理基礎(chǔ)、配置變更的強一致性保障、以及注冊中心自身故障時的自愈能力。你看到的熱搜詞里反復(fù)出現(xiàn)“nacos 適配達(dá)夢數(shù)據(jù)庫”“nacos支持db2嗎”背后其實是企業(yè)級落地時繞不開的國產(chǎn)化適配壓力“nacos namespaces未授權(quán)訪問漏洞”則暴露了集群權(quán)限體系設(shè)計的致命盲區(qū)而“nacos熱更新”“配置中心動態(tài)刷新”這些高頻需求其穩(wěn)定性的前提恰恰是集群內(nèi)各節(jié)點對配置版本的精確同步——這依賴的是Raft協(xié)議的正確實現(xiàn)而不是簡單的數(shù)據(jù)庫主從復(fù)制。我?guī)н^的十幾個生產(chǎn)環(huán)境Nacos集群項目里80%的線上事故根源不在代碼而在集群初始化階段埋下的隱患比如用MySQL 5.7做外置存儲卻沒開啟binlog_formatROW導(dǎo)致Nacos內(nèi)部的config_info_beta表變更無法被監(jiān)聽又比如在K8s環(huán)境下把Nacos節(jié)點部署在不同可用區(qū)卻沒配置nacos.core.member.list結(jié)果節(jié)點發(fā)現(xiàn)失敗后自動退化為單機(jī)模式監(jiān)控告警卻一切正?!驗榻】禉z查只查了本機(jī)端口。所以這篇內(nèi)容不是教你怎么“啟動三臺Nacos”而是帶你親手拆開集群的每一層齒輪從底層存儲選型的取舍邏輯到JVM參數(shù)與GC策略如何影響Raft日志落盤速度從cluster.conf文件里IP寫法的坑千萬別用hostname到application.properties中nacos.core.auth.enabledtrue開啟后必須配套的nacos.core.auth.plugin.nacos.token.secret.key密鑰長度校驗規(guī)則。適合正在規(guī)劃生產(chǎn)環(huán)境的架構(gòu)師、負(fù)責(zé)中間件運維的SRE以及那些被“服務(wù)注冊失敗401”問題卡在聯(lián)調(diào)階段三天沒合上代碼的后端開發(fā)——你們需要的不是命令行回車而是每一步操作背后的“為什么必須這樣”。2. 集群架構(gòu)設(shè)計的本質(zhì)不是堆機(jī)器而是建共識2.1 Nacos集群不是“多實例負(fù)載均衡”而是基于Raft的強一致性數(shù)據(jù)集群很多初學(xué)者會下意識把Nacos集群理解成“像Nginx那樣起多個實例前面掛個負(fù)載均衡器”。這是最危險的認(rèn)知偏差。Nacos集群的核心目標(biāo)是保證注冊中心元數(shù)據(jù)服務(wù)實例列表、健康狀態(tài)和配置中心數(shù)據(jù)配置項內(nèi)容、版本號、發(fā)布人在所有節(jié)點間嚴(yán)格一致。這種一致性要求遠(yuǎn)高于普通業(yè)務(wù)系統(tǒng)的最終一致性它直接決定服務(wù)能否被正確發(fā)現(xiàn)、配置變更能否原子生效。因此Nacos 2.x版本徹底棄用了老版本的AP模式基于Distro協(xié)議的最終一致性轉(zhuǎn)而采用Raft協(xié)議構(gòu)建CP型集群——這意味著當(dāng)集群中超過半數(shù)節(jié)點即滿足quorum在線時才能對外提供寫服務(wù)一旦腦裂發(fā)生少數(shù)派節(jié)點會自動拒絕寫請求避免數(shù)據(jù)分裂。提示Raft協(xié)議要求集群節(jié)點數(shù)必須為奇數(shù)3/5/7這是數(shù)學(xué)上保證“多數(shù)派”存在的最小成本方案。比如3節(jié)點集群允許1臺宕機(jī)5節(jié)點允許2臺宕機(jī)但4節(jié)點集群在2-2分裂時無法達(dá)成多數(shù)派將整體不可寫。所以永遠(yuǎn)不要部署4臺Nacos節(jié)點。Raft的實現(xiàn)依賴三個關(guān)鍵組件Leader選舉、日志復(fù)制、安全性約束。Nacos內(nèi)部通過RaftCore類封裝全部邏輯其工作流如下Leader選舉節(jié)點啟動時發(fā)起投票得票過半者成為Leader若超時未選出則重新發(fā)起選舉。選舉超時時間由nacos.core.protocol.raft.data.tickTime控制默認(rèn)2000ms該值需大于網(wǎng)絡(luò)RTT的3倍否則會因網(wǎng)絡(luò)抖動頻繁觸發(fā)無謂選舉。日志復(fù)制所有客戶端寫請求如服務(wù)注冊、配置發(fā)布必須經(jīng)Leader處理Leader將操作封裝為日志條目Log Entry并同步至Follower節(jié)點的內(nèi)存日志隊列Follower收到后持久化到磁盤raft-log目錄再向Leader返回ACKLeader收到多數(shù)派ACK后將該日志提交commit并通知客戶端成功。安全性約束Raft規(guī)定“只有包含最新已提交日志的節(jié)點才能當(dāng)選Leader”。Nacos通過lastAppliedIndex最后應(yīng)用日志索引和lastAppliedTerm對應(yīng)任期號確保這一點避免舊數(shù)據(jù)覆蓋新數(shù)據(jù)。這個機(jī)制直接決定了你的集群部署方式如果三臺Nacos節(jié)點跨地域部署如北京、上海、廣州網(wǎng)絡(luò)延遲可能高達(dá)50ms那么tickTime必須設(shè)為150ms以上否則選舉風(fēng)暴頻發(fā)而日志復(fù)制的耗時將直接影響服務(wù)注冊響應(yīng)時間——實測在千兆內(nèi)網(wǎng)中3節(jié)點Raft集群的平均注冊延遲為120ms比單機(jī)模式增加約80ms這是為強一致性付出的確定性代價。2.2 存儲層選型MySQL不是唯一解但必須理解它的瓶頸與替代方案Nacos集群的數(shù)據(jù)持久化層有三種模式嵌入式Derby僅限單機(jī)、外置MySQL、以及自研的Alibaba Nacos-DistributedNacos 2.2新增。生產(chǎn)環(huán)境必須使用外置存儲而MySQL是當(dāng)前最成熟的選擇。但選擇MySQL不等于萬事大吉其配置細(xì)節(jié)直接決定集群吞吐量上限連接池配置Nacos默認(rèn)使用Druid連接池druid.maxActive最大活躍連接數(shù)建議設(shè)為2 * CPU核數(shù)。例如8核服務(wù)器設(shè)為16過高會導(dǎo)致MySQL線程競爭過低則Raft日志落盤阻塞。事務(wù)隔離級別必須使用READ_COMMITTED。Nacos的config_info表更新依賴WHERE data_id? AND group_id? AND tenant_id? AND app_name?條件若用REPEATABLE_READMVCC快照可能導(dǎo)致并發(fā)更新丟失。字符集與排序規(guī)則utf8mb4_unicode_ci是唯一安全選項。曾有客戶因使用utf8mb4_general_ci導(dǎo)致中文配置項在集群間同步時出現(xiàn)亂碼根源是該排序規(guī)則對某些Unicode字符的比較邏輯不一致。注意MySQL 5.7必須開啟binlog_formatROW且binlog_row_imageFULL。Nacos的配置監(jiān)聽機(jī)制ConfigChangeNotifyService依賴Binlog解析來捕獲config_info表變更若為STATEMENT模式跨庫操作或函數(shù)調(diào)用將無法被捕獲導(dǎo)致配置推送失效。當(dāng)MySQL成為瓶頸時如QPS超5000可考慮兩種升級路徑讀寫分離將config_info等高頻查詢表的讀請求路由至從庫但需注意Nacos 2.x的ConfigInfoPersistServiceImpl未內(nèi)置讀寫分離邏輯需自行擴(kuò)展DataSourceProxy實現(xiàn)分庫分表Nacos官方不支持但可通過ShardingSphere代理層實現(xiàn)。實測某金融客戶將config_info按tenant_id哈希分到4個庫QPS提升至12000代價是nacos.core.cache本地緩存失效率上升15%——因為跨庫查詢無法利用二級緩存。對于超大規(guī)模場景百萬級服務(wù)實例Nacos-Distributed是更優(yōu)解。它基于RocksDB構(gòu)建本地LSM樹存儲配合gRPC長連接實現(xiàn)節(jié)點間數(shù)據(jù)同步規(guī)避了關(guān)系型數(shù)據(jù)庫的鎖競爭。但其學(xué)習(xí)成本高需理解RocksDB的write_buffer_size默認(rèn)64MB如何影響寫放大以及max_background_jobs默認(rèn)2對Compaction線程的調(diào)度影響。我們曾在一個電商大促集群中將write_buffer_size調(diào)至256MB使突發(fā)流量下的寫延遲降低40%但內(nèi)存占用增加3.2GB——這是典型的工程權(quán)衡。2.3 網(wǎng)絡(luò)拓?fù)湓O(shè)計跨機(jī)房部署的生死線集群節(jié)點間的網(wǎng)絡(luò)質(zhì)量是Raft協(xié)議穩(wěn)定的命脈。我們曾在一個混合云場景中踩過深坑3臺Nacos節(jié)點分別部署在阿里云華北1、騰訊云華東1、私有云IDC表面看是“高可用”實際因公有云間專線延遲波動20-80ms導(dǎo)致Raft心跳包/v1/core/cluster/nodes接口超時重傳Leader頻繁切換。最終解決方案是放棄跨云部署改為同城雙機(jī)房異地災(zāi)備主集群3節(jié)點全在同城A機(jī)房B機(jī)房部署1個只讀Follower節(jié)點通過nacos.core.cluster.readOnlytrue啟用用于災(zāi)備切換。具體網(wǎng)絡(luò)配置要點節(jié)點發(fā)現(xiàn)方式優(yōu)先使用nacos.core.member.list靜態(tài)配置如192.168.1.10:8848,192.168.1.11:8848,192.168.1.12:8848禁用nacos.server.ip動態(tài)發(fā)現(xiàn)。后者依賴UDP廣播在容器化或VPC網(wǎng)絡(luò)中極易失敗。端口規(guī)劃除默認(rèn)8848HTTP和9848gRPC外Raft通信使用7848端口nacos.core.raft.port7848必須在防火墻放行。曾有客戶因未開放7848端口集群始終顯示RAFT_NOT_INITIALIZED錯誤。DNS與hosts綁定絕對禁止在cluster.conf中使用域名如nacos-node1.prod.com。K8s環(huán)境下若用StatefulSet應(yīng)通過hostAliases將Pod IP映射到固定主機(jī)名再在cluster.conf中寫主機(jī)名——但前提是所有節(jié)點的/etc/hosts必須完全一致否則Raft節(jié)點互相解析失敗。3. 實操全流程從零開始搭建一個抗壓3000 QPS的Nacos集群3.1 環(huán)境準(zhǔn)備與基礎(chǔ)配置以CentOS 7 MySQL 5.7為例我們以3節(jié)點集群為例節(jié)點信息如下節(jié)點IP地址主機(jī)名角色nacos1192.168.1.10nacos1Leader候選nacos2192.168.1.11nacos2Followernacos3192.168.1.12nacos3Follower第一步MySQL初始化-- 創(chuàng)建專用數(shù)據(jù)庫與用戶 CREATE DATABASE nacos_config CHARACTER SET utf8mb4 COLLATE utf8mb4_unicode_ci; CREATE USER nacos% IDENTIFIED BY StrongPassw0rd!; GRANT ALL PRIVILEGES ON nacos_config.* TO nacos%; FLUSH PRIVILEGES; -- 驗證Binlog配置登錄MySQL執(zhí)行 SHOW VARIABLES LIKE binlog_format; SHOW VARIABLES LIKE binlog_row_image; -- 必須返回 ROW 和 FULL第二步Nacos安裝包預(yù)處理下載Nacos 2.2.3二進(jìn)制包nacos-server-2.2.3.tar.gz解壓后進(jìn)入conf目錄修改application.properties關(guān)鍵配置如下# 數(shù)據(jù)庫連接務(wù)必用useSSLfalse避免證書問題 spring.datasource.platformmysql db.num1 db.url.0jdbc:mysql://192.168.1.20:3306/nacos_config?characterEncodingutf8connectTimeout1000socketTimeout3000autoReconnecttrueuseSSLfalseserverTimezoneAsia/Shanghai db.usernacos db.passwordStrongPassw0rd! # Raft協(xié)議參數(shù)根據(jù)網(wǎng)絡(luò)延遲調(diào)整 nacos.core.protocol.raft.data.tickTime3000 nacos.core.protocol.raft.data.electionTimeout9000 nacos.core.protocol.raft.data.commitTimeout3000 # 權(quán)限控制生產(chǎn)環(huán)境必須開啟 nacos.core.auth.enabledtrue nacos.core.auth.plugin.nacos.token.secret.keySecretKey012345678901234567890123456789012345678901234567890123456789 # 密鑰長度必須為64字符32字節(jié)不足會報錯實操心得nacos.core.auth.plugin.nacos.token.secret.key的生成不能用隨機(jī)字符串必須用openssl rand -hex 32生成。曾有團(tuán)隊用Pythonsecrets.token_hex(32)生成結(jié)果因編碼差異導(dǎo)致Token校驗失敗排查三天才發(fā)現(xiàn)密鑰長度雖為64但實際字節(jié)長度不符。第三步集群節(jié)點配置在每臺機(jī)器的conf/cluster.conf中寫入所有節(jié)點IP順序無關(guān)但必須完全一致192.168.1.10:8848 192.168.1.11:8848 192.168.1.12:8848切記該文件不能有空行、注釋或空格否則Nacos啟動時解析失敗日志報java.lang.NumberFormatException: For input string: 。3.2 JVM參數(shù)調(diào)優(yōu)讓Raft日志落盤不卡頓Nacos集群的性能瓶頸常在JVM GC尤其是Raft日志刷盤時的Full GC。默認(rèn)startup.sh中的-Xms2g -Xmx2g在高并發(fā)下必然觸發(fā)頻繁GC。我們針對32G內(nèi)存服務(wù)器優(yōu)化如下# 修改bin/startup.sh中的JAVA_OPT JAVA_OPT${JAVA_OPT} -server -Xms12g -Xmx12g -Xmn6g JAVA_OPT${JAVA_OPT} -XX:UseG1GC -XX:MaxGCPauseMillis200 JAVA_OPT${JAVA_OPT} -XX:ParallelRefProcEnabled -XX:MaxInlineLevel15 JAVA_OPT${JAVA_OPT} -XX:UnlockExperimentalVMOptions -XX:UseG1GC -XX:G1NewSizePercent30 -XX:G1MaxNewSizePercent40 JAVA_OPT${JAVA_OPT} -XX:G1HeapRegionSize2M -XX:G1ReservePercent20 # 關(guān)鍵禁用偏向鎖避免Raft線程競爭 JAVA_OPT${JAVA_OPT} -XX:-UseBiasedLocking參數(shù)原理說明-Xmn6g新生代設(shè)為6G占堆內(nèi)存50%確保Raft日志對象短生命周期在Eden區(qū)快速分配回收-XX:UseG1GCG1垃圾收集器能精準(zhǔn)控制停頓時間MaxGCPauseMillis200表示目標(biāo)停頓不超過200ms-XX:G1HeapRegionSize2M將堆劃分為2MB區(qū)域匹配Raft日志條目的平均大小1.2MB減少跨區(qū)域引用-XX:-UseBiasedLockingRaft的RaftConsensus類大量使用synchronized禁用偏向鎖可避免鎖撤銷開銷。實測對比未調(diào)優(yōu)時3000 QPS下Full GC每15分鐘一次停頓4.2秒調(diào)優(yōu)后72小時僅觸發(fā)2次Young GC平均停頓18ms。3.3 啟動驗證與健康檢查啟動三臺節(jié)點# 在每臺機(jī)器執(zhí)行后臺運行 sh bin/startup.sh -m cluster驗證步驟檢查進(jìn)程與端口ps -ef | grep nacos netstat -tuln | grep :8848 # 確認(rèn)8848HTTP、9848gRPC、7848Raft端口均監(jiān)聽查看集群狀態(tài)# 訪問任意節(jié)點的API curl -X GET http://192.168.1.10:8848/nacos/v1/core/cluster/nodes # 正常返回JSON包含3個節(jié)點且state:UPip:192.168.1.10,raftState:LEADER僅一個Leader模擬服務(wù)注冊壓測# 使用wrk壓測100并發(fā)持續(xù)60秒 wrk -t12 -c100 -d60s --latency http://192.168.1.10:8848/nacos/v1/ns/instance?serviceNametestip127.0.0.1port8080 # 預(yù)期結(jié)果平均延遲150ms錯誤率0%關(guān)鍵指標(biāo)監(jiān)控nacos_monitor{typeraft}[5m]Raft心跳成功率應(yīng)99.5%jvm_gc_collection_seconds_count{gcG1 Young Generation}[1h]Young GC頻率應(yīng)10次/小時nacos_monitor{typeconfig}配置發(fā)布耗時P95500ms。3.4 國產(chǎn)化適配實戰(zhàn)達(dá)夢數(shù)據(jù)庫與DB2的填坑指南當(dāng)客戶要求適配達(dá)夢DM8時核心挑戰(zhàn)在于SQL語法兼容性。達(dá)夢默認(rèn)不支持INSERT ... ON DUPLICATE KEY UPDATE而Nacos的config_info表插入邏輯依賴此語法。解決方案是修改Nacos源碼找到com.alibaba.nacos.config.server.service.repository.extrnal.ExternalStoragePersistServiceImpl類將insertOrUpdate方法中的ON DUPLICATE KEY UPDATE替換為達(dá)夢的MERGE INTO語法MERGE INTO config_info t1 USING (SELECT ? AS data_id, ? AS group_id, ? AS tenant_id FROM DUAL) t2 ON (t1.data_id t2.data_id AND t1.group_id t2.group_id AND t1.tenant_id t2.tenant_id) WHEN MATCHED THEN UPDATE SET ... WHEN NOT MATCHED THEN INSERT ...編譯后替換nacos-config-2.2.3.jar中的class文件。對于DB2主要問題是LIMIT語法不支持。Nacos的findConfigInfoByDataId方法使用LIMIT ? OFFSET ?需改為DB2的FETCH FIRST ? ROWS ONLY。此外DB2的VARCHAR長度單位是字節(jié)而非字符data_id字段需從VARCHAR(255)改為VARCHAR(1020)UTF-8下中文占3字節(jié)。注意所有國產(chǎn)化適配必須通過nacos.core.db.embeddedfalse強制關(guān)閉嵌入式存儲并在application.properties中指定spring.datasource.platformdm或db2否則Nacos會加載錯誤的SQL模板。4. 常見問題與排查技巧實錄那些官網(wǎng)不會寫的血淚教訓(xùn)4.1 “服務(wù)注冊失敗401”問題的三層定位法當(dāng)客戶端報401 Unauthorized時90%的開發(fā)者第一反應(yīng)是改密碼。但真實原因往往更深第一層認(rèn)證開關(guān)與密鑰匹配檢查application.properties中nacos.core.auth.enabledtrue是否開啟且nacos.core.auth.plugin.nacos.token.secret.key與客戶端bootstrap.yml中的nacos.auth.token.secret.key完全一致包括空格。曾有客戶因復(fù)制密鑰時多了一個換行符導(dǎo)致Base64解碼失敗。第二層Token有效期與時間同步Nacos Token默認(rèn)有效期1800秒30分鐘但客戶端SDK會緩存Token。若Nacos服務(wù)器與客戶端機(jī)器時間差15分鐘Token簽名驗證失敗。用ntpdate -u time.windows.com校準(zhǔn)所有節(jié)點時間。第三層Namespace權(quán)限隔離若客戶端指定了namespace-id而該Namespace未分配給對應(yīng)用戶也會返回401。需登錄Nacos控制臺進(jìn)入“權(quán)限控制”→“用戶管理”為用戶分配目標(biāo)Namespace的讀寫權(quán)限。特別注意public命名空間的ID是空字符串不是public代碼中必須寫namespace: 。4.2 配置中心動態(tài)刷新失效的根因分析“nacos配置中心動態(tài)刷新”失效是高頻問題排查需按以下順序確認(rèn)客戶端依賴版本Spring Cloud Alibaba 2021.1才完全支持Nacos 2.x的gRPC推送舊版仍走HTTP輪詢默認(rèn)30秒需升級spring-cloud-starter-alibaba-nacos-config至2021.1.0。檢查RefreshScope注解位置必須加在Controller或Service類上不能加在Configuration類上Spring Boot 2.4已廢棄ConfigurationProperties的自動刷新。驗證Nacos服務(wù)端推送日志在logs/nacos.log中搜索ConfigChangeNotifyService正常應(yīng)有publish event to client日志若無說明配置未觸發(fā)變更事件——常見原因是dataId中含非法字符如/Nacos會靜默過濾。實操技巧在Nacos控制臺發(fā)布配置時勾選“Beta發(fā)布”并填寫測試IP可精準(zhǔn)推送至指定機(jī)器避免全量推送干擾。4.3 集群腦裂后的數(shù)據(jù)修復(fù)流程當(dāng)網(wǎng)絡(luò)分區(qū)導(dǎo)致集群分裂為2-1時少數(shù)派節(jié)點會拒絕寫入但客戶端若直連少數(shù)派節(jié)點可能收到“服務(wù)注冊成功”假象因節(jié)點未及時感知失聯(lián)。此時需人工介入登錄所有節(jié)點執(zhí)行curl http://localhost:8848/nacos/v1/core/cluster/nodes確認(rèn)Leader節(jié)點在少數(shù)派節(jié)點上刪除data/protocol/raft/naming/和data/protocol/raft/config/目錄Raft日志數(shù)據(jù)重啟該節(jié)點它將自動從Leader同步最新日志嚴(yán)禁直接拷貝Leader的data目錄會導(dǎo)致Raft Term混亂集群永久不可用。4.4 Nacos與K8s集成的三大陷阱在K8s中部署Nacos StatefulSet時必須避開陷阱1Headless Service的Endpoint不穩(wěn)定K8s的Headless ServiceclusterIP: None雖能提供DNS記錄但Pod IP變化時DNS緩存可能導(dǎo)致節(jié)點發(fā)現(xiàn)失敗。解決方案在cluster.conf中寫死StatefulSet的穩(wěn)定域名如nacos-0.nacos-headless.default.svc.cluster.local并通過hostAliases綁定到Pod IP。陷阱2PersistentVolume的ReadWriteOnce限制Nacos的data目錄需多節(jié)點讀寫但大多數(shù)PV如AWS EBS僅支持ReadWriteOnce。必須使用支持ReadWriteMany的存儲如NFS、GlusterFS或改用emptyDir僅限臨時環(huán)境。陷阱3Liveness Probe的誤殺默認(rèn)livenessProbe檢查/actuator/health但Nacos啟動時Raft初始化需30秒若Probe超時設(shè)為10秒會反復(fù)重啟Pod。應(yīng)設(shè)為livenessProbe: httpGet: path: /nacos/v1/console/server/state port: 8848 initialDelaySeconds: 60 periodSeconds: 305. 運維加固與長期演進(jìn)讓集群真正“無人值守”5.1 安全加固清單堵住“未授權(quán)訪問”的所有入口針對熱搜詞中高頻出現(xiàn)的“nacos namespaces未授權(quán)訪問漏洞”必須執(zhí)行以下加固關(guān)閉控制臺未授權(quán)訪問在application.properties中添加nacos.core.auth.consolefalse強制所有控制臺操作需登錄限制API訪問來源在Nginx反向代理層配置IP白名單僅允許可信網(wǎng)段訪問/nacos/v1/**禁用危險Endpoint通過management.endpoints.web.exposure.includehealth,info限制Actuator端點移除env、beans等敏感接口定期輪換密鑰nacos.core.auth.plugin.nacos.token.secret.key每90天更換一次并同步更新所有客戶端配置。5.2 監(jiān)控告警體系不只是看CPU要看Raft健康度除了基礎(chǔ)的CPU、內(nèi)存、磁盤監(jiān)控必須接入以下Nacos專屬指標(biāo)nacos_monitor{typeraft, stateleader}Leader節(jié)點數(shù)應(yīng)恒為1突變?yōu)?表示集群分裂nacos_monitor{typeconfig, statusfail}配置發(fā)布失敗次數(shù)持續(xù)5次/分鐘需告警jvm_threads_current{staterunnable}線程數(shù)1000時Raft線程可能饑餓需擴(kuò)容節(jié)點。我們使用PrometheusGrafana構(gòu)建監(jiān)控看板關(guān)鍵面板包括Raft狀態(tài)看板展示各節(jié)點raftState、lastHeartbeatTime、pendingRequests待處理日志數(shù)配置發(fā)布SLA看板統(tǒng)計P50/P95/P99延遲閾值設(shè)為200ms/500ms/1000ms服務(wù)注冊容量看板nacos_monitor{typenaming, metricserviceCount}當(dāng)服務(wù)數(shù)5000時觸發(fā)擴(kuò)容預(yù)警。5.3 集群平滑升級從2.1.1到2.2.3的零停機(jī)方案升級Nacos版本時必須遵循“滾動升級”原則先升級Follower節(jié)點nacos2、nacos3每臺升級后等待5分鐘確認(rèn)/nacos/v1/core/cluster/nodes返回狀態(tài)正常再升級Leader節(jié)點nacos1升級前先執(zhí)行curl -X PUT http://192.168.1.10:8848/nacos/v1/core/cluster/transfer?target192.168.1.11將Leader轉(zhuǎn)移至nacos2升級完成后驗證配置發(fā)布與服務(wù)注冊功能再執(zhí)行curl -X POST http://192.168.1.11:8848/nacos/v1/core/cluster/leader確認(rèn)新Leader選舉成功。重要提醒Nacos 2.2.0引入了新的gRPC通信協(xié)議客戶端必須同步升級Spring Cloud Alibaba至2021.1否則HTTP fallback會降級為輪詢模式失去實時推送能力。我在實際操作中發(fā)現(xiàn)最穩(wěn)妥的升級節(jié)奏是每周升級1個節(jié)點全程監(jiān)控72小時無異常后再進(jìn)行下一步。曾有一個客戶急于求成一天內(nèi)升級全部節(jié)點結(jié)果因2.2.3版本的RaftCore類對lastAppliedIndex校驗更嚴(yán)格導(dǎo)致舊日志無法解析最終回滾耗時4小時。所以慢就是快集群的穩(wěn)定性永遠(yuǎn)排在版本新鮮度之前。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
成人黄页| 日韩精品在线放| 97欧美性爱| 999久久久| 裸模AV女优| a在线观看| 黄页网站免费高清在线观看| 少妇久久| 亚洲一区二区av| 精品96久久| 五月天开心网| 东京热激情视频一二三区| 亚洲免费成人在线高清无码视频 | 91久久婷婷| 精品无码久久久久| 亚洲三级。日韩三级| 精品176精品2| 一区 欧美 日韩 麻豆| 强奸a片网| 一级成人性爱| 亚洲黄片免费在线播放| 国产91影院| 中文不卡视频| 久久久久久久久久久久97 | 国产成年精品高清在线观看91| 97资源亚洲| 日本欧美m v精品网站加| 欧美18禁91| 人妻啊啊人妻啊| 99热国产| 青青草日韩无码| 色色五月婷| 国产成人+综合亚洲+天堂| 性在久久久久久| 免费人成在线观看网站品爱网| 日韩熟女精一区二区三区不卡| 成人草草视频| 91久| 26uuu最新| 91在线精品一区二区三区| 久久超碰网| 网友自拍第一页| 日韩熟女三十乱伦| 一本精品日本在线视频精品| 图片区小说区| 男人的天堂网免费| 日韩AV一区二区三区三州三州| 亚洲AV小说| 亚洲最大的黄色电影网站。| 国厂麻豆77q4| 风间由美日韩欧美久久| 超碰97国产欧美| 青青草在线视频播放器| 国产精品一二三| 国产精品丝袜在线| 欧美夜夜草视频| 天天激清| www.99热| 超碰538| 中文字幕在线2| se吧提供国产乱老熟视频胖女人| 日韩性爱免费视频在线网站| A片三级无码| 99久久综合网| 久偷拍| 色悠久久久av| 久久精品久久久久久久| 日本精品中文字幕视频| 国产成人精品日本视频| 97中文天堂| 久久99999| 伊人宅男大香蕉 | 九九精品99| 亚洲,欧美,春色,另类| 日韩大香蕉| 岛国免费黄色网址| 天天综合网一91网| 欧美第五页| 午夜成人爽爽爽爽A片李冰冰| 国产二区三区免费视频| 色区久久| 欧美猛交黑寡妇中文字幕| 国产超碰欧美| 国产理论视频在线播放| 欧美黄页在线| 91精品人妻一品二品三品| 天天上日日上日韩精品| 超碰人人干| 好看的91视频| 97在线免费看视频| 人妻天堂综合网| 蜜臀久久久| 亚洲牲交| 亚洲国产精品久久久久婷婷青年| 99日视频在线免费| 欧美日韩一区二区三区四区蜜桃| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 免费精品福利在线观看| 97香蕉人人乳| 国产精品分类在线观看| 欧美天天拍| 欧美91久久久久| 免费αV在线视频| 夜夜嗨AV一区天天| 91天天综合日韩欧美| 夜嗨影院| 成年人免费观看网站| 欧美自拍偷拍综合图片| 91精品国产91熟女| 九色PORNY9l原创自拍| 精品一久久久| 99精品视频在线观看免费| 少妇一区二区三区在线观看| 婷婷超| 一级A啪啪啪啪| 中文字幕综合人妻| 国产曰批免费观看久久久| 天天干一区二区| 亚洲熟女综合网| www.zbzhongsen.com| 99在线精品观看视频中文 | 国产性爱欧美性爱在线| 九九性爱网| 亚洲午夜蜜臀| 伊人久久88国产女| 大象AV在线| 江都AV在线| 婷婷久久五月综合激情| 好湿好紧好爽 视频| 97资源久久| 美女超碰978| 性色A∨91| 久都青青视频| 在线观看高清AV| 国产二区三区粉嫩在线| 精品少妇人妻av久久免费| 国产精品久久久九九九| 丝袜美腿制服人妻二区中文字幕| 中文字幕福利视频一区二区三区在线观看| 91操人| 不卡在线观看视频| 粉嫩少妇自慰在线| 国产精品无码AV网站| 一中国女人毛片水真多| 禁十八久久| 91人妻精华帖| 校园春色美腿丝袜| 日韩情色视频| 丝袜美腿制服人妻二区中文字幕 | 久久精品无码不卡| 精品熟女一区=区三区| 91熟女视频| 97色色色综合网站| 免费一级视频特黄色大片| 精品人妻av区天天看片| 91熟女少妇| 亚欧精品久久久久久久久久久| 欧洲色色| 日日日日做夜夜夜夜无码| 激情文学小说一区二区| 日韩激情视频| 亚洲无套久久嗯嗯| 久久6热视频免费观看| 久久久久久久91| 一直超碰| 97视频在线免费看| 丁香色婷婷| 欧美极品美女aaaaaa级黄片| 97国产精品在线观看| 欧美中文字幕男人天堂久久精品 | 九九热五区| 欧美日韩性爱操大逼| 亚洲牲交| 91中出视频| 亚洲涩涩| 久热精品色情| 麻豆天美制片厂网站视频| 秋霞曰韩R级| ..日韩av毛片精品久久久| 国产97视频| 精品人妻无码一区二区三区不卡-精品人妻无码一区二区...|精品少妇一区二区三 | av午夜玫瑰| 六月婷婷色综合| 在线无码视频| 欧美日产国产在线成人第一区| 青青草国产欧美非洲黑人| 麻豆人妻偷人精品无码视频| 国产综合久久久鬼色| 日韩999| 精品中文字幕一区二区| 中文字幕蜜乳av| www.久久超碰| 国产精品福利视频| 国产精品一区二区密臀| 久草在线| 黄色香蕉视频网站一区| 免费中文综合精品| 五月天我淫我色av| a男人的天堂久久一级A毛片| 成人av在线播放| 人人搞人人插人人操| 亚洲欧洲激情卡通另类文学四射小说网站 | 美女诱惑爱爱| 日韩有码免费视频| 91校园春色长篇| 在线电影亚洲色图| 亚洲性综合11| 東南亚性呦成人伦理资源在线视频| 久操视频免费观看| 婷婷探花久久精品一区| 久久久久人| 白嫩91在线亚洲| 亚洲精品国产熟女久久久| 欧美第一页| 91久久久老司机| 狠狠做深爱婷婷久久二区| 综合97亚洲| 男人久久精品| 殴美色网| 欧美精品宗合| 久久久久久日韩| 伦伦成年午夜免费视频| 亚洲一区中文字幕一区| 玖玖97综合 | 久久夜嗨| 人人色人人操在线| 人人操人人狠狠操| 少妇高潮喷水无套久久久久久| 日本黄色裸日本黄色裸体 | 1024午夜激情男人的天堂| 国产乱码久久久久久| 亚洲丰满很很操| 亚洲男人天堂视频| 私人尤物在线精品不卡| 日韩欧美aⅴ综合网站发布| 亚洲av影院在线观看| 国产高潮AA片免费看| 六六久久日韩不卡| 亚洲诱惑| 人人爱人人乐人人操| 强奸国产在线| 五月丁香久久| 熟女精品一区二区在线观看| 国产精品成人午夜福利| 中国少妇XXXX做受| 久热伊人99re| 91色堂| 午夜欧美精品久久久| 久操91视频| 亚洲综合中文字幕有码| 久久久久久大| 久久九九97| 免费超碰97在线观看| 一区二区三区机械有限公司| 欧美se亚洲| 加勒比aⅴ| 精品国产乱码| 亚洲精品久| 国产精品久久久久999| 丝袜亚洲综合| 91人妻爽爽人人做人人澡| 日韩av色图综合| 人妻少妇精品久久久久久| 欧美日日操| 96精品在线| 欲色啪| 日韩在线地址一| 色狠狠综合| 亚洲吊色| 99re热有精品视频国产| 神马久久久久眼| AV在线播放网址| 国产一区二区三区视频在线看| 七久久久| 少妇激情一区二区三区视频| 日韩欧美字幕亚洲一区二区| 国产精品97超碰| 无码137片内射在线影院| 天天做天天爱| 日韩9区| 伊人久久大香大香线蕉中文| 亚洲的天堂网| 日韩一级免费性爱| 99草精| 色香色欲天天综合网天天来吧| 婷婷激情一区二区三区俺也去| 久久69| Julia在线播放亚洲久久| 免费99精品国产自在在线| 飘花国产午夜精品不卡| 亚洲情色一区综合| 亚洲**2021在线观看| 精品一区二区三区最新| 成人精品在线免费视频| 久久亚洲骚逼综合| 日韩性爱小视频| 视频在线观看一二三区| 欧美巨大性舒爽顶到了| 精品亚洲俞拍视频一区| xxxx网站亚洲精品| 十八禁一区二区无码观看| 国产 热久久久久国产精品| 日本999精品| www.91理论| 亚洲综合色在线| 国产CHASE男男GAYGA 毛多色婷婷| 九九人妻| 91在线美女| 色婷婷六月丁香七月婷婷| 91久久国产综合精品| 国产女人和拘做爰视频| 视频在线97| 天天爽天天操| 色翁荡息又大又硬又粗又爽| 嗯~啊~快点 死我视频免费看网站| 国产乱码精品一区二区三区四川| 日天天九九天堂666| 九九热免费视频| 色激情综合网站| 免费看污网址| 亚洲AV免费在线| 激情小说在线视频| 九一性生活免费视频| 亚洲天天更新| 加勒比综合九九99视频在线播放| 亚洲国产一级黄色视频| 伊人亚洲综合| 日韩高潮一区| 国产区91柔拿会所技师| 一起草视频在线| 小骚逼被操的爽不爽| 婷婷丁香熟妇综合网| 韩国一级做a久久久久| 东京热av男人的天堂| 国产 v乱码一区二| 久久久久久久久久va| 毛片麻豆91糖心精品毛情片| 91黑丝美女| 成人天天看站长推荐| www.yeyecao| 99热线麻豆| 亚洲精品一二三四区| 久干9操| 传媒在线观看一区二区三区| 色天堂在线观看| 天天综合~91入口| 久久婷婷综合国际产色怕| 亚洲?V高清一区二区三区尤物| 99热日| 久热久一区二区三区| 国产成人久久久精品免费AV| AV和黑人在线播放| 国产一级高清免费观看| 日本不卡在线二区三区| 九九人妻| 人妻熟女一区二区| 日逼五月天| 2020视频1区2区3区| 国产美女高潮叫床视频| 夜色AV无码手机在线影院| 欧美日韩插逼视频| 另类图片综合| 中国熟女老妇仑乱一区二区三区| 91天堂网| 国产精品视频在线观看| 亚洲日精品| 久操| 中文字幕国产| 久久区| 欧美综合色,www| 男人天堂无码| 美女十八禁| 色老大| 亚洲双插| 天躁夜夜躁2021| 少妇的嫩逼图片| 99re在线视频这里只有精品| 欧美日韩亚洲国产中文永久天天看| 色天堂综合| 东京热av男人的天堂| 青春草A| 嗯嗯啊啊用力视频免费| 欧色综合| 色哟哟av网址| 国产少妇内射| 激情欧美97| 夜夜性| 人人妻人人玩人人澡人人爽| 玖玖综合网| 亚洲欧美另类图片| 国产又黄又粗又猛大片| 懂色中文一区二区三区| 嫩草影院在线观看精品| 五月丁香综合激情| 亚洲最大91网| 性交一区二区在线播放| 欧美精品不卡一二三四在线91| 欧美在线干| 九九九九热只有精品| 亚洲天堂加勒比| 久久夜夜| 乱伦图av| 欧亚综合一卡二卡中文字幕| 欧美少妇一区二区三区| 狠狠躁天天躁日日躁| 人妻熟女一区二区| 亚洲综合网图| 蜜臀色乳| 天天噜| 日韩99神马视频播放| 中文有码9| 九九色婷婷| 天无日色综合| 久久久禁| 唯美清纯 妖精视频| 中国AAAAAA黄色片| 十八禁成人网站在线观看| 曰韩无码777| 亚洲AV无码天美传媒一区| 男人天堂久久日韩| 阿姨一区二区免费视频-高清正片西瓜视频下载app-T450AV | 九九九九免费| 国产AV激情无码久久无码| 激情五月天色色| 97在线欧洲| 欧美色91| 最新的亚洲无吗| 中文字幕高清20页视频| 亚洲成人AB| 玖玖爱在线视频免费观看| 国产成人免费观看在线视频| 久久久999国产精品| 综合久久97| 日本一区二区成人在线| 日韩伦理视频| 97网色| 久久一二三四五六七八九区区区 | 激情人妻另类| 91一区二区三区蜜桃| 日韩性爱高清免费视频| 九九久久国产精品| 亚洲天堂一区| 亚洲中文制服诱惑| 超碰97亚洲| 成人黑料社久久| 欧美日韩天堂| 99色热国产视频精品| 日韩偷拍色图| 9Ⅰ老熟女| 2024人人操人人摸| 熟妇一区,二区,三区。| 小情侣高清国产在线视频| 欧洲乱码视频| 国产在线观看91精品一区| 超碰日本97美女人妻人人玩人人爱| 夜夜爽夜夜摸夜夜操免费视频| 国产视频一区二区三区在线免费观看| 天天影视网综合少妇| 午夜噜噜噜| 欧美啪啪女女| 97操b| 亚欧国产无码精品在线| 亚洲久久东京热一二三四五区视频| 小视频国产| 欧美性,色九九| 亚洲国产美女久久久久 | 男人在线天堂| 日韩AV色图| 国产偷人伦激情在线观看| caorenqi shipin| 啊啊啊啊啊啊在线观看| 国产日韩精品一区二区三区| 国产精品国产亚洲区艳妇糸列| 天美传媒av 在线| 白丝av| 好淫网一二三视区| 国内亚洲高清无码| 欧美暴力猛交| 色婷婷五月综合激情中文字幕| 校园春色家庭伦理欧美激情| 韩国一级做A片免费的| 精品女同一区二区三区| 欧美精品四区| 国产无码三级视频在线观看| 欧美亚洲高清不卡| 最新国产精品久久精品| 91岛国动作片| 欧美三级免费伊人| 午夜啪啪片| 久久激情四射婷婷丁香五月天| 激情五月丁香五月| 色婷婷国产精品一区在线观看| 啪啪视频mP4| 国产黄色影片在线观看| q2午夜理论片夜色av| 九九色婷婷| av网站免费看| 人妻色情天天操| 婷婷五月天福利| 色哟哟AⅤ| 天天日熟妇| 天天影视色香色欲| 国产欧美精选激情视频| 色亚洲欧美| 欧美最婬乱婬爆婬性视频 | 亚洲欧美洲综合| 丝袜喷水在线| 777奇米影视777四色| 中文字幕欧美丝袜07资源| 欧美日韩精品久久| 艹我哪美一区无码| 手机在线人成免费视频| 日本成人在线不卡一区二区三区| 激情人妻另类| 日本三级小说中文字幕| 99久久久无码国产精品性男| AAAA级日本片免费视频| 久久久少妇诱惑精品视频| 久久精品欧美一区蜜桃| 人、人、摸,人、人、草| 日韩电影在线观看网址| 国产三级中文字幕粉嫩| 91九九九小逼| 青娱乐av在线| 亚洲精品99| 性色av蜜臀av色欲aV| 神马九九| 最近二区三区视频大全| 久久精品操| 青青草玖玖爱| 西西美女视频网| 欧美淫穴| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴 | 伊人一区二区在线播放| 精品一区二区三区免费古装毛片香港三级日本三级人妇 | 91精品久久久久| 亚洲色 国产 欧美 日韩| 欧美中文字幕精品人妻| 欧美日韩在线国产在线| 色综合一本| 91天美免费| 久久人体一区二区| 91天天看| 精品国产乱码久久久久久久久久毛片| 无码视频一区二区| 1234区中文字幕在线观看_青青草国产在线_日韩一区二区 | 久久久久免费少妇| 99日韩| 国产中文字幕曰本毛片| 亚洲一级特黄大片在线播放91| 色哟哟 日韩精品| 日本综合色图| 一区二区高清视频| 91人妻少妇| 啪啪啪亚欧美视频| 精品久| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区 | 日本熟女免费視颖| 亚洲欧洲综合成人av一区| 韩国免费播放一级毛片| 亚洲国产成人精品久久久国产成人一区二区| 九九操久久国产免费视频| 校园春色美腿丝袜| 欧美亚洲首页| 成人精品在线免费视频| 成人精品久久久午夜福利| 秋霞一级鲁丝片A片| 翔田千里爆乳巨臀无码| 国产精品久久久久久久电影渣男| 成人小说视频在线精品欧美| 白天啪啪晚上啪啪视频| 性爱乱伦一区| 深夜操逼网| 强上我不卡卡| 亚州综合色图| 99精品综合久久久久五月天| v91av| 天天上日日上日韩精品| 久久久久久亚洲中文| 亚洲天堂7777| 人人操av| 黄网站黄视频网站进入口| 99黄页网站| 少妇人妻在线| 国产成人亚洲精品无| 午夜乱轮操逼视频免费看| 99热99在线播放激情| 亚洲色诱惑| 久久人妻97久久久久久久| 黄色不卡视频| 九九九999久久久网站| av网站国产主播在线| 青娱乐亚洲自拍| 99久久婷婷国产综合精品草原| 青青草密桃在线播放| 麻豆 亚洲 97| 精品人妻一区二区三区日产| 超碰人妻天天干| 综合色图区| 麻豆 亚洲 97| 成人国产二区三区在线,男女精品。| 一级性爱视频免费观看 | 亚洲九区| 国产精品在线网站| 美女91| 操逼片中文| 婷婷色一区| 破处bbq| 亚洲伊人久久综合97| 操逼网站视频漫画国产| 欧美美女在线高潮999| 91痴汉| 丰满岳乱妇一区二区三区| 久久人妻视频| 亚洲交换| 中文字幕日韩人妻视频一区二区三区| 中文啪啪视频| 天天天干977| 亚洲αv一区二区三区| 亚洲欧美天堂在线| 揉揉日日日日| www.色婷婷色综合| 好吊爽好吊爽在线视频,中文字幕精品一区二区日本,国产良妇出轨视频在线观看, | 青青草五月份天| 国产又黄又爽又刺激久久久久久| 久超碰在| 超碰色老头| 91狠狠综合久久久| 九九久久国产精品怡红院| 370p日韩欧美亚洲精品| 亚洲综合影视| 亚洲无码精品AV久久久| 蜜臀久久99精品久久久老,,| 欧亚三区动漫| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 国产精品呦一区二区三区| 伊人影院中文字幕| 欧美激情区| 99热这里只有精品8| 欧美丝袜亚洲| 色丁香久久| 超碰在线综合97| 永久免费发布性爱网| 99热这里只有是精品10| 日韩精品碰碰| 精品无码人妻一区二区免费蜜桃| 大香蕉视频一二三区| 欧美色图天堂网m| 免费成人在线观看91| 亚洲精品一区二区三区新线路| 91少妇人妻| 无码99| 日韩欧无码一区二区三区免费不卡| 91亚州日韩高清| 免费试看60秒| 欧美精品丝袜久久久中文字幕| 成人小说另类在线| 蜜桃精品视频一区| 国产精品无码在线| 97在线/亚洲| 亚洲.欧美.丝袜.中文.综合| 91亚洲网| 啊啊啊97视频| 日本一级性爱| 777超碰| 射丝袜高跟鞋99| 国产日韩色综合| 人妻天天爽夜夜爽2| 婷婷五月天网| 成人AV超碰免费在线| 操逼999| 少妇滛荡视频| AV乱伦国产| 久久人妻少妇| 亚洲第一页色| 91视频伊人| 久久九九精品一区二区| 高凊专区人人操| 色婷婷激一区二区三区| 97资源站日韩| 九九拍拍精品视频在线播放 | 久久久穴999| 国产成人自拍视频在线| 男人天堂2017| 插入粉嫩少妇视频| 91狠婷| 园内精品自拍视频在线播放| 男同专区一区二区三区在线| 妇女视频网站| 狠狠综合| 久久精品高清AV| 一起草在线视频| 国产精品天干天干综合网麻豆 | 亚洲高清男人天堂| 久久手机视直播| 久久久久久AⅤ无码免费肉站 | 淫淫总合网| 欧美东京热精品A∨| 九九九热| 精品国产乱码久久久久久免费| 亚洲中文字幕有码视频一区二区三区| 欧美日韩性爱操大逼| 亚洲国产另类在线中文| 超碰 欧美| 日本不卡二三区| 99在线免费视频| 国产精品久久99日日| 激情小说亚洲| 无码二级三级| 国产精品乱码久久久久久| 啊啊啊啊啊在线观看网址 | 欧美性综合| 另类亚洲图色| 97人肏| 狠狠狠狠狠干| 777奇米影视777四色| 亚洲精品成人动漫在线| 亚洲图片欧美色| 91高清欧美| www久久精品| 少妇内射www在线观看视频| 黑丝少妇麻豆| 亚洲欧美校园另类春色| 成人看片网站| 97碰在线视频| 亚欧性爱在线无码| 国产福利av精彩对白| 乱伦1色页| 69少妇一区二区| 亚洲国产一区二区三区四区国产| 91在线视频观看国产| 伊人五月天婷婷| 亚洲中字幕日本一区二区三区| 亚洲色人阁| 日本女人久久久| 少妇熟女一区二区三区| 综合色91| 精品久| 国产9区| 少妇被c 黄 免费观看| 亚洲97精品| 亚洲在线a| 91老女人| 在线播放成人高清免费视频| 综合影院永久入口国产| 日韩在线地址一| 国内毛片无遮挡国产| 无遮挡一级毛片视频免费的| 在线播放免费av福利片| 凹凸久久人人| 国产原创剧情在线丝袜| 亚洲天堂,男人| 97精品国产97久久久| 97青青操视频| 骚熟女吞| 亚州精品人妻一二三区| 亚洲无码一区成人免费午夜| 好爽免费视频| 热思思免费视频| 丰满人妻一区二区三区四区| 乱伦av.com| 色色丁香| 久插综合| 日韩在线观看AV| 999综合网| 丁香九月 婷婷| 黄片直播三级黄片两女一男| 91 刺激在线| 操人妻逼91| 久久9精品网站| 熟女人妻一区二区三区| 国产三级在线现体验区| 探花一区在线| 97亚洲国产影视| 激情四射五月天| 青青青在线高清视频在线一二三四区| 翔田千里AV无码秘 三区| 国产强奸乱伦xd| 国产免费永久精品无码| 人妻在线臀日韩| 97久久国产精品| 色婷婷国产精品一区在线观看| 宅男影院久久久,99| 97婷婷色| 96国产污污污丝袜| 91爱| 亚洲一区二区性爱电影| 婷婷伊人一区| 伊人国产AV| 国产精品久久天天干| 亚洲图片偷拍视频区| 亚洲日韩av一区二区三区百合| 色噜噜综合在线| 岛国黄| 午夜免费福利视频一区| 日本九九久久99播| 99re99在线视频| 成人性爱AV在线免费观看| 欧美国产日韩高清在线| 久久久av爱| 亚洲情色 欧美| 久久直播国产| 啊嗯好大视频在线观看| 成人区人妻精品一| 一线黄色免费性爱片| 天天肏美女| 久久久一区二区三区麻豆| 亚洲国产欧美另类自拍| 国产中午字一暮区| 国产免费一区2区3区| 婷婷丁香成人| 欧美大干日韩| 性爱视频啪啪啪啪| 射丝袜高跟鞋99| 高清孕妇孕交 交| 影音先锋中文字幕日本好一区二区| 欧美日韩免费专区在线| 欧美日韩资源| www.色五月| 麻豆一区二区AV天美| 国产午夜激片Av毛片不卡| 亚洲精品国产精品成人| 99re这里只有精品中心播放 | 男人天堂导航| 亚洲精品性爱片| 大香蕉123| 骚熟女AV网| HEYZO高无码国产精品227| 精产国品一区二三产品| 欧美精品三级黄片| 丁香六月天| 欧色网址| 亚洲午夜免费狠狠干| 91久| 色婷五月天| 欧美日韩一干二干| 99re这里只有精品9| 99久久婷婷| 成人性交午夜免费片| 大香蕉啪啪啪| 91欧美综合| 情色日播放AV| 伊人一级免费黄片| 久久久久久久久九九久孕交| 一级二级三级黑人无码| 精品久久久不卡一区二区| 亚洲制服aⅴ中文字幕| 91男人天堂网| 中文字幕一区二区三区视频播放| 久啪视频| 日韩另类色图| 精品日韩人妻视频| 久久久久网站-538在线视频-欧美永久乱码 | 日韩 欧美 校园一区| 亚洲 自拍偷拍 欧美| 色偷偷超碰亚洲| 久久亚洲婷婷| 亚洲色图欧美一区二区不卡| 97亚洲资源| 欧美日韩国产高清在线一二三区| 欧洲性人爱视频| 亚洲男人天堂2019| 亚洲欧洲自拍图片专区满春格| 91久久国产综合精品| 自慰白浆在线观看| 大香蕉伊人网| 亚洲资源网| 99色色网| 日韩三A大片在线观看| 热久久无毒不卡| 嗯嗯嗯好爽| 亚洲av综合色区图片亚洲| 中文字幕精品亚洲熟女| 日韩成人色图| 少妇干B| 亚洲色图 欧美| 中文字幕久久亚州无码| 久久激情视频| 国产强奸乱伦xd| 漂亮人妻被强中文字幕hd| 99r九九| 乱伦熟女区| 国产一区二区三区高清视频| 四虎精品一区| 中文字幕少妇色 | 日韩传媒在线| 依人大香蕉| 性爱视频无打码在线观看| 这里都是精品| 韩国国产欧美情侣视频在线| 亚洲性爱高潮影院| 亚洲 国产 精品一区| 久久亚洲AV无码白度| 国产丸一视频| 午夜天堂网| 亚洲激情久久| 国产精品蜜乳AV| 日韩一级性爱无码| 日本二三四区| 久久中文字幕女同性恋一区| 色爱欲亚洲| 草草影院在线视频| 一级免费啪啪片| 亚欧成人综合影院| 最新无码国产| 精品国产乱码久久久久久蜜臀| 蜜桃精品一区二区三区久在线| 天天看片天天爽| 狠狠穞A片一區二區三區| 国产97视频免费观看| 亚洲阿v天堂无码z2018| 又粗又长又大国产不卡| 亚洲丝袜少妇在线| 99日视频在线免费| Julia Annxxxxx| 中文幕97| 操学生天天| 超碰性爱97| 九九九网页| 偷窥自拍亚洲色图| 密桃99999| 亚洲五月丁香花狠狠干一区二区三区| 欧美久久伊人| 日韩,欧美,中文在线| 国产高清免费不卡av| 五月天久久综合网| 日韩成人精品| 免费?级毛片无码?∨蜜芽试看| 日本影视久久免费| 日韩免费a级毛片无码a∨| 天天92av| 97综合在线| 亚洲色图91| 日本成人在线不卡一区二区三区| 91亚洲人| 成·人免费午夜在线观看| 久热一区二区| 一起草三级AV电影在线观看| 高清国产精品福利网站| 亚洲乱码精品一区二区| 精品亚洲成人免费在线| 99亚洲精品| 国产女人和拘做爰视频 | 日本国产成人亚洲精品无码| 久久av一级av少妇av高潮| 18禁精品网站在线看| 国产女人和拘做爰视频| 中日韩熟女| 性爱av网站| 色五月婷婷麻豆在| 99热免费| 亚洲码和欧洲精品激情系列| 色97欧美| 精品国产AV一区天美传媒| 天天噜| 91丨国产丨白浆秘 洗澡动漫| 亚洲中文字幕精品一区| 熟女这里只有精品6| 白天啪啪晚上啪啪视频| 亚洲蜜桃V妇女| 五月婷丁香| 欧美久久婷| 国产精品久久久久久夜夜夜夜| 色九色久| 亚洲中文字幕在现观看| 国产日韩区| 美女自卫慰黄网站免费| 人人乐大香蕉| 国产精品色| 99啪啪视频| 亚洲国产欧美日韩精品一区二区三区,国产一区二区三区在线看片,欧美性猛交 XXX | 刺激精品视频| 久久久久久中文| 四虎免费在线观看| 2020中文在线一区二区三区| 91精品久久综合熟女| 国产女上位好爽在线| 日韩中文字幕2020| 国产馆| 尤物网址| 色婷婷五月天| 韩国女主播青草在线| 亚洲中文sv| 高清国产精品无码| 狠狠五月天| 色999人与兽| 国产精品久久久视频| 青青三级视频| 亚洲欧洲激情卡通另类文学四射小说网站| 国产精品久久久吖| 影音先锋视频在线| 大香樵伊人网| 天天综合网~91入口| 蜜臀99久久精品久久久久| 亚洲国产精品9999在线观看| 99热啪啪| 亚洲国产中文字幕| 五月天伊人| 欧美日韩丝袜 | 啪啪自拍九九综合| 欧美性爱第一区| 亚洲成人av色网| 色香91| 亚瑟国产精品久久无码| 色色色综合| 熟女熟妇伦久久影院毛片一区二区| w w w.久久精品| 99色在线观看| 精久久久| 精品人妻av在线播放| 综合日韩激情另类图片| 夜色91| 开心五月天激情网| 国产suv精品一区二六| 欧美黄色大片在线观看| 伊人色综合超碰| 亚洲成a人v欧美综合天堂下载| 一区在线观看中文字幕| 超碰97久久国| 亚洲91在线播放影院| 激情亚洲天堂| a亚洲欧美色欲| 91美女在线精品视频| 天天综合色图| 99久久久| 97日韩超碰超碰中文字幕| 手机看片1025| 国内毛片无码一级毛片| 啊啊啊啊啊啊好湿好爽视频| 中文视频在线观看| 长长久久曰曰夜夜成人网| 欲综合网| 亚洲色综合| 台湾佬大香蕉| 五月婷婷六月丁香| 人人澡人人干| 国内91熟女人妻丝袜天天精品视频在线 | 97国产|免费| 噜噜噜狠狠色综合| 97免费视频在线| 亚洲色图激情小说| 2024黄色视频| 黄色高清久久无码依人| 麻豆综合一区av| 91网站视频在线观看| 性爱av网站| 久久女人| 1区2区3区在线视频| 91精品无码久久久久久久| 中文字幕55555| 涩涩这里只有精品视频| 免费97视频| 九九久久综合| 亚洲国产精品成人久久蜜臀| 肉丝网站91| 奇米四色影视777久久久| 91处女在线视频| 免费A V在线| 久草加勒比一区在线| 日少妇亚洲版| 福利伊人玖玖国产| 加勒比99999| 天天干2区3区| 人妻一区视频| 中文字幕黄色一起草| 精品国产网站| 亚洲AV秘 精品久久老牛影视| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 九九九九精| 另类av天堂| www.色婷婷色综合| 曰韩人妻中文字幕在线| 欧美日韩少妇色情| 爱做久久久久久| 懂色aV一区二区天美传媒| 自拍视频大全亚洲专媒视频/一区二区三区| 18禁精品网站在线看| 超碰人人干天天射| 欧美一区二区三区大综合| 少妇高潮对白在线观看| 午夜精品久久久久久久久久久久久 | 久久一本大香蕉 | 欧美色图亚洲色| 东京热av男人的天堂| 亚洲黄色影视| 一区二区三区高清天码| 黑人性欧美| 传媒免费一区二区三区| 91美女中出| 久草国产在线视频| 97天堂| 青青青草原| 久久有碼| 亚洲无套久久嗯嗯| 久久精品国产亚洲AV片多多 | 国产精品2020| 丁香五月色| 在线综合色| 精品亚洲成人免费在线| 老熟乱一区二区三区四区| 99抽插| 亚洲中文制服诱惑| 国产精品秘 福利姬在线观看| 青青青国产手线观看视频2| 老熟女综合网| 性欧美精| 1区2区3区中文字幕日韩| 日本在线一二 | 精品久久久一本一道| 最新精品久久蜜桃 | 激情自拍 校园春色| 日韩精品亚洲专区在线影视| 自拍偷拍第26| 国产精品久久久久久久免牛肉蒲团 | 欧美成人黄网色网站| 人妻嗯啊啊在线播放| 天操老女人| 午夜精品99久久久久传媒| 国内毛片无码一级毛片| 国产精品一级毛片不卡视| 亚洲影院无码在线| 麻豆成人影音在线| 99热欧美| 国产久9| 性交一区二区在线播放| 午夜精品久久久99| 啪啪91| 超碰调教97| 亚洲国产精品久久久久久久久久| 色青青久久影视| 亚洲欧美国产成人综合不卡| av天堂天堂av日韩| 无码免费在线观看黄色片| 亚洲日韩av专区无码| 亚洲国产97| 久艹日日日| 亚洲欧美人妻| 蜜臀久久99精品久久久久| 天天干人人乐| 日本欧美不卡| 精品日日人妻| 欧在线一二区| 亚洲天天在线| 日本久久女同性恋视频| 毛片久久| 色屁屁影院www国产| 国产精品不卡一区二区电影| 1769一区| 99久久久久久亚洲精品不卡| 在线亚洲 欧美 日本专区| 九九九精品成人免费视频小说| 在线免费观看高清无码视频| 搡老熟女免费视频 | 天天操女人| 刺激性视频黄页| 97精品视频免费| 91女优在线观看 | 国产最新AV| 久久久久久九九九九-美女久久久久久久-成人AV| 亚洲中文人妻色|