亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

微服務(wù)流量治理選型:Sentinel、Resilience4j、Envoy與Kong對比與落地實踐

微服務(wù)流量治理選型:Sentinel、Resilience4j、Envoy與Kong對比與落地實踐 1. Sentinel 到底是什么以及為什么突然要“找替代”先說結(jié)論Sentinel 是阿里開源的一套“流量防護”組件和 Hystrix 是一個賽道的東西。它做的核心事情是三件流量控制說白了就是限流、熔斷降級下游掛了別把調(diào)用方拖死和系統(tǒng)負載保護防止整機夯死。這套東西在 Spring Cloud Alibaba 體系里基本是標配也是國內(nèi)很多 Java 團隊微服務(wù)治理的第一選擇。但成熟的東西不等于沒有槽點。我接觸 Sentinel 時間不短了從最早的 1.6 到 1.7、1.8 一路用過來最直觀的感受是單機限流很好用控制臺很簡陋集群限流配置起來很痛苦規(guī)則持久化完全是后加的能力。而且社區(qū)迭代從 1.8.6 開始明顯放緩有很多 issue 掛著沒人理新功能基本停滯。于是“有沒有更合適的替代方案”就變成一個繞不開的話題。而在微服務(wù)和云原生這里所謂“替代”其實也不只是替代 Sentinel 一個組件而是要回答一個更底層的問題流量防護和網(wǎng)關(guān)治理這件事到底放在哪個層次做是放在應(yīng)用進程里代碼庫方式還是交給基礎(chǔ)設(shè)施層網(wǎng)關(guān)/服務(wù)網(wǎng)格Resilience4j、Envoy、Kong 恰好代表了三條不同的路線Resilience4jJava 生態(tài)里的“純進程內(nèi)”容錯庫走的是 Hystrix 的遺志路線輕量、不依賴任何中間件。Envoy數(shù)據(jù)面代理跑在服務(wù)網(wǎng)格里Istio/Consul Connect 的底座主打高性能轉(zhuǎn)發(fā)和治理能力下沉。KongAPI 網(wǎng)關(guān)專門管理南北向流量核心賣點是插件架構(gòu)和一鍵接入已有系統(tǒng)。這三個東西和 Sentinel 并不是完全同層的東西但在選型的時候很多人卻會把它們擺在一起糾結(jié)原因只有一個大家都想“用一件東西解決流量治理”。所以這篇我按從業(yè)者的視角把四個方案的真實優(yōu)缺點、適用邊界、以及與 Sentinel 的關(guān)系都講清楚最后給一條比較好落地的選型路線。2. 四個選手的“底子”逐個拆解2.1 Sentinel不能只看開源版要看它的設(shè)計精髓Sentinel 的核心競爭優(yōu)勢有兩個。一個是對 Java 生態(tài)的原生貼合你只要引入sentinel-core寫個SphU.entry(資源名)立刻就能拿到流量統(tǒng)計、限流判斷、熔斷判斷這些能力。另一個是它的鏈路和統(tǒng)計模型它把每個請求抽象成資源然后把資源的調(diào)用鏈路記錄下來基于滑動窗口做精確的實時統(tǒng)計?;瑒哟翱谶@種設(shè)計比 Hystrix 的“固定時間桶”要精細得多尤其是在秒級毛刺流量下Sentinel 的統(tǒng)計不會出現(xiàn)窗口邊界突變的問題。Sentinel 的限流規(guī)則支持 QPS 直接限流、并發(fā)線程數(shù)限流、熱點參數(shù)限流還有一個冷啟動Warm Up和勻速排隊Rate Limiter模式。冷啟動這個很實用比如新服務(wù)剛上線如果瞬間放開全部 QPS數(shù)據(jù)庫連接池和線程池很容易被打爆。生產(chǎn)上我一般給新接口配冷啟動 限流閾值的組合效果比一次性硬限流到底要好。但它的痛點也很實在開源版控制臺Dashboard被好多人吐槽“像內(nèi)部工具”沒有權(quán)限體系沒有審計節(jié)點列表在集群規(guī)模大了之后刷新也不流暢。集群限流要先單獨搭一個 Token Server配置鏈路長而且這個 Token Server 本身還要做高可用很多團隊直接放棄。規(guī)則推送到客戶端依賴sentinel-datasource-*擴展雖然有 Nacos、Apollo、Redis、ZK 等實現(xiàn)但都是社區(qū)維護沒有官方統(tǒng)一標準。我用過一個比較踩坑的場景Spring Cloud Alibaba 項目里接 Sentinel規(guī)則放在 Nacos 里結(jié)果在控制臺改規(guī)則后配置被本地文件覆蓋了服務(wù)一重啟規(guī)則就丟。當(dāng)時排查了很久最后才發(fā)現(xiàn)是spring.cloud.sentinel.datasource和 Dashboard 推流同時存在時的優(yōu)先級沖突。這個問題現(xiàn)在依然有網(wǎng)上一搜一大片只能說生態(tài)里的這些“內(nèi)傷”真的只有用久了才知道。2.2 Resilience4j輕量到極致但別指望它做“限流”Resilience4j 繼承了 Hystrix 退出歷史舞臺后的位置可以說是 Spring Cloud Circuit Breaker 在 Java 生態(tài)的默認實現(xiàn)。它的核心思想不是“中間件”而是一個函數(shù)式庫你直接在業(yè)務(wù)代碼里用CircuitBreaker.decorateSupplier(...)包一層就拿到了熔斷能力。這種東西最大的優(yōu)點就是侵入可控不存在任何外部依賴。它的能力模塊有熔斷CircuitBreaker、隔離Bulkhead支持信號量和固定線程池兩種、限流RateLimiter、重試Retry、緩存Cache和基于時間的限時器TimeLimiter。注意這里的 RateLimiter 做的是“勻速通過 拒絕多余請求”的 Java 進程內(nèi)限流形態(tài)類似 Guava RateLimiter但沒有精確到資源維度的實時統(tǒng)計也不像 Sentinel 的滑動窗口那樣能對抗秒級抖動的流量。隔離是 Resilience4j 的亮點。信號量隔離非常輕量默認 10 個并發(fā)許可適合 IO 密集但本身沒線程池的業(yè)務(wù)。線程池隔離則更像 Hystrix 的原始做法把外部調(diào)用丟到獨立線程池里跑耗盡也不會污染主線程。不過我提醒一句線程池隔離有上下文傳遞的坑特別是MDC、ThreadLocal、SecurityContext這些東西要自己寫裝飾器去傳否則鏈路追蹤和用戶信息全丟。這個坑我踩了好幾次。它的短板說實話也源于“輕量”二字。沒有控制臺、沒有動態(tài)規(guī)則中心、沒有集群概念。規(guī)則只能寫在代碼里或從配置中心拉運行時很難像 Sentinel 那樣通過 Dashboard 去調(diào)閾值。所以它更適合“夠用就好”的項目而不是“需要運營流量治理平臺”的系統(tǒng)。2.3 Envoy把治理能力下沉到 SidecarEnvoy 是 Istio 默認的數(shù)據(jù)面代理用 C 寫的性能和并發(fā)能力極其優(yōu)秀。它的核心思想是把微服務(wù)的流量治理能力從業(yè)務(wù)進程里抽離出來放進一個和業(yè)務(wù)容器并肩部署的 Sidecar 進程里。業(yè)務(wù)代碼只需要關(guān)心業(yè)務(wù)邏輯限流、熔斷、重試、超時、可觀測性全部由 Sidecar 搞定。Envoy 的限流能力和 Sentinel 不是一回事。它內(nèi)置的是本地限流HTTP Local Rate Limit Filter / Network Local Rate Limit Filter可以按請求、按連接、按虛擬主機維度做簡單的 QPS 限制。但更細粒度的、需要全局統(tǒng)計的限流它自己不承擔(dān)而是通過rate_limit_service把請求外包給外部的 gRPC 服務(wù)去判定。這個設(shè)計很符合 Envoy 的定位它是高效的轉(zhuǎn)發(fā)器不是業(yè)務(wù)規(guī)則處理器。熔斷降級方面Envoy 有一套主動健康檢查被動健康檢查的組合拳。主動檢查是負載均衡器定期探測上游節(jié)點被動檢查則是當(dāng)某個節(jié)點的連續(xù)錯誤數(shù)或連續(xù) 5xx 超過閾值時將節(jié)點標記為不健康進入被熔斷的狀態(tài)。這個機制非常適合 Kubernetes 環(huán)境下的服務(wù)治理因為它天然感知服務(wù)實例的存活狀態(tài)。但它的問題是復(fù)雜度明顯更高。你需要理解 Envoy 的監(jiān)聽器、路由、過濾器鏈、集群、端點整套概念配置又是基于 yaml 的聲明式 DSL任何一個字段語義理解不對線上流量就會出岔子。如果沒有 Istio 或 Consul 這種控制面來生成配置單靠人手寫 Envoy 配置去維護一整個服務(wù)網(wǎng)格那運維成本是災(zāi)難級的。我自己試過手寫 Envoy 配置去轉(zhuǎn)發(fā) HTTP/2 到 HTTP/1.1 并加 mTLS折騰了兩天才跑通其中半天都是在排查證書和 SNI 的問題。2.4 KongAPI 網(wǎng)關(guān)賽道上的老江湖Kong 是 API 網(wǎng)關(guān)基于 OpenResty/Nginx 構(gòu)建天生處理的就是“外部流量進入內(nèi)部系統(tǒng)”這一層。它有非常成熟的插件體系認證、限流、轉(zhuǎn)換、日志、可觀測性都可以通過插件即插即用地掛到服務(wù)或路由上。限流插件Rate Limiting支持本地限流和基于 Redis 的分布式限流對 API 網(wǎng)關(guān)場景來說已經(jīng)夠用。Kong 在控制層面做得比 Envoy 更“產(chǎn)品化”。Kong Manager企業(yè)版或者開源版的 Admin API 都可以用來管理 Service、Route、Upstream、Target。而kong manager 節(jié)點主動健康檢查配置這種需求對應(yīng)的就是 Upstream 里的healthchecks配置塊可以配主動探測的路徑、間隔、超時以及被動熔斷的容忍度參數(shù)。Kong 的這套健康檢查 UI 比 Envoy 那種純配置文件友好得多。它的定位非常清晰管好 API 的入口。所以如果你需要的是南北向流量治理比如多個外部調(diào)用方訪問你的微服務(wù)集群Kong 是最容易上手的選擇。但如果你希望服務(wù)之間互相調(diào)用的時候也有熔斷和限流Kong 就使不上勁了因為它的模型就是“站在前面擋流量”不是一個旁路數(shù)據(jù)面。還有一個很現(xiàn)實的問題Kong 很多高級功能都在企業(yè)版里開源社區(qū)版里連kong manager界面都要自己想辦法社區(qū)版主要通過開源的kong-manager或第三方 UI 去實現(xiàn)。想要健康檢查可視化、多租戶管理、RBAC 權(quán)限這類能力得上企業(yè)版或自己拿 Admin API 二次封裝。選擇 Kong 之前要搞清楚你們要的是網(wǎng)關(guān)還是服務(wù)治理平臺。要是混為一談后面很容易騎虎難下。3. 同場競技關(guān)鍵維度橫向?qū)Ρ葘Ρ染S度SentinelResilience4jEnvoyKong定位微服務(wù)流量治理組件Java 進程內(nèi)容錯庫云原生數(shù)據(jù)面代理API 網(wǎng)關(guān)部署形態(tài)應(yīng)用內(nèi) SDK應(yīng)用內(nèi)函數(shù)庫Sidecar/獨立代理獨立網(wǎng)關(guān)實例適用語言Java有其他語言版本但不常用Java任何語言任何語言常用于微服務(wù)集群入口流量統(tǒng)計模型滑動窗口精確到秒無統(tǒng)一統(tǒng)計模型連接/請求級別的本地統(tǒng)計Redis 統(tǒng)計/本地窗口統(tǒng)計限流能力QPS、并發(fā)線程、熱點參數(shù)、勻速排隊、冷啟動RateLimiter進程內(nèi)本地限流 外接限流服務(wù)限流插件支持 Redis 分布式限流熔斷能力支持基于響應(yīng)時間/異常比例支持功能很強通過異常值檢測剔除實例支持被動健康檢查剔除節(jié)點動態(tài)規(guī)則支持需要 datasource 擴展有限支持需自集成配置中心支持通過 xDS 下發(fā)支持通過 Admin API / DB-less 配置控制臺/可視化開源版有 Dashboard較簡陋無需搭配控制面Istio/ConsulKong Manager企業(yè)版 / 三方 UI資源開銷中JVM 內(nèi)極低較高每實例一個 Sidecar中高獨立網(wǎng)關(guān)集群運維復(fù)雜度低-中低高中學(xué)習(xí)成本中有一定概念門檻低較高概念多配置復(fù)雜中插件機制好上手與 Kubernetes 集成一般一般極強強有 Ingress Controller社區(qū)活躍度更新放緩問題堆積活躍極活躍活躍商業(yè)支持有阿里云商業(yè)化版本無有平臺支持云廠商有 Kong Enterprise這個表格基本把四個方案的底盤都擺出來了??梢悦黠@看到Sentinel 和 Resilience4j 站在“進程內(nèi)”這一側(cè)Envoy 和 Kong 站在“基礎(chǔ)設(shè)施”這一側(cè)。它們不是直接替代關(guān)系而是治理層次不同。選型真正的難題在于你到底需要在哪個層次做流量防護以及現(xiàn)有團隊能接受多高的運維成本。拿現(xiàn)實業(yè)務(wù)舉例一個 Java 單體或者少量微服務(wù)、沒有上 K8s 的團隊引入 Envoy 屬于殺雞用牛刀邊緣前提條件太多一個異構(gòu)語言、多服務(wù)大規(guī)模部署在 Kubernetes 上的團隊用 Sentinel 又會發(fā)現(xiàn)監(jiān)控指標和基礎(chǔ)設(shè)施完全割裂數(shù)據(jù)沒法統(tǒng)一。選型先選層次層次定了再選具體產(chǎn)品這樣才不會糾結(jié)“A 和 B 哪個好”這種無解問題。4. 決策路徑到底怎么選4.1 常見選型誤區(qū)第一個誤區(qū)是“拿網(wǎng)關(guān)對比進程庫”。有人糾結(jié)“Kong 比 Sentinel 功能多很多是不是可以替代”錯了。Kong 管的是南北向流量Sentinel 管的是服務(wù)調(diào)用鏈路里的東西向流量。你把 Sentinel 去掉、只留 Kong服務(wù) A 調(diào)服務(wù) B 的時候照樣沒有熔斷降級因為流量根本沒經(jīng)過網(wǎng)關(guān)。反過來你在應(yīng)用里都接入了 Sentinel但對外 API 入口沒有統(tǒng)一限流攻擊流量依然能打穿后端。第二個誤區(qū)是“想用一個方案解決所有問題”。實際落地的系統(tǒng)往往是Kong/Envoy 負責(zé)入口統(tǒng)一治理Sentinel/Resilience4j 負責(zé)應(yīng)用內(nèi)部容錯兩者共存。我去過的不少中大型團隊最后都是雙軌制網(wǎng)關(guān)層用 Envoy 或 Kong業(yè)務(wù)層用 Sentinel 或 Resilience4j。第三個誤區(qū)是“覺得開源就是免費”。所有做選型的人都應(yīng)該算一筆賬開源組件的原廠免費能力有多少你自己拿人力和時間去補充的能力有多少。Sentinel 開源版的控制臺、規(guī)則持久化、權(quán)限審計你要自己搭Envoy 要 K8s 控制面才能發(fā)揮全部價值得找 Istio 團隊或云廠商托管Kong 的高級特性要買企業(yè)版開源版有時候給你留的坑比省下的授權(quán)費更大。4.2 不同場景的選型建議第一類場景Java 微服務(wù)已有 Spring Cloud Alibaba 生態(tài)團隊規(guī)模不大不需要大規(guī)模可視化治理平臺。這時候真的沒必要大動干戈換掉 Sentinel。Sentinel 的弱項雖然是控制臺和集群管理但只要規(guī)則持久化做好接 Nacos 或 Redis單機限流和熔斷的效果已經(jīng)足夠優(yōu)秀而且全鏈路監(jiān)控還能和 Alibaba Sentinel Dashboard 或遷移到 Prometheus 配合。如果要換也建議只把 Resilience4j 作為替代 Hystrix 場景的輕量方案去評估而不是推翻整套 SCA。第二類場景追求極簡、不想引入任何中間件業(yè)務(wù)代碼本身就是核心資產(chǎn)。我建議選 Resilience4j。它連 Nacos 都不用規(guī)則寫死在配置里足夠簡單直接。尤其是那種“項目就五六個服務(wù)、團隊沒有運維、領(lǐng)導(dǎo)不想懂流量治理”的情況Resilience4j 的收益最高因為根本不產(chǎn)生額外組件要維護。代價是你不具備動態(tài)調(diào)規(guī)則的能力改閾值必須發(fā)版但在小團隊里這是能接受的。第三類場景上了 Kubernetes服務(wù)數(shù)量多、異構(gòu)語言多希望流量治理治理能力下沉基建。這種直接看 Envoy配合 Istio/Contour 這類控制面。治理邏輯和業(yè)務(wù)代碼解耦服務(wù) A 調(diào)服務(wù) B 的流量可以在 Sidecar 這一層透明攔截、透明熔斷對業(yè)務(wù)代碼零侵入。尤其是已經(jīng)擁抱多語言Java、Go、Node.js 混編的團隊用 Envoy 能實現(xiàn)治理能力統(tǒng)一不用為每種語言各配一套 SDK這個價值遠大于學(xué)習(xí) Envoy 配置花費的時間。不過我要專門提醒一點Envoy 的熔斷和超時策略不要一上來就全局開。最穩(wěn)妥的方式是先在測試環(huán)境隨便亂調(diào)把各種異常場景上游慢、下游掛、流量暴增都模擬一遍再確定合理的請求超時、重試次數(shù)、熔斷閾值。真線上出了問題流量表現(xiàn)會和你在測試環(huán)境看到的完全不一樣。第四類場景對外 API 比較多需要認證、限流、日志、API 生命周期管理等問題一并解決。那就上 Kong。它天然是“處理外部請求”的入口插件機制讓認證和限流能快速加上且通過 Upstream 的健康檢查能有效管理后端服務(wù)實例的上下線。這里補充一個實用配置Kong Upstream 的主動健康檢查一般配成這樣curl -X PATCH http://localhost:8001/upstreams/my_upstream \ -H Content-Type: application/json \ -d { healthchecks: { active: { type: http, http_path: /healthz, healthy: { interval: 10, successes: 3 }, unhealthy: { interval: 10, http_failures: 3, tcp_failures: 3, timeouts: 2 } }, passive: { type: http, healthy: { http_statuses: [200, 201, 301, 302], successes: 3 }, unhealthy: { http_statuses: [429, 503], timeouts: 2, http_failures: 2 } } } }注意successes和http_failures的取值直接決定節(jié)點被摘除的速度。值配太小容易一抖就摘、忽上忽下配太大會讓已掛節(jié)點繼續(xù)接收流量好幾秒。這個是線上調(diào)優(yōu)最容易忽視的細節(jié)。4.3 綜合選型決策表團隊狀態(tài)推薦組合Java 單體/小微服務(wù)、想省事Spring Cloud Sentinel 或 Resilience4jJava 微服務(wù)、已上 K8s、有平臺團隊Sentinel規(guī)則持久化 Envoy/Istio入口統(tǒng)一治理異構(gòu)語言微服務(wù)、K8s 原生Envoy/Istio Kong或直接用 Envoy Ingress外部 API 多、需要高可控入口Kong網(wǎng)關(guān)層治理獨立成團隊資源緊張、不想碰運維Resilience4j最簡單或全托管云原生網(wǎng)關(guān)5. 實戰(zhàn)經(jīng)驗與避坑記錄5.1 Sentinel 規(guī)則持久化Redis 數(shù)據(jù)源的一個正確打開方式前面提到了spring cloud sentinel datasource redis集群這個熱搜詞對應(yīng)的痛點。Sentinel 接 Redis 數(shù)據(jù)源時最容易踩的坑是序列化方式不一致。規(guī)則數(shù)據(jù)存進 Redis 之前要先轉(zhuǎn)成 Sentinel 端能識別的 JSON 格式比如下面這種[ { resource: order_service:create, count: 100, grade: 1, limitApp: default, strategy: 0, controlBehavior: 0 } ]grade1表示按 QPS 限流controlBehavior0表示直接拒絕1是 Warm Up2是勻速排隊。很多新手在 Redis 里塞了一堆普通 JSON 卻發(fā)現(xiàn)規(guī)則不生效多半是字段名對不上比如把count寫成了qps或者 Parse 的時候報JsonSyntaxException日志還被吞掉。建議在集成時先寫一個單元測試往 Redis 塞一條規(guī)則然后啟動應(yīng)用看日志里是否出現(xiàn)[SentinelRule]的推送記錄這個是最快的問題定位方式。集群環(huán)境下還要注意Sentinel 每個應(yīng)用實例都會獨立從 Redis 拉規(guī)則如果規(guī)則被 Dashboard 動態(tài)推送覆蓋過就可能出現(xiàn)“Nacos 里是對的、Redis 里是舊的、Dashboard 看到的是最新的”這種三份配置不一致的情況。我的處理經(jīng)驗是控制臺不要直接改規(guī)則所有規(guī)則變更都走配置中心的版本管理流程Dashboard 只用來查看實時監(jiān)控。這樣能避免 90% 的規(guī)則漂移問題。5.2 Envoy 限流千萬別指望默認配置一步到位Envoy 的本地限流 Filter 配置是指定route級別或者virtual host級生效的不是自動對所有請求生效。我第一次用的時候配了全局 Cluster 的限流結(jié)果發(fā)現(xiàn)根本不起作用折騰了半天才搞清楚本地限流要掛在http_filters里并指定domain和descriptor。一個典型配置長這樣http_filters: - name: envoy.filters.http.local_ratelimit typed_config: type: type.googleapis.com/envoy.extensions.filters.http.local_ratelimit.v3.LocalRateLimit stat_prefix: http_local_rate_limiter filter_enabled: default_value: numerator: 100 denominator: HUNDRED filter_enforced: default_value: numerator: 100 denominator: HUNDRED descriptors: - entries: - key: request_headers value: some_header token_bucket: max_tokens: 100 tokens_per_fill: 10 fill_interval: 1s這個其實只是“本地速率限制”單位是每秒 10 個令牌最大容量 100。如果你期望的是“全局限流”比如所有實例共享一個桶那 Envoy 本身不干這事還是得接外部的限流服務(wù)比如 Envoy Rate Limit Service gRPC。要評估運維成本這是很多人最終放棄 Envoy 的原因之一——因為一套完整的限流方案你得自己部署一個全局限流服務(wù)還要考慮它的高可用。5.3 Kong 健康檢查主動檢查與被動檢查的配合Kong 的健康檢查比 Envoy 更直觀但依然有配置陷阱。很多團隊只配了主動檢查active忘掉被動檢查passive結(jié)果后端服務(wù)已經(jīng)開始大面積超時但主動檢查的/healthz探針依然返回 200流量全部被送達問題節(jié)點。正確做法是主動被動同時開主動檢查固定間隔去請求/healthz用于發(fā)現(xiàn)“長時間不健康”的節(jié)點頻率不要太高5~10 秒一次否則會產(chǎn)生大量無意義探活請求。被動檢查基于真實請求的返回碼和超時情況用于快速發(fā)現(xiàn)突發(fā)故障節(jié)點比如連續(xù) 2~3 次返回 503 就立刻把節(jié)點標記為不健康。生產(chǎn)上這套配合能基本做到 1~3 秒內(nèi)摘除故障節(jié)點。但還有個細節(jié)Kong 從獲取環(huán)形均衡列表到真正摘除節(jié)點有一個收斂時間如果有多個 Kong 節(jié)點每個節(jié)點的狀態(tài)更新不是瞬時一致的需要依賴 Redis如果開啟或 Kong 的數(shù)據(jù)庫集群模式來同步。冷啟動階段偶爾會看到短暫把流量打到已摘除節(jié)點的情況這個可以用 Upstream 的healthchecks.active.timeout和重試策略去緩解。5.4 Resilience4j 滑動窗口的類型選擇Resilience4j 的熔斷器有兩種窗口COUNT_BASED滑動計數(shù)窗口和TIME_BASED滑動時間窗口。選擇不對熔斷效果天差地別。例如低頻請求接口每分鐘 10 次如果用默認的COUNT_BASED 滑動窗口大小 100那么一次失敗根本不足以觸發(fā)任何比例判斷因為窗口還沒被填滿但用TIME_BASED 窗口 60 秒則能實時根據(jù)最近一分鐘內(nèi)的請求成敗計算熔斷概率。另一個反例高并發(fā)接口配TIME_BASED且窗口過小會讓熔斷判斷的統(tǒng)計噪聲明顯變大結(jié)果閾值很容易被瞬間抖動戳破。我的經(jīng)驗是對外部依賴自身 QPS 較高的接口用COUNT_BASED窗口 100 或 200對低頻但重要的調(diào)用用TIME_BASED窗口 30 或 60 秒無論哪種窗口failureRateThreshold別配 50% 以下否則稍微一個毛刺就把接口熔斷了恢復(fù)期間用戶會直接感受到服務(wù)不可用。6. 最后的個人體會做了一個完整對比我再分享一個實際體感。我們團隊有一個老系統(tǒng)Java 微服務(wù)有七八個服務(wù)沒有上 Kubernetes線上跑著 Spring Cloud Sentinel。后來因為要統(tǒng)一對外 API 入口引入了 KongSentinel 繼續(xù)留在服務(wù)內(nèi)部做接口級限流和熔斷。這套雙軌制維持到現(xiàn)在生產(chǎn)表現(xiàn)很穩(wěn)定沒出過大問題。在這個過程中我最大的體會是選型不是找最“厲害”的技術(shù)而是找和你團隊運維能力、系統(tǒng)架構(gòu)階段匹配的一套組合。Sentinel 的確有各種讓人想吐槽的小毛病但它在“Java 微服務(wù) 需要動態(tài)規(guī)則 需要精細流控算法”這個場景里依然是國內(nèi)最順手的方案。Resilience4j 適合“我不想要運維負擔(dān)”的人Envoy 適合已經(jīng)上云原生、愿花時間打磨基礎(chǔ)設(shè)施的團隊Kong 則是在“對外 API 入口治理”這個不可回避的問題上最好的補位選手。最后再提醒一個容易忽略的點無論你最終選了哪套方案規(guī)則配置和閾值調(diào)整一定要進入版本管理。我見過不止一次因為有人在線上臨時改規(guī)則、調(diào)閾值事后沒記錄結(jié)果出故障時根本不知道規(guī)則改了什么。流量防護工具做得再好如果變更管理一塌糊涂最終還是會栽在人的問題上。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久操操AV电影| 日本最新1区2区3区| 91日韩网站| 涩综合导航| 爱射综合| 啊啊啊不要啊啊受不了了视频在线 | 97精品国产97久久久久久免费| 夜夜操中文字幕| www.色吧5.com| 91九色精品熟女内射| 伊色综合天堂色97| 性交一区二区在线播放| 91黑丝在线| 美女自卫慰黄网站免费| 精品无码人妻一区二区免费蜜桃| 久久亚洲一区二区色婷婷| 国产家庭乱伦表演| 丝袜美腿诱惑亚洲欧美视频在线观看| 日本在线观看网址| 性爱网站一区二区| 日韩久射综合| 午夜性| 国产免费内射视频| 粉嫩粉嫩一区性色AV片| 欧洲亚洲天堂精品| 91偷拍欧美亚洲| 黄片色区软件| 97精品免费视频网站| 人妻AV 中文字幕的| 91爱啪| 欧洲无码一区二区| 日韩丝袜二区| 老熟女综合网| 91大神电影天堂| 98超碰欧美| 日韩免费人妻色情网站| 欧美v亚洲v综合v国产v妖精| 亚洲AV色图一区| 亚洲区小说| 欧美精品1区2区3区| 欧美偷偷网| 黄片com.| 偷拍导航视频网站| 中文字幕视频免费| 香蕉一区二区三区在线视频| 超碰久久中文| 五月天色图影视| 欧美日韩岛国大片在线观看| 久久久久久日韩| 91痴汉| 男人天堂综合| www.99热在线只有精品| 天堂麻豆天美| 亚洲精品一卡二卡三卡福利视频网站| 99国产在线绯色一区| 婷婷视频网| 正在播放国产精品一区| 欧美色图片欧美色图| 男人的天堂2010| 2024人人操人人摸| 91 亚洲 欧美 日韩 国产 综合| 91网站18| 一区二区三区四区理论片| 少妇特黄一区二区三区| 青青草大香蕉在线视频| 97在线免费观看视频| 77国产精品| 丁香九月婷婷| 日韩不卡毛片Av免费高清| 久久99久久99精品天美传媒棢·纸:.| 色色青青久久| 台湾佬大香蕉| 日韩性爱一级片| 精品亚洲一区在线观看| 天天做日日做天天欢。| 蜜色网色哟哟| 99操逼| 亚洲 欧美 91| 欧美精品三区| 麻豆国产精品午夜视频| 久久精品操| 久久久久成人网| 黄页av| 欧美大波激情xxxx| www黄片免费看com| 日韩一性一交一A片俄罗斯| 亚洲精品性爱片| 欧美性生活免费网| 久久久无码av精| 日本成人A片免费看| 日韩黄色片子| 一区二区日韩欧美久久| 亚洲图片 激情小说| 91欧美情色| 综合免费无码中文| 91黑丝美女| 视频二区美腿制服人妻欧美| 色色色色日本| 九九九九日本| 欧日韩在线观看| 男人的天堂亚洲| 久久久久性熟视频| 丝袜美腿丝袜| 370p日韩欧美亚洲精品| 色色亚洲| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 美女高潮视频91| 一区二区三区在线日韩影院观看| 大香蕉中文网| 99热99在线播放激情| 丁香五月色情| 麻豆国产视频精品观看| 性色一线| 久久精品一区一起草| 蜜臀一区二区三区在线| 99日精品欧美国产| 97干色天堂| 人人九九精| 18啪啪手机免费性爱| 亚洲欧美中文日韩视频中国语| 亚洲凸凹超碰成人| 亚洲图片激情综合另类| 亚洲男人天堂网久久| 久久精品成人一区二区三区蜜臀| 国产成人亚洲精品无码古代早漏男| 中文字幕精品一区二区精品| 美女黄色91| 探花一区在线| 亚洲熟妇白浆无码AV| 亚洲性爱电影| 日韩不卡网操逼中文字幕日韩| 俄罗斯及免费在线看| 亚洲日韩美女中文字幕乱| 久久极品一区二区| 蜜桃午夜视频一区二区 | 91综合在线| 91美女丝袜诱惑视频| 97精品人妻一二三四| 国产精品嫩草影院免费| 久久久男人的天堂| 久久婷婷五月综合| 91一区二区三区蜜桃| 国产13区| 一区二区三区四区免费视频| 欧美热图99| 久噜噜| 404操逼福利视频| 国产精品一区二区三区免费视频| 五月天综合网| 亚洲天堂男人天堂网| 5278欧美一区二区三区| 国产精选视频| 97在线播放 | 欧美色97| 国产亚洲精品美女| 一区黄二区黄| 日韩性爱小视频在线观看| 密臀视频三区免费网站| 97国产天堂岛| 美女在线H91| 亚洲精品aa久久伊人| 强乱老妇中文字幕| 97在线青| 午夜福利久久久噜久噜久久综合| 370p日韩欧美亚洲精品| 大香蕉黄色一级片免费看| 久久高潮妇女视频| 亚洲美女精品九九视频| 天天爽天天操啊啊啊| 久操国产在线| 91东京热男人的天堂| 黑人白女精品一区| 久久久久亚洲一区女同性恋中文字幕| 日韩三级一区 | 少妇天堂网络| 98超碰日本| 欧美亚洲厕所精品偷拍91 | 91美女视频| av在线人气| 欧美精品久久久久久久久88| 欧美一级特黄淫片在线观看| 国产狂喷潮在线精品| 国模私拍一区二区三区神乳| 97操操| 国产亚洲在线观看| 美女黄色一级A视频| 操逼逼福利视频| 国产亚洲日本精品在线| 秋霞久久亚洲精品成人| 十八禁成人网站在线观看| 久久精品日韩| 欧美日韩国产高清在线一二三区 | 成人26uuu| 思思热久久成人| 把腿张开老子CAO烂你| 夜夜操狠狠操| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师 | 狠狠干妹子| 97天天操天天干| 美女久久久久久久久久久| 久操凹凸视频| 成人老鸭窝人人在线视频| 日日夜夜青青草母狗| 麻豆天美在线喷水AV| 中文字幕av一区二区三区人妻少妇| 欧美综合第一页| 一级乱伦网站| 天堂种子在线www网资源| 天天射,天天操,天天爽-国内精品一区二区三区-成人AV | 国内操逼视频二区| 高潮精品| 91美乳| 加勒比综合网| 中文字幕成人| 超碰久久网| 欧美性爱第1 页| 人人看欧美性爱| 久久国产精品91| 久久超碰天天| 18禁的网站在线| 熟妇人妻一区二区| 色淫网站优优视频| 操一区| 欧美激情专区| 欧美日韩m| 欧美人体性爱互联网第一页婷婷日本| 日日操天天操| 视频一区二区免费在线| 免费夜夜爱黄色视频毛片| 久久久久久久久久久久久女过产乱-少妇高潮一区二区三区喷水-成人AV | 四虎午夜影院| 欧美日韩电影一区二区| CCYY草草影院地址入口| 国产中文福利| 亚洲精品视频在线播放| 国产精品久久久久999| 国产性爱强奸乱伦大全| 男人兔费天堂| 无码日韩人妻av一| 九九毛片这里只有精品| 影音先锋视频在线| 久久久亚洲精品中文字幕人妻| 麻豆久久视频在线地址| 久久肏大逼| 天天插网| 日韩成人人妻网站| 国产夜夜操| 婷婷丁香五月天综合东京热| 欧美第二页午夜| 亚洲四虎熟女精品| 99re99| 久久伊人在线五区| 国产精品人妻无码久久久互動交流 | 淫色网综合| 精品人妻一区二区视频| 亚洲se电影| 日本理论在线| 亚洲熟妇A V黑人| 五月天综合网| 四虎影库国产精品免费| 在线国产探花| 久久久久亚洲AV无码专区少妇| 欧美97av| 超碰久久精品| 99久久com免费视频′| 欧美成人四级在线播放| 亚洲猛交| 国产一区二区精品在线视频| 成年男人的天堂| 亚洲码和欧洲精品激情系列| 偷拍三区| 天天射天天操天天干天天吃2018| 欧在线一二区| 国内毛片欧美香蕉精品| 性色AV蜜色av色欲av| 秋霞色色影院| 家庭乱伦网站国产| 欧美色综合影院| 黄网在线播放| 丁香六月婷| 国产精品久久久久久久久AV大片| 被操高清无码视频| 亚洲九九九| 国产精品不卡少妇白| 丁香五月成人| www.色婷婷色综合| 久久久一级| 婷婷国产精品九区| 日本中文字幕熟妇| 99久在线精品99re8热视频在线| 国产传媒日本欧美专区| 97超碰色屌| 中文高清一区二区的| www九九热| 日韩成人电影AV| 国产超碰| 久久久人体| 久久99综合| 亚洲欧洲无码97久久精品| 97伊人超碰| 玖玖爱在线视频免费观看| 92福利社视频| 亚洲少妇喷视频看| 97免费视频在线观看视频| 人妻夜爽夜夜爽| 校园春色五月天| 欧美成人四级在线播放| 色狠狠综合| 亚洲影院小综合| 91黑丝美女| 97色操| 国产乱子伦久久精品综合一区二区三| 综合色好色| 家庭乱伦国产精品| 欧美性爱在线无码| 日本精品一区二区三| 欧美的性爱网站免费| 另类天堂| 亚洲九九视频| 国产日韩在线播放| 丝袜综合色图| 精品免费囯产一区二区三区| 2021国产成人精品久久| 操逼片中文| 97视频观看| 欧美色图天堂网m| 九九av| 中文字幕交换人妻| 骚逼一区二区| 天天草夜夜草高潮片| 一区二区蜜臀| 国产亚洲精品激情| 老鸭窝在线视频播放| 三久久久四久久久久| 人人摸人人添人人操| 精品美女在线视频| 啪啪综合网| 国产18精品亚洲精品| 久久久网站| 1204av韩国| 五月丁香激情四射| 91 亚洲情侣偷拍 久久| 中文字幕黄色片| 蜜屁av| 天综合网| 大香蕉中文| 亚洲 图片 欧美 色图| 日日插夜夜| 欧美亚洲韩国视频十五区 | 中文操逼字幕| 亚洲成人精品久久久| 91久久九九精品国产综合| 99热亚洲| 噜噜噜在线视频| 中出20p| 综合网久久| 久久久免费的精品| 无遮挡男女激烈动态图| 九九av| 九九热视频在线观看| 狠日欧美| 亚洲男人天堂2013| 大香蕉色十月| 乱伦Av网| 91综合中文字幕| 久久亚洲不卡一区二区三区| 免费看黄视频亚洲网站| 国产成人精品网站| 精品夜夜澡人妻无码AV| 婷婷美人网| 翘臀vidoes| 小视频玖玖| 999国产精品999久久久久久| 国产日韩精品一区二区三区| 国产97色在线| 成全在线观看免费观看| 热热色青青草| 亚洲成人精品久久久| 中文字幕jul-617人妻熟女| 成人网站 免费观看| 国语精品对白| 97干在线| 99无码狠狠久久| 欧美久久人妻少妇一区二区| 国语av最新自产拍在线观看| 亚洲国产奇米影视久久| 免费观看国产小粉嫩喷水精品午| 午夜性刺激视频免费观看| 婷婷20月天青娱乐| 91岛国动作片| 超碰色97| 日本影视久久免费| 天天综合青苹果| 亚洲97资源| 国产精品久久久久久久久久久久久久久久| 巨爆乳肉感一区二区三区竹菊影视| 国产一区二区三区高清视频| 国产h片在线观看视频| 国产精品宅男免费| 人人考人人摸人人干| 亚洲操逼无码| AV综合中文字幕干| 97色伦欧美| 中文字幕版| 亚洲 欧美 综合 91| 日本二三四区| 日韩高清黄片| 狠狠爱夜夜干| 亚洲国产日韩欧美熟妇在线| 国产乱人妻精品入口| 大茄子熟女AV导航| 欧美精品一区二区少妇免费A片 | 色噜噜国产精品视频一区二区| 免费看黄视频亚洲网站| 天天碰操中国年青熟妇| 嗯嗯啊啊好爽| 色色色热| 人妻干天天| 亚洲有薄码区日本系列中文字幕| 亚洲无码com| 熟女色图在线| 成人性爱AV在线免费观看| 国产人妻精品久久久一区二区三区 | 欧美一级A片在线看视频性色| 男人网站婷婷| 天天操天天干一区二区| 试看60秒| 插欧洲美女欧美精品| 国产精品在线一区二区| 日本在线不卡一二区| 久久久少妇| 天堂精品| 久久综合女优| 婷婷五月天激情小说| 精品人妻一区二区蜜桃视频| 亚洲Av无码成人精品国产| 中文字暮97| 亚洲一区在线观看欧洲 | 99色视频| 亚欧成人综合影院| 精品999999| 国厂麻豆77q4| 日韩性爱视频免费在线| 欧美 亚洲| 精品人妻一区二区蜜桃视频 | 丝袜制服字幕在线| 十八禁视频一区二区| 大香蕉综合在线| 99久久网站| 亚洲蜜乳av| 欧美精品庄| 日韩中文字幕宗合在线| 久妇网| 亚洲成人一区二区精品| 91久久青青草原精品| 97视频在线免费播放| 7月婷婷综合| 97色碰| 中国AV美女| 熟女少妇一区二区三区| 九九热五区| 激情啪啪拍91| 日韩精品色呦呦| 少妇蹲下露出大唇5| 亚洲a色| 尤物视频偷拍免费| 蜜桃精品一区二区三区久在线| 小草精彩毛片| 男人的天堂激情| 熟妇最新先锋一二三区| 美女裸体无遮挡永久免费观看网站| 欧美中文字幕男人天堂久久精品| 亚洲精品影视老司机| 高清在线不卡一区二区 视频| 久久精品国产精品| 久久久久久久久久久六六| 2017人人操,人人摸| 好湿好紧视频| 98福利在线视频| 日韩pv中文| 大色综合网| 久久久96| 亚洲综合有码| 欧美激情在线观看视频| 爱丝福利| 内射白嫩美女| 99自拍视频| 岛国艾薇凹凸视频天堂| 视频国产精品未满十八禁止在线观看| 高清视频一区| 丝袜足交视频| 热热色青青草| 91亚洲情色| 97爱综合| 17c在线成人免费A片观看| 日本乱人伦片中文三区| 1区2区3区视频| 亚欧美综合网| 天天综合官网| 欧洲人妻视频| 久久久精精精| 超碰在线一区二区三区| 色翁荡息又大又硬又粗又爽| www.亚洲成人一区| 日本女优在线视频福利| 欧美性爱免费短视频| 青青草九九九九九| 九色97| 裸体女人草逼视频播放一区,二区,三区,四区,五区 | 新精精品久久精品| 亚热日本熟女| 蜜桃视频精品一区二区三区| 人人妻人人爽| 亚洲欧美日韩夜夜| 日韩精品怡红院| 欧美天天射| 九九久久99| 九九九成人| 日韩性爱电影一区| 97干在线看| 二级毛片| 操逼视频亚洲| 婷婷五月天激情四射| 国产成人精品亚洲日本| 欧美日韩大陆黑人少妇99| 在线人人人人人人精品超| 一本色道熟妇| 伊人网在线视频| 5月婷婷6月六月丁香| 黑人免费福利视频| 在线电影亚洲色图| 天天综合网站| 在线观看免费视频国产| 大香蕉淫人| 都市激情人妻一区二区青青操视频 | 物尤视频一区二区| 天天激情干| 无码78| 福利大香蕉| 九九九九九九九九九九九免费国产| 亚洲 自拍偷拍 欧美| 夜夜爽夜夜操| 亚洲精品97p| 国产精品视频| 日本九九久久99播| 国产 日韩 欧美 人妻 熟女 中文| 国产传媒操逼视频| 青娱乐二区免费| 超碰美国| 日日躁夜夜躁狠狠躁超爽| 天天干人妻| 三上制服丝AV| 99.色网| 成人欧美一区二区三区黑人一| 国产精品自拍xxxx| 国产精品久久久久久久电影渣男| 亚洲国产精品无码AV久久| 色亚洲欧美| 美国三级日本三级久久99| 你草精品在线视频| 久久婷婷五月天| 影音先锋中文字幕日本好一区二区| 国产操伦| 脫衣舞一区二区三区| 秋霞一级A片黄色视频| 亚洲色图 欧美| 97亚洲在线| 国产国产亚洲一二三久久| 亭亭在线资源| 九草九九九| 啊啊啊久久久视频| 97chaopenrihan| 欧美成人色| 久久草视频污视频| 亚州欧美总和| 蜜臀久久精品久久久久视频| 欧美在线|亚洲| 欧美综合自拍亚洲综合图| 青青青草原| 高清无码学生妹高潮| 婷婷10月天青娱乐| 999热这里只有精品| 999精品乱码| 97aiaiai| 亚洲欧洲日本精品中文a∨| 婷婷伊人五月| 欧美一级黄片视频在线| 大香蕉一线视频| 韩国黄色片精品久久久| 五月婷婷丁香| 性欧美天天| 日欧毛片久久| 日本黄色精品| 国产强奸无码乱伦| 波多野42部无码喷潮在线观看 | 青青操狠狠撩| 色丁香五月婷婷| 蜜臀AV一区二区三区激情综合| 欧美精品丝袜久久久中文字幕| 少妇淫妇久久久久久久| 日本欧美不卡| 国产精品人妻无码久久久互動交流| 男人天堂2017| 超碰在线观看av不卡| 国产精品岛国片在线观看| 51一区二区三区| 五月丁香色色网| 久操B网| 亚洲少妇色图自慰直播| 中日992视频| 成人五月天丁香激情综合| 少妇精品久久| 日韩欧美国产一区二区三区四区| 婷婷色播婷婷| 亚洲少妇激情视频| 日本亚洲嫩草影院啪啪| 国产精品露脸在线观看| 欧美黄片视频在线观看免费 | 诱惑网综合| 韩国手机不卡无码三级视频| 久久久夜夜嗨免费视频| 日本九九久久99播| 天天欧美| 国产极品美女高潮无套在线观看| 最新加勒比丝袜在线| 九九九九一级| 亚洲无码精品AV久久久| 久热无码| 久久人妻一区二区三区高清 | 高凊专区人人操| 欧美日韩国产人人| av网站免费线看| 激情五月丁香五月| 欧美色日| 黄片免费视频2019| 色综合美国| 色原狠狠天天天| 欧美老妇曰批的视频| 色婷婷aV一区二区三区麻豆综合| 9久9久| www.黄色在线| 亚洲欧美日产国产91毛片| 日日摸天天爽夜夜欢| 人妻-91porn| 精久久久91| 97色碰| 日韩另类色图| 91在线观看,天天综合| 人人人人插| 97国产天堂岛| 日韩无码三级影院| 欧美激情一区二区| 精品国产91内射久久| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 全国男人天堂网| 一区二区三区免费岛国片| 亚洲激情 欧美色图| 三上悠亚在线毛片91| 深夜操逼网| 男人午夜天堂| 日韩影片中文字幕一区二区三区| 91精品国产一区三一| 超碰九色| 人妻久久| 91xingse| 豆花视频操逼网址| 亚洲视频小说| 中国东北熟女老太婆内谢| 大香蕉之青青草原| 丰满高潮18xxxx| 老色鬼成人精品视频下载大在线观看| caoni国产亚洲av| 亚州色图欧美| 操逼逼福利视频| 玖玖大干人妻| 熟妇熟女视频一区二区三区| 国产传媒日韩欧美| 久热精品色情| 久久国内| 亚洲美女精品九九视频| 日本不卡卡一区| 极品色综合| 九九99精品| 久久九色| 97一区二压| 新版天堂中文资源8在线| 欧美亚洲特P| 99re这里只有精品中心播放| 不卡中文字幕aⅴ在线| 性感女人网页在线观看视频| 亚洲天天做日日做天天谢日日 | 97综合| 日本欧美色| 高清无码国产亚洲| 婷婷探花久久精品一区| 韩国一区二区精品亚洲| 日韩中文字幕人妻视频| 97视频播放| 日韩AV一区二区三区三州三州| 日逼逼免费看| 97色操| 国产性刺激| 99精品成人免费看| 91久久青青草原精品| 中文字幕诱惑制服人妻丝袜美丝袜美| 久久婷婷色| 手机看片日韩人妻| 欧美 亚洲| 中文字幕女同在线| 深夜啪啪啪视频免费| 久久精品毛片免费不卡| 97精品免费| 国产吹潮女在线观看| 97天天爽| 一区二区三区精品视频| 精品久久无码午夜福利| 亚洲中文字幕av | 久插综合| 污啪啪啪视频| 国产综合永久精品日韩鬼片| 人人搞人人插人人操| 五月天精品| 婷婷五月天无码 | 老熟女阿 国产91| 嗯嗯啊啊好疼| 超碰 97国产熟女| 五月婷婷AV| 26uuu性物| 大香蕉欧美| 亚洲黄色电影| 粉嫩久久久极品| 91国产大片| 老鸭窝亚洲毛片| 精品久久99| 免费在线观看国内色片网站网址| 以及麻豆国产入口在线观看免费| 亚洲色阁| 久久超碰com| 久久久久深夜无码| 亚洲九九视频在线观看| 青青草日本中文字幕| 99久久无色码| 九九RE视频在线精品| 日韩AV熟女乱伦| 特级丰满少妇一级AAAA爱毛片| 久久久久人妻二区精品叶可怜| 欧美日本不卡在线| 伊人嫩草| 啊啊啊轻点在线观看| 久久妇| 欧美青青视频| 性欧美精| 成人资源中文字幕在线观看| 97欧美色综合| 亚洲在钱| 久久久久久中文| 91中出在线| 亚洲色婷婷综合久久久久中文| 亚州精品人妻一二三区| 亚洲日韩97| 中文字幕人妻丝袜乱一区三区| 欧美综合传媒| 免费男人的天堂| 亚洲中文字幕久久无码精品| 草B在线| 亚洲骚逼少妇| 欧美黄页| 男人女人18禁片免费看网站| 无码外流操逼视频| 国产福利在线视频网站| 爽 好舒服 无码刺激久久| 制度丝袜99| 欧美东京热精品A∨| 欧美日韩第一页| 精品一区二区三区蜜桃臀赵总 | 夜夜一区二区| 日日干日日操五月天伦理视频| 亚洲官网在线| 天天操天天日天天干| 国产欧美日产一区二区三区 - 国产欧美日| 春色综合免费| 屁股久久久久久| 岛国1区2区3区在线观看| 精品欧美А∨无码黑人大荫蒂| 性在久久久久久| 超碰久热| 国产传媒一区日韩| 日本国产二线女色| 亚州综合色| 亚洲一区二区三区播放在线| 91色色色| 中文字幕 人妻不满 在线视频| 91视频观看网站| 小骚逼被操的爽不爽| 91日产桃蜜| 色网站导航大全| 亚洲高清无码在线桃色| 欧美国产日韩清纯唯美 | 精品免费视频国产一区| 欧美经典一区二区三区| 看日韩美女二区三区免费操逼视频| AV色天香在线| 黑人粗大V S日韩女优视频| 2017天天插| 久久精品国产99精品亚洲蜜...| 天堂8在线新版官网| 91色综合激情| 欧美综合色,www| 天天激情综合站| 激情综合五月| 久久综合久色欧美综合狠狠 | 国产超碰| 97这里只精品| 成人怡红院| 成人日本视频人妻在线| 久久做97| 欧美色图20p| 国产亚洲精品玖玖玖在线观看| 美女人妻色网站| 91青青在线| 国内毛片婷婷六月色| 人妻久热在线| 91欧美色| 8x福利精品第一福利视频导航| 另类天堂| 黄色一区三区| 亚洲免费在线探花| 日本精品88888888| 91精品国产一区三一| 囯产操逼片| 日韩少妇丰满亚洲| 美女久久久久久久久久久| 国产强奸超碰AV| 亚洲综合夜色| 男女激烈网站最新| 四虎影库国产精品免费| 男人的天堂99| 色婷久久| 欧美日韩亚洲天堂| www.久久久久| 久久日韩肥臀| 99操逼| 欧美激情 一区| 国产一区二区a毛片| 青娱乐大香蕉| 免费av在线播放二区| 日欧美色| 97精| 国产日韩精品一区二区三区| 激情小说亚洲| 五月丁香啪啪啪| 熟女熟妇一区二区三四区| 立川理惠无码一区二区| 久久9免费视频| 亚洲另类小说卡通动漫| 夜草欧美| 亚洲无码?第一页| 日韩天天本| 国产极品一区二区三区三州| 国产熟码AV| 国产超碰人人操| 欧美伦乱| 亚洲色色色| 屁股久久久久久久| 99re8超碰| 亚洲国产欧美另类自拍| 日本熟妇色熟妇在线视频播放| 午夜国产成人精品视频| 久久免费看高潮毛片韩国| 小日子操bb在线看| 美女让帅哥通她小鸡鸡| 日韩成人大片在线观看| 国产精品操| 中文字幕一区二区三区蜜臀| 青娱乐福利99| 日日骚 av| 中文字幕aⅴ在线视频| 欧美另类天堂| 91狠婷| 成人自拍三级在线观看| 美女91色黄18| 亚洲操操操| 国产无吗在线播放| 蜜桃狠狠色伊人亚洲综合 | 91天天日| 一区操逼| 亚洲天堂一二| 97网址www| 国产欧美一级在线观看| 日韩性色| 欧美中文狠| 欧美日韩99| 亚洲中文字幕在现观看| 丝袜狂射91| 久久99热这里只频精品6学生| a片 xxxx受爽视频| 久久久久人| 美女超碰978| 精品久久久久久中文| 天天拍夜夜| 欧美97日韩精品| 婷婷99狠狠躁天天躁| 国产探花日韩援交| 亚洲a色| 婷婷丁香一区二区三区| 午夜偷拍久久熟女| 欧美懂色综合网| 欧美激情亚洲情色| 亚洲综合色网| 亚洲成a人片在线观看中文!!!| 国产精品一区二区三区四区五区| 91丝袜在线观看视频在线观看| 午夜高清成人在线视频| 性色AV蜜色av色欲av| 偷拍亚洲视频一区二区三区四区| 久久夜色一区二区| 一二三区在线| 人妻丰满熟妇一区二区三| 亚洲Av诱惑| 欧美日本视频一区| 欧美超碰9798| 久久99久久99精品免视看婷婷| 亚洲精品毛片在线观看| 超碰97色| 色色97爱| 51一区二区三区| 精品二999| 久草婷婷| 日本不卡卡一区| 天天综合精品| 色综合av男人天堂| 免费αⅴ在线观看| 国产JDAV无码视频在线观看| 综合色一区三区二区| 亚洲国产97在线精品一区| 中文字幕女同在线| 人妻大相焦在线| 九九99精品| 国产CHASE男男GAYGA 毛多色婷婷| 999精品国产高清一区二区| 97免费在线观看| 淫淫综合网| 日本天天干天天操一区| 欧美综合传媒| 亚洲自拍青操视频| 欧美一二级| 久久偷偷色综合蜜桃| 综合色拍| 天堂在线一区二区| 中文幕97| 欧美韩国你懂得在线 | 欧洲特黄毛片免费看欧洲毛片| 精品午夜福利| 欧美爱爱97| 国产一级高清免费观看| 91丝袜在线观看| 香蕉欧美| 亚洲欧美国产中文视频| 日韩无码视频黄色| 家庭乱伦国产| 日本肏逼视频在线观看| 精品国产一区二区三区av在线资源| 欧美最婬乱婬爆婬性视频| 亚洲 欧美 另类 日韩 人妻一区| 狠狠躁天天躁日日躁97| 99re视频在线播放青草| 日韩欧美亚洲自拍偷拍| 国产精品视频麻豆入口| 996热| 吉田爱美AV在线| 热久久无毒不卡| 97超碰超碰| 国产女s强制榨精视频| 久久黄色视频一区二区三区| 欧美亚洲| 激情五月天婷婷| 91九色丨国产丨爆乳| 人妻人妻天天碰| 偷拍新久久| 综合欧美亚洲| 久久久新亚洲AV| 精品人妻一区二区视频| 国产又粗又长又爽又色| 六月丁香五月婷婷| 免费视频在线观看啊啊啊啊啊| 精品国产国产AV| 草B在线| 日韩成人无码| α√在线| 天天综合网国产| 欧美夜夜骑视频| 欧美综合综合| www.亚洲黄色| 日韩少妇一区二区三区| 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 亚洲资源一区| 日本成人A片网站| 欧美综合站| 欧美性五月| 欧美黄色片在线播放| 九九内射在线| 久9综合在线| 免费一级精品啪啪视频| 天天欧美色| 亚洲狠狠入| 在线看片国产精品每日更新| 国产夜夜艹| 人人操人人肉久久精品| 大香蕉一线视频| 最新av在线| 黄色免费一级在线毛片| 亚洲欧美精品91| 欧美96交| 欧美性爱系列| 天天影视之亚洲综合网| 人妻丰满熟妇一区二区三| 日本免费不卡二区| 欧美亚洲丝袜人妻制服中文99| 一级啊性爱在线视频| 人妻免费观看| 1人人看人人摸人人操| 国产精品久久久久久夜夜夜| 天天综合网~91| 九九热视频在线观看| 青青草色AV| 韩国黄色片精品久久久| 青青草国产一区二区三区| 久久久久亚洲?V片无码V| 久久久久ab| 亚洲另类小说卡通动漫| 久久久久七视频| 人人玩人人添人人澡免费| 色婷婷综合久久中文字幕雪峰| 精品一区二区三区免费古装毛片香港三级日本三级人妇 | 91精品成人www| 日本精品999| 内射中出日韩在线观看视频| 欧差乱伦二三| 欧美精品丝袜久久久中文字幕| 麻豆国产97在线| 日日骚 av| 丰满岳乱妇一区二区三区| 韩日巨乳美女免费视频在线观看| 久久精品欧美一区二区三区不卡| 丁香婷婷激情五月天无毒不卡 | 亚洲第一在线视频| 久久久999国产精品| 狠狠爱综合网| 98久久| 色鬼在线综合| www.91逼逼.com| 好一吊区二区| 中文字幕精品一区二区精品| 日韩在线国产字幕| 97色欧州| 丁香五月综合| 手机在线大香蕉| 天堂日本亚洲欧美| 国产亚洲日韩在线三区黑人| 爱丝福利| 女同亚洲欧美一二三区久久电影| 亚洲无码国产探花在线观看| 极品后入免费视频| 成人国产精品三级A片| 久操国产在线| 欧亚不卡| 韩国一级做A片免费的| 久久加勒比| 蜜臀AV成人精品蜜臀| 丰满人妻一区二区三区大胸懂色| 国产精品农村妇女| 日韩懂色网| 青青草天天亲夜夜操网| 91久久青青草原精品| 中文字幕视频免费| 208天天久久九九九| 一二三区在线| 日韩欧美午夜一区二区| 208天天久久九九九| 内射日韩大臀美女| 日本色色色视频| 国产精品久久久 | 成人AV在线网站| 日日干夜夜操视频h| 天天日天天干天天整| 国产v亚洲v日韩v欧美v片另类| 中文字幕久久亚州无码| 大香蕉亚洲中文| 亚洲暴力强奸AV| 精品九九| 日韩AV噜噜噜一区二区三区四区| 欧美日韩222| 99久在线精品99re8| 亚欧性爱无码| 欧美性爱一区二区| 精品无码一区二区三区| 国产午夜福利视频在线| 99热精品在线| 精品久久久久av影院| 高清国产精品福利网站| 东京男人天堂| 亚洲天堂日本| 搡老女人老妇女老妇老熟女怎么读| 男男H黄动漫啪啪无遮挡网站| 翔田千里A片一区二区| 日本道人妻久久久在线不卡色视频| 欧美亚洲第1页| 色久综合| 国产女人成人精品视频| 日韩免费看在线黄色片| 黄骗免费网站| 这里只有97精品| 色踪合AV| 91天天c| 亚洲第一页欧美| 欧美黑人性猛交91| 午夜丁香婷婷| 成人福利视频网| 久久成人午夜精品影院| 在线人成亚洲视频免费观看| 我要色综合网| 992视频一区| 欧洲色综合| 亚洲情色 无码专区| 久久人妻少妇| 吉川爱美亚洲二区在线| 97免费视频网| 亚洲AV高潮| 黄总AV色图| 操B久久| 懂色AV中文| 成人网欧美风情| 国精品一区二区三| 久久9久9久99久9久9| 99热97| 亚洲最大黄网| 免费农村成人少妇人妻Aa一区二区视频| 午夜免费视频1000| 欧美成人精品A片免费一区99| 亚洲啪啪性视频| 婷婷五月天色色| 99精品视频在线观看| 黄污污污污| 91亚·色| 人妻天天爽夜夜爽精品2| 在线女人91| 超碰97欧美| 欧美日韩m| 精品久久青青草| 精品国产嫩穴视频| 厕所偷拍在线| 超碰碰97| 久久99精品国产| 国产精品粉嫩福利在线| 天天综合91入口| 综合久久2017| 欧美一区二区男人天堂| 欧美精品精品一区二区| 强奸乱伦免费网站| 欧美亚洲色图另类国产|