亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

kubectl get pod狀態(tài)解密:READY與STATUS列的計算邏輯與排障實戰(zhàn)

kubectl get pod狀態(tài)解密:READY與STATUS列的計算邏輯與排障實戰(zhàn) 剛接手 Kubernetes 那陣我對kubectl get pod的輸出基本是無條件信任的STATUS 是 RunningREADY 是 1/1就覺得這 Pod 穩(wěn)了。直到有一次線上事故所有 Pod 看起來全是 Running 1/1結(jié)果業(yè)務(wù)錯誤率猛漲最后定位到根因是進程活著但業(yè)務(wù)線程池已經(jīng)掛了而那個服務(wù)壓根沒配就緒探針。從那時候起我開始較真kubectl get pod里的 READY 和 STATUS 這兩列到底是從哪來的先說結(jié)論它們都不是 API Server 里某個現(xiàn)成字段的直接透傳而是 kubectl 客戶端把 Pod 對象里一堆狀態(tài)字段匯總之后按照一定優(yōu)先級當場算出來的展示值。這篇文章我?guī)惆堰@套計算邏輯徹底拆開——分別看它們讀的是哪些底層字段、STATUS 列各種顯示值背后的決策樹是什么、以及怎么利用這套機制把排障效率提上去。適合所有被0/1、CrashLoopBackOff、ContainerCreating折磨過的 K8s 使用者和運維同學(xué)。1. 先把 kubectl get pod 的輸出和底層數(shù)據(jù)對上號kubectl get pod默認展示的列是 NAME、READY、STATUS、RESTARTS、AGE。加-o wide之后會多出 IP、NODE、NOMINATED NODE、READINESS GATES 這幾列。但不管顯示幾列它們的源頭都是同一個東西API Server 返回的 Pod 對象 JSON。想看到完整的原始數(shù)據(jù)最直接的方式是kubectl get pod pod-name -o json這段 JSON 里包含一個龐大的status結(jié)構(gòu)。我們只挑和本文相關(guān)的字段列出來JSON 字段含義影響哪一列metadata.deletionTimestampPod 被標記刪除的時間戳STATUSTerminatingmetadata.deletionGracePeriodSeconds優(yōu)雅刪除寬限期STATUSTerminatingstatus.phasePod 生命周期的大階段STATUS基礎(chǔ)值Pending/Running/Failed 等status.reason節(jié)點或控制器上報的具體原因STATUS如 Evicted、NodeLoststatus.conditions[]Pod 級別的條件集合包括 Ready、ContainersReady、Initialized、PodScheduled與 READY 列間接相關(guān)status.containerStatuses[]每個業(yè)務(wù)容器的詳細狀態(tài)state、ready、restartCount、lastStateREADY 列、STATUS 列status.initContainerStatuses[]每個初始化容器的詳細狀態(tài)READY 列初始化期間、STATUS 列Init 相關(guān)這里面最關(guān)鍵的一個認知是kubectl get 顯示的是客戶端渲染出來的視圖不是服務(wù)端存了一個顯示用字段。你進 etcd 里翻 Pod 對象找不到一個叫 STATUS 列 的東西能找到的只有上面這些結(jié)構(gòu)化字段。換句話說kubectl get pod的打印邏輯本質(zhì)上是把 Pod 狀態(tài)翻譯成人話的過程。kubectl 的這套打印邏輯對應(yīng)源碼里的staging/src/k8s.io/kubectl/pkg/printers/internalversion/printers.go核心函數(shù)是printPod。接下來我按 READY 和 STATUS 兩條線分別拆。2. READY 列容器就緒狀態(tài)的聚合統(tǒng)計READY 列的格式是X/Y比如1/1、0/2。很多人以為它表示Pod 里有多少容器在運行其實不準確它統(tǒng)計的是容器的 Ready 字段也就是就緒狀態(tài)和進程是否活著是兩個維度。2.1 X 和 Y 分別是怎么算出來的Y 的分母很簡單spec.containers數(shù)組的長度也就是普通業(yè)務(wù)容器的數(shù)量。注意Init 容器不算在內(nèi)這個后面細說。X 的算法大概是這樣的readyContainers : 0 for _, cs : range pod.Status.ContainerStatuses { if cs.Ready { readyContainers } } totalContainers : len(pod.Spec.Containers) // 如果 Pod 還在初始化階段READY 列固定顯示 0/N所以1/1表示Pod 里定義了 1 個業(yè)務(wù)容器且這個容器的ContainerStatuses[*].Ready為 true。這里有個容易踩的坑Pod 在初始化的過程中即使業(yè)務(wù)容器已經(jīng)創(chuàng)建了READY 也會顯示0/N。因為初始化階段有個硬邏輯——只要 Init 容器還沒全部跑完kubectl 就不去統(tǒng)計普通容器的就緒數(shù)直接輸出0/業(yè)務(wù)容器總數(shù)。所以看到0/2別急著下結(jié)論先看 STATUS 列是不是Init:1/2或者PodInitializing。2.2 容器 Ready 到底由誰決定一個容器的 Ready 屬性由 kubelet 維護具體判斷方式取決于你有沒有配探針沒配任何探針容器啟動進入 Running 狀態(tài)后kubelet 會很快把 Ready 置為 true。進程活著就等于就緒。配了 readinessProbe就緒探針容器進程活著還不夠必須探針連續(xù)成功一次Ready 才會變 true。探針一旦失敗Ready 立刻變 false。配了 startupProbe啟動探針容器啟動后先跑 startupProbe成功之前 readinessProbe 根本不生效Ready 保持 false。這就解釋了最常見的詭異現(xiàn)象STATUS 是 RunningREADY 卻是 0/1。容器確實在跑但 readinessProbe 一直失敗kubelet 只負責(zé)執(zhí)行探針并同步 Ready 狀態(tài)并不會因為你業(yè)務(wù)沒就緒就把 STATUS 改成別的。所以 READY 列本質(zhì)上是一個業(yè)務(wù)是否被判定為可服務(wù)的開關(guān)聚合而不是進程是否存活的聚合。真正決定這個開關(guān)的是 Kubelet 的探針機制這也是為什么很多正式環(huán)境強制要求核心服務(wù)必須配 readinessProbe 的原因——沒有探針一個依賴下游超時的服務(wù)依然會對外顯示 1/1但請求進來全掛在等待上。2.3 readinessGatesPod 級別的另類就緒門控除了容器自身的 ReadyPod 還可以通過spec.readinessGates聲明額外的就緒條件。比如spec: readinessGates: - conditionType: example.com/healthy如果聲明了這個 gatePod 的 Ready condition 必須同時滿足所有容器 Ready和所有 gate 對應(yīng)的 condition 為 True才能算 Pod 就緒。這個機制常被用來讓自定義控制器參與就緒判定比如某些網(wǎng)絡(luò)組件會在 CNI 配置沒就緒時寫一個 False 的 condition。不過要注意一個細節(jié)readinessGates 影響的是 Pod 的 Ready condition不一定直接影響 READY 列的數(shù)字。因為 READY 列統(tǒng)計的是容器級containerStatuses[*].Ready而不是 Pod 級 Ready 條件。你可能會看到 READY 1/1 但 Pod Ready condition 是 False 的情況此時這個 Pod 依然不會進 Service 的 Endpoints。這種顯示正常但實際不服務(wù)的場景排查時很容易被忽略。2.4 restarts 對 READY 的短暫影響容器重啟期間舊容器被終止、新容器在創(chuàng)建新容器的 Ready 會短暫為 false。所以 CrashLoopBackOff 里 Pod 的 READY 長期是 0/1一旦某個周期內(nèi)容器能撐夠時間READY 會短暫跳到 1/1然后又掉回 0/1。這個變化用kubectl get pod -w看得非常清楚。3. STATUS 列一套客戶端決策樹算出來的印象分STATUS 列是所有 K8s 新手最先看的列也是誤解最多的列。先說個讓人意外的事實STATUS 顯示什么并不是 API Server 告訴 kubectl 的而是 kubectl 自己根據(jù) Pod 的一堆字段按優(yōu)先級現(xiàn)場決策的。3.1 printPod 的決策優(yōu)先級把printPod的邏輯簡化成一個決策樹大概是這樣的1. 如果滿足刪除中條件 - Terminating節(jié)點失聯(lián)場景可能顯示 Unknown而不是 Terminating 2. 如果 Init 容器還沒全部成功退出 - 某個 init 容器失敗Init:Error / Init:ExitCode:x / Init:Signal:x - 某個 init 容器正在運行Init:N/MN已成功退出數(shù)M總數(shù) - 某個 init 容器在等待PodInitializing 3. 上面都不滿足時遍歷普通容器但只看第一個容器 - 如果它處于 Waiting 且 reason 非空用這個 reason 當作 STATUS 比如 ContainerCreating、CrashLoopBackOff、ErrImagePull - 如果它處于 Terminated 且 reason 非空用這個 reason 當作 STATUS 比如 Completed、Error、OOMKilled 4. 如果上面都沒拿到有意義的 reason退回 Pod.Status.Reason再退回 Pod.Status.Phase - phase Succeeded - Completed - phase Failed - Error - phase Running - Running - phase Pending - Pending這個順序里最容易被忽略的兩點STATUS 列只看第一個普通容器。如果 Pod 里有多個容器第二個、第三個容器即使 CrashLoopBackOff只要第一個容器在 RunningSTATUS 依然可能是 Running。這種多容器 Pod 的狀態(tài)顯示盲區(qū)是排障時最坑的細節(jié)。容器處于 Running 但 readiness 失敗時STATUS 不會顯示 NotReady。kubectl 沒有為readiness 失敗單獨設(shè)計一種顯示值所以 Running 0/1 是同時出現(xiàn)的。很多人看到 Running 就覺得 OK其實問題就藏在這里。3.2 各種 STATUS 顯示值到底對應(yīng)什么底層狀態(tài)我整理了一張速查表基本覆蓋日常最常見的 STATUS 值STATUS 顯示底層狀態(tài)常見誘因PendingphasePending沒有其他 reason 覆蓋調(diào)度失敗、資源不足、等待存儲ContainerCreating第一個容器 Waiting reasonContainerCreating鏡像拉取、sandbox 創(chuàng)建、CNI 配置ErrImagePull容器 Waiting reasonErrImagePull鏡像不存在、倉庫認證失敗、地址錯誤ImagePullBackOff容器 Waiting reasonImagePullBackOff鏡像拉取連續(xù)失敗后的退避階段CrashLoopBackOff容器 Waiting reasonCrashLoopBackOff容器啟動后反復(fù)崩潰kubelet 退避重啟Running第一個容器處于 Running 狀態(tài)正?;蛘咛结樜磁渲?探針失敗但容器存活Completed容器 Terminated reasonCompleted 且 phaseSucceededJob 正常結(jié)束Error容器 Terminated reasonError或 phaseFailed啟動腳本出錯、探針失敗導(dǎo)致重啟等OOMKilled容器 Terminated reasonOOMKilled內(nèi)存超過 cgroup 限制被內(nèi)核殺掉TerminatingdeletionTimestamp 已設(shè)置執(zhí)行了 delete等待優(yōu)雅退出或卡刪除Unknown節(jié)點失聯(lián)且 Pod 設(shè)置了 NodeLost 相關(guān) reasonkubelet 長時間不上報狀態(tài)Evictedstatus.reasonEvicted節(jié)點資源壓力驅(qū)逐這個表里的值不是隨便拍的它們要么直接來自containerStatuses[*].state.waiting.reason要么來自state.terminated.reason要么來自status.reason/status.phase。所以你會發(fā)現(xiàn)STATUS 列其實是一個第一個異常狀態(tài)的快速入口——它的設(shè)計目標是讓你一眼看出最值得關(guān)注的容器問題而不是告訴你整個 Pod 的健康全貌。3.3 一個補充STATUSRunning 但 READY0/1 的官方解釋回到開頭那個現(xiàn)象。容器狀態(tài)機里有一個獨立的維度叫State分為 Waiting、Running、Terminated 三態(tài)。readiness 是另一個獨立的布爾維度。kubectl 在渲染 STATUS 列時看的是 State 相關(guān)字段在渲染 READY 列時看的是 Ready 布爾值。兩邊各行其是所以會出現(xiàn)容器 StateRunningReadyfalse - STATUSRunningREADY0/1容器 StateWaiting(reasonCrashLoopBackOff)Readyfalse - STATUSCrashLoopBackOffREADY0/1理解了這個兩套維度各算各的設(shè)計很多所謂的詭異顯示就都能解釋通了。比如容器剛被 OOM 殺掉State 變成 Terminated reasonOOMKilled但 kubelet 正在重啟它STATUS 可能短時間閃過 OOMKilled 然后變成 CrashLoopBackOff。4. 三層狀態(tài)模型phase、conditions、containerState 的關(guān)系如果你覺得上一節(jié)的決策樹有點繞那可能是因為還沒建立 Pod 狀態(tài)的整體模型。我習(xí)慣把 Pod 狀態(tài)拆成三層來看排障時一層一層剝。4.1 第一層Pod Phase階段status.phase是 Pod 生命周期最粗粒度的描述只有五個值PendingPod 已被 API Server 接受但還沒有完成調(diào)度或者某些容器還沒啟動。RunningPod 已綁定節(jié)點所有容器已被創(chuàng)建且至少有一個容器在運行或正在啟動。Succeeded所有容器都以退出碼 0 正常結(jié)束且不會被重啟。Failed所有容器都已終止至少有一個容器以非 0 退出碼結(jié)束。UnknownAPI Server 長時間無法從 kubelet 獲取 Pod 狀態(tài)一般是節(jié)點失聯(lián)。Phase 是一個控制面視角的粗分類你不會從這里知道鏡像拉到了沒有探針過了沒有它太粗了。4.2 第二層Pod Conditions條件status.conditions是一組更細的布爾條件標準的有四個PodScheduledPod 是否已成功調(diào)度到節(jié)點。Initialized所有 Init 容器是否已執(zhí)行完成。ContainersReady所有業(yè)務(wù)容器是否都 Ready。Ready整個 Pod 是否就緒等價于 ContainersReady 且所有 readinessGates 滿足。每個 condition 都有statusTrue/False/Unknown、reason和message。查看方式kubectl get pod pod-name -o jsonpath{.status.conditions[*].type}{.status.conditions[*].status}{\n}或者看 YAMLkubectl get pod pod-name -o yaml | grep -A 12 conditions如果你的 Pod 被寫入了自定義 condition比如某些控制器會寫example.com/healthy那它也會出現(xiàn)在這個數(shù)組里。Pod 的 Ready condition 是控制器、Service Endpoints 是否收錄該 Pod 的依據(jù)之一。4.3 第三層Container State容器狀態(tài)容器層狀態(tài)是排障時信息量最大的一層。每個容器在status.containerStatuses[]里都有一個state字段三選一state : { waiting: { reason, message } running: { startedAt } terminated: { exitCode, reason, signal, startedAt, finishedAt } }值得專門做一張 reason 速查表state 字段的 reason含義ContainerCreatingkubelet 正在創(chuàng)建容器可能卡在 sandbox 或卷掛載CrashLoopBackOff容器啟動后崩潰kubelet 正在退避等待下一次重啟ErrImagePull首次拉取鏡像失敗ImagePullBackOff鏡像拉取連續(xù)失敗進入退避CreateContainerConfigError容器配置有問題比如 ConfigMap/Secret 不存在StartError容器運行時啟動失敗OOMKilled容器因超限被殺Completed容器正常退出退出碼 0Error容器異常退出除此之外lastState字段很有價值。它記錄的是容器上一次的狀態(tài)快照。當容器處于 CrashLoopBackOff 時當前 state 多半是 waiting但上一次的 terminated 信息里能看到 exitCode 和 OOMKilled 標志這是定位崩潰根因的鑰匙。kubectl get pod pod-name -o json | jq .status.containerStatuses[0].lastState三層之間是遞進關(guān)系容器 State 決定容器的 Ready 和 Phase 的走向容器 Ready 聚合出 ContainersReadyContainersReady 加上 readinessGates 得出 Pod Ready。所以當你看到 STATUS 列異常時往下一層找容器 State 的 reason往往比盯住 STATUS 文案更高效。5. 從這兩列出發(fā)的實戰(zhàn)排障鏈路知道數(shù)據(jù)來源之后排障思路就清晰了。下面按最常見的 5 個狀態(tài)場景給出一步步的排查命令鏈。5.1 STATUS 是 ContainerCreatingREADY 是 0/1先看完整事件別急著看日志kubectl describe pod pod-name | tail -30 kubectl get pod pod-name -o json | jq .status.containerStatuses[0].state.waiting kubectl get events --sort-by.lastTimestamp | tail -30這個狀態(tài)最常見的兩個原因創(chuàng)建 sandbox 失敗事件里會看到類似failed to create pod sandbox: rpc error: code unknown desc failed to create...的信息。這種一般是容器運行時或 CNI 網(wǎng)絡(luò)插件的問題需要上節(jié)點看 containerd 日志。鏡像拉取慢或被限流事件里會有Failed to pull image ...或exceeded retry limit, last status: 429 too many requests之類。429 這類限流在鏡像倉庫層很常見排查時留意 registry mirror、拉取憑證是否配置。5.2 STATUS 是 CrashLoopBackOffREADY 是 0/1這個狀態(tài)說明容器已經(jīng)啟動過但反復(fù)崩潰kubelet 進入退避。核心動作是看兩樣?xùn)|西# 看上一次退出時的日志 kubectl logs pod-name --previous # 看終止時的退出碼和 reason kubectl get pod pod-name -o json | jq .status.containerStatuses[0].lastState.terminated退出碼很能說明問題127啟動命令或依賴找不到檢查 image 里的可執(zhí)行文件路徑。137SIGKILL通常是 OOMKilled或者被系統(tǒng) cgroup 殺掉的信號檢查內(nèi)存 limit 和實際占用。143SIGTERM常見于探針失敗觸發(fā) kill或者業(yè)務(wù)收到終止信號后沒正常退出。退出碼是 0 但仍在重啟大概率是 livenessProbe 失敗kubelet 認為容器不健康主動重啟。這時候要去看探針配置kubectl get pod pod-name -o json | jq .spec.containers[0].livenessProbe5.3 STATUS 是 Running但 READY 是 0/1這就是我們前面講的假健康狀態(tài)。第一件事確認是不是探針問題# 查看就緒探針配置 kubectl get pod pod-name -o json | jq .spec.containers[0].readinessProbe # 查看容器就緒條件 kubectl get pod pod-name -o json | jq .status.conditions[] | select(.typeReady) # 手動模擬探針請求按你探針配置的協(xié)議來 kubectl exec -it pod-name -- curl -sf http://127.0.0.1:8080/healthz如果探針地址確實不通那是應(yīng)用沒就緒去查應(yīng)用日志。如果應(yīng)用地址通但 READY 還是 0/1檢查一下探針的initialDelaySeconds和periodSeconds是否設(shè)置合理以及探針是否寫錯了端口或路徑。另一個可能被忽略的情況是 readinessGates如果 Pod 里定義了 gate但對應(yīng)的 condition 一直沒被外部控制器置為 True那 Pod Ready 也是 False。這時候去查kubectl get pod pod-name -o json | jq .spec.readinessGates kubectl get pod pod-name -o json | jq .status.conditions[]5.4 STATUS 是 Terminating一直在刪除中Pod 設(shè)置了 deletionTimestamp但遲遲沒消失。先用一條命令看清全貌kubectl get pod pod-name -o json | jq {finalizers: .metadata.finalizers, deletionTimestamp: .metadata.deletionTimestamp, grace: .metadata.deletionGracePeriodSeconds, phase: .status.phase}常見的卡刪除原因容器主進程不響應(yīng) SIGTERM超過 grace 期只能等 SIGKILL但 SIGKILL 后還卡住一般是容器運行時問題。有 finalizer 掛在 metadata 上需要對應(yīng)的控制器清理完成后才會移除。底層卷還沒完成 detach或者節(jié)點失聯(lián)導(dǎo)致狀態(tài)更新停滯。如果業(yè)務(wù)可以允許強刪再考慮兜底命令kubectl delete pod pod-name --grace-period0 --force但要清楚強刪可能造成容器進程殘留、卷鎖不釋放等后遺癥生產(chǎn)環(huán)境慎用。更穩(wěn)妥的方式是先查 finalizer 歸屬等對應(yīng) controller 清理或者先把節(jié)點的問題處理掉。5.5 STATUS 是 Pending一直沒有 RunningPending 最常見的是調(diào)度階段就出問題。重點看調(diào)度事件kubectl describe pod pod-name | grep -A 20 Events kubectl get events --field-selector involvedObject.namepod-name --sort-by.lastTimestamp如果事件里持續(xù)刷FailedScheduling跟著 message 走常見的幾類Insufficient cpu/memory節(jié)點資源不夠擴容或減小 request。node(s) had taint節(jié)點有污點Pod 沒有對應(yīng)容忍。didnt match node selector / affinity rules調(diào)度約束無法滿足。如果調(diào)度已經(jīng)成功Pod 卻還停在 Pending那說明問題轉(zhuǎn)移到卷掛載或容器創(chuàng)建階段。這時再去翻 containerStatuses 的 message看是不是FailedMount之類的問題。5.6 用 custom-columns 直接拿原始狀態(tài)排障時如果不想被 STATUS 列的展示值誤導(dǎo)可以繞過它直接輸出原始字段kubectl get pods -o custom-columns\ NAME:.metadata.name,\ PHASE:.status.phase,\ POD_READY:.status.conditions[?(.typeReady)].status,\ CONTAINER_READY:.status.containerStatuses[*].ready,\ WAIT_REASON:.status.containerStatuses[*].state.waiting.reason,\ RESTARTS:.status.containerStatuses[*].restartCount,\ DELETION:.metadata.deletionTimestamp這能讓你同時看到容器級 Ready 數(shù)組、Pod 級 Ready 條件、等待 reason 和刪除時間戳多容器 Pod 的狀態(tài)盲區(qū)也一覽無余。6. 平時最容易忽略的細節(jié)和我的實操建議最后聊幾個分散在細節(jié)里的經(jīng)驗都是我在實際維護中踩過或見過別人踩的。多容器 Pod 的 STATUS 列盲區(qū)前面提過值得再強調(diào)一次kubectl 在選代表容器時只挑第一個普通容器排在后面的容器就算炸了STATUS 也可能紋絲不動。所以凡是多容器 Pod我習(xí)慣直接-o json配合 jq 看全量容器狀態(tài)或者用custom-columns把所有容器的 reason 都打出來。肉眼盯著 STATUS 單列是真的會看漏。RESTARTS 列和 READY 列的關(guān)系也要理解。RESTARTS 是所有containerStatuses[*].restartCount的累加值。容器被 OOM 殺掉后重啟RESTARTS 會 1如果后端是 sandbox 或網(wǎng)絡(luò)重建可能連累 Init 容器也計一次重啟。所以看到 RESTARTS 很高別只想到業(yè)務(wù)崩潰也要看是不是基礎(chǔ)設(shè)施層在不斷重建。初始化階段 READY 恒為 0/N 這種行為偶爾會引發(fā)誤判。尤其是 Init 容器比較多、單個 Init 執(zhí)行很慢的 Pod你可能會看到 STATUS 一直是Init:2/5READY 一直是0/1持續(xù)十幾分鐘。這時候別急著重啟或強刪先看 Init 容器日志kubectl logs pod-name -c init-container-nameSTATUS 列顯示 Unknown 的時候絕大多數(shù)情況是節(jié)點失聯(lián)而不是 Pod 本身出問題。先去看節(jié)點狀態(tài)kubectl get node kubectl get node node-name -o json | jq .status.conditions[] | select(.typeReady)節(jié)點 NotReady 會連帶一堆 Pod 顯示 Unknown 或 Terminating這時候先恢復(fù)節(jié)點再處理 Pod 狀態(tài)。版本差異也要留個心眼。不同 Kubernetes 小版本之間kubectl 的打印邏輯偶爾會有細微調(diào)整比如原生 sidecar 容器K8s 1.28的 RESTARTS 統(tǒng)計方式、初始化階段 READY 的分母算法都隨版本演進改過。遇到和文檔描述不一致的輸出優(yōu)先看當前 kubectl 對應(yīng)版本的源碼而不是懷疑自己的集群壞了。還有一個老生常談但我必須再提一次的建議不要把 STATUS 和 READY 這兩列當成業(yè)務(wù)健康度的最終答案。它們的設(shè)計目標是快速概覽不是健康證明。真正判斷服務(wù)能不能接流量的指標應(yīng)該是Pod 的 Ready condition 是否為 TruePod 是否出現(xiàn)在 Service 的 Endpoints 列表里應(yīng)用自身的健康檢查接口、錯誤率、延遲是否正常。如果你有監(jiān)控系統(tǒng)我建議直接把kube-state-metrics暴露的kube_pod_status_ready、kube_pod_container_status_ready這些指標接入告警比每天對著終端刷kubectl get pod靠譜得多。這兩年排查 Kubernetes 問題下來我最大的體會是狀態(tài)列是給人快速瀏覽用的但每個奇怪的顯示背后都有一套非常機械的計算邏輯。搞清楚kubectl get pod里 READY 和 STATUS 的每一層來源之后很多玄學(xué)其實都是可預(yù)測、可復(fù)現(xiàn)的。遇到問題別盯著狀態(tài)文案猜拉著原始字段看——-o json加 jq基本能回答你 80% 的疑問。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
强奸乱伦av电影| 中文字幕一区 二 区 三 四 五 区日 日 骚 | AV高清一区| 日逼逼免费看| 色欲av国内精品久久久久久| 麻豆a'v电影| 少妇蜜汁| 亚洲一二三四区机械| 岛园激情| 日本性爱网址| 日本三级A片网站com| 91国产丝袜白虎| 97频视在线| 欧美|91色综合| 桃色五月天| 多乙久久久久久| 国产精品com| 男人的天堂网页| 欧美综合天天| 外国91| 美女让帅哥通她小鸡鸡| 91狠狠狠| 欧美综合综合| 一区二区视频在看| 超碰九7免费| 天天爽天天操啊啊啊| 97超碰9| 亚洲男人天堂网| 亚洲天堂男人天堂网| 蜜臀va69| 久久久97| 久久久久久网址| 白嫩少妇| 人人模人人看| 亚洲 欧美 手机在线观看| 岛国黄| 91艹B视频| 欧美乱伦专区| 伊人影院综合是一个与深夜成人在线| 国产动漫操逼视频| 天天综合色电影| 中文字幕av色| 日韩电影天堂视频一区二区| 97一区二区三区视频| 神马久久久久久久久久| 国产一区二区精品在线视频| 男女国产精品| 老司机深夜18禁污污网站| 国产捆绑一区| 高清国产精品无码| 亚洲aV无码成人在线观看| 日韩免费性爱视频在线观看| 狠狠干狠狠干| 男人网站婷婷| 精品少妇人妻一区二区三区| 偷拍盗拍亚洲色图图片| 韩国成人精品久久久免费看| 成人情色一区二区| 欧洲一区二区三区免费| 99国产精品| 国产一级特黄大片处女| 国产女人成人精品视频| 中文字幕亚洲欧美在线不卡| 超碰97人人乐| 成人影院永久免费观看网址| hd成人一区二区在线| 丁香六月婷婷综合| 啊啊啊在线观看免费视频| 香蕉免费一区二区三区不读 | 欧美亚洲素人制服精品| 色久综合| 性欧美第一页| 免费看国产曰批40分钟怎么下载| 超碰人妻中文在线| 欧美亚洲特P| 性爱视频无打码在线观看| 色香色欲天天综合网天天来吧 | 天天日天天看| 最新岛国大片| 91狠婷| 97久久精品不卡| 精品久| 亚洲精品天堂久久A∨51成人漫| 亚洲黄网在哪免费看| 国产人妻精品久久久一区二区三区 | 乱久久久| 成人a v在线播放免费| 在线观看综合精品亚洲| 久久精品老司| 福利视频网站| 中文字幕jul-617人妻熟女| 嫩草 人人网精品| 一区二区三区美女超清| 操操碰| 在线情色电影 91大 | 91狠狠综合久久久久久| 狠狠做深爱婷婷久久二区| 97超碰碰| 久久99综合| 99热大香蕉伊在线| 国产免费一区2区3区| 最新中文字幕av| 国产精品肉丝自拍| 亚洲中文字幕在线视频一区二区 | av天天在线观看| 天天久久久久久| 5252色欧美在线| 超碰成人公开| 天天澡天天爽日日AV| 91视频成人福利网站在线一区| 在线观看无码三级少妇| 日夜伊人网| 国产精品在线一区二区| 超碰天天操| 中文字幕123| 色九久| 97干在线视频| 91精品人| a啊啊啊啊啊啊啊啊一区二区| 98超碰日本| 色老汉色| 色超碰综合| 国产黄色动态精品| 欧美日韩少妇色情| 激情图片伦理国产一区二区日韩| 91亚·色| 成 人 影视 一区 二区 三区 四区| 五月色网| 久久久无码av精| 激情久久久| 亚州 综合 色图| 超碰在线91| 操逼天美3区| 亚洲 欧美 天天| 中文字幕日韩情色| 国产无马在线| 91在线页| 少妇激情一区二区三区视频| 2019久久久久久久久福利| 精品国产少妇高潮视频| 福利大香蕉| 亚洲另类欧美精品| 中文字幕三四五区| 国产又粗又长又爽又色| 久久超碰98| 91久久免费视频互動交流| 91老司机在线| 久碰视频| www欧美91| 中文字幕AV乱伦| 嗯嗯啊啊视频一区二区三区| 快播久久人人aV| 免费av在线播放二区| 亚洲成?V人片在线观看福利| 深爱激情五月天| 三久久久四久久久久| 久久久久国产无av| 欧美大香蕉卡久久| 天天做天天爱| 偷拍超碰| 呦呦一区| 91人妻人人澡人人爽人人精品| 99热导航| 人妻 中文 日韩| 国产精品一二三在线看| 欧美国产婷婷久久| 久久这里精品国产99丫e6| 日本一级特级毛片视频| 2019天天操天天爽天天拍| 91搞逼视频| 亚州精品人妻一二三区| 偷拍网站久久男女男| 91性高朝久久久久久久久| 91欧美丨精品丨入口| 日韩免费看黄片| 97天天综合| 色网综合网| 久久一二三四五六七八九区区区 | www.91逼逼.com| 在线观看午夜婷婷久久久久清性观看| 久久久九九网站| 91色色网站| 超碰97资源网亚洲| 草伊人高潮喷水超碰| 午夜精品视频777| 国产视频一区二区三区在线免费观看| 玖日综合网| 欧美国产视频| 亚洲色鬼| 婷婷色色五月天| 色噜噜精品一区二区三| 91精品人妻一区二区-全集完整版免费正片国语-B02AV | 亚洲精品国语在线播放| 亚洲天堂电影精品一区| 日韩av电影成人在线| 色黄色美女大长腿午夜视频| 在线a v| 97超碰香蕉| 嗯~啊~快点 死我视频免费看网站| 夜夜狠狠躁日日躁色视频| 亚洲色人妻综合| 亚洲精品丝袜-不卡成人免费……| 国产区在线| blacked精品一区国产| 久悠悠av| www.狠狠| 骚女天天综合网| 五月天婷婷基地| 免费啪啪av| 一级人妻性爱视频| 国产精品久久久久av| 啊好爽快点-国产一区二区三区撒尿在线-成人AV | 国产在线播放成人免费| 欧美淫穴| 99这里只有精品| 中文字幕78| 日韩性爱视频在线免费观看| 午夜福利久久久噜久噜久久综合 | 日韩精品三级片长长久久| 久久综合国产精品国产| 亚洲综合小说另类图欧美视频激情小说色五月天 | 人人爱操| 成人开心网在线视频| 狠久久| 中文字幕一区二区三区50路| 色97国产69香蕉| 精品人妻伦一二三区久久| 97视频在线视频| 超碰97在线 欧美 国产| 91精品国产91久久福利| 两女互慰AV高潮喷水在线观看| 国产综合久| 另类小说五月天| 欧美色图20p| 妺妺跟我一起洗澡没忍住| 久久久性爱视频| 麻豆国产97在线| 92人人操人人| 约操熟妇| 久久久国产精品亚洲精品| 加勒比无码毛片| 国产青青美女玩逼视频| 国产精品老熟女一区二区| 亚洲激情久久久伊人综合| 黑人娇小av在线播放| 亚洲AV无码乱码在线观看性色| 免费A V在线播放| 最新亚洲风情电影| 99国产在线绯色一区| 啊啊啊啊,啊啊好多水| 免费又黄又裸乳的视频| 射丝袜大香蕉| 久久激情视频| 日日黄色三级网站| 日韩AV噜噜噜一区二区三区四区| 色播五月丁香| 清纯唯美亚洲综合| 中文字幕在线观看第二页| 国产懂色精品国产av| 天堂蜜桃无码视频一区二区| 欧美97在线欧| 人妻黑丝袜电影| 亚洲精品久久久久毛片A片拉屎| 91总综合网| wwwcaobibi| 91宗合网| 国产精品免费视频人成| 亚洲美腿丝袜香蕉影视欧美成人| 99少妇| 曰韩av中文字幕专区| 99热日| 中文字幕一区二区三区人妻少妇在线| 亚洲欧美黄| 99青草| 八戒无码国产午夜福利| 欧美猛交黑寡妇中文字幕| 摸奶性爱视频网站在线免费播放| 九九九午夜| 激情婷婷综合久久| 丝袜无码a片| 日本欧美亚洲高清在线看| 亚洲区小说| 欧美日韩色图片| 自怕偷自怕亚洲精品| 亚洲宗合网| 天天综合精品| 欧美黄色大片在线观看| 亚洲啪啪啪啪视香蕉| 9久热| 亚洲成aⅴ人片不卡无码| 99精品丰满人妻无码| 97超碰美国| 国产色呦呦| 搡老女人911熟妇老熟女| 91N综合网在线| 东北夫妻性偷拍| 五月婷在线| 无码精品久久久天天影视| 91久久婷婷| 精品久久九| 中国国产精品一区视频| 欧美久热| 成人小说视频在线精品欧美| 东北女人高潮视频| 婷婷视频在线免费观看| 91丝袜美腿网站| 日本免费二区三区| 日本免费中文字幕在线| 欧美激情综合| 91爱欧美| 亚洲宗合网| 琪琪精品免费一区二区三区 | 午夜视频黄| 天天干天天日天天射黄色| 91狠狠综| 青青草精玖玖69精品| 日本性感人妻91| 自拍欧美| 多乙久久久久久| 熟妇一区,二区,三区。| AV九九| 91精品网站| 神马视频久久久久久| 欧美亚洲国产91在线| 精品国产国产AV| 国产小黄片在线免费观看| 亚洲美腿丝袜香蕉影视欧美成人| 美女黄色一级A视频| 最近二区三区视频大全| 日韩传媒在线| 成人国产精品三级A片| 另类小说欧美激情校园春色| 一区,二区,三区网站| 日韩性爱1级片视频| 中日韩久久久免费看| 久草成人福利导航| 人人摸人人添人人操| 日韩欧视频| 大香蕉99热| 亚洲欧美日韩综合在线尤物 | 亚洲精品丝袜| 在线观看黄色电话| 绯色一区二区三区不卡少妇| 另类图片五月天| 亚洲日韩肥臀视频在线观看| 国产精品岛国片在线观看| 综合色一区三区二区| 久操 高清| 蜜乳av首页| 亚洲影院无码在线| 色色97爱| 91精品人妻五十路| 丝袜视频一区二区在线播放国产中文| 蜜桃视频精品一区二区| 欧美一区二区观看在线| 一区二区三区在线美女| 亚洲一二三四区| 91国内外在线| 啊啊啊啊啊啊好湿好爽视频| 丁香五月婷婷啪啪| 日va操| 久久精品国产亚洲AV清纯| 九九九九免费视频| 天天欧美色| 亚洲日韩国产欧美综合v| 天天澡天天爽日日AV| 丝袜狠狠草尤物 91| 欧美亚男人的天堂| 亚洲无套久久嗯嗯| 97精品国产97久久久久久| 伊人久久综合精品欧美| av一区二区三区不卡| 欧美综合天堂| 日1区2区3区2020| 东方亚洲在线操逼天堂| 国产精品久久久久久久久久久久久久久| 亚洲欧美精品91| 免费强奸av| 国产精品永久免费10000| 中文字幕99999| 91 天天综合| 欧美性高潮在线| 国产成人精品一区| 日本国产二线女色| 久久久精品九| 日韩无码第3页| 果冻传媒A片麻豆熟妇人妻| 破处bbq| 欧美黑人168页欧美黑人167| 亚洲久久天堂| 强乱老妇中文字幕| 久久久久久人体| 蜜区区视频79 | 精品二区三四区五电影 | 激情六月天| 91丨九色丨熟女高潮| 91|九色|国产熟女| 东京日日夜夜| 美女露胸露屁股| 按摩中文字幕| 大香蕉一人在线| 欧美后入视频| 久久9久久| 97超碰色色| 欧美久久伊人| 国产精品一区二区黄片| 性吧在线视频| 日韩紧密久久| 久久熟女久| 亚洲日韩97| 四虎精品亚洲| 青草综合| 东京热男人的天堂精品| 国产精品久久久三级无码| 久久性爱免费送| 九九Av| 999狠狠综合| 91N五十路| 一级黄碟在线观看| 老女人91| 丰满人妻一区二区三区免费| 中文字幕一区二区三区四区在线视频| 91高清无码下载| 丁香五月电影| 伦在线97| 97欧美精品| ..日韩av毛片精品久久久| 亚洲精品日韩国产欧美| 欧美日韩人人精品| 久久久三区二区一区| 久久久96| 免费一级欧美片片线观看| 久久综合日韩亚洲欧美| 97国产精选| 成人免费视瓶| 性爱久久| 亚洲一二三四区在线免费看视频| 大学生美女口爆| 强奸乱伦中文字幕AV| 97天天搞在线| 中文字幕免费在线观看| 亚洲精品白浆高清久久久久久| 不卡免费av在线播放| 亚洲av总站| 午夜美女诱惑电源网| 亚洲精品一区二区精品| 日韩偷拍色图| 香蕉精品二区二区| 操逼片中文| 精爱久久| 日本成人在线不卡一区二区三区 | 欧美伦乱爱| 91 欧美| 丁香五月电影| 上床啊啊啊| 人人看人人摸人人色| 少妇极品熟妇人妻无码| 国产无码精品高清| 久久一区,青青青青草视频在线播放| 色97欧美| 久热大香蕉| 成人草草视频| 综合五月婷婷| 日本一二三免费久久| 欧美强奸乱能| 欧美性综合| 一类av片在线看| 青青草色情网站视频| 欧美性爱精品七区| 亚洲少妇诱惑| 国产黄色在线播放观看| 久久久久久久久久久久黄色| 国产美女口爆吞精视频| 熟妇一区二区三区| 无码精品久久| 青青操视频在线| av绯色| 青青草日韩免费观看高清在线| 亚洲伊人a线观看视频| 鸥美精品一区二区久久婷婷| 精品丝袜无码一区二区三APP| 色哟哟-国产专区| 久久丁香久草综合网| 一区二区首页| 亚洲成人日韩小说| 伊人午夜福利视频| AA丁香综合激情| 欧美亚洲情色| 99re只有精品| 岛国视频免费在线观看| 91狠狠狠| 78综合网| 污污汅18禁网站在线永久免费观看 | 青青草国产一区二区三区| 日韩乱伦视频| 屁股久久久久久| 97这里都是精品| 操逼大黄片| 破处bbq| 色五月婷婷麻豆在| 亚洲一区操| 劲爆欧美人妖三区91| 韩国黄色片精品久久久| 国产精品成人AV片免费看网站| 久久久久久久久九九久孕交| 亚洲AV操| 97色97干| 亚洲情色综合网| renqi久久久久久久久久久久| www国产无码| 九九九九免费高| 超碰在线91| 免费久久一级毛片大黄| 欧美日韩国产精品久久色婷婷| 少妇一线天久久久久久| 国产www色在线观看| 超碰九区| 美女骚尻视频| 人妻在线臀日韩| 日韩精品1区2区中文字幕| 人妻少妇精品视频一区二区三区| 欧美日本天堂| 青青青国产| 国产综合永久精品日韩鬼片| 国产成人91一区二区三区| 99re6国产精品99re| 狠狠干婷婷| 丝袜剧情| 亚洲?V无码专区在线电影| 中国91AV| 日日嗷| 妇人噜噜| 操我啊啊啊啊啊| 五月丁香综合啪啪| 国产精品久久久无码AV网站| 亚洲欧美国产中文视频| 一起草视频在线| 91老熟女91老女人| 神马久久69| 校园春色综合| 中文字幕 码 自拍 视频 区| 中国一区二区亚洲人妻| 亚洲无码太久| a片 xxxx受爽视频| 乱人乱色一区二区三区免费| 黄色一区三区| 91强在线播放| 色 亚洲 91| 亚州色站 日韩电影| 久久精精区一区二区一蜜桃一区二区| 久久精品三级影视| 在线无码操| 亚洲精品人妻在线| 欧美日韩电影成人在线| 手机看片91人妻| 伊人操| 九热久| 狠狠躁伊人中文字幕| 日韩欧美麻豆| 日韩精品啪啪啪| 大粗鳼巴久久久久| 亚洲a色| 日韩综合97p| 大鸡巴久久| 无套后入双马尾| 超碰色97| 白丝av| PMv在线观看| 欧美日韩性爱电影在线| 操逼免费视频无码国产| 欧美日韩国产中文精品字幕自在自线| 精品偷拍13p欧美dodk视频| 东北丰满熟女国产一区| 国产午夜无码片在线观看影视| 手机在线人成免费视频| 麻豆国产免费影片| 97资源制服丝袜| 精品熟女一区=区三区| 超碰97资源中文字幕| 亚洲天堂男人网| 五十路三区在线| 无码不卡亚洲成?人片| 秋霞操逼片| 国产精品一区二区校花| 国产小u女在线观看| 色婷婷五月综合| 国产久久久9999| 一区二区不卡| 黑人性暴力毛片| 精品国产Av无码久久久伦古装| 日韩字幕一区| 天天看,天天做| 少妇超碰在线| 久热久操| 久久东京热久久| 伊人久久综合影院精品久久久| 日韩欧美中文日韩欧美色| 欧美婷婷| 天天内射| 啊啊啊啊啊好多水| 久操网视频| 亚洲AV小说| av东京热男人的天堂| 97碰碰色| 国产理论视频在线播放| 视频二区美腿丝袜制服人妻欧美| 老熟妇综合| 91免费看中出视频| 中文字幕精品一区欧美| 99热这里只有精品8| 黄色不卡视频| 丁香九月婷婷| aaaa黄片| 欧美亚洲一区二区久久久婷精品大包诱| 天天操美美| 97国产精品| 欧洲熟妇xxXx欧美老妇裸体| 天天综合网1| 婷婷综合伊人一区| 伊人色综合网电影| 亚洲永久永久永久永久一级一级一级精品| 香蕉国产97| 国产人妖的免费的视频| 一本一道人妻久久一区二区三区 | 日本黄色天堂| 自拍偷拍国产欧美日韩韩| 五月丁香啪啪啪| 中文字幕免费看| 国产大陆天天艹| 啊啊啊啊啊啊在线看| 色欧美在线| 亚洲日韩国产欧美综合v| 亚洲日韩青青草色月| 超碰欧美97| 中文字幕在线观看视频www| 加勒比伊人综合| 欧美一区二区三区四区综合| 色老汉色| 欧洲黄色网| 中文字幕乱碼在线| 欧美性爽xyxOOOO| 久久欧美按摩999| 高清孕妇孕交 交| 欧美黄色大香蕉一区二区| 欧美日韩人妻婷婷一区| 午夜一区二区三区国产| 97超碰久久色| 顶级丝袜熟女一区二区三区| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 97天天综合| 色97| 人人爱人人乐人人操| 玖玖97综合| 日本一区二区中文字幕久久| 久jiu久神马影院| 极品国产内射| 天天天天天天天天综合| 亚洲国产成人福利在线观看| 男人的天堂在线| 熟女字幕| 变态综合色| 亚洲一区中文字幕久久,果冻传媒一区二区天美传媒 | 国产精品人人爽人人做可爱福利| 91欧美长吊| av无线看| 精品一区二区2| 操操啪| 深夜福利黄片| 欧美韩国你懂得在线 | 亚洲综合一| 精品国产肉丝袜在线拍国语| 色香天天| 樱花草社区www中国| 成人激情无码在线视频| 尤物视频新赏网鲜网色诱网| 夜夜操狠狠操| 亚洲无码超碰免费| 久久综合久色欧美综合狠狠 | 亚洲熟妇乱女区二区三区| 日本精品中文字幕视频| 曰韩少妇无码| 91熟女熟妇视频网站| 日本精品中文字幕视频| 智利AV在线网| 天天色综合图片| 黄色片一区二区三区四区五区| 亚洲高清在线se| 夜夜一区二区| 日韩免费大片一级播放| 99久久99九九99九九九| 青青草视频久久久久| 激情啪啪拍91| 91精品无码久久久久久久| 日韩人妻丝袜美腿中文| 天美传媒国产原创中文字幕亚洲欧美另类 | 伊人黄色片| 国产麻豆91欧美一区二区久久婷婷国产精品| 日韩AV电影网站| 人人操人人搞人人草| 欧美日韩亚洲天堂| 91老熟女老女人国产老太| av天堂影视中文在字幕在线中文| 强奸乱伦亚洲第一页| 亚洲风情在线观看| 粉嫩久久久久| 欧美色九九九| 大香蕉综合在线| 艹精品| 污色区网站| 日本三级精品| 97草草| 超碰1024久久| 91N欧美| 婷婷五月综合在线| 一区二区影院| 粉嫩av平台| 97资源久久| 亚洲久久天堂| 久久久久久少妇| 啊啊啊97视频| 夜夜狼人妻| 伊人亚洲国产一成人久久精品,久久| 日韩一级特黄av毛片| 一级做a爰片性色毛片久久| 久久岛国| 欧美精品黑人猛交高潮| 曰本特级特黄特色黄色A级网站高清在线免费看 | 美国美女AV在线| 亚洲成人综合在线| 青草av在线| 国产女人成人精品视频| 秋霞免费AV| 黄色一区二区秘书性感| 眼镜人妻101.com| 日韩免费福利在线观看| 青娱乐福利99| 超清福利精品视频在线| 成年人网站在线免费观看| 碰碰97| 三上悠亚在线毛片91| 日日骚一区二区三区| 日韩天天综合| 96国产精品| 中文字幕免费在线观看| 亚洲做性| 久久蜜桃一区二区| 大香蕉日韩| 欧美色图91| 日本精品五区| 手机午夜电影神马久久| 黄色片A级一区二区三区| 狠狠色伊人亚洲综合网站色| 国产不良强奸视频免费看| 中文字幕高清精品一区| 强奸乱伦亚洲第一页| 99在线无码精品秘 入口黑人| 国产一级不卡在线观看| 欧美久久伊人| 丁香激情五月| 国产九九久久久精品| 国产精品久久久777| 国产成人天堂| 婷婷性网| 精品视频一区二区| 亚洲欧美精品国产一区二区| 久久精品中文字幕无码l| 两性综合网| 亚洲丝袜色| 精品久久久久黄少妇| 日本男人插女人的逼黄色| 东北操逼| 国内一区二区免费| 男人的天堂.com| 亚爽爽爽爽爽爽爽爽| 男人的天堂久久狠| 亚洲欧美日韩不卡人妻| 久久午夜鲁丝片| 国产精品自在自拍视频| 欧美后进式| 97 九色| 国内毛片四区| heyZO天然素人无码AⅤ专区| 欧美色综合影院| 久久不卡一区二区| 欧美洲精品一级| 日韩一级欧美一级国产一级台湾| 嗯啊抽插大香蕉网页| 超碰人人妻| 素颜老阿姨乱情色| 久久久久久久| 特级毛片特黄久久免费看| 成人婷婷丁香| 亚洲欲| 翔田千里AV无码秘 三区| 日韩探花精品在线视频| 久操黄色视频| 青青草影视蜜久久| 伊人一区二区在线播放| 99欧美| 天美一区在线| 秋霞网无码| 色婷婷视频| 亚洲日韩欧美一区二区| 亚洲中文字幕在线视频一区二区| www色日本| 性老妇一区二区三区| 妇女一区二区三区| 被体育老师抱着c到高潮| 成人综合网 欧美| 91日韩国产欧美亚洲另类精盘州至城都| 亚洲精品一二区| 国产久久久9999| 夜夜躁狠狠躁日日躁av| 色牛牛AV| 超碰69| 国产精品原创巨作?v网站| 亚州男人天堂| 亚洲中文字幕精品一区| 欧美日韩天堂| 3PAV乱伦视频| 五月丁香婷婷色| 日本一久是| 在线观看不卡一区二区三区| 无码免费一区二区三区啪啪| 亚洲丝袜二区在线| 亚洲最新a在线观看| 国产男女无套97| 婷婷午夜清品久久久久久久性色视频观| 国产精品999zyz| 97视频620| 五十路六十路七十路熟婆| http://qxhbdz.com| 久久9精品| 中文字幕成人| 精品久久97| 午夜天堂啪啪| 欧美男人的天堂| 欧美一区二区亚洲天堂| 东京热AV男人的天堂| 免费中文在线| 欧美偷| 亚洲熟女中文字幕在线| 亚洲人码13| 人妻日日干| 91网站在线播放| 91在线无码精品秘 软件| 人妻精品一区一区三区蜜桃91| 乱伦日本色图AⅤ| 超碰97久久国| 日韩欧美经典在线观看| yazhououmeizongya| 激情五月天视频| 偷拍视频青青草在线视频| 亚洲精品男人的天堂| 亚州男人天堂| 国精品一区二区三| 日本十八禁免费看污网站| 蜜臀久久99精品| 国产福利小视频高清在线观看| 色偷偷超碰亚洲| 日本午夜久久电影| 啊啊啊啊啊啊啊啊在线观看| 极品粉嫩一区二区| 亚洲免费成人在线高清无码视频| 久久人人爽av亚洲精品天堂桃色 | www.色操逼| 欧美啪啪色吧在线| 久久国产精品,久久国产| 久久性爱精品一区| 999九九九九国产动| 国产精品电影| 中文字幕天堂在线| 久久久久久久9最新免费视频观看| 色综合尤物| 日韩欧美日韩| 99蜜桃臀久久久欧美精品网站| 成年人性爱日韩| 最近二区三区视频大全| 大香蕉在线86| 静品嫩模一区二区| 囯产精品久久久久久久久久梁医生| A啊啊在线观看| 美女自卫慰黄网站免费| 亚洲日韩人妻中文字幕一区| 色情婷婷久久五月天| 男人天堂一区二区| 国产成人99久久亚洲综合| 亚洲精品蜜桃久久久| 欧美日韩国第一区| 国产尤物AV尤物在线观看不卡| 外站AV在线| 大香蕉色欲AV| 日本午夜福利视频| 欧美人人AAA| 欧美黄色手机在线观看| 久久是精品| 中文字幕加勒比海高清无码免费视频 | 青青久久久| 精品久久99| 免费一级精品啪啪视频| 精品国产乱子伦一区二区三区,精品一| 青青草吊丝| 99综合视频| 国产av又色又爽又黄| 啊啊啊啊网站| 熟女久久久| AV天堂男人的天堂| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | 日本黄色裸日本黄色裸体 | 四虎免费视频| 欧美国产视频| 一品道视频一区二区三区| 亚洲免费成人精品电影| 婷婷伊人五月| 女优大全 - 91n| 91熟女.com| 亚洲大色堂| 色噜噜人妻av 中文字幕| 亚洲第一在线视频| 黄色AAAAAAAAAAA大片| 久久久性| 加勒比综合| 日韩欧美中文字幕搭讪巨乳美人妻视频| www.男人天堂| 色综和网| 超碰538| 啊啊啊啊啊在线观看网址| 手机在线视频国内精品| 欧美日韩黄片精品在线| 1000部熟女视频在线观看| 亚洲欧美高清| 国产精品乱码久久久久| 男人的天堂免费| 欧美色网络| 91人人操| 碰碰97| 日本影视久久免费| 久久婷婷电影网| 一级毛片电影免费看| www.av家庭乱伦| 欧美极品美女aaaaaa级黄片| 国产呦精品系列在线观看| 美女91网站| 久伊人网78| 正宗无毛一线天嫩逼| 日日摸日日弄日日拍| 一本一道久久综合久久| 夜夜夜爽www精品视频| 这里只有97精品| 97美日韩视频| 久热这里只有精品9| 啊啊啊好舒服视频| 91无遮挡| 国产无吗在线播放| 精品无码久久久久久国产浪潮| 高潮的A片激情扒开一区| 久久亚洲AV无码专区首页| 久久东京伊人一本到鬼色| 日操粉逼逼| 五月丁香激情啪啪| 少妇 综合| 国产五码丝袜屁眼| 天天操天天日天天干| 亚洲第一视频 欧美风情 日韩| 91精品导航| 国产精品一区二区手机看片| 九九热久久99精品re| 青娱乐国产精品| 婷婷综合网站| 在线天堂999| 色偷综合| 色图综合| 久草免费福利在线播放| 五月婷婷丁香| 亚洲国成人情色好看电影| 日本好吊色视频| julia国产在线 | 国产无码一二三区| 欧美后进式| 传媒免费一区二区三区| 男人天堂毛片| 呦呦影院| 日韩啪啪网| 四季AV综合网址| 午夜九九| 亚洲男人久久综合天堂| **一级毛片国产| 午夜天堂网| 快播久久人人aV| 国产亚洲精品A在线观看下载| 尤物国产一区在线观看| 啊啊啊好湿国产一二| 欧美,亚洲,日韩,v,天堂,手机在线观看| 97超碰大| 404操逼福利视频| 国产精品久久发布| 亚洲在线综合| 日韩欧美成人午夜福利| 亚洲第一页色| 国产熟女自拍| 国产成人精品必看 | 免费亚洲国产精品久久一区| 久久老女人| 曰韩av中文字幕专区| 久久蜜色情在线视频xxx免费观看| 91欧美少妇| 91在线超高颜值国产| 熟女日韩| 久久久久久久9999| 久久免费精品视频免一| 天天综和| 96精品久久久久久久久| 韩国一级婬片A片AAAAA| 亚洲精品一区二区免费在线观看| 日本精品999| 1024日韩| 成人开心网在线视频| 精品人妻一区二区视频| 免費人妻夜夜爽天天爽爽一区| 日韩九九九| 久久久久9| 中文字幕精品亚洲熟女| 密乳AV免费观看| 久久九七| 人妻熟女一区在| 啊啊啊轻点在线观看| 日本三级一区二区 在线| 综合网亚| 精品美女久久久久| 青娱乐 成人娱乐在线| 色97干| 婷婷五月花| 日韩人妻无码不卡网站| 大香蕉久| 男人的天堂VA| 99这里有精品| 97在线观| 天综合网| 国产无码精品久久久久久| http://qxhbdz.com| 97色97干| 欧美18禁91| 国产视频一区二区三区在线免费观看 | 日本不卡三级网在线播放| 呦呦一区| 99re不伦| 91影库| 97视频在线视频| 韩日无码在线观看| 拍拍拍拍大尺度黄色三级片拍拍拍拍拍照 | 久久熟女人| 国产精品懂色tv影视免费观看| 久久综合18p| 超碰在线人妻中文字幕| 妇女视频网站| 乱论91| 91青青| 91久热这里只有精品| 永久电影三级在线观看| 抽插爽| AV无码久久久精品| 91国产丝袜白虎| 中文字幕老熟妇黄色视频| 人妻精品视频一区二区三区| 亚洲大色堂| 亚洲暴力强奸AV| 国产91 丝袜在线播放 | 欧洲特黄毛片免费看欧洲毛片| 在线视频一区二区传媒| 亚洲AV无码AV吞精久久久久| 91精品91久久久久77777| 香蕉在线一区二区三区| 中文字幕日韩精品久久| 人人妻天天做天天爽| 伊人AAA| 狠狠色噜噜狠狠狠狠2018| 午夜精品人妻二区三区| 五月丁香大香蕉| 手机午夜电影神马久久| 精彩久久中文| 67914亚洲精品| 高清国产性猛交xxxx乱大交| 久久久96精品| 国产精品久久发布| 欧美性爱中文字幕无线码| 人人操人人操人妻人| 亚洲妇色| 日本岛国黄色网址| AⅤ片水多多| 欧美成人贴图| 精品一区二区麻豆| 99热精品在线| 亚洲色系另类精品国产| 欧洲精品二区| 天堂网 主播 亚洲| 色妺妺在线视频| 欧亚性爱视频免费看| 黄色无码高清黄色无码网站| 一摸二插三插| 96免费视频在线| 猛交交| hd成人一区二区在线| 丁香婷婷五月| 无人区高清电影免费观看一区二区三 www.qmcai2.com | 天美传媒国产原创中文字幕亚洲欧美另类| 性爱视频无打码在线观看| 黄页| 97在线播放| 人妻免费观看| 爱欲AV| 91N欧美| 中文激情网| 思思热er精品视频| 欧美日韩性爱电影在线| AV中亚| 肥佬影院91| 韩国毛片一区二区三区| 色五月天AV| 色一射色一射| 国产丝袜视频| 五月丁香成人网| 睡产熟女乱伦| 日本天天操| 97在线视频观看网站| 翔田千里A片一区二区| 色九久| 大香蕉中文201| 天天影视91看看| 91在线一起| 亚洲精品国产熟女久久久| 中文字幕女同在线| 乱老熟女一区二区三区| 伊人久久婷婷| 97超碰这里只有精品| 国产成人AV麻豆| 韩国女主播青草福利视频| 五月天婷婷小说| 亚洲国产无码精品首页久久久| 亚洲97久久精品亚洲| 国产女人与拘做受视频免费| 正在播放国产精品一区| 亚洲精品成人动漫在线| 四虎午夜影院| 日韩精品在线放| 麻豆国产97在线| 免费视频在线一区二区不卡| 性色AV蜜色av色欲av| 国产精品分类在线观看| 久操操AV电影| 精品国产91av一区二区三区| 亚洲精品乱码线路中文字幕| 精品国产一区二区三区在线播出| 大香蕉免费3| 俄罗斯一区二区视频在线观看 | 欧美午夜色妇色鬼| 欧美综合第一| 9精品在线| 97超碰超欧美。| 天天碰久久入| 91人妻熟女|