久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

kubectl get pod狀態(tài)解密:READY與STATUS列的計算邏輯與排障實戰(zhàn)

kubectl get pod狀態(tài)解密:READY與STATUS列的計算邏輯與排障實戰(zhàn) 剛接手 Kubernetes 那陣我對kubectl get pod的輸出基本是無條件信任的STATUS 是 RunningREADY 是 1/1就覺得這 Pod 穩(wěn)了。直到有一次線上事故所有 Pod 看起來全是 Running 1/1結(jié)果業(yè)務(wù)錯誤率猛漲最后定位到根因是進程活著但業(yè)務(wù)線程池已經(jīng)掛了而那個服務(wù)壓根沒配就緒探針。從那時候起我開始較真kubectl get pod里的 READY 和 STATUS 這兩列到底是從哪來的先說結(jié)論它們都不是 API Server 里某個現(xiàn)成字段的直接透傳而是 kubectl 客戶端把 Pod 對象里一堆狀態(tài)字段匯總之后按照一定優(yōu)先級當場算出來的展示值。這篇文章我?guī)惆堰@套計算邏輯徹底拆開——分別看它們讀的是哪些底層字段、STATUS 列各種顯示值背后的決策樹是什么、以及怎么利用這套機制把排障效率提上去。適合所有被0/1、CrashLoopBackOff、ContainerCreating折磨過的 K8s 使用者和運維同學(xué)。1. 先把 kubectl get pod 的輸出和底層數(shù)據(jù)對上號kubectl get pod默認展示的列是 NAME、READY、STATUS、RESTARTS、AGE。加-o wide之后會多出 IP、NODE、NOMINATED NODE、READINESS GATES 這幾列。但不管顯示幾列它們的源頭都是同一個東西API Server 返回的 Pod 對象 JSON。想看到完整的原始數(shù)據(jù)最直接的方式是kubectl get pod pod-name -o json這段 JSON 里包含一個龐大的status結(jié)構(gòu)。我們只挑和本文相關(guān)的字段列出來JSON 字段含義影響哪一列metadata.deletionTimestampPod 被標記刪除的時間戳STATUSTerminatingmetadata.deletionGracePeriodSeconds優(yōu)雅刪除寬限期STATUSTerminatingstatus.phasePod 生命周期的大階段STATUS基礎(chǔ)值Pending/Running/Failed 等status.reason節(jié)點或控制器上報的具體原因STATUS如 Evicted、NodeLoststatus.conditions[]Pod 級別的條件集合包括 Ready、ContainersReady、Initialized、PodScheduled與 READY 列間接相關(guān)status.containerStatuses[]每個業(yè)務(wù)容器的詳細狀態(tài)state、ready、restartCount、lastStateREADY 列、STATUS 列status.initContainerStatuses[]每個初始化容器的詳細狀態(tài)READY 列初始化期間、STATUS 列Init 相關(guān)這里面最關(guān)鍵的一個認知是kubectl get 顯示的是客戶端渲染出來的視圖不是服務(wù)端存了一個顯示用字段。你進 etcd 里翻 Pod 對象找不到一個叫 STATUS 列 的東西能找到的只有上面這些結(jié)構(gòu)化字段。換句話說kubectl get pod的打印邏輯本質(zhì)上是把 Pod 狀態(tài)翻譯成人話的過程。kubectl 的這套打印邏輯對應(yīng)源碼里的staging/src/k8s.io/kubectl/pkg/printers/internalversion/printers.go核心函數(shù)是printPod。接下來我按 READY 和 STATUS 兩條線分別拆。2. READY 列容器就緒狀態(tài)的聚合統(tǒng)計READY 列的格式是X/Y比如1/1、0/2。很多人以為它表示Pod 里有多少容器在運行其實不準確它統(tǒng)計的是容器的 Ready 字段也就是就緒狀態(tài)和進程是否活著是兩個維度。2.1 X 和 Y 分別是怎么算出來的Y 的分母很簡單spec.containers數(shù)組的長度也就是普通業(yè)務(wù)容器的數(shù)量。注意Init 容器不算在內(nèi)這個后面細說。X 的算法大概是這樣的readyContainers : 0 for _, cs : range pod.Status.ContainerStatuses { if cs.Ready { readyContainers } } totalContainers : len(pod.Spec.Containers) // 如果 Pod 還在初始化階段READY 列固定顯示 0/N所以1/1表示Pod 里定義了 1 個業(yè)務(wù)容器且這個容器的ContainerStatuses[*].Ready為 true。這里有個容易踩的坑Pod 在初始化的過程中即使業(yè)務(wù)容器已經(jīng)創(chuàng)建了READY 也會顯示0/N。因為初始化階段有個硬邏輯——只要 Init 容器還沒全部跑完kubectl 就不去統(tǒng)計普通容器的就緒數(shù)直接輸出0/業(yè)務(wù)容器總數(shù)。所以看到0/2別急著下結(jié)論先看 STATUS 列是不是Init:1/2或者PodInitializing。2.2 容器 Ready 到底由誰決定一個容器的 Ready 屬性由 kubelet 維護具體判斷方式取決于你有沒有配探針沒配任何探針容器啟動進入 Running 狀態(tài)后kubelet 會很快把 Ready 置為 true。進程活著就等于就緒。配了 readinessProbe就緒探針容器進程活著還不夠必須探針連續(xù)成功一次Ready 才會變 true。探針一旦失敗Ready 立刻變 false。配了 startupProbe啟動探針容器啟動后先跑 startupProbe成功之前 readinessProbe 根本不生效Ready 保持 false。這就解釋了最常見的詭異現(xiàn)象STATUS 是 RunningREADY 卻是 0/1。容器確實在跑但 readinessProbe 一直失敗kubelet 只負責(zé)執(zhí)行探針并同步 Ready 狀態(tài)并不會因為你業(yè)務(wù)沒就緒就把 STATUS 改成別的。所以 READY 列本質(zhì)上是一個業(yè)務(wù)是否被判定為可服務(wù)的開關(guān)聚合而不是進程是否存活的聚合。真正決定這個開關(guān)的是 Kubelet 的探針機制這也是為什么很多正式環(huán)境強制要求核心服務(wù)必須配 readinessProbe 的原因——沒有探針一個依賴下游超時的服務(wù)依然會對外顯示 1/1但請求進來全掛在等待上。2.3 readinessGatesPod 級別的另類就緒門控除了容器自身的 ReadyPod 還可以通過spec.readinessGates聲明額外的就緒條件。比如spec: readinessGates: - conditionType: example.com/healthy如果聲明了這個 gatePod 的 Ready condition 必須同時滿足所有容器 Ready和所有 gate 對應(yīng)的 condition 為 True才能算 Pod 就緒。這個機制常被用來讓自定義控制器參與就緒判定比如某些網(wǎng)絡(luò)組件會在 CNI 配置沒就緒時寫一個 False 的 condition。不過要注意一個細節(jié)readinessGates 影響的是 Pod 的 Ready condition不一定直接影響 READY 列的數(shù)字。因為 READY 列統(tǒng)計的是容器級containerStatuses[*].Ready而不是 Pod 級 Ready 條件。你可能會看到 READY 1/1 但 Pod Ready condition 是 False 的情況此時這個 Pod 依然不會進 Service 的 Endpoints。這種顯示正常但實際不服務(wù)的場景排查時很容易被忽略。2.4 restarts 對 READY 的短暫影響容器重啟期間舊容器被終止、新容器在創(chuàng)建新容器的 Ready 會短暫為 false。所以 CrashLoopBackOff 里 Pod 的 READY 長期是 0/1一旦某個周期內(nèi)容器能撐夠時間READY 會短暫跳到 1/1然后又掉回 0/1。這個變化用kubectl get pod -w看得非常清楚。3. STATUS 列一套客戶端決策樹算出來的印象分STATUS 列是所有 K8s 新手最先看的列也是誤解最多的列。先說個讓人意外的事實STATUS 顯示什么并不是 API Server 告訴 kubectl 的而是 kubectl 自己根據(jù) Pod 的一堆字段按優(yōu)先級現(xiàn)場決策的。3.1 printPod 的決策優(yōu)先級把printPod的邏輯簡化成一個決策樹大概是這樣的1. 如果滿足刪除中條件 - Terminating節(jié)點失聯(lián)場景可能顯示 Unknown而不是 Terminating 2. 如果 Init 容器還沒全部成功退出 - 某個 init 容器失敗Init:Error / Init:ExitCode:x / Init:Signal:x - 某個 init 容器正在運行Init:N/MN已成功退出數(shù)M總數(shù) - 某個 init 容器在等待PodInitializing 3. 上面都不滿足時遍歷普通容器但只看第一個容器 - 如果它處于 Waiting 且 reason 非空用這個 reason 當作 STATUS 比如 ContainerCreating、CrashLoopBackOff、ErrImagePull - 如果它處于 Terminated 且 reason 非空用這個 reason 當作 STATUS 比如 Completed、Error、OOMKilled 4. 如果上面都沒拿到有意義的 reason退回 Pod.Status.Reason再退回 Pod.Status.Phase - phase Succeeded - Completed - phase Failed - Error - phase Running - Running - phase Pending - Pending這個順序里最容易被忽略的兩點STATUS 列只看第一個普通容器。如果 Pod 里有多個容器第二個、第三個容器即使 CrashLoopBackOff只要第一個容器在 RunningSTATUS 依然可能是 Running。這種多容器 Pod 的狀態(tài)顯示盲區(qū)是排障時最坑的細節(jié)。容器處于 Running 但 readiness 失敗時STATUS 不會顯示 NotReady。kubectl 沒有為readiness 失敗單獨設(shè)計一種顯示值所以 Running 0/1 是同時出現(xiàn)的。很多人看到 Running 就覺得 OK其實問題就藏在這里。3.2 各種 STATUS 顯示值到底對應(yīng)什么底層狀態(tài)我整理了一張速查表基本覆蓋日常最常見的 STATUS 值STATUS 顯示底層狀態(tài)常見誘因PendingphasePending沒有其他 reason 覆蓋調(diào)度失敗、資源不足、等待存儲ContainerCreating第一個容器 Waiting reasonContainerCreating鏡像拉取、sandbox 創(chuàng)建、CNI 配置ErrImagePull容器 Waiting reasonErrImagePull鏡像不存在、倉庫認證失敗、地址錯誤ImagePullBackOff容器 Waiting reasonImagePullBackOff鏡像拉取連續(xù)失敗后的退避階段CrashLoopBackOff容器 Waiting reasonCrashLoopBackOff容器啟動后反復(fù)崩潰kubelet 退避重啟Running第一個容器處于 Running 狀態(tài)正?;蛘咛结樜磁渲?探針失敗但容器存活Completed容器 Terminated reasonCompleted 且 phaseSucceededJob 正常結(jié)束Error容器 Terminated reasonError或 phaseFailed啟動腳本出錯、探針失敗導(dǎo)致重啟等OOMKilled容器 Terminated reasonOOMKilled內(nèi)存超過 cgroup 限制被內(nèi)核殺掉TerminatingdeletionTimestamp 已設(shè)置執(zhí)行了 delete等待優(yōu)雅退出或卡刪除Unknown節(jié)點失聯(lián)且 Pod 設(shè)置了 NodeLost 相關(guān) reasonkubelet 長時間不上報狀態(tài)Evictedstatus.reasonEvicted節(jié)點資源壓力驅(qū)逐這個表里的值不是隨便拍的它們要么直接來自containerStatuses[*].state.waiting.reason要么來自state.terminated.reason要么來自status.reason/status.phase。所以你會發(fā)現(xiàn)STATUS 列其實是一個第一個異常狀態(tài)的快速入口——它的設(shè)計目標是讓你一眼看出最值得關(guān)注的容器問題而不是告訴你整個 Pod 的健康全貌。3.3 一個補充STATUSRunning 但 READY0/1 的官方解釋回到開頭那個現(xiàn)象。容器狀態(tài)機里有一個獨立的維度叫State分為 Waiting、Running、Terminated 三態(tài)。readiness 是另一個獨立的布爾維度。kubectl 在渲染 STATUS 列時看的是 State 相關(guān)字段在渲染 READY 列時看的是 Ready 布爾值。兩邊各行其是所以會出現(xiàn)容器 StateRunningReadyfalse - STATUSRunningREADY0/1容器 StateWaiting(reasonCrashLoopBackOff)Readyfalse - STATUSCrashLoopBackOffREADY0/1理解了這個兩套維度各算各的設(shè)計很多所謂的詭異顯示就都能解釋通了。比如容器剛被 OOM 殺掉State 變成 Terminated reasonOOMKilled但 kubelet 正在重啟它STATUS 可能短時間閃過 OOMKilled 然后變成 CrashLoopBackOff。4. 三層狀態(tài)模型phase、conditions、containerState 的關(guān)系如果你覺得上一節(jié)的決策樹有點繞那可能是因為還沒建立 Pod 狀態(tài)的整體模型。我習(xí)慣把 Pod 狀態(tài)拆成三層來看排障時一層一層剝。4.1 第一層Pod Phase階段status.phase是 Pod 生命周期最粗粒度的描述只有五個值PendingPod 已被 API Server 接受但還沒有完成調(diào)度或者某些容器還沒啟動。RunningPod 已綁定節(jié)點所有容器已被創(chuàng)建且至少有一個容器在運行或正在啟動。Succeeded所有容器都以退出碼 0 正常結(jié)束且不會被重啟。Failed所有容器都已終止至少有一個容器以非 0 退出碼結(jié)束。UnknownAPI Server 長時間無法從 kubelet 獲取 Pod 狀態(tài)一般是節(jié)點失聯(lián)。Phase 是一個控制面視角的粗分類你不會從這里知道鏡像拉到了沒有探針過了沒有它太粗了。4.2 第二層Pod Conditions條件status.conditions是一組更細的布爾條件標準的有四個PodScheduledPod 是否已成功調(diào)度到節(jié)點。Initialized所有 Init 容器是否已執(zhí)行完成。ContainersReady所有業(yè)務(wù)容器是否都 Ready。Ready整個 Pod 是否就緒等價于 ContainersReady 且所有 readinessGates 滿足。每個 condition 都有statusTrue/False/Unknown、reason和message。查看方式kubectl get pod pod-name -o jsonpath{.status.conditions[*].type}{.status.conditions[*].status}{\n}或者看 YAMLkubectl get pod pod-name -o yaml | grep -A 12 conditions如果你的 Pod 被寫入了自定義 condition比如某些控制器會寫example.com/healthy那它也會出現(xiàn)在這個數(shù)組里。Pod 的 Ready condition 是控制器、Service Endpoints 是否收錄該 Pod 的依據(jù)之一。4.3 第三層Container State容器狀態(tài)容器層狀態(tài)是排障時信息量最大的一層。每個容器在status.containerStatuses[]里都有一個state字段三選一state : { waiting: { reason, message } running: { startedAt } terminated: { exitCode, reason, signal, startedAt, finishedAt } }值得專門做一張 reason 速查表state 字段的 reason含義ContainerCreatingkubelet 正在創(chuàng)建容器可能卡在 sandbox 或卷掛載CrashLoopBackOff容器啟動后崩潰kubelet 正在退避等待下一次重啟ErrImagePull首次拉取鏡像失敗ImagePullBackOff鏡像拉取連續(xù)失敗進入退避CreateContainerConfigError容器配置有問題比如 ConfigMap/Secret 不存在StartError容器運行時啟動失敗OOMKilled容器因超限被殺Completed容器正常退出退出碼 0Error容器異常退出除此之外lastState字段很有價值。它記錄的是容器上一次的狀態(tài)快照。當容器處于 CrashLoopBackOff 時當前 state 多半是 waiting但上一次的 terminated 信息里能看到 exitCode 和 OOMKilled 標志這是定位崩潰根因的鑰匙。kubectl get pod pod-name -o json | jq .status.containerStatuses[0].lastState三層之間是遞進關(guān)系容器 State 決定容器的 Ready 和 Phase 的走向容器 Ready 聚合出 ContainersReadyContainersReady 加上 readinessGates 得出 Pod Ready。所以當你看到 STATUS 列異常時往下一層找容器 State 的 reason往往比盯住 STATUS 文案更高效。5. 從這兩列出發(fā)的實戰(zhàn)排障鏈路知道數(shù)據(jù)來源之后排障思路就清晰了。下面按最常見的 5 個狀態(tài)場景給出一步步的排查命令鏈。5.1 STATUS 是 ContainerCreatingREADY 是 0/1先看完整事件別急著看日志kubectl describe pod pod-name | tail -30 kubectl get pod pod-name -o json | jq .status.containerStatuses[0].state.waiting kubectl get events --sort-by.lastTimestamp | tail -30這個狀態(tài)最常見的兩個原因創(chuàng)建 sandbox 失敗事件里會看到類似failed to create pod sandbox: rpc error: code unknown desc failed to create...的信息。這種一般是容器運行時或 CNI 網(wǎng)絡(luò)插件的問題需要上節(jié)點看 containerd 日志。鏡像拉取慢或被限流事件里會有Failed to pull image ...或exceeded retry limit, last status: 429 too many requests之類。429 這類限流在鏡像倉庫層很常見排查時留意 registry mirror、拉取憑證是否配置。5.2 STATUS 是 CrashLoopBackOffREADY 是 0/1這個狀態(tài)說明容器已經(jīng)啟動過但反復(fù)崩潰kubelet 進入退避。核心動作是看兩樣?xùn)|西# 看上一次退出時的日志 kubectl logs pod-name --previous # 看終止時的退出碼和 reason kubectl get pod pod-name -o json | jq .status.containerStatuses[0].lastState.terminated退出碼很能說明問題127啟動命令或依賴找不到檢查 image 里的可執(zhí)行文件路徑。137SIGKILL通常是 OOMKilled或者被系統(tǒng) cgroup 殺掉的信號檢查內(nèi)存 limit 和實際占用。143SIGTERM常見于探針失敗觸發(fā) kill或者業(yè)務(wù)收到終止信號后沒正常退出。退出碼是 0 但仍在重啟大概率是 livenessProbe 失敗kubelet 認為容器不健康主動重啟。這時候要去看探針配置kubectl get pod pod-name -o json | jq .spec.containers[0].livenessProbe5.3 STATUS 是 Running但 READY 是 0/1這就是我們前面講的假健康狀態(tài)。第一件事確認是不是探針問題# 查看就緒探針配置 kubectl get pod pod-name -o json | jq .spec.containers[0].readinessProbe # 查看容器就緒條件 kubectl get pod pod-name -o json | jq .status.conditions[] | select(.typeReady) # 手動模擬探針請求按你探針配置的協(xié)議來 kubectl exec -it pod-name -- curl -sf http://127.0.0.1:8080/healthz如果探針地址確實不通那是應(yīng)用沒就緒去查應(yīng)用日志。如果應(yīng)用地址通但 READY 還是 0/1檢查一下探針的initialDelaySeconds和periodSeconds是否設(shè)置合理以及探針是否寫錯了端口或路徑。另一個可能被忽略的情況是 readinessGates如果 Pod 里定義了 gate但對應(yīng)的 condition 一直沒被外部控制器置為 True那 Pod Ready 也是 False。這時候去查kubectl get pod pod-name -o json | jq .spec.readinessGates kubectl get pod pod-name -o json | jq .status.conditions[]5.4 STATUS 是 Terminating一直在刪除中Pod 設(shè)置了 deletionTimestamp但遲遲沒消失。先用一條命令看清全貌kubectl get pod pod-name -o json | jq {finalizers: .metadata.finalizers, deletionTimestamp: .metadata.deletionTimestamp, grace: .metadata.deletionGracePeriodSeconds, phase: .status.phase}常見的卡刪除原因容器主進程不響應(yīng) SIGTERM超過 grace 期只能等 SIGKILL但 SIGKILL 后還卡住一般是容器運行時問題。有 finalizer 掛在 metadata 上需要對應(yīng)的控制器清理完成后才會移除。底層卷還沒完成 detach或者節(jié)點失聯(lián)導(dǎo)致狀態(tài)更新停滯。如果業(yè)務(wù)可以允許強刪再考慮兜底命令kubectl delete pod pod-name --grace-period0 --force但要清楚強刪可能造成容器進程殘留、卷鎖不釋放等后遺癥生產(chǎn)環(huán)境慎用。更穩(wěn)妥的方式是先查 finalizer 歸屬等對應(yīng) controller 清理或者先把節(jié)點的問題處理掉。5.5 STATUS 是 Pending一直沒有 RunningPending 最常見的是調(diào)度階段就出問題。重點看調(diào)度事件kubectl describe pod pod-name | grep -A 20 Events kubectl get events --field-selector involvedObject.namepod-name --sort-by.lastTimestamp如果事件里持續(xù)刷FailedScheduling跟著 message 走常見的幾類Insufficient cpu/memory節(jié)點資源不夠擴容或減小 request。node(s) had taint節(jié)點有污點Pod 沒有對應(yīng)容忍。didnt match node selector / affinity rules調(diào)度約束無法滿足。如果調(diào)度已經(jīng)成功Pod 卻還停在 Pending那說明問題轉(zhuǎn)移到卷掛載或容器創(chuàng)建階段。這時再去翻 containerStatuses 的 message看是不是FailedMount之類的問題。5.6 用 custom-columns 直接拿原始狀態(tài)排障時如果不想被 STATUS 列的展示值誤導(dǎo)可以繞過它直接輸出原始字段kubectl get pods -o custom-columns\ NAME:.metadata.name,\ PHASE:.status.phase,\ POD_READY:.status.conditions[?(.typeReady)].status,\ CONTAINER_READY:.status.containerStatuses[*].ready,\ WAIT_REASON:.status.containerStatuses[*].state.waiting.reason,\ RESTARTS:.status.containerStatuses[*].restartCount,\ DELETION:.metadata.deletionTimestamp這能讓你同時看到容器級 Ready 數(shù)組、Pod 級 Ready 條件、等待 reason 和刪除時間戳多容器 Pod 的狀態(tài)盲區(qū)也一覽無余。6. 平時最容易忽略的細節(jié)和我的實操建議最后聊幾個分散在細節(jié)里的經(jīng)驗都是我在實際維護中踩過或見過別人踩的。多容器 Pod 的 STATUS 列盲區(qū)前面提過值得再強調(diào)一次kubectl 在選代表容器時只挑第一個普通容器排在后面的容器就算炸了STATUS 也可能紋絲不動。所以凡是多容器 Pod我習(xí)慣直接-o json配合 jq 看全量容器狀態(tài)或者用custom-columns把所有容器的 reason 都打出來。肉眼盯著 STATUS 單列是真的會看漏。RESTARTS 列和 READY 列的關(guān)系也要理解。RESTARTS 是所有containerStatuses[*].restartCount的累加值。容器被 OOM 殺掉后重啟RESTARTS 會 1如果后端是 sandbox 或網(wǎng)絡(luò)重建可能連累 Init 容器也計一次重啟。所以看到 RESTARTS 很高別只想到業(yè)務(wù)崩潰也要看是不是基礎(chǔ)設(shè)施層在不斷重建。初始化階段 READY 恒為 0/N 這種行為偶爾會引發(fā)誤判。尤其是 Init 容器比較多、單個 Init 執(zhí)行很慢的 Pod你可能會看到 STATUS 一直是Init:2/5READY 一直是0/1持續(xù)十幾分鐘。這時候別急著重啟或強刪先看 Init 容器日志kubectl logs pod-name -c init-container-nameSTATUS 列顯示 Unknown 的時候絕大多數(shù)情況是節(jié)點失聯(lián)而不是 Pod 本身出問題。先去看節(jié)點狀態(tài)kubectl get node kubectl get node node-name -o json | jq .status.conditions[] | select(.typeReady)節(jié)點 NotReady 會連帶一堆 Pod 顯示 Unknown 或 Terminating這時候先恢復(fù)節(jié)點再處理 Pod 狀態(tài)。版本差異也要留個心眼。不同 Kubernetes 小版本之間kubectl 的打印邏輯偶爾會有細微調(diào)整比如原生 sidecar 容器K8s 1.28的 RESTARTS 統(tǒng)計方式、初始化階段 READY 的分母算法都隨版本演進改過。遇到和文檔描述不一致的輸出優(yōu)先看當前 kubectl 對應(yīng)版本的源碼而不是懷疑自己的集群壞了。還有一個老生常談但我必須再提一次的建議不要把 STATUS 和 READY 這兩列當成業(yè)務(wù)健康度的最終答案。它們的設(shè)計目標是快速概覽不是健康證明。真正判斷服務(wù)能不能接流量的指標應(yīng)該是Pod 的 Ready condition 是否為 TruePod 是否出現(xiàn)在 Service 的 Endpoints 列表里應(yīng)用自身的健康檢查接口、錯誤率、延遲是否正常。如果你有監(jiān)控系統(tǒng)我建議直接把kube-state-metrics暴露的kube_pod_status_ready、kube_pod_container_status_ready這些指標接入告警比每天對著終端刷kubectl get pod靠譜得多。這兩年排查 Kubernetes 問題下來我最大的體會是狀態(tài)列是給人快速瀏覽用的但每個奇怪的顯示背后都有一套非常機械的計算邏輯。搞清楚kubectl get pod里 READY 和 STATUS 的每一層來源之后很多玄學(xué)其實都是可預(yù)測、可復(fù)現(xiàn)的。遇到問題別盯著狀態(tài)文案猜拉著原始字段看——-o json加 jq基本能回答你 80% 的疑問。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
极品少妇99| 亚洲精品无码少妇久久| 蜜乳中文字幕a在线| 午夜男女爽爽爽在线视频| 成人网欧美风情| 97色网| av情色影音| 成人黄页| 久久精品人体| 在线a v| 国产成人啪一区二区| 国产无套粉嫩白浆在| 丝袜综合网| 久久精品国产欧美日韩亚洲欧美日韩中文久久国产一区 | 亚洲一欧洲中文字幕在线| 日本黄大片在线观看视频| 超碰4A| 欧美制服另类丝袜| 亚洲aV性爱| 不卡日本一区二区| 九九九不卡| 亚洲吊色| 第二页中文字幕| 色综合婷婷| 久久亚洲欧美中文字幕国语| 久操频道免费在线呗看| 中日韩久久久免费看| 91色五月俺来也| 欧美人妻一区| 国产精品点击进入在线影院| 亚洲不雅视频1区二区| 干美女人妻| 亚洲AV在线资源| 久久这里| 日本欧美色| 绯色AV粉色AV蜜臀AV| 91麻豆天美国产欧美日| 国产成人自拍视频在线| 91碰碰碰| 亚洲欧美日韩有码| 91天美传媒精品| 国产黄色动态精品| 综合网97| 国产精品色| 成人精品视频一区二区| 亚洲欧洲第二视频在线观看色图| 免费看污网址| 91精品国产91熟女| 国产日韩精品suv| 三级AV入口| 中文字幕美女91| 国产高清免费不卡av| 人人操肉肉| 日韩AV无码中文一区二区| 无码99| 婷婷色色五月| 欧美在线中M| 女性喷水高潮在线观看| 亚洲激情综合| 亚洲欧美清纯| 日本一级一级一级一级| 综合网亚洲1| 亚洲国产一级精品毛一级精品看免费视频| 精品国产91久久久久久一区黄无| 亚洲天堂精品日韩电影| 欧美一级三级| 色香欲综合| 高潮内射在线| 亚洲av青草久久一区二区| 婷婷激情啪啪| 国产h小视频在线观看免费| 91人人爽人人爽人人人,gav福利视频导航,日韩欧美亚洲国产字幕四区 | 无码heyzo高清一区| 日韩懂色网| 久久最新视频免费观看| 国产精品3| 99操| 五月综合久久| 久久婷婷五月天| 国产视频一区二区三区在线免费观看 | 日本男人插女人的逼黄色| 精品一区96| 91熟女综合| 免费一级性爱久久| 1769一区| 婷婷五月av| 亚洲色图加勒比| 大香蕉2017| 五十路六十路素人熟女| 婷婷综合视频| 97操97干| 99热这里只有精| 欧美青青草视频| 国产第12页| 亚洲AV不卡在线观看尤物| 亚洲综合网电影91| 久久精品99久久久久久| 亚洲欧美成人网站AAA| 天天色天天干天天射| 免费网站观看www在线观| 97资源站日韩| 黄页视频网站野外| 国产精品丝袜在线| 亚洲另类小说卡通动漫| 日日噜噜夜夜久久亚洲一区二区| 青青久久手机线视频| 天天看高清麻豆| 婷婷丁香五月天综合东京热| 亚洲三级。日韩三级| 欧美曰韩国产精品| 青娱乐国产盛宴视频| 日韩欧美亚洲国产日韩| 99国内熟女露脸视频| 国产操逼网站亚洲一级黄色| 色色99| 人人操人人插人www| 中文一区二区| 欧美亚洲丝袜人妻制服99| 亚洲自拍97| 任我爽视频在线观看| 日日操丁香五月天| 69XX一中文字幕人妻91| 欧洲亚洲天堂精品| 十八禁的黄污污免费网站| 天天噜| 97频视在线| 一级性爱视频免费观看| 亚洲欧美setu| 女优视频第10页| 午夜福利免费精品视频| 人人操人人搞人人草| 日韩人妻无码不卡网站| 日韩在线观看AV| 六月丁香啪啪| 北约熟女超碰| 思思热国产在线视频| 日韩精品国模| 97视频7| 国产原创自拍| 天天操天天舔| 一起草av| 99re3这里只有精品| 久久99精品视频| 欧美黄色片AAAAA| 日韩性爱1级片视频| 破处bbq| 蜜桃网熟妇| 91九色蝌蚪在线观看| 超碰这里只有精品| 韩国国产欧美情侣视频在线| 天天激色| 夜夜躁狠狠躁日日躁av| 精品人妻av区天天看片| 成人av在线播放| 亚洲另类欧美精品| 精品少妇人妻av久久免费| 18禁精品网站在线看| 一级毛片久久久久久久女人18| 精品少妇人妻av久久免费| 欧美老妇曰批的视频| 小视频玖玖| 国产亚州高清国产拍精| A V少妇特黄三级| 97se综合| 大香蕉十区| 国产97在线播放| 屌妞视频久久久久久久久久久久| 亚洲成人AB| 91欧洲国产成人久久精品网站| 青娱乐999| 色五月婷婷网| 天天综合网~69| 国产白丝精品在线观看| 伊人久久青青草| 欧美自拍网| 日本一区二区成人在线| 大香蕉啪啪啪啪在线| 2020中文字幕在线观看| 性站| 成人精品在线免费视频| 日本青青草在线| 日语五十路和六十路亚洲国产精品 | 久久伊人影院| 婷婷香蕉| 男人在线天堂| 性欧美体内射精| www.av家庭乱伦| 亚洲精品一卡二卡三卡福利视频网站| 色网色网色网色网色网色| 天天综合亚在线| 黄色大片视频在线免费看| oumeisetu综合| 免费国产电影一区二区| 亚洲熟妇综合久久久久久| 免费操逼视频下载| 久久激情婷婷| x97av| 五月婷婷激情综合| 日韩综合无码色欲vv| 98福利在线视频| 亚欧高清在线| 熟女探花啪啪| 先锋音影AV| 精品人体无圣光凹凸| 极品后入免费视频| 国色天香av| 国产精品人妻免费精品| 熟妇女伦乱视频视频| 91九色精品熟女内射| 欧美高清第一页| 第四色色综合91| 亚洲成?V人片在线观看福利| 999岛国大片| 97超碰影音| 插插综合网天天影视网| 美女自卫慰黄网站免费| 高清在线不卡一区二区 视频| 欧美亚洲韩国视频十五区| 蜜桃不卡一区二区| 嫩草影院永久在线制服丝袜| 超碰一区二区| BBBBB97COM| 婷婷久久五月综合激情| 久久久久久99AV无码免费网站| 国产农村妇女精品| 中文字幕五月婷婷免费| 亚洲 欧美 制服 另类 自拍| 亚洲成人av电影在线| 欧美强奸乱| 乱老女人一区二区视频| 啊啊啊啊啊啊啊国| 欧美91在线+|+欧美| 熟女网站最新| 日韩性爱免费观看视频| 人看人人摸人人操| 91亚·色| 亚洲天堂热| 天天干嫩逼网| 久久久人妻| 四虎AV影视国产精品亚洲精品| 亚洲 欧美 日韩 国产一区二区 | 啊啊啊啊嗯嗯在线久久久| 日本免费二区三区| 羞答答AV中文字| 爱逼综合| 日本理论在线| 97国产超湿| 人人摸人人舔一区二区| 热思思免费视频| 国产精品亚洲无码| 婷婷综合五月天| 免费人人搞97| 夜夜躁狠狠躁日日躁av| 国产真实野战在线视频| 曰本91情色| 欧美曰韩国产精品| 2017天天操| 色综合尤物| 久日91在线| 91被操| 亚洲天堂人妻一区二区| 超碰天天去日穴| 黄色视频特级毛片| 后入福利视频| 国产中文字幕曰本毛片| 日本999精品| 伦激情人妻另类人妻| 五月天伊人| 91色人妻| 久久久噜噜噜久久人妻| 日本在线播放不卡一区| 天天久久久久久| 国产成人网站在线观看| 综合少妇网| 欧洲无码一区二区| 色就色综合| 国产女人9999| 在线性黄高清免费视频| 国产又粗又长又大的视频| 国产按摩一区二区三区| www国产无码| 精品人妻一区二区三区夜夜| 国产男女无套视频免费观看| sewuyueav| 91黑丝少妇| 成人性爱美曰韩| 国产精品白丝www| 久久久久夜夜夜夜| 狠狠色狠狠色狠狠五月| 九九九九九九综合| 久久夜夜夜夜| 男人的天堂2018东京热啪啪啪| 日韩欧美福利视频看看| 狠狠色综合网| 欧美激情在线观看视频| 九九99精品| 熟女高潮合集-永久久久-成人AV | 色五月av| 九九人人操| 亚洲中文字母在线播放| 国产馆极品诱惑| 日韩精品高清资源在线| 日韩专区久久久| 日夜尻逼网| 一级二级三级黑人无码| 免费久久9999| 老女人碰碰在线碰碰视频| 思思热免费视频观看| 91一区二匹| 少妇国产不卡| 欧美日韩大黄片| 色天天野狼综合社区| 国产操逼网站亚洲一级黄色| 91在线丝袜| 欧美性天天影视| 一本一道波多野毛片中文在线| 高清孕妇孕交 交孕妇| 男人的天堂2019AV| 在线看免费无码AV天堂的| 国产强奸无码乱伦| 欧美99热| 久久久无码视频| 亚洲天堂久| 九九九午夜| 午夜福利视频在线一区| 日本 色 导航| 国内偷拍精品一区二区| 人爽不卡视频| 国产精品久久久久9999小说| 97视频新免费| 9长久久精品| 国产精品制服丝袜中文字幕日韩一区二区三区 | 深爱五月天| 探花一区在线| 亚洲九九夜夜| 老女人爆菊| 91 国产丝袜在线放观看| 色婷婷久久| 久久一二三四五六七八九区区区 | 在线免费观看高清无码视频| 国产在线播放成人免费| 羞涩视频| 精品999一区二区| 99在线精品观看视频中文| 97碰碰色| 人人操人人摸人人看人人干| 三级精品三级在线观看| 69XX一中文字幕人妻91| a片自拍直播视频| 一区二区视频你懂的| 无码一区二区三区四区五区六区七区八区九区十区视频 | 黑丝91视频| 东北女人av| 日本大香蕉| 91爰爱欧美| 日本高清视频在线观看黄已三辽| 久久精品成人| 国产精品99精品视频网站| 无码最新| 国产视频三区四区| 囯产精品强| 操人妻视频| 婷婷丁香五月天综合东京热| 91精品久久久久久综合五月天| 日韩综合成人免费视频| 爱做久久久久久| 精品99999久久久久久| 人妻人人澡人人爽人人| 清纯唯美激情| 夜夜操青青草| 九九九九九九亚洲| 热G综合热G中文| 亚洲黄色视频在线观看视频| 99ri精品| 干妹子| 成人小说视频在线精品欧美| 伊人五月天| 1二区9| 精品无码一区二区三区色欲| 囯产精品一区二区三区线|亚洲人成无码网WWW动漫|国产精品免费一级... | 九九视频黄色片| 久久久国产av美女私房| 色优久久| 一本大道久| 中日亚韩免费视频| 熟妇人妻一区二区三区| 欧美色道啊| 欧美大波激情xxxx| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 一本一道久久综合久久| 性在久久久久久| 日韩人妻精品中文字幕| 欧美一级国产一级| 青木玲在线不卡| 狠狠干狠狠干| 学生妹天天看| 久久这里都是精品| 园内精品自拍视频在线播放| 国产97在线播放| caopeng97| 国产激情视频在线观看| 亚洲av无码国产精品字幕| 97综合久第一页| 久九干| 影音先锋国产精品| 大香蕉久| 韩三级a视频在线观看| 超碰吊日色| 污电影在线观看| 人妻无码后入| 天堂日本亚洲欧美| 91美女中出| 亚洲中文字母在线播放| 在线A日本| 激情天天视频| 91老熟妇| 操屄日韩| 最新欧美色网| 欧美美女视频| 熟妇高潮二区三区| 国语对白露脸XXXXXX| 丁香五月激情五月| 亚洲天堂 视频你懂的| 久综合国内精品自在自线| 国产无码三级视频在线观看| 伊人少妇久久久| 欧美一二三区四五区| 久操视频在线观看| 青青草吊丝| 久久999久| 中文高清一区二区的| 乱老女人一区二区视频| 影音先锋视频在线| 久久伊人亚洲AV无码网站| 超碰97护士| 国产成人精品网站| 台湾佬大香蕉| 自拍六区| 加勒比aⅴ| 综合网亚洲1| 老熟妇一区二区三区| 麻豆国产成人精品| 精品十三区| 精品久久久久久久久久久久| 躁躁日曰躁2020| 伊人丝袜美腿高跟在线观看高清 | 大香蕉久| 五月色综合| 亚洲欧美九九| 日韩天天本| 超碰9 7女人| 在线看污网站| 乱操乱伦AV| 久久久久亚洲三级电影| 日韩精品亚洲专区在线影视| 一级久久久久久久久久久| 日本网色| 天操天操夜操夜月操月年年操| 精品乱子一区二区三区99| 亚洲狼狼干综合1| 日韩钢筋无码高清啾啾啾| 欧美91丝袜| 欧美日韩狠狠爱| 久草精品一区| 无码久久国产| 99热自拍| 玖玖无码超碰| 人人操人人爽人人操人人| 一区二区三区黄片免费观看| 99热精品在线| 九九人妻| 一区二区三区亚洲| 91美女中出| 精精品人妻一区二区三区| 欧美丝袜亚洲| 日本日皮视频逼| 欧美老妇综合网| 日韩精品-原创伙伴| 久久精品毛片免费不卡| 99国产精品久久久久久久成人热| 91久| 99热精品在线观看| 亚洲在线综合| 日本丝袜美腿人妻九九| 亚州色图片在线色| 午夜120视频在线观看| 丰满人妻一区| 久久综合九九| 天天射夜夜操| 亚洲综合九| 欧美久久伊人| 啊啊啊啊啊啊好多水| 欧美熟女妇同| 四虎影院成年人片| 啊啊啊啊啊啊在线观看| 天天舔天天日天天射| 国产精品蜜乳AV| 97天天摸天天爽| 日韩精品第3页| 爱我干综合| 日产欧美电影一区二区三区| 东方亚洲在线操逼天堂| 69精品少妇一区二区三区蜜桃| 一级做受视频免费是看美女| 久久华人网| 国产视频三区四区| 激情综合五| 思思热免费在线视频| 国产97在线 | 亚洲| 操亚州| 人妻夜夜爽天天爽三区麻豆AV网站| 婷婷视频在线免费观看| 成人热久久精品| 丁香成人五月天| 男人天堂最新手机版在线青青草| 97香蕉网| 免费在线看黄片av| 亭亭在线资源| 国内精品久9| 国产精品视频精品一二| 精品九九九九九九九九九| 欧美色三级片91| 岛国在线一区二区三区| 久久,精品一二三| av天堂影视中文在字幕在线中文| 蜜臀色乳| 亚洲操人| 久久精品国产AV一区二区三区| 999综合色| 久久久久9| 日韩精品国产一区二区| 97超碰美女| 97精品综合久久网| 98一区二区精品| 91在线精品| 中国少妇XXXX做受| 欧美97| 大逼色网站| 青青操少妇| 五月天成人综合| 大香蕉免费乱伦视频| 欧美中文字幕日韩在线| 特级特黄一级毛片免费| 91色综| 九九在线视频| 婷婷丁香久久| 色伊人91| 青娱乐久久艹| 曰韩无码777| 亚洲中文国际强奸字幕| 日本欧美一区二区三区免费| 一级性爱aaaa| 九九久久99| 五月天婷婷激情| 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 欲色综合| 97视频播放| 国产又黄又爽| 国产 热久久久久国产精品| 欧美黄色大香蕉一区二区| 欧美日韩99| 欧美有码亚洲中文字幕一区二区三区四区 | 综合色区偷拍| 欧洲在线性爱视频| 免费视频一二三区| 精品少妇高潮久久| 久久久96| 高清无码国产亚洲| 亚洲图片 激情小说| 精吧天堂| 秋霞网—男女啪啪亚洲免费体验区| 欧美专区日本专区| 中文字幕 一区二区 亚洲无码| 国产少妇高潮| 国产亚洲福利第一页丝袜| 国产操操日韩三级黄| 国产日本熟女顶级一区二区三区视频 | 激情视屏国产乱伦强奸| 狠狠干,狠狠操| 日噜夜夜夜夜夜夜夜夜夜夜爽爽爽爽爽爽爽爽爽爽爽爽 | 国产综合网站在线播放 | 欧美日综合| 男啪女色黄无遮挡免费观看| 久久久精品视频免费观看| 色综合尤物| 97超碰天天| 一级AAA片一区二区三区| 秋霞一集毛片观看| 国产蜜臀精品一区免费尤物| 亚精品无码毛片一区二区三区| 上床啊啊啊| 黄色激情电影在线观看| 欧美另类色图片| 久久久精品一区二区| 91操操操操| 俺去俺来也在线www| 91AV天堂| 超97在线精品视频| 国产超碰欧美| 曰韩中文人妻视频| 蜜臀久久99精品久久久老,,| 综合伊人网12色| 久久综合精品一区二区三区| 一本色道综合久久欧美| 日韩人妻精品久久久久| 一本色道熟妇| 混色激情av| 午夜舔阴达高潮视频免费看| 制度丝袜99| 日本天天人人狠狠在线日美女 | 亚洲最新中文字幕免费| 91天天综合网,天天综合网| 亚洲网站一区二区在线| 91色图片| 国产大学生口爆吞精合集| 久久久久78| 欧美特大黄一级片片免费| 亚洲国产ⅴ高清在线观看| 亚洲欧美另类激情小说| 免费观看性欧美一级| www..com操老师| 久久机热| 午夜婷婷| 免费αV在线视频| 欧美在线视频播放| 亚洲日韩美女中文字幕乱| 五月天AV资源| 超碰97欧美在线| 欧美精品23| 亚州欧美综合| 一区二区激情国产熟女| 黄人人操人人操| 狠狠躁天天躁日日躁97| 一区二区日韩欧美久久| 亚欧高清| 91痴汉| 超碰在线974| 国产熟女完整版中字| 伊人网高清| 亚洲免费97免费| 国产极品精品美女视频| 欧美日韩中国x| 五月婷婷丁香六月| 一级aaaaa欧美中文字幕录像片| 亚洲做性| 五毛骚逼极品美女怕怕| 色欧美天天| 国产Aα| 日韩免费中文字幕视频| 九色 蝌蚪 熟女自 | 日韩 欧美 视频 在线 一区| 丝袜足交视频| 中文字幕人乱码中文字的预防方法| 色婷五月| 亚洲欧美日韩精品久| 岛国大片在线观看网站入口| 九九热视频这里只有精品| 中文字幕欧美丝袜07资源| 色五月婷婷久久| 这里只有97精品| 亚洲一区日韩| 国产路线专区| 五月婷婷六月天| 男人的午夜天堂| 9久综合网| 草草草草视频| 爱干爱射网啊啊啊| 综合激情二| 日本999精品| 尤物网址| 91成人亚洲色图| www色婷婷| 97ai亚洲| 亚洲成人性| 亚州男人的天堂| 一区二区三区免费岛国片| 欧美青青草视频| 久久性爱城| 久操影视| 国内毛片无码一级毛片| 男人的天堂va在线| 超碰夫妻97| 久久肏大逼| 日韩少妇无码| 精品国产一区二区三区久久久蜜臀| 天堂无码| 欧美在线55555| 日本色色的视频| 伊人网高清| 激情露脸爱| 日韩不卡a级视频专区| 中文字幕欧美精品亚洲日韩蜜臀| 91丝袜美女| 久久久久亚洲AV无码专区少妇| 国产精品熟妇一区二区三| 亚洲色图殴美色图激情乱伦| 国产97在线视频| 天天看片麻豆| 黑丝内射一区二区三区| 黄色大片免费在线| 女生看匆91网站| 欧美熟妇人体| 国产成人bd在线观看| 久久综合久色欧美综合狠狠| 久久综合18p| 伊人网青青| 青青青青草av在线观看| 91久久久久久| 日本操逼视频不卡直接放| 亚洲 欧美 第一页 | 免费操逼91| 加勒比人妻综合| 国产老熟女| 国内三级自拍小视频在线观看| 一区二区三区四区理论片| 久操操| 九九久久综合| 91小视频| {男男暴菊gay无套网站| 91丝袜美女视频| 亚洲怡春院| 国产亚洲色婷婷99精品91| 天天做天天爱天天爽| 日韩不卡a级视频专区| 国产黄色视频久久| 囯产精品久久久久久久久久二区三区| 一区二区三区成人| 精品伊人久久久大香线蕉小说| 翔田千里爆乳巨臀无码| 97人人爱人人乐| 国产后入清纯| 884t在线| 性老妇一区二区三区| 五月天开心网| 丁香五月激情综合| 96久久精品一二三区色欲| 国产精品黄色三级av| 9色国产精品一区粉嫩| 亚洲九九九九| 欧美丝袜中文字幕07在线| 久久久久久久久久久久久久久性生活视频| 婷婷99狠狠| 亚洲蜜桃V妇女| 久久高清欧美国产| 男女性感激情网站| 国产AV久久野战精品| 97无码视频在线播放| 九七超碰| 91亚州| 国产二区三区免费视频| 日本精品五区| 成人小说另类在线| 亚洲无992tv| 性爱视频免费网址| 亚洲阿v天堂在线| 岛国天天午夜影院传媒网| 视频在线97| 97国产中文| 九九热av| 久久男人天堂| 八戒无码国产午夜福利| 日韩精品在线视频在线观看| 狠狠操夜夜| 美国一区二区三区视频| 黄色性爱网网| 色婷婷久久| 亚洲国产剧情少妇激情| 毛片视频白嫩| 亚洲综合图片在线| 日韩97视频| 欧美偷拍| 91在线视频国产网站| 另类TS人妖一区二区三区| 伊人一区二区在线播放| 亚洲国产一级精品毛一级精品看免费视频| 成人麻豆av电影网站| 麻豆啪啪啪视频| 九九热精品| 99这里有精品| 午夜精品久久久久久久99热影院| 欧美熟女妇同| 亚洲成人在线乱码色午夜| 久久久久久久| 中文字幕人成乱码熟女香港| 岛园激情| 美女的肌被草喷水视频| 亚洲综合骚逼| 国产传媒日韩欧美| 亚洲精品乱码线路中文字幕| 婷婷五月天成人| 蜜色网色哟哟| nuu12国产麻豆精品| 9久久久久| 熟女五十路一区二区三| 亚洲欧美日韩综合在线尤物| 国产女同性恋视频| 激情文学亚洲| 最新av网站在线观看| 91精品啪在线观看国产城中村| 91人人爽人人爽人人人,gav福利视频导航,日韩欧美亚洲国产字幕四区 | 激情文学亚洲| 国产精品香蕉| 久久久久九九九| 99国内精品| 97精品一区| 影音先锋日本乱伦| 吻戏激情性巴克| 91 综合 色| 日韩三级在线观看网站| 最新日产中文在线麻豆| 欧美三级免费伊人| 性欧美| 日韩色| 色综合中文字幕不卡| 超碰天天去日穴| 亚洲h片在线免费观看| 91爽啪| 天天操熟妇| 中国zzijzzijzzwww精品| 日日夜夜天天| 综合亚州欧美| A V视频日本| 大香蕉伊在线久草麻豆天堂故事| 加勒比综合在线| 久干9操| 屌妞视频久久久久久久| 国产午夜精品在线观看| 强免费黄色网址| 熟女91网| 国产一区二区三区久久久精品| 欧美高清性猛交| 国产精品乱码久久久| 亚洲AV成人在线| 中亚黄色三级大片| 温婉少妇玩3p| 青女在线| 少妇xx精品| 天天综合精品| 黄页av| 99在线啪| 韩国一级婬片A片无码天美| 亚洲av热热色| 亚洲欧美日韩免费观看| 欧美丝袜91| 超碰人妻中文在线| 老司机深夜18禁污污网站| 开心五月婷婷激情| 亚洲色天堂九9| 熟女视频久久| 精品人妻一区二区三区蜜桃视频| 91人妻Pr| 一级AAA片一区二区三区| 久久久中文| 91情色在线| 久久免费中文字幕在线观看| 免费国产视频| 九九拍拍精品视频在线播放| 久久精品福利影院| 激情小说亚洲视频| 国产日本久久免费精品| 国产熟码AV| 日韩三级一区 | 欧美激情 亚洲色图| 亚洲欧美综合| 校园春色制服丝袜中文字亚洲| 天天射夜夜骑| 大香蕉国产中文自拍| 欧美v日韩v亚洲v最新在线| 蜜伊人色综合97| 波多野结衣先锋影音| 黄色一区三区| 日本熟妇一区二区三区| 欧美天天性| 欧美大片天天看| 91欧美成人色站| 911粉嫩人妻| 色操逼网| 综合激情五月天| 亚洲综合色图欧美| 有码人妻系列| 久久国产热视频97电影| 丝袜美腿丝袜| 91色碰| 国内亚洲精彩视频在线| 久久国语| 亚洲 欧美 手机在线观看| 新91视频.cmp| 国产视频一区二区免费| 超碰97COm中文| 亚洲激情色片| 久操精品网| 人妻另类 专区 欧美 制服| 一区二区亚州激情久婷婷欧美| 久久久久久久久久8888| 99这里只有精品国产| 一本色道久久综合亚洲二区三区| 日韩一999精品| 性影在线视频| 在线a亚洲视频播放在线| 亚洲和欧美裸体美女双飞视频| 国产精品久久久三级无码| 久久久一区二区三区四区五区| 91路www| 中文字幕一区av| 亚洲精品中文字幕一区在线视频 | 五月丁香激情啪啪| 日韩中文字幕国产| 国产精品片| 国产又粗又长的视频| 大香蕉综合| 囯产精品一区二区三区线|亚洲人成无码网WWW动漫|国产精品免费一级... | 青青五月天| 久久AV色| 少妇天堂网络| 啊啊啊啊啊啊啊国| 免费看久久久性性| 亚洲少妇综合在线播放| 国产精品久久久久久久久久久久| 精久久久| 女人妻一区| 夜夜嗨AV一区天天| 人妻少妇久久久| 欧美专区日本专区| 东北丰满熟女国产一区| 一二三区操逼国产91| 九九久久玖玖| 日韩欧美久久婷婷网站| 国产精品大屁股999| 中文字幕久久亚州无码| AV高清一区| 骚乳在线| 亚洲av在线免费观看| 五月天综合| 国产视频一区二区免费| 成人无码影片视频在线| 最新亚洲黄色免费电影| 久久天堂| 一级黄色性爱裸体视频| 国产女人视频三四五区| 国产一区二区在线播放| 99热这里只有精品1| avav青青草久久夜| 风骚少妇视频中文字幕| 91激情网| 国产免费久久精品99re韩国| 日韩免费a级毛片无码a∨| 无码二级三级| 99夜夜操| 91熟女网| 综合亚洲欧美精品日韩?v| 亚洲欧美高清无码| 国产偷人伦激情在线观看| 国产福利一区二| 91人妻人人澡人人爽人人精品| 国产精品久久久久久久无码AV| 后入人妻无码| 欧美亚洲综合高清在线| 9久在线视频只有精品| 国产精品视频内谢女人| 极品欧美一区二区三区| 黄色免费网| 国产AV精久久| 人人妻人射| 国产操偷| 少妇超碰在线| 婷婷四五区| 91色伦综合| 97国产精品久久久久| 高清视频一区| 欧美亚洲国产91在线| 亚洲图片激情综合另类| 欧美日韩国产色图在线| 强免费黄色网址| 亚洲、日韩、综合、另类| 欧美韩国你懂得在线| 欧美影音在线| 天美传媒婬乱在| 操逼操2| 国产精品久久久久久 百度| 五月婷婷五月天| 暖暖精品二区三区观看| 久久宗合亚洲| 传媒在线观看一区二区三区| 欧美性生活男人的天堂| 91人妻精华帖| www久久99| 久久av色| 欧美手机在线综合| 无遮挡男女激烈动态图| 黄网色一区二区三区四区精品| 色墦五月丁香| 热热热热日日漂亮永久永久国产日| 亚洲影视第一页| 超碰精品日韩欧美国产| 少妇滛荡视频| 中文字幕一区 二 区 三 四 五 区日 日 骚 | 狠狠操综合| 中文字幕乱碼在线| 亚洲人妻色图| 国产a片操逼| 懂色AV一区二区三区| 加勒比综合a∨| 粉嫩av在线| 日本欧美国内在线| 青青草日韩无码| 九久久精品| 中国一级操逼视频| 久久久com| 欲女人妻性色av| 久久嫩草| 岛国成人av在线播放网址| 试看福利| 国产400孕妇孕交群| 亚洲各类熟们中文字幕| 久9久精品视频| 亚洲图片欧美| 五月激情综合网| 亚欧美综合网。| 性爱视频免费网址| 久久综合18p| 欧美韩日精品99综合| 国产高清MV操逼视频| 国内精品999| 日韩本不卡视频在线观看 | 日本一区二区不卡| 国产成人网址| 一区二三区四区视频大全套| 91精品国| 日产狠狠干| 强奸乱伦免费网站| 综合天天。| 五月天婷婷久久| 五月丁香色综合| 青青草中出视频| 亚洲免费在线探花| 国产97色在线| 久久天堂网| 久久人妻97久久久久久久| 黄久久| 久久成年片色大黄全免费网站| 欧美美女自慰一区二区三区| 天天综合-91入口| 91九色精品熟女内射| 蜜臀久久99精品久久久久电影| 家庭乱伦网站国产| 一区二区播放| 综合网色| 久久三区四区| 国模一区二区三区| 97超碰人人操人人操| 一二三四免费视频| 秋霞色色影院| 久久男女激情视频网站| 97中文字幕一区| 中文字幕在线观看丝袜| 99久久99九九99九九九| 亚洲天堂,男人| 精品国模无码| 日少妇亚洲版| 乱伦图av| 大香蕉人妻久久| 91精品久久久久久综合五月天| 天天92av| 麻豆区99999| 国产高清视频无码在线| 亚洲熟女一区| 亚洲精品啪视频| 青青青青青手机视频| 淫色网综合| 天天视频网站黄| 国产九九九九九九| 国产久久一区二区午夜| 婷婷涩嫩草鲁丝久久午夜精品| 欧美久久久15P| 亚洲 欧美日韩 另类| 四季av一区二区凹凸精品小说| 国产在线76页| 污污汅18禁网站在线永久免费观看 | 亚洲夜夜欢无码一区二区 | 97综合激情| 久久超碰、| 国产小u女在线观看| 色综合大香蕉| 四虎国产成人精品免费一女五男| 一区三区啪啪| 老熟女91视频| 日本中文字幕一区| 精品 码产区一区二-1080P高清在线www-B029AV| 欧美偷拍| 久久男人网| 人妻99p| 色黄污美女啪啪啪免费网站| 日本二区不卡| 免费看污网站| 蜜乳av首页| 国产一级137片内射麻豆| 国产精品久久久午夜夜伦鲁鲁| 精彩国产视频播放1区2区| 91狼人| 综合久久久久久久久91| 欧洲色综合| 伦在线97| 日日干夜夜干| 日本一本道A级黄色毛片试看60分钟| 蜜臀久久99精品久久久久久无删减 | 九久9热| 黄片免费看黄片免费看| 98人妻精品一区二区色欲| 外国免费性情大片| 成人熟女区| 欧美另类色图片| 大香蕉免费乱伦视频| 中国和日本人色哪个不下载能放| 精品亚州18| 开心六月色| 伊欧美综合视频| 欧美福利视频啊啊啊啊| 葡萄牙性视频一二区| 嗯~啊~轻一点 视频| 熟女中出视频| 中文字幕精品人妻丝袜| 青青草日韩无码| 综合免费无码中文| 亚洲欧洲综合av在线| 欧美成年人性爱视频免费观看| 伊人性在线视频| 欧美日本视频一区| 校园春色欧美| 97视频7| 超碰在线人妻不卡| 九九九久千久久激情蜜桃在线看 | 欧美探花网| 人妻无一区二区三区| 日本中文字幕在线视频| 乱码熟妇人妻久久久| 神马久久久久眼| 婷婷四五区| 色九区| 色色色热| 蜜桃久久综合视频| 午夜男女爽爽爽在线视频| 亚洲国产婷婷在线播放| 欧美不卡五十路| 极品另类| 精品一区二区三区麻豆| 试看60秒 爽| 精品久久久久久中文字幕视频免费| 欧美日韩传媒| 久久这里只| 青草综合| 久久久精品中文字幕爱豆| 白丝AV| 强被迫伦姧在线观看无码网站| 91AV入口| 俺去啦俺来也久久综合 | 97超碰色屌| 淫色网综合| 97色涩| 久久后入制服| 78精品|