久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

Oracle Data Guard 切換前就緒度檢查與基線對比

Oracle Data Guard 切換前就緒度檢查與基線對比 簡介dgreadiness_v3.6.zip 面向在 Windows 10 上使用 VMware Workstation 運行 Ubuntu 等虛擬機(jī)的開發(fā)與運維人員針對關(guān)閉 Hyper-V 后仍提示 VMware 與 Device/Credential Guard 不兼容、虛擬機(jī)無法啟動的問題提供基于 Windows Defender Device Guard 與 Credential Guard 硬件就緒工具的禁用方案。壓縮包共 6 個文件約 32KB包含 PowerShell 工具腳本、p7b 策略文件、xml 配置模板和 txt 說明文檔分別用于執(zhí)行禁用配置、承載策略設(shè)置、提供審計/強(qiáng)制模式模板及使用說明體量輕便、結(jié)構(gòu)明確。已有 3189 人學(xué)習(xí)下載說明該問題在 Win10 虛擬機(jī)場景中較常見。讀者可借助其中的腳本與策略模板快速完成 Credential Guard 關(guān)閉減少手動修改組策略和注冊表的試錯成本也可據(jù)說明文檔理解各配置項作用為同類兼容性排錯提供參考。1. dgreadiness_v3.6.zip 不是安裝包是切換前的一張體檢單dgreadiness_v3.6.zip 這個名字本身就說明了它的形態(tài)一個壓縮包、帶版本號、沒有安裝向?qū)Ы忾_來是一堆 SQL 和 shell。它的作用不是部署容災(zāi)而是在你已經(jīng)有一套主備庫主庫 一個或多個備庫之后回答一個很具體的問題——現(xiàn)在這一刻我敢不敢做切換演練很多團(tuán)隊的做法是切之前拉個會幾個人分別敲幾條命令看看憑感覺拍板這個包要做的事是把這些零散判斷固化成一份可重復(fù)、可對比、可交給別人的報告。它適合兩類人一類是要定期做容災(zāi)演練的 DBA另一類是接手了一套沒人維護(hù)的備庫、想先摸清底細(xì)的運維。讀完你能自己解包、配連接、改檢查項、定閾值也知道哪些綠燈其實是假的。2. 就緒度先立標(biāo)準(zhǔn)六類檢查項和它們的權(quán)重怎么定打開一個 readiness 包最忌諱的動作是直接bash run.sh然后盯著輸出里紅色的那幾行看。紅色代表什么、多紅才算不能切、這次紅下次綠是環(huán)境變了還是腳本抽風(fēng)——這些問題在腳本里沒有答案得你自己先定。所以第一章不做操作先把“ready”這個詞拆成可判定的指標(biāo)。2.1 傳輸層、應(yīng)用層、結(jié)構(gòu)層就緒度的三個觀察面我把所有檢查項歸到三個觀察面這個分法決定了后面報告的排版也決定了排錯時的查找順序。傳輸層看的是日志能不能從主庫順利落到備庫歸檔目的地狀態(tài)是不是 VALID、有沒有 ERROR 文本、傳輸延遲多少、歸檔目的地所在文件系統(tǒng)的剩余空間、網(wǎng)絡(luò)往返時延和帶寬是否夠峰值 redo 量。這一層出問題表現(xiàn)是備庫長時間收不到新日志但主庫業(yè)務(wù)一切正常最容易被忽略。應(yīng)用層看的是日志到了之后有沒有被真正應(yīng)用MRP 進(jìn)程在不在、狀態(tài)是 APPLYING_LOG 還是 WAITING_FOR_LOG、應(yīng)用延遲多少、備庫已應(yīng)用的最大序列號和主庫當(dāng)前序列號差多少、有沒有歸檔缺口GAP。這一層最容易出“假綠燈”后面避坑那章會專門講。結(jié)構(gòu)層看的是兩邊長得像不像db_unique_name 和 log_archive_config 是否互認(rèn)、standby_file_management 是否 AUTO、保護(hù)模式和 redo 傳輸是 SYNC 還是 ASYNC、standby redo log 的組數(shù)和單組大小、臨時文件和數(shù)據(jù)文件路徑、密碼文件、以及多租戶下每個 PDB 的狀態(tài)。結(jié)構(gòu)層的問題平時完全不疼一切換就卡死是典型的“平時不查、演練翻車”。三個面里傳輸層和應(yīng)用層是動態(tài)指標(biāo)數(shù)值會隨業(yè)務(wù)波動結(jié)構(gòu)層是靜態(tài)指標(biāo)除非有人改配置否則長期不變。這個差異直接影響采集頻率動態(tài)指標(biāo)要頻繁采、看趨勢靜態(tài)指標(biāo)一次采完存成基線就行不必每次全量跑。提示如果包里的檢查項命名和上面不一樣不要急著改腳本先按這三個面把現(xiàn)有項歸類缺哪一類再補(bǔ)比重寫省事得多。2.2 權(quán)重怎么定按「切換后多久能對外服務(wù)」倒推權(quán)重不是技術(shù)參數(shù)是業(yè)務(wù)參數(shù)。我的做法是問一句話這一項不達(dá)標(biāo)切換后要多花多久才能對外服務(wù)答案越長權(quán)重越高。按這個口徑歸檔缺口和結(jié)構(gòu)層錯配是最貴的——缺口意味著要補(bǔ)日志甚至重建結(jié)構(gòu)錯配意味著切換根本起不來這兩類給高權(quán)重傳輸延遲和應(yīng)用延遲影響的是切換瞬間丟多少數(shù)據(jù)、追平要多久中等權(quán)重目的地狀態(tài)、SRL 配置這類屬于“不達(dá)標(biāo)立刻知道、修起來也快”的低權(quán)重。檢查項觀察面權(quán)重不達(dá)標(biāo)后果歸檔序列缺口應(yīng)用層25需補(bǔ)日志或重建備庫參數(shù)與結(jié)構(gòu)一致性結(jié)構(gòu)層20切換可能直接失敗應(yīng)用延遲應(yīng)用層20切換后追平日志耗時長傳輸延遲傳輸層15數(shù)據(jù)丟失窗口變大目的地狀態(tài)與錯誤文本傳輸層10日志傳輸中斷SRL 組數(shù)與大小結(jié)構(gòu)層10切換時日志寫不下這張表不需要照抄權(quán)重之和湊夠 100 就行關(guān)鍵是每一項的權(quán)重你能對著業(yè)務(wù)說清楚理由。說不清理由的項要么刪掉要么降權(quán)別放在那里制造噪音。2.3 判定口徑要先寫死否則報告沒法比較分?jǐn)?shù)之外還要有檔位否則你只知道“78 分”不知道“78 分能不能切”。我一般分三檔PASS、WARN、FAIL。PASS 拿滿分WARN 拿一半FAIL 拿零分。但光有分?jǐn)?shù)不夠——結(jié)構(gòu)層錯配這種項哪怕總分 95 也不能切所以還要引入“否決項”概念歸檔缺口、SRL 配置、參數(shù)一致性這三項只要有一個 FAIL無論總分多少都判定為 NOT READY。這樣做的好處是報告有兩層結(jié)論分?jǐn)?shù)用來橫向比較這次 92、上次 88是在變好還是變差否決項用來縱向決策能不能現(xiàn)在切。只給分?jǐn)?shù)人會拿分?jǐn)?shù)當(dāng)擋箭牌只給否決項又看不出趨勢。兩者都要。還有一條容易被忽略口徑要寫進(jìn)配置文件不要寫死在腳本里。閾值、權(quán)重、否決項名單都放conf/env.conf這樣半年后別人接手改一個數(shù)字就能適配另一套庫不用讀懂 SQL。3. 解包與首輪巡檢三條命令跑出第一份報告標(biāo)準(zhǔn)立完動手。這一章的目標(biāo)不是跑出完美報告是在 20 分鐘內(nèi)跑出第一份“能看”的報告哪怕里面一半是 FAIL——先有基線再談優(yōu)化。3.1 解包與目錄約定先固定路徑再談自動化不要在原目錄里直接解壓。壓縮包解開后通常有bin/、sql/、conf/、out/這幾類目錄如果每次巡檢都解到不同路徑報告會散落在各處后面想做趨勢對比就得靠人肉找文件。我固定用一個版本化路徑# 固定安裝路徑按版本號分目錄升級時并存而不是覆蓋 sudo mkdir -p /opt/dgcheck/3.6 sudo unzip -q dgreadiness_v3.6.zip -d /opt/dgcheck/3.6 # 看一眼結(jié)構(gòu)確認(rèn)入口腳本和 SQL 目錄在哪 find /opt/dgcheck/3.6 -maxdepth 2 -type d | sort ls -l /opt/dgcheck/3.6/bin/ 2/dev/null || ls -l /opt/dgcheck/3.6 # 腳本給執(zhí)行權(quán)限但不要給全局可寫 sudo chown -R dbcheck:dba /opt/dgcheck/3.6 sudo chmod -R 750 /opt/dgcheck/3.6 sudo chmod 640 /opt/dgcheck/3.6/conf/*.conf 2/dev/null這段的關(guān)鍵點在三處。-d指定目標(biāo)目錄避免解壓出來的文件平鋪在當(dāng)前目錄把家目錄搞亂。find -maxdepth 2是先摸清結(jié)構(gòu)再決定怎么調(diào)因為不同打包習(xí)慣里入口腳本可能在bin/也可能在根目錄ls一次就知道比自己猜快。chmod 640給配置文件是因為里面通常有連接串和口令權(quán)限放開等于把庫的鑰匙掛在墻上。專用運行賬號也是必要的一步。我一般建一個只讀賬號dbcheck跑巡檢讓它屬于dba組以便讀v$視圖但不給它sysdba。巡檢腳本只需要看狀態(tài)不需要改任何東西——一個能改東西的巡檢腳本某天就會改錯東西這是血淚經(jīng)驗。注意如果包里帶.sh之外的可執(zhí)行文件比如編譯好的采集二進(jìn)制先用file看一眼架構(gòu)和依賴別在 x86 機(jī)器上跑 arm 的產(chǎn)物報錯信息會誤導(dǎo)你以為連不上庫。3.2 連接配置與最小巡檢命令配置文件只放連接信息和閾值不放任何邏輯。常見做法是conf/env.conf這種以 shell 變量形式被source進(jìn)來的文件# conf/env.conf —— 只放連接與閾值邏輯一律進(jìn)腳本 PRIMARY_TNSdg_primary # 主庫連接串走 tnsnames 或等價命名 STANDBY_TNSdg_standby # 備庫連接串 RUN_USERdbcheck # 巡檢專用賬號非 sysdba THRESH_TRANSPORT_LAG60 # 傳輸延遲告警線單位秒 THRESH_APPLY_LAG120 # 應(yīng)用延遲告警線單位秒 THRESH_ARCHIVE_GAP0 # 允許的序列缺口通常為 0 THRESH_FRA_PCT85 # 歸檔區(qū)使用率告警線百分比 DENY_ITEMSarchive_gap,srl_config,param_diff # 否決項名單四個閾值里前三個是硬指標(biāo)最后一個歸檔區(qū)使用率是很多人不做但極容易翻車的項——歸檔區(qū)滿的那一刻主庫會掛起備庫也跟著停屬于“平時不查、爆起來要命”的類型。DENY_ITEMS是把第 2 章的口徑落地的字段后面折算報告時直接讀這個變量。配好之后首輪就跑最小集合一個主庫側(cè)、一個備庫側(cè)別一上來跑全套不然輸出里幾百行你不知道哪行是關(guān)鍵的。#!/usr/bin/env bash # bin/first_run.sh —— 首輪最小巡檢只采集傳輸與應(yīng)用兩個面 set -uo pipefail BASE/opt/dgcheck/3.6 source $BASE/conf/env.conf TS$(date %Y%m%d_%H%M%S) OUT$BASE/out/$TS mkdir -p $OUT # 主庫歸檔目的地狀態(tài) 當(dāng)前最大序列 sqlplus -S $RUN_USER$PRIMARY_TNS $BASE/sql/10_primary.sql \ $OUT/primary.txt 21 # 備庫應(yīng)用進(jìn)程狀態(tài) 已應(yīng)用序列 sqlplus -S $RUN_USER$STANDBY_TNS $BASE/sql/20_standby.sql \ $OUT/standby.txt 21 echo report dir: $OUT grep -iE error|ORA-|SP2- $OUT/*.txt echo 存在錯誤先看上面幾行 || echo 采集無報錯set -uo pipefail沒有加-e這是有意的首輪巡檢最怕的是某項失敗就整體退出導(dǎo)致你只看到第一個問題、看不到后面的問題。所以讓每個采集動作各自失敗、各自留痕最后統(tǒng)一 grep 一遍錯誤關(guān)鍵字。-S是靜默模式去掉客戶端橫幅和提示符輸出更干凈后面好解析。時間戳精確到秒是為了同一天多次演練時不覆蓋文件。grep -iE error|ORA-|SP2-這行是一個廉價但有效的兜底。數(shù)據(jù)庫客戶端的報錯文本格式很好認(rèn)寬泛匹配一下就能把“沒連上庫”和“連上了但查詢出錯”區(qū)分開——這兩種情況后面的處理完全不一樣。3.3 輸出目錄與失敗兜底o(hù)ut/目錄要有輪轉(zhuǎn)策略別等它撐滿。一次全量巡檢的輸出不大但每天跑、跑半年加上有人手動重跑很容易堆到幾百個目錄。我一般保留最近 30 次全量 所有“變更前后”的對比目錄其余刪除# 只保留最近 30 個時間戳目錄其余清理命名規(guī)則必須嚴(yán)格按時間戳 cd /opt/dgcheck/3.6/out || exit 0 ls -1d 2*/ | sort | head -n -30 | xargs -r rm -rf前提是目錄名嚴(yán)格是YYYYMMDD_HHMMSSsort的字典序才等于時間序。如果包自帶的輸出目錄用了別的命名比如帶主機(jī)名就先改命名規(guī)則再用這條命令否則head -n -30刪掉的可能是昨天剛跑的基線這種翻車比不清理更糟。失敗兜底還有一個細(xì)節(jié)退出碼。巡檢腳本的退出碼要能被上層調(diào)度感知——0 表示全 PASS1 表示有 WARN2 表示有 FAIL 或否決項。這樣掛到定時任務(wù)或流水線上不用解析文本就知道結(jié)果。很多包默認(rèn)只 echo 不 return接進(jìn)自動化就得自己補(bǔ)這幾行。4. 改 SQL 與定閾值把通用檢查項調(diào)成你庫的形狀一份通用腳本跑在你自己的庫上一定會有一半檢查項“看起來對但不準(zhǔn)”。這不是腳本的問題是每套庫的形態(tài)差異太大有的單實例、有的多租戶有的保護(hù)模式要求零丟失、有的能接受幾分鐘延遲有的 redo 峰值每秒幾十兆、有的幾百 K。所以第三章的核心動作是改改 SQL 的取數(shù)口徑、改閾值的紅線位置。4.1 三類必改的 SQL序列缺口、備庫日志、參數(shù)一致性序列缺口是最該改的一條。很多腳本只查應(yīng)用延遲但延遲是個瞬時值——剛剛應(yīng)用完一批日志延遲會顯示接近 0哪怕中間其實缺了一段日志沒傳過來。真正的缺口要看序列號連續(xù)性-- sql/30_gap.sql主庫側(cè)取每個線程的當(dāng)前序列 set lines 200 pages 100 feedback off heading on col thread# format 999 col cur_seq format 9999999 select thread#, max(sequence#) as cur_seq from v$thread group by thread# order by thread#;-- sql/31_applied.sql備庫側(cè)取每個線程已應(yīng)用的序列 col thread# format 999 col applied_seq format 9999999 select thread#, max(sequence#) as applied_seq from v$archived_log where applied YES group by thread# order by thread#;邏輯說明主庫的v$thread給出每個線程當(dāng)前寫到哪備庫的v$archived_log里appliedYES的最大值給出應(yīng)用到哪。兩者相減就是缺口。多線程RAC 形態(tài)下必須按 thread 分別算只取全局最大值會漏掉某個線程掉隊的場景——這種場景在小庫上不常見在大庫上就是演練失敗的常見原因。參數(shù)說明appliedYES這個過濾條件是關(guān)鍵去掉它拿到的是“收到了多少”而不是“應(yīng)用了多少”這兩者在備庫開啟實時應(yīng)用時差別很大。如果你的庫用的是備庫實時應(yīng)用還可以補(bǔ)一條查v$standby_apply_progress但對缺口判斷來說上面兩條已經(jīng)夠用。**備庫日志SRL**是最容易被跳過的一條因為它不影響日常運行只影響切換-- sql/40_srl.sql兩邊分別跑比對組數(shù)與單組大小 col group# format 999 col mb format 9999 select group#, thread#, bytes/1024/1024 as mb, status from v$standby_log order by thread#, group#; select group#, thread#, bytes/1024/1024 as mb from v$log order by thread#, group#;判據(jù)是經(jīng)驗值備庫 SRL 的組數(shù)不少于主庫在線 redo 組數(shù) 每線程 1 組單組大小與主庫一致不能小于。組數(shù)不夠切換瞬間會因為無處寫日志而卡住大小不一致切換后可能出現(xiàn)頻繁切換log switch拖慢性能。這兩條都屬于“不改也沒事、一切換就死”的類型。參數(shù)一致性要挑真正影響切換的那幾個別把全部參數(shù)拉出來比對噪音太大-- sql/50_param.sql只比對與容災(zāi)強(qiáng)相關(guān)的參數(shù) col name format a32 col value format a48 select name, value from v$parameter where name in ( db_unique_name,log_archive_config,log_archive_dest_state_2, standby_file_management,protection_mode,archive_log_format, db_recovery_file_dest_size,remote_login_passwordfile ) order by name;這十個參數(shù)里log_archive_config少寫一個備庫名、standby_file_management是 MANUAL、remote_login_passwordfile不是 EXCLUSIVE任意一條都能讓切換直接失敗。db_recovery_file_dest_size放在這里是很多人的疑問——它影響的是歸檔空間不在切換時立刻報錯但會在切換后補(bǔ)日志階段把空間撐爆屬于第二波翻車。提示參數(shù)比對一定要在主備兩邊都跑同一條 SQL 再 diff不要拿主庫的輸出去和心里記著的備庫配置比記憶比腳本更容易錯。4.2 閾值不是拍腦袋用歷史延遲分布定紅線THRESH_APPLY_LAG120這個數(shù)字從哪來很多人是從別人的腳本里抄的。抄來的數(shù)字有兩個問題一是和自己的業(yè)務(wù)量不匹配二是沒人知道為什么是 120。我的做法是先裸跑兩周只采集不判定把每次的傳輸延遲、應(yīng)用延遲記下來然后看分布分位傳輸延遲應(yīng)用延遲用途p502 秒15 秒常態(tài)參考不必告警p9540 秒90 秒WARN 線留出批量作業(yè)的余量p9975 秒150 秒FAIL 線超過說明真的出問題了規(guī)律很樸素WARN 線設(shè)在 p95 附近FAIL 線設(shè)在 p99 或 p95 的兩倍。這樣日常波動不會天天報警真出事的時候一定越線。設(shè)置完還要回頭看一次——如果一周內(nèi) WARN 觸發(fā)了十幾次說明線畫低了或者這條鏈路的容量本來就不夠該擴(kuò)容而不是調(diào)閾值。批量作業(yè)窗口要單獨對待。夜間跑大批量的時候apply lag 從 15 秒沖到 300 秒是正常的如果這時 FAIL 了你會收到一堆無效告警然后開始忽略告警——這是運維里最危險的狀態(tài)。解決辦法是給批量窗口單獨一組閾值按時間切換配置而不是把全局閾值放寬到 300 秒那樣等于白天也不告警了。4.3 把文本輸出收斂成一張就緒度表采集出來是一堆文本人看得懂、腳本看不懂。中間加一層折算把關(guān)鍵指標(biāo)壓成keyvalue再交給一個小腳本算分# 采集腳本末尾把關(guān)鍵指標(biāo)壓成一行一個鍵值供折算腳本消費 { echo archive_gap$ARCHIVE_GAP echo apply_lag$APPLY_LAG echo transport_lag$TRANSPORT_LAG echo dest_status$DEST_STATUS echo srl_ok$SRL_OK echo param_diff$PARAM_DIFF } $OUT/metrics.kv#!/usr/bin/env python3 # bin/score.py —— 把 metrics.kv 折算成就緒度分?jǐn)?shù)與結(jié)論 import sys, os WEIGHTS {archive_gap: 25, param_diff: 20, apply_lag: 20, transport_lag: 15, dest_status: 10, srl_ok: 10} DENY set(os.environ.get(DENY_ITEMS, ).split(,)) def load(path): kv {} with open(path, encodingutf-8) as f: for line in f: line line.strip() if not line or not in line: continue k, v line.split(, 1) kv[k.strip()] v.strip() return kv def judge(key, raw, kv): # 數(shù)值型指標(biāo)與閾值比較非數(shù)值型按 1/0 判定 if key archive_gap: return PASS if int(raw) 0 else (WARN if int(raw) 3 else FAIL) if key in (apply_lag, transport_lag): warn float(os.environ.get(THRESH_ key.upper(), 120)) v float(raw) return PASS if v warn else (WARN if v warn * 2 else FAIL) return PASS if raw in (1, VALID, TRUE) else FAIL def main(path): kv load(path) score, denies, rows 0.0, [], [] for key, w in WEIGHTS.items(): if key not in kv: rows.append((key, MISSING, 0)) continue res judge(key, kv[key], kv) got w if res PASS else (w * 0.5 if res WARN else 0) score got if res FAIL and key in DENY: denies.append(key) rows.append((key, res, got)) for k, r, g in rows: print(f{k:16s} {r:8s} {g:5.1f}) verdict NOT READY if denies else (READY if score 90 else RISKY) print(f\nscore{score:.1f} verdict{verdict} deny{,.join(denies) or -}) if __name__ __main__: main(sys.argv[1])邏輯上分三層。WEIGHTS是第 2 章那張表的代碼化judge是個小狀態(tài)機(jī)把原始數(shù)值翻譯成 PASS/WARN/FAIL注意 WARN 的判定用的是“閾值的兩倍”這樣只改一個配置就能同時控制兩檔最后主線按權(quán)重累加denies收集否決項。指標(biāo)缺失MISSING單獨記一檔而不是直接 FAIL因為缺失往往是采集失敗不是環(huán)境壞混在一起會誤導(dǎo)排查方向。參數(shù)說明DENY_ITEMS從環(huán)境變量讀是為了讓同一份腳本能跑“演練前嚴(yán)格模式”和“日常寬松模式”兩套口徑不用改代碼。閾值同樣從環(huán)境變量兜底o(hù)s.environ.get(..., 120)保證腳本單獨運行也不崩。跑起來驗證一下# 用一次真實采集結(jié)果折算先看分?jǐn)?shù)再看否決項 cd /opt/dgcheck/3.6 DENY_ITEMSarchive_gap,srl_ok,param_diff python3 bin/score.py out/20240101_020000/metrics.kv輸出如果verdictNOT READY但score92.0說明分?jǐn)?shù)被某一兩個高分項撐著否決項里有 FAIL——這正是第 2 章說的“分?jǐn)?shù)管趨勢、否決項管決策”別被 92 分騙了。5. 排查記錄五個讓報告「全綠」卻切不過去的坑5.1 延遲顯示 0 秒但備庫落后兩小時現(xiàn)象報告里 apply lag 一直是 0 到 2 秒看起來健康真做切換時發(fā)現(xiàn)丟了大量數(shù)據(jù)業(yè)務(wù)對賬對不上。原因apply lag 的語義是“最近一條已應(yīng)用日志的應(yīng)用時間與當(dāng)前時間之差”它衡量的是“追平速度”不是“落后多少”。如果日志根本沒傳到備庫備庫無日志可應(yīng)用這個值反而會很小甚至為 0——這是最典型的假綠燈。解決把歸檔缺口序列號差值作為主判據(jù)延遲只作為輔判據(jù)。缺口不為 0 時無論延遲多好看都判 FAIL。這條一定要進(jìn)否決項名單。5.2 SRL 組數(shù)和主庫一樣多切換仍然卡住現(xiàn)象比對下來 SRL 組數(shù)“看起來夠”切換演練時仍然在 redo 寫入階段卡了幾十秒。原因組數(shù)夠但單組大小小于主庫的在線 redo切換后日志切換頻率暴增或者組數(shù)是照“主庫組數(shù)”配的沒有算上每線程多一組的余量。多線程環(huán)境下每個線程都需要獨立的 SRL 組共用一個組池也會卡。解決按“每線程主庫在線組數(shù) 1”配單組大小嚴(yán)格等于主庫 redo 大小字節(jié)數(shù)一致而不是四舍五入后的兆數(shù)一致。改完重跑 4.1 里那條 SRL SQL 確認(rèn)。5.3 巡檢賬號權(quán)限過高審計上翻車現(xiàn)象腳本跑得好好的某次安全審計里被指出巡檢使用了高權(quán)限賬號且口令明文放在配置文件里。原因為了省事直接用了最高權(quán)限賬號順手把口令寫進(jìn)env.conf文件權(quán)限還是 644。解決換專用只讀賬號只授查詢v$視圖所需的最小權(quán)限配置文件權(quán)限收到 640 并限定屬組口令改走外部認(rèn)證或憑據(jù)文件不進(jìn)版本庫。這條不是技術(shù)問題但會真的讓項目停掉早改比晚改省事。5.4 輸出目錄把磁盤撐滿反過來拖垮歸檔現(xiàn)象某天主庫歸檔區(qū)寫滿業(yè)務(wù)掛起查下來是巡檢報告占了同一個文件系統(tǒng)。原因out/目錄沒做輪轉(zhuǎn)加上有人為了排查重復(fù)手動跑全量一年下來堆了上千個目錄。巡檢工具本身成了故障源這個坑我見過不止一次。解決輸出目錄和歸檔區(qū)物理隔離別放同一個掛載點加輪轉(zhuǎn)3.3 那條并給巡檢腳本本身加一個“單次輸出不超過 N 兆”的保護(hù)——如果超了說明采集范圍寫錯了應(yīng)該報錯而不是繼續(xù)寫。5.5 多租戶下 PDB 狀態(tài)沒納入檢查現(xiàn)象容器庫層面全綠切換后發(fā)現(xiàn)某個 PDB 處于 MOUNT 或者沒開讀寫。原因檢查項只查了容器級視圖沒有遍歷 PDB。多租戶環(huán)境里 PDB 的狀態(tài)是獨立管理的容器級看起來一切正常。解決在結(jié)構(gòu)層加一條遍歷 PDB 的查詢把每個 PDB 的打開模式和恢復(fù)狀態(tài)列出來任一 PDB 不是 READ WRITE 就判 WARN若你的業(yè)務(wù)依賴該 PDB 則升級為 FAIL。這條屬于“不查不知道、查了才發(fā)現(xiàn)”的類型建議第一次就補(bǔ)上。6. 把它釘進(jìn)演練流程基線對比與回歸的兩種做法跑通一次巡檢不算什么能讓它在半年后仍然是團(tuán)隊判斷切換時機(jī)的依據(jù)才算落地。我用兩種做法把它釘住定時留基線變更前后做 diff。定時巡檢我掛在業(yè)務(wù)低峰只跑全量并把結(jié)果目錄按“日期_類型”命名類型分daily和drill。daily每天一次用來攢趨勢數(shù)據(jù)drill只在演練和變更前跑用來做決策。兩者閾值可以不同daily用寬松口徑只看異常drill用嚴(yán)格口徑加全部否決項。這樣平時不會天天被報警吵真要切換的時候有一個不會說謊的口徑。# 低峰定時每日基線 目錄按類型分方便后面按類型做趨勢 30 2 * * * /opt/dgcheck/3.6/bin/run_all.sh -t daily \ /opt/dgcheck/3.6/out/cron.log 21 # 演練前手工嚴(yán)格口徑帶完整否決項 # /opt/dgcheck/3.6/bin/run_all.sh -t drill第二種做法更重要變更前后做 diff而不是看單次分?jǐn)?shù)。因為分?jǐn)?shù)會騙人——加了個索引、換了批處理時間分?jǐn)?shù)可能從 88 漲到 93但某項具體指標(biāo)其實是惡化的只是被其他項蓋過去了。所以我每次都把metrics.kv和上一次 drill 的做逐鍵對比# 變更前后逐鍵 diff只關(guān)心變化方向和幅度 diff (sort out/20240101_drill/metrics.kv) \ (sort out/20240201_drill/metrics.kv) | grep -E ^[]輸出里是變更后是變更前。如果archive_gap從 0 變成 1哪怕分?jǐn)?shù)還在 90 以上也要停下來查——缺口從 0 到 1 往往意味著某個歸檔目的地開始間歇性失敗這種早期信號只有 diff 抓得到。還有一個我踩過的細(xì)節(jié)基線要跟著版本走。升級到 3.6 之后新增了檢查項舊基線里沒有這些鍵diff 出來一堆看著像惡化其實是新增。所以升級后第一件事是重跑一次 drill 生成新基線并把舊基線的metrics.kv單獨歸檔不要混在同一個目錄里比。我自己的習(xí)慣是每次演練前打印一行結(jié)論貼在工單里score / verdict / deny 列表 / 與上次 drill 的差異項。四個字段誰看都清楚也逼著自己別只看總分。這套東西的價值不在腳本多聰明在于它把“我覺得可以切”變成“這份報告說可以切而且和上次比沒變差”——前者靠人后者能交接。希望幫到你。本文還有配套的精品資源點擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
激情欧美97| 国产精品一区二区手机看片| 亚洲色图欧洲| 亚洲欧美第一页| 国产精品国产亚洲区艳妇糸列| 99久久亚洲精品无码毛片潘甜甜| 欧美激情性久久久久久| 久超碰这里只有精品| 99热在线播放| 一区二区三区免费岛国片| 成人午夜视频免费播放| 国产在线综合福利网站| 国产精品久久泡妞网站| 一级性爱视频免费观看| 屌逼传媒| 97视频www| 91亚洲情色| 91久久免费视频互動交流| 亚洲熟女性高潮久久久| 看日韩美女二区三区免费操逼视频| 91色女| 久久天天躁日日躁狠狠躁| 天美传媒在线一区| 久久东京热久久| 亚洲精品白浆高清久久久久久| 熟女精品va中文字幕| 亚洲国产无码精品首页久久久| 无码人妻一区二区一牛影视| 精品中文字幕一区二区| 亚洲中文字幕噜噜噜久久久| 亚洲黄色AV电影| 天天夜躁日日躁狠狠2002| 亚洲女毛多水多21P| 一二三四免费视频| 九色 蝌蚪 熟女自 | 99热这里是精品| 九九精品美女高溯喷水| 91精品国产乱码| 久久久噜噜噜久久久| 中文字幕伊人| 一道α片欧美| 九九99精品视频在线观看| 青青草吊丝| 夜夜爽夜夜操| 国产三区免费在线观看| 亚洲视频一二区| 91综合网在线| www黄片免费看com| 久久同城AV| 白丝AV| 成人八戒网站| 亚洲aw毛茸茸在线| 97亚洲精品超碰| 亚洲av性爱电影| 免费综合亚洲中文| 在线亚洲丝袜视频网站| 国产精品福利视频| 色墦五月丁香| 久热精品在线| 狠狠色噜噜狠狠狠狠狠色综合久久| 又大又白奶子| 日韩91网站| 欧美,日韩,亚洲视频| 影音先锋一区二区在线资源| 91美女视频| 综合久久中文字幕综合日韩精品 | 九九英色视频| 肉动漫无遮挡h在线观看| 丰满的三级少妇欧美久久久| 欧美色图片欧美色图| 影音先锋每日最新资源在线观看| 亚洲av夫妻操穴网| 东京热AV男人的天堂| 欧美日韩国产高清在线一二三区 | 欧美激情久久久久| 26uuu性| 久久久亚洲精品电影免费看| 天美传媒AV在线| 噜噜噜无码AV一级一级久久影院| 欧洲大香蕉| 亚洲一区二区三区中文字幕| 夜夜骑操视频| 五月婷婷六月丁香网址| 十八禁黄色成人网站观看| 翔田千里AV无码秘 三区| 日韩另类色图| 国产又色又粗又黄又爽| 9 9无尺码天堂网| 国产亚洲中文不卡二区| 91精品免费| 国产三级资源在线观看| 91爱看| AV在线性爱| 人妻在线中出视频| 性爱AV天堂| 肏逼视频日本| 求求你操操我| 国产福利小视频高清在线观看| 色老牛| 日韩国产欧美伦理在线| 啊啊啊好疼| 乱伦3P视频| 1024午夜激情男人的天堂| 精品人妻中文字幕4399| 日欧美色| 天天色综合图片| 9Ⅰ超碰| 69超碰综合| 天天天天天干夜夜夜夜夜操| 亚洲AV资源| 日本顶级天天操狠狠操夜夜操中文字幕| 高清无码91| 激情亚洲天堂| 超碰在线观看av不卡| www.操| 秋霞网无码| 超碰 另类 欧美| 中文字幕乱码人妻二区三区| 午夜福利一区二区三区四区五区色婷婷| 日本高清一区二区在线| 国产一区在线看| 熟女丝袜视频| 日韩综合成人免费视频| 天天干1区2区在线| 久久人妻视频网| 超碰精品日韩欧美国产| 中文字幕十五区| 午夜偷拍久久熟女| 久久伊人最新网址视频| 欧美日韩人妻少妇 一区二区三区| 久久一区二区三区入口| 久久色精品视频在线| 欧美综合色站| 亚洲免费人妻在| 97碰久久| 九九精品美女高溯喷水| 乱论91| 婷婷10月天青娱乐| 亚洲精品99| 精品久久久av无码免费| 久久久噜噜噜久久人妻| 少妇无码太爽| 91久久精品中文字幕| 91精品91久久久中77777| 精品十三区| 粉嫩绯色AV一区二区在线| 97超碰美女| 久操操| 91free福利| 成人免费性爱视视| 青青操日韩| 日本不卡三级网在线播放| 欧美专区日本专区| 成年人网站在线免费观看| 免费99精品国产自在在线| 日韩人妻操B| 国产日韩在线播放| 欧美性爽xyxOOOO| 亚欧美综合| 东京热一区二区三区四区五区六区| 国产亚洲精品美女久久久m| 国产深夜福利| 九九九九九九免费视频| 在线97在线| 人人爱操| 韩国成人精品久久久免费看| 久久久久ab| 簧片免费看视频| 370p日韩欧美亚洲精品| 九九碰九九爱97超碰| 久操视频在线| 欧美日韩国产人人| 久久老子无码午夜伦不卡| 夜夜狼人妻| 9久久精品| 国产一级特黄大片处女| 免费操逼91| 蜜臀在线网站| 久9爱经典视频| 欧美激情视频一区二区三区不卡| 日韩999| www.伪伪| 成人av福利在线观看| 大香蕉淫人| 无码九九九九| 欧美国产视频| 欧美亚洲玖玖玖| 国产又色又爽又舒服的三级视频| 黑丝自慰喷水网站| AV一区观看| 美女黄网| 大香蕉专区| 欧美白嫩女HD| 色噜噜人妻丝袜a∨先锋影 | 国产高清成人免费视频| 黄久在线| 骚熟女吞| 麻豆精品三区视频| 亚洲精品 欧美精品| 国产盗摄美女如厕大神作品在线观看| 人妻天天操天天爽视频免费| 97精品综合久久| 天天摸夜夜添无码小视频| 中英熟女操女| 国产捆绑一区| 日韩亚洲欧美中文字幕| 久久免费少妇| 超碰导航97| yazhouzaixian| 欧亚日韩综合精品国产| 91丝袜美腿片| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 人人干人人操人人..com| 午夜AV人气不卡| 丁香六月激情| 美女极品一区二区三区| 啪啪资源网| 天天色天天干天天射| 欧美A片中文字幕| 内射夫妻三片| 亚欧性爱无码| 无码日韩人妻av一| 717影院理论午夜伦八戒| 欧美视频一区二区在线| 性色av婷婷久久一区二区点复制| 久久婷婷一区| 黑人综合网| 2024黄色视频| 男女性感激情网站| 亚洲情色中文字幕一区| 人妻人人操| 开心五月深爱五月| 九九九久久久久| 久久不卡一区二区| 欧美伦乱爱| 热久日综合| 91精品婷婷国产综合久久| 密臀国产在线| 日韩欧美加勒比| 性无码专区2020| 日韩综合无码色欲vv| 91在线视频观看国产| 国产欧美亚洲精品a第2页| 青娱乐日韩无码| 综合久久婷婷| 欧美97在线观看| 91高潮喷水美女| 日本不卡一区二区三区| 亚洲se91| a一区二区三区乱码在线| 国产精品分类在线观看| 国产精品制服丝袜清纯唯美| 中文字幕jul-617人妻熟女| 成人夜夜爽| 人妻久热在线| 青青草久草AV| 屁股久久久久久| 国产高清精品一区二区三区毛片| 女人爽到高潮潮喷18禁网站| 久久一二三四五六七八九区区区| 天天综合网在线| 欧美线天码中字| 青草精品视频-日本久久久久网站| 亚洲不卡三级手机播放| 日va操| 99视频自拍| 色九九九| 97操碰| 亚洲色图综合| 9国产超碰| 久久 国产精品 一区| 九九热男人天堂| 亚洲色人阁| 啪啪啪东京| 乱色视频中文字幕| 激情第四色| 伦在线97| 久久久久久久9| 91午夜无码| 超碰狠狠操| 性色高清在线| 亚洲无码一区成人免费午夜| 天天激情综合站| 99热思思| 99久热精品99re6热| 久久成人东京热人妻| 青青草久草| 日本熟妇自慰性高潮一区二区三区| 97超碰超| 强奸乱伦亚洲第一页| 91丨九色丨大屁股| 伊人久久亚洲色欲综合网站 | 婷婷午夜清品久久久久久久性色视频观| 成人小说另类在线| 欧美性爱1080p| 啊啊啊啊操死我了| 五月天婷婷社区| 亚洲天堂一区二区久久| 柠檬AV导航| 精品乱子一区二区三区99| AV女资源| 久久性爱城| 91丝袜熟女| 玖玖综合网| 久久黄色视频一区二区三区| 五月丁香婷婷色| 国产人妻精品久久久一区二区三区 | 九九在线精品| 人妻熟女一区二区在线视频| 美国aaaaa一级黄片| 91国产美女丝袜足交精品视频| 日少妇视频| 亚洲精品无码少妇久久| 超碰人妻中文在线| 国产综合色精品在线观看| 99热18| 99日免费视频中文字幕| 午夜操逼不卡| 欧美日韩婷婷中文| 成人精品在线免费视频| 91青视频| 欧州91高潮| 1024人妻| 天天日天天看| 性色一线| 蜜臀99久久精品久久久懂爱| 操少妇很爽av| www男人天堂| 色播综合| 91色堂| 九月激情婷婷| 久久久久921| 操逼啊啊啊91| 亚洲亚洲亚洲天堂天堂 | 欧美一区二区三区成人性生活| 370p日韩欧美亚洲精品| 日本淫穴在线| 日韩AV无码中文一区二区| 九九国产热| 国产操操日韩三级黄| 欧美性暴力猛交XXXX| 亚洲一区二区在线观看91| 日本天天吊| 国产h小视频在线观看免费| 超碰日本97美女人妻人人玩人人爱| 亚洲高清色综合| 丁香六月婷| 精品69网| 九久9热| 超碰免费人妻人人| 人妻少妇蜜桃视频欧美一区| 国内毛片欧美香蕉精品| av东京热男人的天堂| 亚洲综合另类小说色区亚洲成av人片在www| 超碰天天久久79| 日韩无码视频黄色| 啊啊啊在线看| www.久久99| 精品欧美老熟女一二区| 人妻碰碰碰碰碰碰| 自拍视频一区在线观看| 91精品91久久久久77777| 午夜婷婷| 无码动漫av中文字幕| 激情终合网| 白嫩国模丰满一二三区| 人妻91少妇| 超碰国产情侣自拍网| 97在线免费| 日日骚 av| 亚洲aV无码成人在线观看| 婷婷激情四射| 亚洲视频二区 | 女同在线视频一区| 国模私拍一区二区三区神乳| 少妇特黄一区二区三区| 亚洲91极品| 国产成人自拍视频视频| 爱丝福利| 伊人五月天青青草婷婷| 中文字幕中文字幕一区二区| 超碰在线91| 精久久久91| 日本欧美国内在线| 強姦亂倫a| 日本不卡免费二区| 99re69综合| 日本肉体xxxx裸交| 四虎国产精品永久入口| 欧美亚洲清纯| 91麻豆天美传媒HD| 黄网在线播放| 一区二区精品日韩欧美在线观看| 天天综合色图| 久草热制服丝袜在线观看 | 看日韩操逼| 蜜臀99久久精品久久久懂爱| 亚洲欧美啪啪| 中文字幕视频2区| 精品久久久亚洲AV成人网站| 亚洲国产精品久久AV| 中出91视频| 国产大片精久久久久久| 婷婷丁香成人| 在线一道啪| 综合97| 视频在线97| av情色影音| 亚洲丁香花色| 人妻一区视频| 黑人精品XXX一区一二区| 九九九久久久久| 看日韩美女二区三区免费操逼视频 | 国产亚洲精品一区二区三区| 欧洲一区二区| 啊啊啊啊啊好舒服视频| 97香焦色区| 韩日无码在线观看| 日逼国产| 岛国片在线视频网站| 久草在线| 亚洲国产97在线精品一区| 99精品高潮| 蜜臀久久在线视频| 欧亚乱色熟一区二区三四区| 亚洲黑丝在线| 国产精品久久伊人| 午夜寂寞欧美| 亚川综合视频| 74成人在线| 国产无码精品无码| 91激情| 夜夜躁狠狠躁日日躁av| 欧美自拍网| 久久一二三四五六七八九区| 蜜桃狠狠色伊人亚洲综合 | 春色91| 久久精品一区二区三区蜜桃臀| 天天做天天爱天天爽AV| 美女在线H91| 日韩性爱播放| 激情久久av一区av二区av| 乱伦AVxx| 日韩欧美综合激情| 大香蕉一线视频| 中国少妇XXXX做受| 操逼操逼逼操操逼91| 欲香欲色| 91免费看一区二区三区| 十八禁视频一区二区| a'v在线资源| 五月丁香六月综合缴清无码| av一区二区三区不卡| 人人操人人摸人人骑| 日产操逼| 五月天我淫我色av| 国产黄色影片在线观看| 欧美一区二区福利在线| 亚洲精美粉嫩嫩泬在线观看| 亚洲成人贴图| 91大神精品长腿在线观看网站| 国产美女在线精品免费看| 91综合色| 四虎午夜影院| 人妻丰满熟妇一区二区三| 国产精品一区av在线| 日韩精品碰碰| 国产精品岛国片在线观看| 伊人久久大香大香线蕉中文| 另类专区在线观看| 射 色综合| 三级片大波波| 四虎免费看黄| 九九人妻| 色妺妺AⅤ| 久久久新亚洲AV| 亚洲色阁| 极品欧美一区二区三区| 377p欧洲日本亚洲大胆| 播播亚洲小说亚洲| 久久久中文| 亚洲午夜免费狠狠干| 国产13区| 午夜综合在线| 精品国产乱码久久久久久久久久毛片| 国产精品天堂| 久久中文字幕一区不卡| 一级特级aaaa毛片免费观看| 婷婷色婷婷| 久久天天摸| 97国产色图| 久久久国产护士丝袜美腿一| 亚洲男人的天堂va亚洲男人社| 嗯嗯啊啊操我| 久久精品一区二区一8| 日韩免费福利在线观看| 亚洲欧洲日韩国产自在线| 色五月激情综合网| 99久久com免费视频′| 色婷婷综合久久久久中文一区二区 | 中出欧美| 青青草中文字幕| 少妇厨房愉情理伦片bd在线观看| 色综合久| 欧美大码在线视频| 超碰在线1234区| 亚洲情色综合| 91高清无码下载| 天美av在线观看| 粉嫩AV一区夜夜嗨| 91综合熟女| 黄片com.| 精品久久久无码| 最新9久久久9免费视频| 亚洲天堂资源网| 中文字幕亚洲永久精品| 爱爱动态120秒| 亚洲日韩乱码中文无码蜜桃臀网站| 欧亚 另类 久| 久久精品久久久久久久久| 中文字幕av乱伦| 男人久久精品| 亚洲欧美清纯| 天天看,天天做| 草b在线 | 少妇久久久久久久久| 约操熟妇| 一区麻豆 高清中文字幕| 日本天堂在线播放| 在线有码中文字幕| 女人爽到高潮久久久| 久久久精品久久| a片在线播放| 国产一区二区啪啪视频| 91爱看| 丰满熟妇大乳做爰| 高清国产性猛交xxxx乱大交| 九九热免费国产视频婷婷伊人| 精品一二三区女同| 国产在线观看91精品一区| 婷婷综合视频| 亚洲成人AB| 日韩av不卡在线看| 亚洲不卡av在线| 91五十路| 五月丁香| 日本熟妇自慰性高潮一区二区三区| WWW啪啪的com| 亚洲日韩肥臀视频在线观看| 999久久久国产精品| 亚洲欧美在线观看2021 | 国产夫妻一区二区| 熟女少妇视频| 亚洲操人| 91熟女视频网| 免费亚洲黄色视频在线观看| 欧美一区二区成人一卡| 免费中文综合精品| 亚洲精品一二三四区| 少妇无码999| 色婷久久| 欧中美三级一区二区三区| 成人免费不卡在线视频| 亚洲国产丝袜在线观看| 亚洲第一精品在线视频| 九X超碰| 天天影视色香欲综合网小说| 99热99re超碰精品| 亚洲在线91| 大香蕉操久久| 丁香七月婷婷| 成人精品电影| 自拍偷拍 日韩欧美| 美女啊啊啊啊啊啊啊| 9118禁| 97中文超碰| 精品999一区二区| 久久久久13| 精品高清牛人盗摄一区二区三区中文字幕A片免费在线观看 | 美女在线H91| 草草草视频在线免费看| 中文字幕在线观看AV| 人人妻人人玩人人澡人人爽| 精品久久久久,69国产成人精| 91日产桃蜜| 操久久久久久| 日本阿v天堂在线观看| 天天摸天天插天天日| 99久久久无码国产精品性啊聊| 欧美亚洲性爱一区二区| 在线a亚洲视频播放在线| 欧美一区二区三区大综合| 一级黄色性爱裸体视频| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 五月丁香综合啪啪| 大奶的诱惑| 极品粉嫩一区二区| 精品丝袜无码一区二区三APP| 久久一本大香蕉 | 精品国产污一区二区三区| 91精品国产91综合久久蜜臀| 欧美激情 日韩精品| 国产真乱mangent| 亚州日韩97| 国产伦乱91| 美女t无毒不卡不卡| 久操B网| www.yeyecao| 欧美 亚洲 综合 制服 另类| 久久久激情| 久久午夜色播影院免费高清| 诱惑人妻欧美一区在线播放| 国产精品自在线发布| 人妖欧美一区二区| 熟妇女人妻呻吟久久AV| 一线黄色免费性爱片| 亚洲精品国产熟女久久久| 激情五月婷婷| 奇米四色网| 欲色啪| 激情婷婷| 免费人成毛片乱码| 午夜无码熟妇丰满人妻| 五月丁香网站| 日韩精品字幕| 久久精品国产99久久,亚洲日韩久久日本一区一区三区 | 久久日韩肥臀| 超碰在线974| 亚洲天堂中文字| 欧美亚洲丝袜人妻制服中文99| 91欧美偷拍| 强奸乱伦麻豆| 国产偷拍网站| 超碰在线在公开超碰在线在公开| 蜜桃视频精品一区二区| 日韩人妻播放| 999久久久九九九九| 亚洲精品1区| 色哟哟的毛片| 欧美一区二区三区另类精品| 欧美综合91| 久久综合久色欧美综合狠狠| 啊啊啊啊一区| 操逼操逼逼操操逼91 | 啊啊啊操一区| 精品性爱一二三区| 在线播放成人高清免费视频| 成人开心网在线视频| 亚洲综合码| 亚洲精品人妻吞精av | 大奶尤物鲍汁淫荡欧美视频粉嫩夜夜骚| 秋霞曰韩R级| 色综合V| 亚洲Av诱惑| 麻豆激情综合| 久久久久久夜夜夜夜夜| 日韩精品一区的| 操逼逼一区视频| 亚洲欧美日韩不卡人妻| 激情四射婷婷六月天| 天美国产精品| 大香蕉伊人久久| 一区操逼日比视频| 精品一区二区三区免费古装毛片香港三级日本三级人妇 | 睡产熟女乱伦| 一个国产在线综合网站| 色综合91好| 色97综合中文字幕| 加勒比海成人视频网| 久久久999日本大片| 日韩不卡av一二三| 凹凸久久人人| 欧洲综合无码| 亚洲巨爆乳一区二区三区四季网| 人妻熟女一区二区三区视频| 欧美日动态视频| 国产精品久久久蜜臀| 天天操狠狠日夜夜干超碰撸com视频在线观看 | 嗯嗯啊啊啊好舒服| 色色色热| 无码视频黄色网战| 狠狠色噜噜狠狠狠狠狠色综合久久| 免费看片黄| 精品99999| 人妻丝袜日本| 亚洲se91| 97网站在线观看| 91亚.色| 国产蜜臀在线| 天天插天天操天天摸天天射天天看| 97超碰热线| 91天美传媒精品| 精精夜夜| 啊啊啊啊视频免费| 1024亚洲中文字幕久在线看片你懂的 | 精品欧美日韩在线观看| 婷婷另类小说| 国厂麻豆77q4| 操死我了嗯嗯嗯| 久久蜜色情在线视频xxx免费观看| 四虎AV无码| 99爱久久视频频| 超碰调教97| 91九久| 97综合在线观看| 区日韩亚洲乱码av电影| 久久婷婷国产一区二区色| 欧美黄页在线| 97超碰色五月| 欧美黄色图片| 中文字幕十五区| 亚洲免费97免费| 老司机免费视频在线91| 亚州男人的天堂| 中文字幕乱偷人妻久久艾草网| 中文一区在线日| 久久久久久久久久久久久女过产乱-少妇高潮一区二区三区喷水-成人AV | 精品综合久久久久久五月天| 夜夜爽夜夜爽| 久久狠狠色噜噜狠狠狠狠97| 囯产精品久久久久久久久久梁医生| 人人弄人人摸| 老司机午夜精品视频| 特级特黄一级毛片免费| 久久美女国产| 日韩黄色一区二区三区| 色色五月天激情| 特污免视频| 国产极品999| 搞中出视频在线观看| 物业黑人 AV一区| 男人的天堂三级| 亚洲人妻精品一区二区| 国产精品人妻无码久久久互動交流 | 亚洲不卡不卡中文字幕不卡| 婷婷五月天在线观看| 综合国产97| 青青操在线亚洲视频观看欧美在线| 国产夫妻一区二区| 国产十八禁视频| 久久精品无码不卡| 大香蕉人妻久久| 亚洲无码偷拍| 两性色网| 国产精品女久久久久av爽| 久久草大香蕉| 一区久久久二区| 日噜夜夜夜夜夜夜夜夜夜夜爽爽爽爽爽爽爽爽爽爽爽爽 | 国产AV激情无码久久无码 | 精品久一区免费| 欧美日韩人妻婷婷一区| 久久久999国产精品| 99中文字幕| 亚洲天堂中文字| 亚洲色啪| 日本丝袜美腿人妻九九| 国产熟女自拍| 国产农村妇女精品| 欧美十八禁导航成人| 99色色网| 欧美情色贴图| 日韩欧美女求操每天更新| AV乱伦专区| 无码自拍SM| 久久久久久久九九九九九九| 亚洲国产亚洲天堂| 夜夜嗨视频| 精品国产一区二区三区香蕉欧美| 九九久久99| 精品一久久久| 夜夜夜夜久久久久| 性爱乱伦视频免费| 67914亚洲精品| 传媒免费一区二区三区| 午夜一区| 激情小说成人日本无码一| 黑操B| 91n免费处女| 99热在线观看| 激情五月天丁香社区| 亚洲s在线观看| 日本五区不卡| 黄片免费日韩| 91天天综合在线观看| 亚洲最新Av| av国产无码| 亚洲欧美setu| 日语五十路和六十路亚洲国产精品| 91人妻尻屄视频| 久久一区,青青青青草视频在线播放| 欧美高清在线| 国产精品点击进入在线影院| 亚洲激情综合| 欧美爱国产综合、| www.yeyecao| 亚洲国产第一页综合视频| 91青青在线视频| 日韩人妻有码免费视频| 国产乱码久久| 国产日韩美女小穴视频网站不卡| 亚洲国产91精品一区二区久久| 涩五月婷婷| 日本熟妇自慰性高潮一区二区三区| 精品国产无码中文| 91久久久久久久久18| 97在线青| 伊人网免费视频| 色性欧美| 精品国产乱码久久久久久免费| 欧美激情另类一区二区| av在线人气 | 久久精品日韩| 国产一区麻豆免费观看| 狠狠操狠狠操操| 99在线观看| 日韩无码服务区| 国产精品999zyz| 国产午夜福利视频在线| 9999久久久| 亚洲精品 大香蕉| 精品人妻一区二区蜜桃视频| 日本一区二区不卡精品| 欧美日韩青操| 人人艹亚洲| 久久蜜桃综合网| 极品销魂美女一区二区| 欧插网站| 久久久久99999| 99久热| 黑人性欧美| 久久久久国产精品片区无码直播 | 亚洲91在线播放影院| 精品国产99| 亚州熟女乱伦| 亚洲伊人久久精品狠狠在线| 亲子敌伦对白在线播放| 嗯嗯啊在线视频| 免费国产视频| 免费观看性欧美一级| 新版天堂中文资源8在线| 尤物一级在线免费观看| 久久超碰97中文字幕| 亚洲色综网| 手机看av网站在线看| 91扒丝袜综合在线| 亚州综合在线| 欧美日韩操逼嗦吊| 999精品乱码| 色爱国产| 一区二区三| 久久曰曰| 久久成人国产精品| 国产一区二区精品久久99| 一区二区 韩日AV| 日夜尻逼网| 激情久久av一区av二区av| 另类图片亚洲加勒比另类图片亚洲加勒比另类图片亚洲加勒比 | 按摩中文字幕| 男人天堂2030| 色婷婷久久| 国产视频97| 蜜桃狠狠色伊人亚洲综合网站| 黑丝内射一区二区三区| 国产97色在线 | 亚洲| 深夜激情无码| 亚洲激情在线| 国产按摩一区二区三区| 中文字幕后石码四区五区| 热久久91婷婷| 成年人黄色视频免费| 5252色欧美在线| 欧美激情专区| 久久嫩草国产成人一区| 精品欧美А∨无码黑人大荫蒂| 都市激情人妻一区二区青青操视频 | 日本黄色精品专区网站| 欧美五区| 国产Aα| 欧美热图99| 久久25| 久久91精品国产9丨久久分亭| 蜜臀久久99'精品久久久| 国产精选三级在线观看| 亚洲天天综合| 香蕉国产97| 亚洲人成色9999精品久久| A级毛片在线看免费| 碰人碰碰人人开房人肉| 97精品一区二区视频在线观看| 78久久久| 黄色av播放免不| 91亚洲影视| 久草免费在线一区二区| 97精彩视频网站| 999 久久久| 五月天亚洲色图| 9丨久久九九九| 99热99色| 91欧美性| 精品九九| 2017大香蕉| 91成人无码| 国产精品人妻免费精品| 欧美性色欧美| 欧美97爱| 98人妻精品一区二区色欲| 一中国女人毛片水真多| 日韩欧美亚洲自拍偷拍| 天堂v无码免费视频| 欧美综合色| 超碰色老头| 国产毛片毛片4p懂色| 麻豆黄站| 后入福利| 精品一区二区久久| A 天堂| 五月丁香色色网| 中文字幕人成乱码熟女香港| 大肥女高潮bbwbbwhd视频| 天天干天天日天天射黄色| 农村少妇久久久久久久| 99热这里都是精品| 亚洲最大无码中文字幕网站| av无码精品久久久久| 在线无码操| 国产超碰在线| 91爽啪| 欧美日不卡| 97人亚洲综合字幕| 精品九九九九九九九| 中 文字幕一区二区三四 五 区日 日 骚| 伊人国产av| 天天摸夜夜操视频| 91碰碰| 色97干| 岛国免费黄色网址| 欧美一级久久久久久久大片动画| 国产精品成人福利在线| 中文字幕jul-617人妻熟女| 色综合天天| 久久久久久久久国产| 99re这里只有精品2| 超碰在线人人射| 日韩欧美成人性爱在线| 亚洲av影院在线观看| 女优视频第10页| 五月天欧美色图| 94色色电影网| 日本操大逼| 色性荡荡荡荡视频| 天天在线91| 国产丝袜欧美在线视频| 五月天精品| 金典av| 激情综合网亚洲| 偷窥自拍亚洲天堂网爆| 欧美成人色| 蜜臀AV一区二区三区| 亚洲精品国产专区在线观看| 亚洲男人天堂2019| 少妇激情AV| 99热99在线播放激情| 国内精品伊人久久久久影院会| 亚洲激情色片 | 嗯啊抽插大香蕉网页| 成人欧美一区二区三区黑人一| 超碰99热中文字幕| 日韩av性爱在线播放| 亚洲情色91| 综合色一区三区二区| 欧美v亚洲v日韩v最新在线二区 | 天天干天天干天天干| 九九九国产精品| 亚洲国产日韩欧美熟妇在线| 色阁阁AV综合网| 在线欧美69V免费观看视频| 精品小视频在线| 青娱乐啪啪视频| 欧美久久草熟女| A级片日韩欧美国产欧美视频精选观看| 婷婷色婷婷| 婷婷超| 欧美性爱五月天| 欧美色就是色| 欧美黄色图片| 人人操人人93| 久久人妇| 国产超碰| 激情五月天中文字幕色| 澳门人妻久久| 国产精品婬乱一级毛片彝族| 丝袜狠狠草尤物 91| 精品毛片av一区二区| 青青草国产一区二区三区| 久热大香蕉| 亚洲码在线中文在线观看| 熟女AV一区| 欧美制服另类丝袜| 成人一级性爱| 97亚洲欧美| 青青在线视频日韩欧美| 校园春色美腿丝袜 | 制度丝袜99| 日本人妻中文字幕| 日韩一级特黄av毛片| 色五月综合网| 天堂8在线新版官网| 91人人臊| 欧美一区二区情色| 啊啊啊好大好湿| 亚洲日本男人天堂网| 亚洲AV永久无码一区仙野| 一级二级在线观看| 啊啊啊水好多| 久久人体一区二区| 日韩ab网 | 加勒比伊人| a片亚洲一本通视频| 久草视频观看视频在线| 日韩黄色片子| 超碰色97| 免费超碰97久久| 欧美综合制服在线| 精品一区二区三区四区外站| 久久亚洲婷婷| 日婷婷| 欧美 亚洲 第一页| 精品午夜福利| 天天噜| 九九九九免费高| 夜夜人妻爽| 婷婷午夜| 岛园激情| 国产亚洲精品av一区| 操逼大黄片| 好爽要喷了| 99热精品在线| 日韩激情中文字幕有码| 狠狠操,使劲操| 欧美色视| 一级AAA片一区二区三区| 一本一首道人妻少妇免费久久| 亚洲精品人妻在线| 美女t无毒不卡不卡| 青青草中日韩在线| 欧洲亚洲人人爽爽视频| 九九九不卡| 蜜臀99久久精品久久久久| 高颜值美女口爆高潮浪叫| 欧美人人AAA| 日韩综合色网| 青娱乐av在线| 91精品国产日韩欧美综合| 99re99在线视频| 人妻99p| 久 久无码人妻AV| 欧美成人色| 尤物一级在线免费观看| 色欧洲| 欧美国产视频| 99综合视频一体| 男插女青青影院| 91精品操美女| 操死我干死我| 国产亚洲精品美女久久久m| 久久一二三四| 日韩9999| 99热超碰| 欧美日韩色综合网| 欧美日韩97| 国产精品天干天干综合网麻豆| 国产成人综合网| 影音先锋视频在线| 国产精品96久久久久久| 日本三级韩国三级美三级91| 亚码激情| 97最新在线播放视频| 国产精品人妻无码久久久互動交流| 九九九九九九视频| 99.色网| 综合一区中亚洲国产成人综合精品| 精品久久无码午夜福利| 我爱搞逼综合网| 欧美爆操91| 99热最新| 91精品久久久| 日本性感人妻91| 99re在线视频国产| 人妻夜夜爽天天爽麻豆三区网站 | 操人妻视频| 精品视频久久区| 第45页一区二区| 920日本午夜免费| 99热欧美| 草草网站影院白丝内射| 欧美性爽xyxOOOO| 国产精品96| 乱人乱色一区二区三区免费| 日韩精品怡红院| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 久99热| 天天综合网日韩7799| 躁躁躁日日躁2020| 久9爱精品| 久久久av爱| 欧美三级一级| 婷婷五月天色| 亚洲成人一区二区精品| 以及麻豆国产入口在线观看免费| 日韩综合97p| 久久久熟女一区| 久9综合在线| 97在线观看免费| 99re6国产精品99re| 91美女在线看| 97免费视频网| 欧亚日韩三区| 欧美久久人妻少妇一区二区| 久久一二三级一一一| 国产亚洲欧洲在线观看| 少妇一线天久久久久久| 国产精品久久久久久久久AV大片| 天天视频黄网站| 午夜无码精品免费看性色| 日本丝袜人妻内射| 思思热国产在线视频| 日韩不卡在线一区二区| 日韩一级片在线看| 操逼网站视频漫画国产| 九热视频| 激情丁香五月婷婷| www.狠狠操| 暖暖精品二区三区观看| 9/A片| 国产精品乱人伊人网| 伊人久久大香蕉线AV五月天| 干b在线性社区| 亚洲色图综合网| SS久久| 天天影视之亚洲综合网| 亚洲精品黄码久久久久| 强奸熟女一区二区三区| 超碰视97中文| 91无摭挡| 999色欧美中文字幕| 天天操天天舔| 中文字幕丰满子伦无码专区在线视频最新| 日韩性爱再线视频| 日本精品一区二区三| 9美女超碰在线免费观看| 色狠狠一区二区三区香蕉| 97超碰久久| 国产在线能看的你懂的| 日日操丁香五月天| 亚洲操逼视频网站| 五月丁香综合网| 人人摸人人干| 久久久久幕乱码| 久久岛国| 18啪啪手机免费性爱|