久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上

Zabbix監(jiān)控Nginx沒數(shù)據(jù)?核心問題往往在狀態(tài)頁與agent采集鏈路上 上個月幫同事排查一套 Zabbix 監(jiān)控 Nginx 數(shù)據(jù)一直為空的問題。一開始我們都把注意力放在 Zabbix Web 端反復(fù)檢查模板、主機(jī)、宏折騰了一上午。最后才發(fā)現(xiàn)真正斷掉的環(huán)節(jié)是 Nginx 的 stub_status 狀態(tài)頁根本沒有暴露出來agent 自然也就拿不到任何數(shù)據(jù)。更讓我意外的是同事的配置是從一篇兩三年前的教程里抄來的那篇教程里的模板名稱、agent 類型和現(xiàn)在的環(huán)境已經(jīng)對不上。這不是個案。Zabbix 監(jiān)控 Nginx 這件事最常見的坑不是 Zabbix 不會裝而是安裝配置流程里塞滿了舊資料。所以下面我不打算只給一個固定命令序列而是想把 Zabbix 監(jiān)控 Nginx 的鏈路重新拆一遍Nginx 怎么暴露狀態(tài)agent 怎么讀到數(shù)據(jù)模板怎么匹配以及當(dāng)你拿到一臺新機(jī)器時應(yīng)該按什么順序驗(yàn)證。核心判斷只有一句——真正決定這套監(jiān)控能不能跑通的往往不是 Zabbix 本身而是 Nginx 狀態(tài)頁、agent 采集和模板匹配這三個環(huán)節(jié)有沒有全部連上。1. 先想清楚Zabbix 監(jiān)控 Nginx 到底在監(jiān)控什么1.1 表面是進(jìn)程存活本質(zhì)是連接和請求很多入門教程會把 Zabbix 監(jiān)控 Nginx 簡單理解成“Nginx 掛了就報(bào)警”。這個理解不算錯但太單薄。Nginx 是應(yīng)用入口它的價值不在于進(jìn)程起沒起來而在于它當(dāng)前扛了多少連接、請求處理得是否順暢、有沒有異常堆積。Zabbix 之所以能監(jiān)控 Nginx核心不是直接讀進(jìn)程狀態(tài)而是通過 Nginx 自身的狀態(tài)接口或模塊拿到一組結(jié)構(gòu)化指標(biāo)。最常見的數(shù)據(jù)源是 Nginx 官方自帶的 stub_status 模塊。打開狀態(tài)頁后你會看到類似這樣的一小段文本Active connections: 3 server accepts handled requests 12 12 15 Reading: 0 Writing: 1 Waiting: 2這幾個數(shù)字的含義值得記住Active connections當(dāng)前活躍連接數(shù)。acceptsNginx 啟動以來成功接受的連接總數(shù)。handled成功處理的連接總數(shù)。正常情況下 accepts 和 handled 應(yīng)該接近。requests總請求數(shù)。Reading / Writing / Waiting分別表示正在讀請求頭、正在寫響應(yīng)、以及空閑 keep-alive 連接的數(shù)量。這些指標(biāo)能幫你看清什么比如 Reading 長時間很高說明請求堆積在讀取階段背后可能是客戶端沒有把請求發(fā)完整Waiting 大量存在不是壞事只能說明 keep-alive 連接占著資源accepts 和 handled 差距持續(xù)增大則可能說明有連接在中間環(huán)節(jié)被丟掉。1.2 為什么很多“監(jiān)控沒數(shù)據(jù)”其實(shí)和 Zabbix 無關(guān)排查過幾次就會發(fā)現(xiàn)Zabbix 監(jiān)控 Nginx 沒數(shù)據(jù)絕大多數(shù)原因不在 Zabbix要么是 Nginx 狀態(tài)頁沒開啟要么是狀態(tài)頁返回的是 HTML 而不是純文本要么是 agent 訪問不到狀態(tài)頁要么是模板里的宏路徑和實(shí)際路徑不一致。Zabbix 本身只是在按固定周期向 agent 要數(shù)據(jù)agent 再去請求 Nginx 狀態(tài)頁。這一條數(shù)據(jù)鏈上有任何一個環(huán)節(jié)斷了儀表盤就永遠(yuǎn)是空的。所以我建議把這條鏈路拆成三段來理解Nginx 負(fù)責(zé)提供數(shù)據(jù)agent 負(fù)責(zé)搬運(yùn)數(shù)據(jù)Zabbix 負(fù)責(zé)展示和告警。后兩段的問題通常都有日志可查反而是第一段最容易被人忽略。很多“監(jiān)控沒數(shù)據(jù)”的案例其實(shí)和你選的模板、版本的關(guān)聯(lián)沒有想象中那么大問題往往出在數(shù)據(jù)源這一層。2. Nginx 側(cè)的狀態(tài)頁配置先把數(shù)據(jù)源打開2.1 先確認(rèn)模塊再改配置順序不要反Nginx 狀態(tài)頁依賴 http_stub_status_module 這個模塊。問題在于不是所有 Nginx 環(huán)境都默認(rèn)包含它。源碼編譯安裝時如果沒有帶 --with-http_stub_status_module后面想加模塊就得重新編譯發(fā)行版?zhèn)}庫里的 nginx 通常已經(jīng)包含這個模塊但不同發(fā)行版、不同倉庫之間也可能有差異容器鏡像則更不一定一些精簡鏡像會把用不到的模塊裁掉。所以第一步是確認(rèn)模塊存在。常見做法是查看編譯參數(shù)nginx -V 21 | tr \n | grep stub_status如果輸出里能看到 http_stub_status_module說明模塊沒問題。如果什么都沒有就不要繼續(xù)往下配狀態(tài)頁了先解決模塊問題。否則你配置再正確curl 訪問時也只能看到 404。注意有些系統(tǒng)里 nginx 不在 PATH 中可能需要寫全路徑比如/usr/local/nginx/sbin/nginx -V或者先執(zhí)行which nginx確認(rèn)一下。2.2 一個穩(wěn)妥的 stub_status 配置示例確認(rèn)模塊存在后再修改 Nginx 配置。常見的做法是在一個 server 塊里加一個 location只讓狀態(tài)頁從指定路徑訪問server { listen 80; server_name _; location /nginx_status { stub_status; allow 127.0.0.1; allow 192.168.10.0/24; deny all; } }這里有幾個細(xì)節(jié)要說明。location /nginx_status是精確匹配避免掩蓋其他路徑規(guī)則stub_status;是常見寫法如果你看到的舊教程里寫的是stub_status on;通常也能兼容但更推薦按當(dāng)前版本的標(biāo)準(zhǔn)寫法來allow 和 deny 用來限制來源 IP避免狀態(tài)頁暴露到公網(wǎng)。雖然狀態(tài)頁內(nèi)容看起來不敏感但泄露給外界等于給攻擊者多一個信息采集入口沒有理由不做限制。寫完配置后先檢查配置再重載nginx -t nginx -s reload # 如果使用 systemd 管理也可以寫成 systemctl reload nginx然后用 curl 驗(yàn)證curl -s http://127.0.0.1/nginx_status如果能看到開頭那段純文本說明 Nginx 側(cè)已經(jīng)通了。注意curl 的來源 IP 要和 allow 規(guī)則匹配否則你會看到 403。2.3 容器化和非默認(rèn)端口環(huán)境的特殊點(diǎn)如果你的 Nginx 跑在容器里情況會稍微復(fù)雜一點(diǎn)。agent 要么和 Nginx 在同一個容器內(nèi)要么通過容器 IP 或映射端口訪問狀態(tài)頁。容器內(nèi)的 Nginx 如果只監(jiān)聽了容器內(nèi)部端口agent 在宿主機(jī)上直接 curl 127.0.0.1 是拿不到響應(yīng)的。這類問題用 curl 驗(yàn)證時最容易暴露但很多人會誤以為是自己配置寫錯了。另外狀態(tài)頁不一定只能放在 80 端口。有的環(huán)境為了安全和便于管理會把狀態(tài)頁放在 8080 或單獨(dú)一個 server 塊里。這樣的設(shè)計(jì)沒問題但模板里的宏就要跟著改。這里的重點(diǎn)是先想清楚 agent 要從哪個地址訪問 Nginx然后保證這個地址上的 TCP 連通性和 ACL 都允許。不要只在 Zabbix 里把宏改來改去主機(jī)上卻訪問不到。我在很多環(huán)境里見過一種最隱蔽的錯誤狀態(tài)頁本身配置正確但 allow 規(guī)則只放行了 127.0.0.1agent 卻通過內(nèi)網(wǎng) IP 去訪問狀態(tài)頁。agent 請求時Nginx 看到的來源 IP 是內(nèi)網(wǎng)地址命中 deny all于是返回 403監(jiān)控項(xiàng)自然拿不到數(shù)據(jù)。所以配置 allow 時要想著 agent 會從哪個 IP 過來而不是只寫 127.0.0.1。3. Zabbix agent 這一層不是安裝了就行3.1 配置 Server 地址和 Hostname一致性是第一原則Nginx 狀態(tài)頁通了之后才輪到 agent。agent 安裝本身不復(fù)雜麻煩的是配置。以最常見的 zabbix-agent 為例配置文件里幾個關(guān)鍵參數(shù)一定要理解Server192.168.10.20 ServerActive192.168.10.20 Hostnameweb01Server 和 ServerActive 不是一回事。Server 是被動模式下允許從 Zabbix Server 拉取 item 的地址白名單ServerActive 是主動模式下 agent 向哪個 Zabbix Server 或 Proxy 上報(bào)數(shù)據(jù)的地址。如果你只配置了 Serveragent 就會等 Server 來問如果你用了主動模式ServerActive 也要填。很多舊教程只寫一個值換到新環(huán)境就出問題。比這更容易出錯的是 Hostname。Zabbix Web 端添加主機(jī)時填的主機(jī)名必須和 agent 配置里的 Hostname 保持一致。如果 Web 端寫的是 web01agent 里配的是 nginx-web-1那么即使在 Zabbix 里能看到主機(jī)監(jiān)控項(xiàng)也始終是 no data。在新版本 agent 里你還會看到HostnameItemsystem.hostname這樣的配置意思是讓 agent 用系統(tǒng)本身的 hostname 作為上報(bào)名稱。這個機(jī)制可以避免手工維護(hù) Hostname但前提是系統(tǒng) hostname 必須和 Zabbix Web 里的主機(jī)名一致。所以不管用哪種方式原則都是同一個兩邊名字要對上。3.2 agent 與 agent2模板和 key 可能不一樣這里要說一個“和過去不一樣”比較明顯的點(diǎn)現(xiàn)在 Zabbix 官方推薦使用 Zabbix agent 2也就是 agent2。agent2 不僅在采集能力上更豐富還支持一些內(nèi)置插件但對應(yīng)的模板、監(jiān)控項(xiàng) key 和舊 agent 不完全一樣。在 Zabbix Web 里搜索 Nginx 時你可能會看到多個模板有些名字類似 Nginx by HTTP有些類似 Nginx by Zabbix agent 2。如果你在主機(jī)上裝的是 agent2卻鏈接了舊 agent 版本的模板可能會出現(xiàn) unsupported item。反過來也一樣。所以我的建議是在鏈接模板之前先打開模板里的監(jiān)控項(xiàng)預(yù)覽看它使用的采集類型是 Zabbix agent、HTTP agent還是依賴 agent2 插件。確認(rèn)它跟你實(shí)際安裝的 agent 類型對得上再鏈接。這一步只要花兩分鐘卻可以省掉后面一晚上的排查時間。agent 和 agent2 的服務(wù)名也不一樣常見的有 zabbix-agent、zabbix-agent2系統(tǒng)服務(wù)名可能是 zabbix-agentd.service 或 zabbix-agent2.service。啟動服務(wù)后用systemctl status看一下是否 active再看一眼日志路徑常見的是/var/log/zabbix/下面。出現(xiàn)問題時日志里通常直接會告訴你 key 不支持還是連接失敗。3.3 用 zabbix_get 快速驗(yàn)證采集鏈路在 Web 端排查前可以先在 Zabbix Server 上用 zabbix_get 做一次最直接的驗(yàn)證確認(rèn) agent 是否正常工作zabbix_get -s 192.168.10.11 -k agent.ping如果返回 1說明 Server 能連上 agent。如果返回值不是 1就別急著去 Web 端看模板先解決網(wǎng)絡(luò)、端口和 Hostname 問題。agent.ping 是通用探活 key驗(yàn)證通過后再去模板里找到你想測的監(jiān)控項(xiàng) key比如和 Nginx 狀態(tài)頁相關(guān)的 key繼續(xù)用 zabbix_get 測試。不同版本、不同模板的 key 名稱會有差異所以這里不列具體 key但思路是一樣的先用 curl 確認(rèn)狀態(tài)頁存在再用 zabbix_get 確認(rèn) agent 能取到值最后才去 Web 端看圖表。鏈路從底層往上逐層打通比在界面上猜效率高得多。4. 在 Zabbix Web 端鏈接模板別被舊截圖帶偏4.1 模板名稱已經(jīng)變過好幾輪Zabbix 的模板策略在過去幾年變化很大。這次部署里我在模板列表里搜索 nginx出來的已經(jīng)不是早期教程里那張截圖上的名字了。官方模板按采集方式做了拆分有的走 HTTP agent有的走 Zabbix agent有的專門適配 agent2。這本身是好事但如果你照著一個兩三年前的教程去選模板很可能選錯。我的建議是以當(dāng)前 Zabbix 版本實(shí)際加載的模板列表為準(zhǔn)不要憑記憶點(diǎn)。鏈接模板后立刻去“監(jiān)測 – 最新數(shù)據(jù)”里過濾這個主機(jī)等一到兩個更新周期看有沒有數(shù)據(jù)進(jìn)來。如果 Zabbix 的刷新周期是 30 秒或 1 分鐘通常幾分鐘內(nèi)就能看到。另外一個主機(jī)通常只需要鏈接一個對應(yīng)當(dāng)前采集方式的 Nginx 模板不需要把所有 Nginx 模板全鏈接上。鏈接多個模板并不會讓數(shù)據(jù)更豐富反而會讓監(jiān)控項(xiàng)沖突、重復(fù)告警排查起來也更亂。4.2 宏參數(shù)路徑、協(xié)議、端口都是變量模板鏈接后還有一層容易被忽略宏參數(shù)。官方 Nginx 模板里通常會定義一組宏用來告訴 agent 去哪個地址、哪個路徑、用什么協(xié)議獲取狀態(tài)頁。常見宏名可能包括{$NGINX.SCHEME}、{$NGINX.PORT}、{$NGINX.STUB_STATUS.PATH}具體名稱以你當(dāng)前模板為準(zhǔn)。它們的作用就是把狀態(tài)頁的訪問信息從監(jiān)控項(xiàng)中抽出來這樣同一套模板可以復(fù)用在不同的 Nginx 主機(jī)上。如果你的狀態(tài)頁地址不是默認(rèn)值就不用改監(jiān)控項(xiàng)直接在主機(jī)層級覆蓋宏就行。比如狀態(tài)頁路徑是 /nginx_status 而不是 /status就在主機(jī)的宏里把對應(yīng)宏改成實(shí)際路徑。改完后等下一次采集生效再看最新數(shù)據(jù)。要注意的是宏的生效范圍有層級全局宏、模板宏、主機(jī)宏。主機(jī)宏優(yōu)先級最高。如果模板里已經(jīng)定義了默認(rèn)值主機(jī)上沒改也沒關(guān)系但如果狀態(tài)頁地址做了修改一定要記得改對應(yīng)主機(jī)的宏而不是只在模板里改一個默認(rèn)值因?yàn)槟0迥J(rèn)值會影響所有鏈接該模板的主機(jī)。還有一個容易出錯的地方狀態(tài)頁地址如果是 https但宏里用的是 http監(jiān)控項(xiàng)會一直返回錯誤。這種問題在視覺上非常隱蔽因?yàn)?Nginx 和 agent 都正常只有協(xié)議不匹配。4.3 驗(yàn)證模板是否能出數(shù)據(jù)鏈接模板和配好宏之后不要直接離開頁面。花一分鐘做兩件事第一到主機(jī)監(jiān)控項(xiàng)列表里看有沒有出現(xiàn)紅色 error 狀態(tài)的監(jiān)控項(xiàng)第二到最新數(shù)據(jù)里過濾該主機(jī)確認(rèn)有非空數(shù)據(jù)。如果看到 error 狀態(tài)的監(jiān)控項(xiàng)先點(diǎn)擊進(jìn)去看錯誤信息。常見的有 unsupported item key、Cannot connect to [...]: 10060、Connection refused 這類。每一條錯誤信息其實(shí)都指向了數(shù)據(jù)鏈路的具體環(huán)節(jié)比你在外面猜模板要快得多。如果最新數(shù)據(jù)里有值但看起來不對比如 Reading 是 0、Writing 是 0也不要慌先用 curl 手動看一次狀態(tài)頁確認(rèn)源數(shù)據(jù)里就是這些值然后判斷是 Nginx 本身空閑還是采集路徑不對。如果源數(shù)據(jù)是對的Zabbix 只是如實(shí)展示不用改 Zabbix。5. 沒數(shù)據(jù)的排查鏈路按順序查別亂試5.1 四個環(huán)節(jié)從上到下檢查如果你最終面對的是一臺沒數(shù)據(jù)的 Nginx 主機(jī)不要先懷疑 Zabbix更不要反復(fù)重新鏈接模板。按下面的順序逐層排查通常能在十分鐘內(nèi)定位問題。第一層Nginx 狀態(tài)頁是否可訪問。curl -s http://127.0.0.1:80/nginx_status如果 curl 能返回純文本進(jìn)入下一層。如果返回 403、404 或 HTML 頁面問題在 Nginx 側(cè)。第二層agent 能否讀到狀態(tài)頁。注意 agent 的運(yùn)行身份和權(quán)限。你可以切換到 agent 運(yùn)行用戶或者用 sudo 模擬執(zhí)行同樣的 curl 命令確認(rèn) agent 視角下能訪問。如果 agent 在容器里還要確認(rèn)容器網(wǎng)絡(luò)。第三層Server 和 agent 之間是否連通且 Hostname 匹配。zabbix_get -s agent_ip -k agent.ping如果 zabbix_get 返回 1說明網(wǎng)絡(luò)層通。然后再確認(rèn) Web 端主機(jī)名和 agent Hostname 一致。第四層模板宏和監(jiān)控項(xiàng)是否匹配。打開監(jiān)控項(xiàng)列表查看具體監(jiān)控項(xiàng)的 key、宏替換后的實(shí)際地址用測試功能跑一次。如果返回錯誤根據(jù)錯誤信息調(diào)整宏。這個順序的核心思路是先確定是哪一層壞了再決定修哪里。不要在不知道哪一層出問題的時候改配置改來改去只會讓狀態(tài)更亂。5.2 高頻錯誤對照表下面這張表基本覆蓋了 Zabbix 監(jiān)控 Nginx 時最容易遇到的幾類現(xiàn)象現(xiàn)象常見原因處理思路狀態(tài)頁 curl 返回 404沒有配置 location 或模塊缺失先查 nginx -V 里的 stub_status 模塊狀態(tài)頁 curl 返回 403allow/deny 沒有放行 agent 來源 IP調(diào)整 allow 規(guī)則思考 agent 從哪個 IP 訪問監(jiān)控項(xiàng)顯示 unsupported itemagent 版本或模板類型不匹配確認(rèn)是 agent 還是 agent2換對應(yīng)模板或 key最新數(shù)據(jù)一直是空Hostname 不匹配、宏路徑不對、采集周期長檢查主機(jī)名一致性測試宏替換后的地址監(jiān)控項(xiàng)返回 Connection refusedagent 未啟動、端口不通、防火墻攔截systemctl status 看服務(wù)再用 zabbix_get 驗(yàn)證狀態(tài)頁返回的是 HTML 而非純文本location 配置被其他規(guī)則截獲檢查 server 塊順序確認(rèn)精確匹配位置這張表不是讓你背下來而是給你一個參考坐標(biāo)。遇到問題時先看現(xiàn)象再判斷屬于哪一層然后去對應(yīng)位置檢查。5.3 沉淀一個“四層驗(yàn)收清單”最后一個能長期復(fù)用的經(jīng)驗(yàn)把 Zabbix 監(jiān)控 Nginx 的鏈路固定成一張驗(yàn)收清單每次新接入一臺 Nginx 主機(jī)時按順序過一遍。Nginx 狀態(tài)層模塊存在、location 配置正確、curl 返回純文本、allow 已放行 agent 來源 IP。Agent 采集層服務(wù)已啟動、配置了正確的 Server/ServerActive、Hostname 與 Web 端一致、zabbix_get 驗(yàn)證 agent.ping 返回 1。Server 接入層Web 端主機(jī)存在、agent 接口可達(dá)、主機(jī)名匹配。模板匹配層鏈接了適配 agent 類型的 Nginx 模板、宏路徑/協(xié)議/端口正確、最新數(shù)據(jù)出現(xiàn)非空值。這個清單不是固定不變的但它能幫你把一次復(fù)雜的排查變成一次順序的確認(rèn)。以后不管是三臺機(jī)器還是三十臺機(jī)器先讓這種驗(yàn)證順序變成肌肉記憶再談自動化。6. 適用邊界這套方案不是所有 Nginx 環(huán)境都適合6.1 適合誰Zabbix 監(jiān)控 Nginx 這套方案適合的場景其實(shí)很清楚你已經(jīng)在用 Zabbix手里是一批長期存在的虛擬機(jī)或物理機(jī)核心關(guān)注的是連接數(shù)、請求數(shù)、握手狀態(tài)等基礎(chǔ)指標(biāo)。這種情況下引入一套新的監(jiān)控系統(tǒng)成本遠(yuǎn)大于收益直接在 Zabbix 里接 Nginx 模板是最順的路。從我個人經(jīng)驗(yàn)看當(dāng)一個團(tuán)隊(duì)已經(jīng)用 Zabbix 管了幾百臺機(jī)器再為了 Nginx 單獨(dú)部署一套 Prometheus、Grafana反而不劃算。不是因?yàn)?Prometheus 不好而是你的告警、權(quán)限、儀表盤、值班流程都已經(jīng)長在 Zabbix 上了新增一套系統(tǒng)意味著要同時維護(hù)兩套監(jiān)控體系的賬號、存儲和告警規(guī)則。6.2 不適合誰反過來如果你的環(huán)境是大量短生命周期容器Nginx 實(shí)例像 Pod 一樣隨時擴(kuò)縮容Zabbix 這種以主機(jī)為單位的管理模型就會變得很吃力。每來一個新實(shí)例都要創(chuàng)建主機(jī)、鏈接模板、維護(hù) Hostname規(guī)模一大這些動作本身就是運(yùn)維負(fù)擔(dān)。另外如果業(yè)務(wù)需要按 URL、按狀態(tài)碼、按 upstream 做細(xì)粒度 SLA 分析單靠 Zabbix 的 Nginx 狀態(tài)頁數(shù)據(jù)也不夠。狀態(tài)頁給的是連接數(shù)和請求總數(shù)拿不到每個接口的響應(yīng)時間分布。這種需求更適合讓 Nginx 輸出 access log 結(jié)構(gòu)化、再送進(jìn)時序數(shù)據(jù)庫或者日志系統(tǒng)或者直接采用具有服務(wù)發(fā)現(xiàn)能力的監(jiān)控方案。這不是說 Zabbix 不能做擴(kuò)展而是說你要先判斷值不值得。任何方案都有維護(hù)成本Zabbix Nginx 監(jiān)控的優(yōu)勢是簡單直接代價是深度有限。認(rèn)清這個邊界比盲目堆監(jiān)控項(xiàng)更重要。6.3 重要的不是某一個命令而是適應(yīng)變化的能力回到標(biāo)題里那半句“和過去有一點(diǎn)不同”。這句話其實(shí)很適合用來概括這類監(jiān)控方案的常態(tài)Nginx 的編譯參數(shù)在變agent 從舊版走向 agent2模板名稱和宏定義在變安裝方式從裸機(jī)走向容器。過兩年你再回頭看今天這篇文章里的具體配置很可能又有出入。但有一點(diǎn)不會變數(shù)據(jù)從 Nginx 到 agent 再到 Server 這條鏈路的邏輯是穩(wěn)定的。你只要掌握了“先 curl 狀態(tài)頁、再 zabbix_get 探活、最后看模板宏”的驗(yàn)證順序無論版本怎么升級你都能在最短時間內(nèi)判斷出問題出在哪一層。這才是比某一條命令更有價值的東西。所以我的長期建議是不要只收藏某個版本的配置片段而是順手把自己的環(huán)境、模板名稱、宏定義、驗(yàn)證命令寫成一個簡短文檔或腳本。下次再遇到 Nginx 監(jiān)控沒數(shù)據(jù)你不是回去翻舊教程而是打開自己的排查清單?;氐介_頭那個案例。我們最后做的事情其實(shí)很簡單把 stub_status 狀態(tài)頁配置好allow 規(guī)則放行 agent 來源 IP再把 Web 端主機(jī)名和 agent Hostname 改成一致。數(shù)據(jù)在第二個更新周期就出現(xiàn)了。整個過程沒有任何懸案只是之前分散在不同教程里的經(jīng)驗(yàn)沒有串成一條完整的鏈路。Nginx 側(cè)會變、Zabbix 會變、模板會變但驗(yàn)證順序不會變。下次再看到最新數(shù)據(jù)為空時不要急著在界面上反復(fù)點(diǎn)先打開一個終端curl 一下狀態(tài)頁很多時候答案早就寫在響應(yīng)里了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
日本色色色| 婷婷激情一区二区三区俺也去| 久九九九九九九热| 日韩大香蕉| 天天躁日日躁AAA片李宗瑞| 操狠狠| 一区二区不卡免费| 五月天色五月| 人人妻天天做天天爽| 国产午夜精品理论片一二三区区| 亚洲欧洲综合视频在线| 欧美精品69性爱| 99精品久久久久久久婷婷蜜桃| 日韩99999色| 97国产|免费| 亚洲Av无码成人精品国产| 亚洲五区熟女| 日韩乱伦影音先锋| 成人草草视频| 日韩国产品视频中文字| 欧美人人曰人人操人人射射| 亚洲黄a三级三级三级看三级| 搡老女人911熟妇老熟女| 黑操B| 97碰久久| 中文在线久久字幕| 在线观看岛国有码| 激情文学88| AV在线资源| 中文字幕日韩专区精品系列| 色麻豆AV| 人人操人人狠狠操| AV一起草在线| 亚洲中文字幕熟女少妇一区二区| 中文字幕黑人大片| 国产精品无码av在线 | 亚洲在线网站| 蜜臀无码一区二区| 欧美日韩免费专区在线| 91精品无码人妻系列| 久久久精品,3| 亚洲精品 欧美精品| 亚洲少妇喷视频看| 人人操人人摸人| 女生91网站| 2026国产精品视频| 亚洲AV无码久久精品蜜桃小说| 激情小说成人日本无码一| 中文字幕精品探花视频| 久久久久99999| 欧美美女后入| 天天天天天天天天综合| 欧美97在线观看| 国产 码在线成人网站| 无码区蜜乳| 午夜国产综合视频在线观看| 高清国产精品福利网站| 囯产精品久久久久久久久久二区三区| 91国模| 天天色图| 中文字幕乱码人妻二区三区| 欧美片第一页| 亚洲国产91精品一区二区久久| 中文字幕av亚洲精品| 亚欧美综合网| 麻豆国产97在线| 亚洲综合电影| 中文色综合| www熟女乱伦com| 懂色Av| 9久热这里只有精品| 五十路熟女人妻一区二区三区四区五| 日本性爱视频一级| 岛国在线一区二区三区| 色色国产| 色婷婷婷五月天激情四射| 天天日天天屌天天操| 国产精品一二三| 96国产精品| 成人性爱免费播放| 五月天色图影视| 中文字幕少妇色 | 国产男女无套视频免费观看| 日日日啊啊啊| 久区视频| 大香蕉综合在线| 夜夜中出国产| 久久精品电影| 男人下部插入女人下部 | 国产久久久久影院老熟女| 97超碰影音| 9丨亚洲一区二区在线| 欧美性爱一级操| 精品乱子一区二区三区99| 亚欧美综合| 欧美一区二区一级岛国大片| 日韩久久三区| 南澳成人一级片在线播放| 欧美视频一| 亚洲AV无码天美传媒一区| 久久爽爽精品| 一个色导综合| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 婷婷97| Aa东京男人的天堂| 色香色欲天天综合网天天来吧| 青青草国产亚洲精品久久| 亚洲无码日韩电影| 天天操女人| 超碰在线一区二区| 少妇99成人麻豆| 欧美中文综合| 久久久精品九| 欧美操逼熟女| 亚洲色图8| 欧美日韩性爱精品| yw尤物av无码点击进入麻豆| 国产怡红院| 亚州熟女乱伦| 麻豆久久久一区二区| 宗合情欲网| 成 人 A V免费视频在线观看| 五月婷婷五月天| 69一区二区| 日韩影片中文字幕一区二区三区| 欧美特大AA级黄片| 久久久不卡| 亚州国产精品乱| 99精品国产户外露出| 日韩二级| 日韩亚洲美州欧洲综三区一品在线| 网站A V在线| 精品9区| 日本岛国黄色网址| 国产熟女乱论| 亚洲伊人久久综合97| www.成人无码| 一区二区激情国产熟女 | 加勒比伊人综合| 欧美日韩99精品麻豆传媒| 国产成人亚洲精品无码古代早漏男 | 少妇蜜汁| 久久精品视-一级做a爰片性色毛片16美国-中国女与老外在线精品 | 色九九九综合| 亚州成人a∨| 亚洲国产一区二区三区四区国产| 日韩一级久久毛片| 精品九九九九九| 97神马久久| 欧美精品不卡一二三四在线91| 人妻夜夜爽天天爽麻豆三区网站 | 亚洲综合小视频小说在线观看| 十八禁啪啦拍视频无遮挡| 国产精品剧情| 欧美色图色综合| 久久久久久久久久久久色网| 东京男人天堂| 色与欲影视天天看综合网| 91欧美性| 东京热伊久| 亚洲精品1区| 亚洲一区二区 麻豆传媒| 欧美后入式| 裸体女人草逼视频播放一区,二区,三区,四区,五区 | www.91久久| 777奇米影视777四色| 嗯嗯嗯嗯啊啊啊好紧好大| 亚洲日韩av专区无码| 日韩淫色网| 色九九综合AV| 九九毛片这里只有精品| 高清不卡一二三区视频......| 天天狠| 精品超碰中文在线| 91美女在线看| 久久久久久久| 国产精品自拍xxxx| 人妻精品综合中文字幕在线| 麻豆AV短剧| 亚洲AV不卡在线观看尤物| 狠狠爱AV| yiqicaoav| 久久一区二区高清免费| 婷婷日韩一区二区三区中文字幕在线| 国产剧情一区在线观看| 日本淫穴在线| 热思思免费视频| 美国人人操人人操| 色哟哟国产精品免费网址| 99久久综合| 2019亚洲男人天堂| 欧美性爱第一页久久| 免费精品99| 精品9区| 激情啪啪拍91| 97一区二区蜜臀| 超碰97日韩| 亚洲欧美激情在线视频| 欧美一品道| 久久99操天天日| 91亚洲黑人| 久久亚洲国产成人| 麻豆传媒一区二区在线观看| 欧美一级黄片免费播放| 女性喷水高潮在线观看| 亚洲色图第四色| 国产免费一区二区在线A片视频| 九热久| 欧美老妇女内射网址| 国产精品无码在线| 日本性感人妻91| 白嫩妹子国产骚| 欧美亚综合色图| 成人AV在线电影| 黄片qw| 亚洲激情视频| 久九九九九九九九热| 日本97久久久精品| 99久久无色码| 久久久久久久久久久六六| 色官网色综合| 久久伊人亚洲AV无码网站| 亚洲综合色图欧美| 一二三四区电影| 色呦色呦色精品| 免费人人搞97| 国产夫妻一区二区| 玖玖爱综合| 久7色| 偷拍网站久久男女男| 色黄污美女啪啪啪免费网站| 综合av社区| 99久久精品国产系列| 久操国产在线| 精品国产av一区二区三区四区入口 | 日韩综合成人免费视频| 亚洲成av人片色午夜乱码| 日韩精品影视| 黄色十八禁网站| 亚欧无码线免费观看视频| 天堂av2019| 国产无码三级视频在线观看| 狠狠爱夜夜干| 狠狠图片青青草| 国产精品无码论坛| 女人香蕉久久毛毛片精品| 色色色五月婷婷| 天天cao在线| 玖玖爱一区在线| 久久这里只精品99re66图| 久操精品| 欧美色图小说综合| 影音综合网| 超碰99热| 色999五月色| 国产一区二区精品久久99| 91精品人妻一品二品三品| 中文字幕在线观看第二页| 青娱乐国产精品| 影音先锋少妇| 蜜乳av一区二区三区四区不卡| 9久综合网| 久久香蕉国产线看观看猫咪av| 成人黄页| 麻豆性爱视频在线播放| 日本在线视频导航| 色天使亚洲综合在线观看| 一本久道久久综合狠狠爱一密臀精| 老女人老91妇女老热女| 97看操| 国产女人高潮视频| 五月天丁香| 亚洲国产无码精品首页久久久| 狠狠中文字幕| 91操人| 日韩成人网址| 日韩欧美经典在线观看| 午夜国产成人福利视频| a在线观看| 日韩精品永久在线观看| 做爱A级亚欧| 小情侣高清国产在线视频| 一区在线观看中文字幕| 亚洲另类久操网| 久无码| 伊人丝袜美腿高跟在线观看高清| 中文字幕伊人| 精品久9| 国产精品人妻一区二区| 国产精品美女久久久久久网站| 97在线精品观看视频| 黑人猛交| 无码 有码 国产18p| 久久久中文| 亚洲区限制级| 久久亚洲欧美一区二区三区-亚洲国产精品第一区二区 | 成人性爱电影一区二区| 综合网,亚洲,欧美| 超碰九九| 国产综合永久精品日韩鬼片| 9/A片| 精品综合久久久久久97| 亚洲AV无码乱码| 亚洲精品精品一区二区| 神马影院午夜福利久久久| 日韩欧无码一区二区三区免费不卡 | 熟女人妻久久中文字幕一二区| 操逼精品视频| 久久97| 五月天婷婷久久| 好看的久久不射无码影视影院| 亚洲熟妇AV日韩熟妇在线| 沈阳熟女高潮对白视频| 中文伊人大香蕉视频| 欧美色97| 亚洲一欧洲中文字幕在线| 蜜桃久久久久久| 99re视频这里只有精品| 五月天婷婷基地| 99re视频在线播放青草| 中文字幕人妻资源在线| 青娱乐手机日韩在线视频| 精品人妻一区二区三区视频在线| 亚洲nv男人的天堂网| 夜色综合| 亚洲人码13| 囯产乱伦一区二区三女| 日韩极品无码B| 天天舔天天日天天射| 欧美日韩国产三级黄色| 久久久555| 91是天天| 黑人嘿嘿嘿超爽免费视频| 大香蕉日亚洲日本亚大| 99精品在线| 一起草三级AV电影在线观看| 精品无码久久久久| 在线观看岛国有码| 国产91影院| 国产熟女二区| 十八禁视频网站| 日韩福利电影网| 天美一区在线| 国产欧美精品日韩区二区麻豆天美| 国产探花日韩援交| 人人妻人人色一区二区三区| 性爱欧美五月| 99免费视频| 日本视频一区二区三区| 麻豆精品.欧美精品.日韩精品.| 91骚妇| 91小视频| 亚洲熟女性高潮久久久| 欧综合网| 91蜜桃传媒精品久久久一区二区| 日韩传媒在线| 日本高清电影欧美色图| 91精品黄在线观看| {男男暴菊gay无套网站| 九九综合九九综合| 日韩电影中文字幕| 欧美综合传媒| 裸体美女久久久| 九九玖玖精品| 国产又色又爽又舒服的三级视频| av最新免费中文字幕| 亚洲日韩美女丝袜美腿人妻视频| 精品久久9| 中文字幕综合人妻| 麻豆影音天美视频| 亚洲棕合电彰| 九九热免费国产视频婷婷伊人五月| 无码国产精品久久久久| 免费的黄片有限公司| 91综合色噜噜| 一级性爱视频免费观看 | 日韩av色图综合| 天堂av2019| 99色热| 激情五月综合网| 免费啪啪一级视频| 欧日a| 殴美大黄片| 99久久婷婷丁香| 少妇3P性爱自拍| 一区二区三区免费视频入口| 国产一区二区三区高清视频| 久久在线观看免费视频| 大香蕉免费3| 99久久亚洲精品无码毛片潘甜甜| 亚洲成人在线高清| 啪啪AV导航| 欧美黄色大片在线观看 | 一区二区三区四区免费视频| 日韩美女操b| 人妻一区二区三区视频| 插穴性爱视频在线观看| 91精品久久久久五月天精品| 日韩不卡a级视频专区| 日韩欧美午夜视频在线| 日本中文字幕在线视频| 强奸乱伦大香蕉| 国产综合网站在线播放| 亚州国产精品乱| 屌色在线97视频| 啊啊啊啊视频免费| 亚洲蜜臀懂色| 国产精品久久久亚洲第一牛牛_在线观看 | 九久精品| 国产欧美精选激情视频| 亚洲一区二区中文字幕| 久99视频| 天堂资源站| 天天躁狠狠躁av| 欧美亚洲首页| 国产在线视频午夜精华在| 中国一级操逼视频| 亚洲国产无码精品首页久久久| 亚洲男人天堂2019| 亚洲无限观看| 久久久一区二区三区麻豆| 欧美色女人| se吧提供国产乱老熟视频胖女人| 欧美丰满熟妇XXXX性ppX人交| 国产原创剧情在线丝袜| 性性欧美| 色婷婷久久综合超碰| 久久久久九九九九九| dy888午夜老子影视达达兔| 综合影院永久入口国产| 国产亚洲国产超碰| 欧美色九九九| 日韩大香蕉AV影片| 久久免费99精品久久久久久| 日本一级黄色电影| 中出后入| 久久系列| 欧美一区二区亚洲天堂| 亚洲射综合网| 亚洲成人贴图| 岛国艾薇凹凸视频天堂| 91美女在线视频| 免费国产视频| 国产小视频91| 天天操人人操骚逼网站| 日韩小电影| 精品超碰国产| 久久久男人的天堂| 欧美自拍偷拍综合图片| 久久理论字幕视频| 深喉吞精| WWW黄片COM| 99国产精品免费| 国产精品久久久啊| 另类 日韩 熟女| 青青久操| 日本狂喷奶水在线播放212| 夜色五月天| 亚洲AV永久无码精品成人调教| 久久精品国产99精品亚洲蜜... | 大香蕉免费3| 婷婷色婷婷| 91高清日| 8050午夜少妇无码| 欧美性五月| 欧美一级美片在线观看免费| 97色色国产视频| 日韩一区二区精彩视频| 日韩在线视频1234| 午夜成人爽爽爽爽A片李冰冰| 国产免费永久精品无码| 亚洲综合草草| 日韩欧美午夜视频在线| 熟妇女伦乱视频视频| 日韩欧美字幕亚洲一区二区| 九九九九免费高| 99在线无码精品秘 入口黑人 | 立川理惠被中出无码| 裸体女人草逼视频播放一区,二区,三区,四区,五区 | 六月婷婷一区二区三区| 日韩性爱毛片操骚逼| 99www.bibizy香蕉资源国产一区二区三区高清 | 欧美亚洲色图另类国产| 亚欧美色图| 国产97视频免费观看| 夜夜嗨一区二区三区三州加勒比| 在线可观看的黄色网址| 啊啊啊操死我| 操逼精品视频| 色就色综合| 青青草导航在线视频| 免费操逼视频下载| 一区二区三区不卡视频| 国内黄色精品| 欧美性爱1080p| 精品少妇99| 吻戏激情性巴克| 国产9 9在线 | 亚洲| 99re在线观看| 成人电影一区| 俺去啦俺来也久久综合| 美美91成人国产精品欧美精品久久久久久久 | 无码操逼网| 插插综合网天天影视网| 国产少妇肉丝在线观看| 欧美aa一级片| 好爽视频在线观看| 国产伦精品免编号公布| 国产精品欧美日韩久久| www.人人摸在线视频| 天美国产精品| 国产熟女精品一区二区| 亚洲天堂人人妻| 亚洲.欧美.丝袜.中文.综合| 成年人网站在线免费观看| 99精品高潮| 日日狠狠久久偷偷色综合免费| 99视频这有这里有精品| 无人区高清电影免费观看一区二区三 www.qmcai2.com | 午夜超爽| 一级乱伦网站| 欧美天天干| 久久超碰大香蕉| 伊人久久88国产女| 一级特黄aaa大片在线观看成人一级片在线观看| 春色综合免费| 久久大精品乱码视频人妻熟女| 免费啪啪啪网站18岁| 欧美日韩另类在线播放| AV有码在线| 人妻激情在线视频| 欧美熟女妇同| 天天爽天天| 亚洲码专区| 亚洲性爱成人| 亚洲高清自拍| 中文字幕丝袜| 日韩美女,国产传媒,视频一区| 蜜臀久久99精品久久久久久久久| 99久久婷婷丁香| 黄视频免费| 9久久久久| 国产精品69久久久久孕妇欧美| 日本啊啊啊啊啊视频| 久久丁香五月天| 欧美日韩操逼嗦吊| 在线中文字幕| 亚洲国产精品无码AV久久久| 91亚州| 大香蕉草草| 夜夜嗨一区| 久久久久久久久久久久久9999| www.色婷婷| 久久曰曰| 成人黑料社久久| 国产欧美亚洲精品a第2页| 内射老妇BBWX0C0CK| 秋霞网无码| 精品国产乱码久久| 天天综合~91| 男人天堂网站| 久久久久久97| 少妇色欲综合网2| 久久久男人的天堂| 色欧洲97| 久久久9 9 9精品| 色偷综合| 国产嫩草精品A88AV| 伊色久人大在线| 校园春色美腿丝袜 | 国产又大又粗又色生活片亚洲国产精品成人久久久综合免费 | 精品人妻久久久久一区二区三区| 丝袜美腿操av| 欧美日韩一二三| 东北熟女91| 中文字幕av亚洲精品| 2017天天操| 国产色图乱伦| 日本十八禁免费看污网站| 欧美另类精品xxxx| 婷婷AV一区二区三区| 九九无码视频| 久久精品一区二区三区不卡| 99999精品视频| 日韩丝袜高跟制服在线观看| 呻吟 欧美 日本 中出| 98超碰欧美| 一区二区三区国产在线播放| se吧提供91精品国产91久久久久久| 日韩精品在线观看观看| 超碰在线人妻| 青青青国产| 中国小夫妻勾搭露脸淫荡对白| 亚洲欧洲第二视频在线观看色图| 校园春色美腿丝袜 | 久久国产视频专区一二三| 亚洲欧美精品久| 在线二区不卡| 国内毛片热久久思思热| 日韩中文字幕二区| 夜夜嗨AV蜜臀av| 亚洲色入欧美| …亚洲黄色厕厕女女在线播…| 美女裸体无遮挡永久免费观看网站| 日本视频一区二区三区| 黄页大片在线观看| 91欧美性| 国产精品内射婷婷一级二| 乱伦图一区| 超碰调教97| 日日干夜夜骑| 无码精品久久久久久亚洲| 久久欧美性爱视频| 丝袜夫妻自拍| 中韩中文字幕在线观看| 成人精品一区二区91毛片不卡| 天天天天天干夜夜夜夜夜操| 国产又大又粗又长视频在线| 亚洲精品蜜桃久久久久久久| 日韩97| 静品嫩模一区二区| 欧美另类自拍| 久久精品| 欧美淫穴| 久久精品操| 国产91精品福利在线| 亚洲国产精品久久久久久久久久| 欧美手机在线综合| 精品国产乱码久久久久久口爆网站| 五月丁香啪啪啪| 天美久久久久| 思思久热在线精品66| 欧美久热| 成人区人妻精品一| 操逼不卡中文字幕| 久操在97| 国产精品一区午夜福利| 国产性感在线观看| 久久大黄片| 五月丁香六月| 91亚洲欧美激情| 99视频内射三四| 精品国产乱码久久久久久日本公司| www.99中文字幕| 密臀视频一区二区三区| A级国产欧美激情在线| 东北女人av| 亚洲精品九九九| 狠狠中文字幕| 国内毛片欧美香蕉精品| 中文字幕二区日韩天堂| 日本阿v天堂在线观看| 韩国女主播青草福利视频| 国产精品一区二区三区在线| 91啪啪| 麻豆尤物视频网| 色五月婷婷在线| 超碰99re| 亚洲欧美激情另类色图| 张柏芝国产一区在线观看| 欧美亚洲激情小说| 欧美人与动性人交a| 啊啊啊啊啊好大好舒服想要| 激情黄色片在线观看| 欧美夜色| 日韩中文字幕二区| 91白嫩| 干B视频伊人网| 一本久道在线综合视频| 很黄很污的免费网站| 国产综合永久精品日韩鬼片| 蜜桃视频精品一区二区三区| 国产成人欧美一区二区三区的国产| 国产25页| 日韩人妻一区二区精品| 国产一国产一级毛片古装| 欧美国产视频| 高清无码 国产精品| 欧美综合天堂| 日韩性色b| 乱论91| 91老司机在线| 欧美老妇综合网| 黄色性爱网网| 91丨人妻丨国产丨丝袜| 久久久18禁| www五月| 欧美亚洲中文| 亚洲情色无码一区二区三区| 一区,二区,三区网站| 台湾成人无码AV| 农村少妇久久久久久久| 熟女欧美日韩综合婷婷| 大地资源在线观看中文第二页| 日本不卡在线二区三区| 99xav| 一区二区三区精品黑丝白丝酒店对鸡 | 亚洲熟妇丝袜在线观看| 久久‘黄片视频| 国产亚洲福利第一页丝袜| 在线观看午夜婷婷久久久久清性观看| 四虎AV在线观看| 无码78| 亚洲九九视频在线观看| 日韩 人妻 精品| 久久亚洲AV无码专区国产精品| 色妺妺AⅤ| 中文无线日韩一区| 大香蕉欧美伊| 91久久久久免| 色色色色综合网| 黄色免费一级在线毛片| 麻豆熟妇乱妇熟色A片在线看| 欧美操逼视频二区| 激情网五月天| 久操热线| 人妻aa| 久久 国产 无码| 欧美综合另类| 91丰满| 97精选久久| 麻豆一区在线| 日韩AV一区二区三区三州三州| 图片区小说区| 八人操人人摸人人看| 看免费的黄片| 精品人妻一区二区三区在| 黄页网站成人免费| 亚洲成人帖图| 亚洲色图欧美另类在线| 又摸又舔在线观看网站| 国产熟女一区二区丰满| 91视频国品一二三区| 欧美99| 五月丁香婷婷色| 国语精品内射在线观看| 亚洲av影音先锋| 操逼国产免费| 免费?级毛片无码?∨蜜芽试看| 久久久新亚洲AV| 久久久久久97| 久久91| 新亚洲无码| 欧美巨大性舒爽顶到了| 97天天操| 亚洲色图91| 一级性爱视频免费观看| 国产精品熟女一区二区三区| 丝袜AV一区二区三区| 啊啊啊啊啊好多水| 国产日韩中文字幕欧美| 久久久精品国产亚洲伊人| 丁香五月激情网| 日韩AV电影网站 | 亚洲AV不卡在线观看| 懂色av中文字幕| 无码粉嫩白虎一线天b区| 亚洲久久天堂| 日韩一级二级三级免费看完整版 | 色牛牛AV| 亚洲日韩AV视色| 久久精品视-一级做a爰片性色毛片16美国-中国女与老外在线精品 | 欧美美女视频| 亚洲欧洲综合| 男插女青青影院| 日本精品无码三级网站| 中文久久爆乳| 伊人成人中文字幕久久网| 丝袜内射| 久久这里精品国产99丫e6| 男人的天堂.com| 都市激情人妻一区二区青青操视频| 激情四射熟女丝袜| 亚洲狠狠入| 999久久久免费精品国产牛牛| 岛国毛片手机在线观看| 黄片www.| 欧美性,色九九| 97亚洲国产| 99re欧美| 欧美亚洲色图另类国产| 99在线精品视频| 夜夜爽妓女| 91精品少妇搡搡搡| 熟妇乱伦一区二区| 乳欲人妻办公室奶水| 天天插天天插| 超碰伊人在线| 日夜精品| 太久视频| 一区 欧美 日韩 麻豆| 97在线观视频免费观看| 欧美男人的天堂| 亚洲精品国产熟女| 中文字幕高清20页视频| 嗯嗯啊好大| 啊啊啊免费视频| 国模少妇一区二区三区| 国产性感骚丝袜在线| 啊啊啊男女| 天天操天天干一区二区| 久久麻豆一区二区| 九九热午夜欧亚国产视频| 18禁看网站一区| 午夜高清成人在线视频| 欧洲亚洲人妻无码中字久久三区四区| 人人操人人肉久久精品| 99老司机精品视频在线观看| 丁香九月激情啪| 久久极品伊人| 一二三卡欧美日韩人妻免费精品| 激情婷婷综合久久| 97人人干| 91模特在线观看| 26uuu性物| 日日夜夜国产综合| 精品无码久久久久久久久果冻糖心| A V视频日本| 日韩一区二区熟女| 又大又白奶子| 9久超碰| 欧美日韩传媒| 乱色视频中文字幕| 97欧美资源| 操逼操网| 一区二区不卡免费| 精品一二三区久久AAA片| 男人网站婷婷| 亚州综合AⅤ| 国产一级内射无挡观看| 干B| 色婷婷视频| 伊人欧美大香蕉视频| 91超级碰碰碰| 国产一区在线看| 一区二区激情国产熟女| 岛国黄片网站| 亚洲一二三四区在线免费看视频| 久久九九视频九九视频| 伊人久大| 国产精品交换一区二区| 手机在线免费看的av| 躁躁日曰躁2020| 欧美黄色大香蕉一区二区| 性色综合网| 青青草字幕AV| 五月天婷婷久久| WWW.操逼.COM| 啊啊在线| 精彩久久中文| 欲香欲色天天天综合和网| av在线一区二区三区| 久久久久亚洲熟妇熟女| 国产丁香精品露脸视频| 青青草原成人| 国产五码丝袜屁眼| 99热免费| 日韩三级一区| 色狠狠综合| 人人潮人人摸| 国产毛片片精品天天看视频| 91丝袜视频在线观看| 99热18这里只有精品| 330Dv国产女人终合视频极品人与兽| 国产又色又爽又舒服的三级视频| 日本性爱网址| 日韩免费大片一级播放| 亚洲āv网址在线观看| 久久久久久精| 成人一二三区| 欧美高清色| 99re免费| 超碰在线人妻中文字幕| 啊啊啊啊啊好多水| 久久丁香久草综合网| 亚洲超碰97| 日韩欧美亚欧在线视频| 女性喷水高潮在线观看| 女上位精品在线| 青青草一区二区高清无码视频| 国产女人9999| 水滴偷拍| 午夜精品久久久久久久久久久久久| 婷婷丁香人妻 | 91操熟女视频 | 蜜桃久久综合视频| 日本A级视频| 午夜综合在线| 91亚洲色图| 综合免费无码中文| 在线国产探花| 中文字幕 av v| 超碰99热| 蜜桃久久久久久久久久久久| 加勒比五月天| 超碰在线人妻中文字幕| 国产精品一区二区校花| 99热最新网址| 欧美亚综合色图| 大香蕉线| 3P乱轮视频| 加勒比AV网| 97久久国产| 久久98| 91热色| 亚洲 国产 精品一区| 成人女人国产| 欧美黄色手机在线观看| 色婷婷电影网| 加勒比综合a∨| 日韩精品在线放| 蜜桃久久综合视频| 精品丰满熟妇人妻一区| 欧美日韩一区二区三区四区蜜桃| 日本一区二区三区精品| 一区二区三区四区理论片| 日韩av不卡在线看| 安徽熟妇视频| 国产一级舔足在线观看| renqi久久久久久久久久久久| 九九九九九九九九九九九蜜桃| 操逼逼中文字幕| 亚洲综合校园春色| 色情乱伦AV| 果冻传媒A片一二三区| 国产亚洲精品玖玖玖在线观看| 大香蕉男人的天堂| 草草网站影院白丝内射| 精品九九淫乱男| 97香蕉网| 亚洲熟久久| 亚洲性爱无码乱伦av| 情色图区| 啊啊啊com| 91影库| 日本三级精品| 欧美成人精品一区二区三区| 丁香六月激情| 人妻少妇精品无码专区二区密桃| 五月天开心网| 人人操人人色人人摸| 97热视频在线观看| 蜜臀久久99精品久久久老,,| 国产免a费看黄片在线| 人妻喷水| 青青伊人久久| 欧美色棕合| 国产精品99久久久www| 少妇久久久久久| 色大师网站www永久网站视频| 91社操逼| 91熟女视频| 粉嫩久久久极品| 欧美九九爱| 国内毛片无码一级毛片| 日本精品无码三级网站| 亚洲密乳AV| 中文字幕制服诱惑| 精品日韩产品在线,日韩在线不卡视频,欧美日韩免费专区/久, | 黄页18禁| 婷婷色网| 激情第四色| 天天天天天天天天天天干美女| 最好看的中文字幕在线2018| 96精品久久| 天美传媒AV在线播放| 亚洲中文字幕久久无码精品| 老鸭窝日丰县女人| 超碰午夜| 亚洲欧美内射| 亚洲第一页综合在线| 欧美91精彩| 熟女露脸激情自拍视频| 夜夜爽夜夜摸夜夜操免费视频| 丝袜翘臀后入欧美校园亚洲自拍另类小说一区中文字幕少妇诱惑 | 精品九九国产无码| wwwcaobibi| 国产激情av女片自拍| 99久久婷婷| 久草久热| 男女激情中文字幕| 亚av顶级裸体一区二区三区四区五区| 久综合网| 五月天激情小说| 97一区二压| 亚洲天堂日本| 国产又粗又长视频| 思思视频免费看网站| 青娱乐日韩无码| 日韩一999精品| 婷婷九月国产| 国内毛片欧美香蕉精品| 欧美一级特黄淫片在线观看| 亚洲AV无码国产精品久久久久| 日本欧美一区二区三区免费| 爽爽歪在线视频| 久久偷偷色综合蜜桃| 亚州性色| 欧亚性爱啪啪| 日韩精彩免费| 91无遮挡| 综合自拍| 伊人96在线| 欧美日韩国产黄色片| 日韩三级一区 | 久久直播国产| 中文字暮97| 91黄站| 99热啪啪| 日韩天天综合| 草草网站影院白丝内射| 日本女厕偷拍| 翔田千里AV无码秘 三区| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 99热这里只有精品9| 久久久九精品| 18禁网站在线播放| 综合性视频99| 色综合尤物| 蜜臀AV一区二区三区| 99热在线观看| 精品九九九九九九| 91neishe| 免费久久一级毛片大黄| 欧美大香蕉97| 一级毛片久久久久久久女人18| 天美麻豆精品视频99| 任我爽在线视频免费观看| 日本久久超碰| 欧美久久九九| 婷婷久久久精品| 男人a天堂手机在线版| 欧美日韩黄色片一区二区三区四区人与兽做爱| 中文字幕一区二区无码成人| 69人妻精品一区二区绯色| 午夜精品久久久| 亚洲精品一二三四区| 成人无遮挡毛片免费看| www.AV有限公司一区| 久久亚洲AV无码专区首页| 亚洲一区二区中文字幕| 日韩在线AB| 五月天激情小说| 国内毛片无遮挡国产| 青青草原香蕉日本Ap| 国产精品午夜成人福利| 日韩午夜啪啪视频| 久久双插| 伊人91| 劲爆欧美人妖三区91| 国产欧美一区二区| 色青青久久影视| 日本视频在线观看污污污| 午夜亚洲WWW湿好大| 91痴汉| 超碰天天操| 麻豆人妻少妇在线免费观看| 女人爽到高潮潮喷18禁网站 | 精品国产91av一区二区三区| 久久精品一区二区| 亚洲久9| 人妻激情视频| 久久久久女教师免费一区 | 一牛影视成人片免费| 亚瑟国产精品久久无码| 97超碰色色| www国产精品| www.男人的天堂| 国产精品乱码久久久久久久久| 国产精品69久久久久孕妇欧美| 亚洲清纯唯美| 久久精品综合| 亚洲春色欧美| 日日摸日日弄日日拍| 精品人妻一区二区免费看| 欧美日韩不卡传媒| 99rre在线精品99re8| 校园激情狠狠四射| 亚洲图片欧美偷拍| 国产精品成久久久久午夜午夜| 国产精品第一页国产大屁股视频免费区| 久久亚洲欧美一区二区三区-亚洲国产精品第一区二区 | 少妇色欲综合网2| 青青青青草av在线观看| 色一区二区三区综合| 激情色图| 大黄片做爱的大的| 色情成人五月天| 亚洲日韩青青草色月| 福利在线视频一区二区| 日韩97超碰| 国产AAAAAABBBBB| 久久精品色欧美aⅴ一区二区| 嗯啊不要在线| 欧美 亚洲 另类 综合| 亚洲影院无码在线| 精品人妻一区二区三区蜜桃视频| 久久老熟女| 欧美成熟性爱精品| 五月综合激情| 天天日日日射| 日本不卡免费二区| αⅴ天堂| 中文字幕片| 九九九精品美女| 国产久久久久久久久一区二区| 久久久久久夜夜夜夜夜| 人人澡人人澡人人| 国产精品一二三在线看| 天天色悠悠激情| 精品人妻一区二区三区日产| 97人人超| 97在线欧| 自偷自拍的亚洲视频| 蜜臀99久久精品久久久久久| 欧美日韩国产高清在线一二三区 | xxxx网站亚洲精品| 日韩精品国模| 在线性黄高清免费视频| 国产怡红院在线| 99999精品视频| 国产内射爽爽大片| 日韩久久艹| 911粉嫩人妻| 国产精品动态一区二区三区四四| 一级A片女人高潮叫床| 九九久久首页| av在线免费一区二区| 青青操日韩| 韩国一区二区精品亚洲| 国产一区二区a毛片| 中国熟女网站| 四色永久成人网站| 青娱乐休闲视频在线观看| 色老牛| 嫩草影院在线观看精品 | 日本中文字幕在线视频 | 欧美亚洲手机在线| 后入内射蜜桃臀| 久久亚洲精品成人av| 蜜臀久久99精品久久久久久-DVD| 国产欧美美女免费观看视频| 激情网色| 热99re69精品8在线播放| 91天美传媒在线观看| 久久天天摸| 午夜无码精品免费看性色| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 99在线免费观看| a天堂视频| 国产亚洲精品久久久久小| 老熟女阿 国产91| 色妇91| 99蜜桃臀久久久欧美精品网站| 亚洲国产精品久久久久久久久久| 一级岛国大片| 国产兽交视频在线播放| 成人怡红院| 99热在线只有精品| 国产精品禁久久久精品|