久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

主庫寫了備庫查不到?主從延遲四步定位法

主庫寫了備庫查不到?主從延遲四步定位法 十五年數(shù)據(jù)庫相關(guān)經(jīng)驗做過 DBA、架構(gòu)師、技術(shù)顧問。不求顛覆只求靠譜。主從同步這個事看起來簡單。主庫寫、備庫讀binlog 傳過去、relay log 回放完齊活。但真出問題時能要人命。上個月接到一個告警業(yè)務(wù)方反饋剛下的訂單查不到。排查下來是主從延遲 30 秒——用戶剛在主庫寫完備庫還沒同步到。30 秒在互聯(lián)網(wǎng)業(yè)務(wù)里就是數(shù)據(jù)丟了。干了這么多年 DBA主從延遲是最容易被低估、也最容易背鍋的問題。今天把排查方法論整理出來從發(fā)現(xiàn)延遲到定位根因到解決每一步都說清楚。有好消息也有踩坑的地方。各位耐心看完。01 延遲從哪來先搞清主從同步的完整鏈路排查延遲之前先搞清楚延遲可能出現(xiàn)在哪個環(huán)節(jié)。主從同步不是主庫寫完備庫立刻就有它是一整條鏈路第一步主庫寫 binlog。主庫執(zhí)行寫操作后把變更記錄寫入 binlog 文件。這一步通常很快毫秒級。第二步binlog 傳輸?shù)絺鋷?。備庫?I/O 線程連接主庫拉取 binlog寫入備庫的 relay log。這一步的延遲取決于網(wǎng)絡(luò)帶寬和 binlog 產(chǎn)生速度。第三步備庫回放 relay log。備庫的 SQL 線程或者多線程復(fù)制的工作線程讀取 relay log把變更重放到備庫數(shù)據(jù)上。這一步是延遲的重災(zāi)區(qū)。第四步備庫數(shù)據(jù)可見?;胤磐瓿珊笮聰?shù)據(jù)才能在備庫上被查詢到。關(guān)鍵認知主從延遲不是一個數(shù)字是整條鏈路累積的結(jié)果。排查時要逐段確認延遲出在哪個環(huán)節(jié)。02 怎么發(fā)現(xiàn)延遲別等業(yè)務(wù)方來報主從延遲最可怕的不是有延遲是有延遲但沒人知道。等業(yè)務(wù)方反饋剛寫的數(shù)據(jù)查不到問題已經(jīng)發(fā)生很久了。DBA 應(yīng)該在業(yè)務(wù)感知之前就發(fā)現(xiàn)并處理。監(jiān)控指標(biāo)看這三個數(shù)就夠了MySQL 8.0查詢performance_schema.replication_connection_status和replication_applier_status關(guān)注LAST_HEARTBEAT_TIMESTAMP最后一次心跳時間和SERVICE_STATE復(fù)制狀態(tài)。MySQL 5.7執(zhí)行SHOW SLAVE STATUS關(guān)注Seconds_Behind_Master延遲秒數(shù)和Slave_IO_Running/Slave_SQL_Running復(fù)制線程狀態(tài)。PostgreSQL查詢pg_stat_replication關(guān)注write_lag、flush_lag、replay_lag分別對應(yīng)寫入、刷盤、回放延遲。三個閾值分三級告警延遲級別閾值響應(yīng)動作正常 1 秒無需處理常規(guī)監(jiān)控警告1-10 秒關(guān)注趨勢準備介入危險 10 秒立即排查必要時切主我的習(xí)慣告警不要只設(shè)一個閾值。設(shè)三級讓團隊知道現(xiàn)在是什么狀態(tài)。只設(shè)一個延遲 10 秒告警等告警響了再查黃花菜都涼了。03 排查流程——四步定位法發(fā)現(xiàn)延遲后按這個流程走90% 的主從延遲都能定位到根因。第一步確認延遲在主庫還是備庫怎么看在主庫執(zhí)行一個寫入操作記錄時間戳。然后在備庫查詢這條數(shù)據(jù)記錄看到的時間戳。兩者之差就是端到端延遲。如果延遲很大但主庫的 binlog 寫入很快查 binlog 文件大小增長速度說明問題不在主庫在傳輸或回放環(huán)節(jié)。第二步確認是傳輸慢還是回放慢怎么看MySQL 執(zhí)行SHOW SLAVE STATUS對比兩個值Read_Master_Log_PosI/O 線程讀到的主庫 binlog 位置Exec_Master_Log_PosSQL 線程回放到的位置如果Read_Master_Log_Pos落后Master_Log_Pos主庫當(dāng)前位置很多說明傳輸慢——網(wǎng)絡(luò)帶寬不夠或者主庫 binlog 產(chǎn)生太快。如果Read_Master_Log_Pos跟得上但Exec_Master_Log_Pos落后很多說明回放慢——備庫 SQL 線程處理不過來。第三步定位回放慢的具體原因回放慢是最常見的延遲原因。具體又分幾種情況情況 A大事務(wù)回放。主庫執(zhí)行了一個大事務(wù)比如批量更新了 100 萬行備庫回放這個事務(wù)時SQL 線程被占住其他小事務(wù)都得排隊等。怎么看查SHOW PROCESSLIST看備庫 SQL 線程正在執(zhí)行什么 SQL。如果是一條執(zhí)行了幾十秒還沒完的 UPDATE 或 DELETE基本就是大事務(wù)了。情況 B鎖沖突。備庫回放時遇到鎖沖突SQL 線程被阻塞。怎么看查備庫的information_schema.innodb_trx和data_lock_waits看有沒有鎖等待。情況 C備庫硬件跟不上。主庫用 SSD備庫用的是機械盤。同樣的寫入量備庫回放速度天然就慢。怎么看對比主備兩端的磁盤 I/O 指標(biāo)iostat 看 iowait 和吞吐量。如果備庫磁盤利用率持續(xù) 100%就是硬件瓶頸。第四步驗證根因定位到可能的根因后驗證一下如果是大事務(wù)在測試環(huán)境模擬同樣規(guī)模的事務(wù)看備庫回放耗時。如果是鎖沖突分析鎖等待鏈確認阻塞源。如果是硬件瓶頸做磁盤 I/O 壓測確認備庫磁盤確實扛不住。經(jīng)驗不要猜根因要驗證。我見過太多 DBA 憑經(jīng)驗覺得是大事務(wù)導(dǎo)致的結(jié)果查半天發(fā)現(xiàn)是備庫磁盤滿了。04 解決思路——對癥下藥定位到根因后解決思路就清晰了。方案 A大事務(wù) → 拆分事務(wù) 并行復(fù)制大事務(wù)是主從延遲的頭號殺手。一個事務(wù)更新了 100 萬行備庫 SQL 線程要一條一條回放可能花幾十分鐘。治標(biāo)把大事務(wù)拆成小事務(wù)。原來一個 UPDATE 更新 100 萬行改成每次更新 1 萬行分 100 次執(zhí)行。每次持鎖時間短備庫回放也快。治本開啟并行復(fù)制。MySQL 5.7 支持多線程復(fù)制MTS備庫可以用多個線程并行回放不同庫或不同事務(wù)的變更。-- MySQL 開啟并行復(fù)制基于庫的并行SETGLOBALslave_parallel_workers4;-- MySQL 5.7 基于邏輯時鐘的并行復(fù)制推薦SETGLOBALslave_parallel_typeLOGICAL_CLOCK;SETGLOBALslave_parallel_workers8;注意并行復(fù)制不是線程越多越好。線程數(shù)超過 CPU 核心數(shù)后收益遞減。一般設(shè)成 CPU 核心數(shù)的 1-2 倍。方案 B網(wǎng)絡(luò)傳輸慢 → 壓縮 帶寬擴容如果確認是 binlog 傳輸慢兩個方向解決開啟 binlog 壓縮MySQL 5.7 支持 binlog 傳輸壓縮在網(wǎng)絡(luò)帶寬緊張時能顯著降低傳輸量。-- 主庫開啟 binlog 壓縮SETGLOBALbinlog_transaction_dependency_trackingWRITESET;擴容網(wǎng)絡(luò)帶寬如果主備跨機房部署網(wǎng)絡(luò)帶寬是硬瓶頸。該升級就升級別省這個錢。方案 C備庫硬件瓶頸 → 升級存儲 讀寫分離如果備庫硬件確實扛不住兩條路短期把備庫的讀流量切一部分走主庫降低備庫負載。長期升級備庫存儲。把機械盤換成 SSD或者上 NVMe。硬件升級的錢比延遲導(dǎo)致業(yè)務(wù)損失的錢少多了。對比三種復(fù)制方案的延遲表現(xiàn)把上面的內(nèi)容做個對比方便選型方案延遲范圍適用場景局限性單線程復(fù)制秒級到分鐘級小數(shù)據(jù)量、低寫入頻率大事務(wù)必延遲基于庫的并行復(fù)制亞秒級到秒級多庫部署、寫入分散單庫大事務(wù)仍然慢基于邏輯時鐘的并行復(fù)制亞秒級生產(chǎn)環(huán)境推薦需要 MySQL 5.7半同步復(fù)制毫秒級但有寫入延遲數(shù)據(jù)零丟失場景主庫寫入變慢選型建議生產(chǎn)環(huán)境優(yōu)先用基于邏輯時鐘的并行復(fù)制MTS。數(shù)據(jù)安全性要求極高的場景用半同步復(fù)制但接受主庫寫入性能的輕微下降。延遲容忍度的判斷框架不是所有場景都需要零延遲。按業(yè)務(wù)容忍度分三檔容忍度高延遲 10 秒可接受后臺報表查詢數(shù)據(jù)分析任務(wù)非實時用戶查詢方案標(biāo)準異步復(fù)制 常規(guī)監(jiān)控容忍度中延遲 3 秒可接受用戶個人中心查詢商品詳情查詢訂單狀態(tài)查詢方案并行復(fù)制 三級告警 自動切換容忍度低延遲 1 秒可接受賬戶余額查詢實時庫存查詢支付狀態(tài)確認方案半同步復(fù)制 強制走主庫查詢 秒級監(jiān)控我的經(jīng)驗不要一刀切要求主從零延遲。不同業(yè)務(wù)場景對延遲的容忍度不同。按場景分級治理比統(tǒng)一高標(biāo)準更務(wù)實。從主從延遲是玄學(xué)到延遲是可管理的說實話干 DBA 前五年我對主從延遲的態(tài)度是能忍就忍。延遲幾秒嘛業(yè)務(wù)又不會掛。后來接了幾個金融項目才明白延遲不是能不能忍的問題是業(yè)務(wù)允不允許的問題。證券交易系統(tǒng)延遲 1 秒就是數(shù)據(jù)不一致合規(guī)上過不了關(guān)。這個認知轉(zhuǎn)變讓我重新審視主從延遲的排查方法。以前是延遲大了再看現(xiàn)在是持續(xù)監(jiān)控、分級治理、提前預(yù)警。主從延遲不是玄學(xué)是可測量、可定位、可優(yōu)化的工程問題。深度分析為什么并行復(fù)制不能解決所有延遲問題很多人以為開了并行復(fù)制就萬事大吉。實際不是這樣。并行復(fù)制解決的是多個小事務(wù)排隊等的問題。但如果來了一個大事務(wù)比如批量刪除 1000 萬條過期日志再多的并行線程也得等這個事務(wù)回放完。根因在于大事務(wù)本身是一個不可分割的原子操作。備庫不能把一個事務(wù)拆成兩半來回放——那會破壞事務(wù)的原子性。所以并行復(fù)制有天花板。它能解決并發(fā)小事務(wù)的延遲解決不了單一大事務(wù)的延遲。真正的解法是從源頭控制事務(wù)大小。應(yīng)用層做批量操作時分批提交。每批 1000-5000 行不要一個事務(wù)搞定。這個道理和 DBA 的日常建議一致事務(wù)盡量短。不僅是為了減少鎖等待也是為了減少主從延遲。主從延遲巡檢清單日常巡檢建議每周執(zhí)行一次1. 延遲趨勢檢查查看過去一周的延遲曲線確認沒有持續(xù)增長趨勢如果延遲峰值在上升說明復(fù)制能力在下降需要排查2. 復(fù)制線程狀態(tài)確認 I/O 線程和 SQL 線程都在運行如果有線程停過查錯誤日志看原因3. 大事務(wù)監(jiān)控查看主庫 binlog 中事務(wù)大小的分布如果出現(xiàn)異常大的事務(wù)通知應(yīng)用團隊優(yōu)化4. 硬件資源檢查備庫磁盤 I/O 利用率是否接近上限備庫 CPU 和內(nèi)存使用是否正常5. 告警規(guī)則驗證確認三級告警閾值配置正確測試告警通道是否正常發(fā)一條測試告警確認能收到總結(jié)主從延遲排查就一套流程看監(jiān)控 → 分段定位 → 驗證根因 → 對癥下藥。核心認知延遲不是一個數(shù)字是整條鏈路累積的結(jié)果。傳輸慢和回放慢是兩回事不能混為一談。預(yù)防延遲的關(guān)鍵事務(wù)要短、復(fù)制要并行、監(jiān)控要分級。處理過幾十次主從延遲問題每次回到這套流程問題都能解決。不需要什么高級工具耐心和方法論就夠了。后續(xù)我會繼續(xù)分享數(shù)據(jù)庫參數(shù)調(diào)優(yōu)實戰(zhàn)、容量規(guī)劃方法論這些話題跟著我一篇篇學(xué)數(shù)據(jù)庫這塊就沒問題了。有問題評論區(qū)見。十五年數(shù)據(jù)庫領(lǐng)域老炮。關(guān)注我一起把數(shù)據(jù)庫這件事搞明白。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
亚欧国产无码精品在线| 久久精品老司| 97se综合网| 久久神马影院| 少妇厨房愉情理伦片bd在线观看| 嗯嗯嗯好爽| 欧美性爱一区二区三区四区 | 午夜影美女日鸡鸡天天视频国产 | 亚洲情色 自拍| 日韩在线性爱免费视频| 啊啊啊啊在线观看网址| 国产呦精品系列在线观看| 国产免费永久精品无码| 久久超碰天天| 狠狠爱综合网| 久久东京热成人| 国产强奸乱伦xd| 中文字幕成人| 亚洲久久久久| 天天操狠狠日夜夜干超碰撸com视频在线观看 | 九九九精品美女| 亚洲aV性爱| 台湾大香蕉99热| 综合激情一一91| 99人妻| 久久色情| 啊啊啊啊啊啊啊啊在线观看| 九九内射在线| A男人的天堂| 久草午夜| 精品少妇一区二区三区免费观看| 91色插| 99九九精品| 日本孕妇孕交| 操逼日韩无码| 91久久久久久久| 骚女天天综合网| 中亚精品极乱| 少妇一区二区三区| 99热在线播放| 2017亚洲天堂| 天天综合网~69| 99热在线观看| 欧美日韩国产传媒在线精品| 亚洲高清视频在线免费观看| 97jingpin| 顶级丝袜熟女一区二区三区| 97超碰公开| 99久久网站| 欧美综合亚洲综合| 尹人大香蕉视频在线| 青青草精玖玖69精品| 粉嫩av久久一区二区三区| 日韩精品9999| 亚洲黄网在哪免费看| 久啪| 五月丁香婷婷啪啪| 亚洲无码国产探花在线观看| 啊嗯嗯啊好大好爽| 青青草日韩无码| 亚洲色图图片| 亚欧洲一区二区视频| 特级毛片特黄久久免费看| 久久久久久久久久久久色网| 物业黑人 AV一区| 日韩丰满熟妇| 91男人综合| ,国产乱人伦精品一区二区三区| 成人自拍三级在线观看| 国精综合一二三区影视| 五月丁香激情综合网| 日韩一级欧美一级国产一级台湾 | 超碰久热| 91精产一区二区三区| 少妇滛荡视频| 欧美综合区| 久久综合九色综合欧洲98| 亚洲男人综合网| 黄色大香焦1级‘′‘| 久久精品国产亚洲5555| 曰本道人妻久久久在线不卡色视频| julia高潮后不停追击中出| 午夜福利激情在线视频| 1769成人国产精品视频| 中文子幕一二三| 婷婷成人久久久精品| 亚洲欧美国产成人综合不卡| 国产综合色精品在线观看| 亚洲 欧美 另类 日韩 人妻一区| 国产精品一区二区在钱播放| 91超级碰碰| 丰满人妻一区二区三区性色| 亚洲激情视频| 91久久久久| 亚洲日韩东京热一区| 97视频网站在线观看| 色伊人91| 啪啪啪东京| 日韩一二三区| 亚洲乱码精品一区二区| 国产精品操| 色综合久久88色综合久久天天| 日少妇视频| 蜜桃臀一区二区三区久久| 91内射| 岛国小电影| 国产女人操逼视频| 天天操夜夜嗨| 国产狂喷潮在线精品| 亚洲综合嫩| 欧美日韩国产人人| 成人在线视频一区| 在线观看A啊啊啊| 嗯啊不要啊在线| 国产无马av| 国产色精品午夜大片| 爽极品影院| 免费看片黄| 干我久操| 久久久久人妻二区精品叶可怜| 国产传媒一区二区三区| 伊香蕉综合久久久久久久噜噜噜| 中文有码9| 免费99精品国产自在在线| 久久久网一区| 亚洲五区熟女| 97欧美日韩中文| 清清草影| 99热国产精品| 中文乱码字幕观看视频| 男人的天堂网页| 亚洲久久久久| 亚洲av国产av综合av卡| 国产AV色黄看到爽| 91日韩在线| 免费视频无码| 日欧美色| 嗯~啊~快点 死我视频免费看网站| 欧洲亚洲人人爽爽视频| 91天天综合日韩欧美| 91无遮挡| 欧美一区二区三区入口| av绯色| 蜜桃av综合网发布| 天堂九九九九九九九九九| 日韩天美| 亚av顶级裸体一区二区三区四区五区| 久久草视频污视频| 午夜九九| 国产亚洲欧美每日在线| 操逼逼福利视频| 中文字幕成人| 色狠人在线99| 超碰视97中文| 亚洲欧洲激情卡通另类文学四射小说网站| 99久久无码| 一起草日韩| av国产无码| 老色鬼成人精品视频下载大在线观看| 国产精品操| 波多野结衣一级视频| 精品-91人妻子系列| 婷婷亚洲综合| 日本国产二线女色| 在线日韩精品一区二区三区| 97干在线视频| 69人妻精品丰满熟女区| 99热在线播放| 强奸国产在线| 免费9 1久久| 熟女熟妇伦久久影院毛片一区二区| 色老大| 日本高清免费一本视频在线观看| 国产女人高潮嗷嗷嗷叫小说| 丝袜美腿诱惑亚洲欧美视频在线观看 | 中文字幕av色| 人妻色情天天操| 日韩精品在线视频,日韩精品……| 少妇无码av专区线| www狠狠| 久久一二三四五六七八九区区| 欧美韩日精品99综合| 97综合在线| 国产乱码精品一区二区三区四川| 天天日少妇逼AV| 亚洲天天影视色综合| 亚洲色宗合| 色小视频蜜乳| 国产欧美后入| 100啪啪视频大全| 久久AV无码网址| 18岁禁 茉莉成人久久| 亚洲日韩电影| 五月婷婷色| 91天天美女| 国产男人又猛又粗又爽| 国产第11页| 国产区日韩区在线观看| 嗯嗯啊中文字幕| 天天干人妻| 国产兽交视频在线播放| 内射中出日韩在线观看视频| 久久久精品网站| 99热66| 999色欧美中文字幕| 亚洲aV性爱| 天天热精品| 成人麻豆av电影网站| 五月丁香影视| 亚洲综合网91| 精品人妻二区三区| 中文字幕天堂在线| 97 国产一区| 久久久久亚洲熟妇熟女| 日本中文字幕高跟| 国产亚洲性生活视频播放| 亚洲天堂女优在线| 亚洲色综合| 95人妻爽爽人人做人人澡 | 成人av动漫在线观看| 99色日| 精品国产乱码久久| 91在线美女| 亚洲高潮影院| 欧美熟妇乱码在线一区| 家庭乱伦国产精品| 日日日色色色色色| 亚洲高清无码免费观看视频| 超碰色97| 91女神在线视频| 久久久一区二区三区麻豆| 插欧洲美女欧美精品| 在线播放欧洲免费av| 欧美久热| 3P乱轮视频| 可乐操亚洲蜜911| 床上啊啊啊一区二区三区| 精品白丝一区| 亚洲s在线观看| 亚洲成人贴图| 99啪啪| 精品久久久久久AV无码| 91五月天| 无码日韩人妻av一| 欧美情色亚洲| 91天堂视频| 精品人妻av在线播放| 97在线播放| 人妻天堂综合网| 亚洲性爱成人| 久久风骚城市| 99999精品视频| 370p日韩欧美亚洲精品| 久久久女人| AV一二区| 日本污ww视频网站| 欧美性爱第一区| 精品玖九九久| 久久久久久久久久久久欧美日| 亚洲天堂久久| 中文字幕一区二区三区字幕| 色哟哟av| 亚洲综合校园春色| 欧美日韩黄色片一区二区三区四区人与兽做爱 | 2017人人操,人人摸| 99色在线| 久久久久久久久久久久久女过产乱-少妇高潮一区二区三区喷水-成人AV | 国产黄片精品在线| 久久精品熟妇丰满人妻99| 久草资源在线视频官方总站日韩丝袜美腿 | 韩国一级婬片A片AAAAA| 久久香蕉综合一本到3atv| 亚洲天堂99| 99re这里只有精品中心播放 | 狠狠干狠狠干| 1024人妻熟女一区二区三区| 日本一区二区中文字幕久久| 黑白配性爱AV成| 久久av网| 99久视频| 三级三级三级a级全黄三| 亚洲欧美另类小说| 91成人亚洲色图| 亚洲欧美性生活| 桃色五月天| 香港澳门日本三级网站| 美女久久久久久久久久久| 四虎影视永久在线观看精品免费网站 | 香蕉免费一区二区三区不读| 97看操| 久日91在线| 国产精品国产亚洲区艳妇糸列| 天美一区在线| 最新啪啪视频| ji熟女.com| 综精品久久久aaaa| www.91理论| 情趣丝袜无码操逼视频| 思思热在线视频精品| 欧美视频一区二区在线| 搞中出久久| 久久黄片国产一区二区| 91视频精品| 舔足天天操天天射| 草草影院在线视频| 成人贴图日韩欧美| 精品少妇高潮久久| 内射小黄片| 99热99re超碰精品| av天堂5| 极品白嫩美女白浆成人福利在线看| 亚洲中文字幕乱码无码一区二区| 国产精品麻豆成人AV艾秋| 国产在线播放成人免费| 中文字幕视频2区| 激情文学小说一区二区 | 日韩精品人妻中文字幕有码午| 精品v日韩欧美国产| 99自拍视频在线| 精品国产人成在线| 亚洲第一在线视频| 色欧美天天| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 亚洲脚交| 肥臀熟女一区二区三区视频| 97爱亚洲| 91露脸熟女专区| 在线无码视频| 免费看黄视频亚洲网站| 91一区二匹| 久久精品无码熟妇一区二区三区视频导航 | 在线观看啊啊啊啊啊| 国产丰满少妇久久久精品影院| 东北老女人的激情视频| 欧美狠狠弄| 区二区亚洲婷| 97网站在线观看| 2003天天干夜夜操| 96精品久久| 色在线综合| 久久精品亚洲成a人天堂| 天天躁日日躁XXXXYY| 99热精品在线观看| 激情终合网| 亚洲精品国产精品乱码不卡| 国内毛片四区| 精品高清一区二区三区三州| 亚洲国产一区二区三区四区国产| 六月婷婷激情| 熟女被操视频网址| 大香蕉伊然在亚洲91| 黑人中出21连凳花野真衣| 婷婷天堂站| 成人a大片在线观看| A啊啊在线观看| 91女人的网站| 疯操AV| 少妇久久久久| 久久久久国产精品片区无码直播| 丰满人妻一区二区三区免费,| 男人的天堂色偷偷青青草视频婷婷网| 97超级色碰碰| 夜夜精品视频| 色综合色欲色综合色综合色综合| 免费的av网| 操逼逼中文字幕| 日韩三级视频一区二区三区| 色偷偷2020免费视频播放| 亚洲欧美精品一区天堂久久 | 亚洲加勒比久久日本道| 青青国产精品在线| 五十路三区在线| 欧美天天谢综合网| 亚洲性综合11| 骚女高跟AV在线| 97精品人妻一二三四| 欧美中文综合| 日逼国产| 国产 日韩 欧美 人妻 熟女 中文 69人妻精品一区二区绯色 | 99久久久er直播网址| 99精品热| 天天天做天天天爱天天天爽| 中文字幕一二区二三区人妻专区| 小草精彩毛片| 蜜臀久久久99久久久久 | 亚 欧 美 综合| 色婷婷一区二区三区久久午夜成人不| 在线观看一级α片刺激高潮视频| 免费观看有码高清视频| 97精品视频在线播放| 国产精品一区二区亚洲人成毛片 | 超碰 欧美| 大香网站| 欧美色图91p| 国产在线强奸视频| 狠狠干精品一二三四五六2022| 日韩有码专区| 国产青一二三| 级做a爱无码性色永久免费| 亚洲中文字幕乱码无码一区二区 | av一区二区三区四区五区久草臀| 国产三级多多影院2022国产AA一级毛片无码 | 97日视频| 亚洲国产欧美另类自拍| 日韩人妻精品中文字幕| 欧美aa一级片| 欧美久久人妻少妇一区二区| 小日子操bb在线看| 天天综合欧美综合| 91肉片| 东京热亚洲一区二区| 国产人妻久久精品一区二区三区| 五月婷视频| 超碰超碰超碰超碰的大鸡吧操黑丝袜| 色情五月综合婷婷| 亚洲区小说| 色丁香五月婷婷| 色综合久久久久| 久久这里只精品| 日本久久99| 91五十路| 91肉丝| 亚洲成人贴图| 亚洲高清视频在线免费观看| 亚洲精品天天影视综合网 | 口爆欧美91| 色欲久久久久综合网| 蜜臀久久一区二区| 台湾一区国产高清在线| 天操老女人| 乱伦av麻豆| 97操97干| 蜜桃在线观看一区二区三区 | 久插综合| 日韩av一级黄片| 麻豆尤物视频网| 色婷婷激情| 国内毛片热久久思思热| 色诱avtt| 老外又粗又长一晚做五次| 9精品久久| 无遮挡猛进视频免费无限观看| 国产丝袜啪啪| 蜜臀av一区二区三区免费观看| 国产无马在线| 欧美三四五区| 国产精品色哟哟| 91在线/欧洲| 九九久久99| 91亚洲情色| 欧美91在线+|+欧美| 97精品一区二区视频| 天天亚洲| 欧美后入| 日韩一级二级三级免费看完整版| 91精品人妻一品二品三品| 97在线/亚洲| 国产精品3| 天堂伊人久久| 99RE在线视频精品,这里只有精品| 日韩免费看黄片| 久久欧美激情| 一牛影视久久久一区二区三区| 都市激情人妻一区二区青青操视频 | 婷婷影院入口| 国产高清自拍| 婷婷九月丁香| 神马久久久久久久久久| 99热精品在线观看| 97日视频| http://qxhbdz.com| 国产精品99精品视频网站| 激情小说亚洲图片| 国产不卡片| 欧美夜夜草视频| 欧美在线55555| 久久人妻办公室视频| av天堂天堂av日韩| av爱爱爱| 国产h小视频在线观看免费| 老熟女熟妇| 六六久久日韩不卡| 97操操| 国产亚州高清国产拍精| 国内毛片婷婷六月色| 欧州一区二区三区四区| 色www精品视频在线观看| 色噜噜精品一区二区三| 精品女人999| 97中文天堂| 亚洲国产精品久久久男人的天堂| 九九99精品| 99在线免费视频| 成全在线观看免费观看| 久久亚洲天天做| 国产精品91ai| 亚洲精品黄码久久久久| 亚洲无线观看久久| 亚洲精品三| 国产乱码精品久久久久久| 国产成人在线观看网址| 999岛国大片| 久久久久成人蜜桃精品| 亚洲图片 91| 欧美丰满熟妇XXXX性ppX人交| 亚洲第一成人影院色播| 亚洲精品无码少妇久久| 精品欧美不卡在线播放| 欧美高潮在线| 中出789在线视频| 日日骚中文字幕| 成人一二三区| 丰满人妻区一区二区三| 神马九九| 国内精品嫩模A∨私拍小视频| 亚洲第一页综合在线| 吊色| 九99久久| 亚洲男人的天堂网| 9久精品视频在线观看| 欧美色日| 人妻丰满熟妇av无码区蜜桃| 性色综合网| 精品在线78| 91成人无码| 最新av中文字幕高清| 国产成人一级av88| 制服乱伦| 亚洲国产剧情少妇激情| 91精品婷婷国产综合久久竹菊| 麻豆精品A片免费观看| 96国产污污污丝袜| 久久久无码精品人妻二区| 激情五月天插| 精彩国产视频播放1区2区| www.99热| 国产毛片毛片4p懂色| 亚洲区限制级| 四虎视频在线观看| 日本久久综合| 激情五月综合网| 无码在线亚洲| 亚洲黄a三级三级三级看三级| 日韩中文字幕二区| 男人天堂网手机版婷婷| 欧美乱色| 久久精品高清AV| 97国产精品一区| 翘臀vidoes| 国产精品com| 97干天天| 99热大香蕉伊在线| 少妇熟女1区2区3区| 黑人性暴力毛片| 欧美精品 - 91爱爱| 色优久久| 激情文学 亚洲图片| 青青青在线高清视频在线一二三四区 | 国语对白在线播放视频| 日韩操啪| 偷拍欧美亚洲| 国产精品不卡一区二区三区| 99碰碰| 人妻av在线| 黄骗免费| 青青草黑寡妇男人天堂| 欧美人妻一区| 人人污日韩一区二区| 久久草视频污视频| 男女性无套 免费九一| 极品色www影院| 人人妻人人操人人乐| 亚洲综合校园春色| 丰满美女一级毛片在线播放| av一区二区三区 中文| 欧美亚男人的天堂| 91精品丝袜久久久久久无码人妻| 夜夜操老骚逼视频网站| 嗯嗯,啊啊,国产精品| 久久九九国产精品| 国产熟女完整版中字| 亚洲一二三四区在线免费看视频| 五月丁香婷婷综合| 日韩八十路老熟女| 中文字幕蜜乳av| 两女互慰AV高潮喷水在线观看| 国产女主播视频在线观看| 欧美在线视频观看一二三四区高清| 综合天天网| 97欧美日韩中文| 84YTCOM性无码| 国产自啪精品视频网站黑丝| 9Ⅰ超碰| 成人资源中文字幕在线观看| 日韩不卡a级视频专区| 色网色网色网色网色网色| 精品高清牛人盗摄一区二区三区中文字幕A片免费在线观看 | 日韩乱插| 探花精品视频| 日本三级韩三级99久久| 亚洲限制级| 日韩97超碰中文字幕| 久妇网| 日韩欧美俄罗斯A片| 日韩欧美水蜜桃人妻| 精品人妻1区| 欧洲亚洲人妻无码中字久久三区四区| 国产精品成久久久久午夜午夜| 九九精品美女高溯喷水| 国产久9| 欧美性爱www免费版| 大香蕉92| 久久亚洲婷婷| 九九九九久久久久| 亚洲综合另类欧美久久久| 丝袜视频一区二区在线播放国产中文 | 久久熟妇五十路一区| 久久精品99久久久久久| 久久久青青草| 国产无马av| 91AV国产精品| 亚洲综人网| 日本淫穴在线| 欧美性爱97超碰| 动漫片子网站3黄| 91久久久久久久| 美女被啪到深处抽搐视频| 激情视屏国产乱伦强奸| 欧美亚洲激情小说| 男人的午夜天堂| 欧亚性爱视频免费看| 台湾佬中文娱乐网久久久久久久久久com | 色97综合中文字幕| 青青11操操操操操操操操| 国产性感在线观看| ss久久| 欧美亚洲国内自拍| 97资源站日韩| 抽插爽| 亚洲色图国产另类| 国产操逼逼网| 欧美顶级黄色大片免费| 亚洲综合贴图91| 国产精品不卡一区二区三区av| 精品精品精品| 秋霞免费无码视频日韩A片| 午夜福利视频在线一区| 99亚洲国产精品色一区二区三区| 99re在线观看| 丁香五月性爱| 波多野结衣被操50分钟免费视频| 欧美婷婷久久| 九九热这里只有在线精品视 伊人草 成人菠萝蜜视频在线观看 | 99色婷婷中文字幕乱色| www.大香| 少妇高潮一区二区三区在线| 屌妞视频久久久久久久| 亚洲无码AV九九九| 亚洲97成人在线观看| 曰本人妻人人澡人人夹| 一本正道久久熟女| 一级啊性爱在线视频| 欧美色图第一页| 久久老熟女| 99色色网| 天天做日日做| 国产精品国产亚洲区艳妇糸列| 超碰97中文| 天堂8在线新版官网| 麻豆久久一区二区三区| 日本精品一区二区三| 免费夜夜爱黄色视频毛片| 日婷婷| 日韩电影天堂视频一区二区| 欧美后进式| 333kkkk·亚洲com久久| 国产美女在线精品免费看| 极品后入免费视频| 在线可观看的黄色网址| 国产夫妻性生活视频| 激情抓乳插进去啪啪啪日韩 | 人妻91少妇| 国内毛片国产欧美拍| 97在线观看免费视频l| 亚洲人成色9999精品久久 | 男同专区一区二区三区在线| 999熟女精品| 懂色AV一区二区三区| 色哟哟511老熟女| 国产辣妈在线视频福利| 日韩女优在线| 色色色五月婷婷| 视频分类 国内精品| 岛国在线一区二区三区| 大香蕉碰| 五月丁香激情四射| 啊啊啊免费视频| 人妻久久一区二区三区 | 亚洲第一页欧美| 91N欧美| 综合色99| 激情五月婷婷综合| 欧美亚洲丝袜美女电影| 啊啊啊爽爽| 午夜无码熟妇丰满人妻| 日韩精品亚洲一二三| 亚洲少妇视频| 欧美亚洲另类在线蜜桃| 成人贴图日韩欧美| 中文字幕日韩电影人妻| 日韩三A大片在线观看| 在线小说视频一区| 家庭乱伦麻豆| 国产欧美精选激情视频| 亚洲图片色图欧美另类| 约操熟妇| 混色激情av| 91国产美女丝袜足交精品视频| 999熟女精品| 亚洲综合骚逼| 精品国产Av无码久久久伦古装| 老司机午夜精品视频| 亚欧无码线免费观看视频| 日逼逼免费看| 你想操日本小逼吗| 国产精品ww久久| 操国产逼| 淫妻综合网| 天天肏视频| av天天在线| 玖玖综合视频| 色欧美天天| 国产乱婷婷精品二区三区| 96精品在线| 九九九久久久| 丁香五月激情综合国产| 韩日精品福利视频一区不卡在线免| 啊啊啊免费| 国产精品永久免费10000| Blackedraw视频一区二区| 国产女同在线观看视频| 91大胆欧美| 色噜噜人妻丝袜AV资源| 夜夜夜夜夜夜夜夜夜狠狠狠狠狠狠狠| 国产精品熟女丝袜一区二区| 在线视频亚洲无码| 日韩精品在线视频在线观看 | 超碰久热| 超碰97久| 日本黄 R色 成 人网站| 96久久久久久久| 美女淫穴| 熟女突然公开看18禁影片| 97在线视频观看| 91无码人妻精品一区二区三区蜜桃| 男人兔费天堂| 国产天天看| 精品人妻一区二区三区日产| 欧美色乱| 欧美精品自慰系列寂寞少妇| 操91| 日本二三四区| 五月天伊人| 91精品婷婷国产综合久久| 欧亚性爱啪啪| 狠狠入| 欧美v日韩欧亚洲电影天堂色诱,国产传媒| 18禁美女裸体无遮挡啪啪| 最新国产精品久久精品| 久久一区二区三区入口| 久久久久久欧美精品se一二三四| 国产97色在线| 色淫网站优优视频| 九九热在线精品视频| 日韩Va亚洲va欧美Ⅴa久久| 91色图片| 综合网天天| 国产9熟妇视频网站| 欧美一区二区一级岛国大片| 性爱综合网| 26UUU欧美日本| 校园春色中文字幕AV| 超碰成人国产| 人人操人人摸人 | 精品人妻免费观看| 91伊人久| 老色69| 超碰色老头| 久久久久久人妻| 久9爱精品| 精品久久99| 国产人妻久久精品一区二区三区| 91小视频| 日本五区不卡| 欧美在线观看综合国产| 99视频自拍区| 天堂种子在线www网资源| 热热色青青草| 乱色视频中文字幕| 亚洲 欧美 日本 国内 首页| 亚洲国产欧美中文永久| 青青草影视蜜久久| 五月综合视频| 国产精品色| 蜜臀aV午夜一区二区三区| 一,爱啪啪,在线免费视频| 国产久久一区二区| 久久精品国内Av熟女高清| 96精品久久久久中文字幕| 黑人免费福利视频| 天天做天天爱天天爽AV| 日本人妻中文字幕精品| 中文字幕久久亚州无码| 精品中文字幕一区二区l - 百度| 日韩 欧美 国产 麻豆| 亚洲aV性爱| 性高潮久久久久久久久久久| 69精品久久久久中文字幕| 久操视频在线| 婷婷五月天影院| 人人性爱视频免费| 97超碰久久色| 国产成人无码久久精品| 97免费视频在线| 夫妻四区五区六区| 国产精品视频一区二区三区八戒| 日日嗷| 日本美女性生活久久久久久久| 麻豆国产精品午夜视频| 91强在线播放| www.久久爱| 秋霞怕怕片| 人妻大香蕉| 98一区二区精品| 亚洲精品99999| 激情四射五月天| 色婷婷五月综合| 亚洲,日韩,欧美,成人播放 | 黑人嘿嘿嘿超爽免费视频| 大香蕉懂9| 欧美少妇一区二区三区| 操屄不卡视频| 无码国产精品96久久久久孕妇| 性欧美天天| 成人无码影片视频在线| 91网站18禁| 亚洲综合大片| 色噜噜人妻av 中文字幕| 人人摸人人干人人拍97| 少妇久久久久久| 国产诱惑| 四虎免费看黄| 97人人干| 日韩丝袜二区| 高清在线不卡一区二区 视频| 中国熟女91| 欧美丝袜激情| 亚洲.欧美.丝袜.中文.综合| 欧美色另类| 天天天天干| 国产成年精品高清在线观看91| 欧美东京热青青草| 亚洲情色电影网| 国产探花日韩援交| 91操熟女| 欧美亚洲清纯| 探花精品视频| 97K超碰在线| 色色色欧美| 国产精品对白自产拍| 欧美综合骚| 午夜亚洲国产理论秋霞| 亚洲s色图| 99www.bibizy香蕉资源国产一区二区三区高清| 人妻少妇av在线观看| 欧美性生活男人的天堂| 91伊人| 色欧美色交综合| 加勒比少妇AV婷婷六月天超碰超碰| 国产精品老熟女一区二区| 熟女精品va中文字幕| 亚洲精品国产无码高清| A级在线视频| 国产强奸乱伦第1页| 韩日欧亚a级| 亚洲欧美在线综合| 99久在线精品99re8a| 青苹果影院男人的天堂| 国产suv精品一区二区四| 色婷婷影视| 久久麻豆一区二区| 操一区| 国模少妇一区二区三区| 午夜男人的天堂| 99日韩| 综合一区中亚洲国产成人综合精品| 26uuu性| 男女激烈网站最新| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 日日AAvv| 91 亚欧| 综合情欲网| 久久久青草青青国产亚洲免观精品高清完整版_97久久综合区小说区图片区,国精品 | 久久天堂| 操一操摸一摸| 麻豆亚洲AV成人无码久久精品| 亚州色图第三区| 亚洲人体视频在线观看| 欧亚成人在线视频| 97视频在线观看高清资源| 天天色天天干天天射| 日本精品一区三区| 美女人妻色网站| 96精品久久久久中文字幕| 亚洲色图 欧美热图 清纯唯美 另类自拍 | 亚洲无吗在线视频| 99在线无码精品秘 入口黑人| 精品视频在线观看精品| 一起草三级AV电影在线观看| 青春草莓视频在线观看网址| 极品综合| 成人 日本A片无码8888| AV和黑人在线播放| 国语精品内射在线观看| 日本色色的视频| 色播五月丁香| 东京太热久久久| 青青欧洲黑| 夜夜国自区| 精品久久久久综合无码| 九九性爱网| 91天天美女| 色亚洲欧美| 夜夜嗨视频| 国产精品久久久久久久久久梁医生| 爽极品影院| 久久99人妖视频国产| 欧美性天天影视| 爱欲AV| 99热日| 亚洲不雅视频1区二区| 欧差乱伦二三| 五月丁香社区婷婷日韩欧美精品影院 | 日韩三级av片| 国产亚洲精品无码三区| 国产成人无码高清| 91大神电影天堂| 青青草久久| 亚洲中文丝袜美腿诱惑字幕| 以及麻豆国产入口在线观看免费| 欧美性爱三区二区| 97网址www| 熟妇激情| 成人久久久| 国产一级作爱毛片| 亚洲春色欧美激情自拍| 夜夜夜夜久久久久| 色婷婷五月综合激情中文字幕| 久久专区| 国产www色在线观看| 日韩一级二级| 夜夜嗨绯色| 思思热一热婷婷热一热| 日本韩高清无砖码22o| 日本操逼视频导航| 亚洲人人操| 九九国产热| 又粗又长又大国产不卡| 操逼日韩无码| 日韩9999| 97爱爱| 欧美性爱伊人| 激情文学欧美| 超碰97精品| 色官网在线| 国产情色第一第二页在线观看| 加勒比海色香蕉婷婷| 少妇干B| 第45页一区二区| 边做饭边操逼逼| 亚洲一本色码中文字幕| 国产一区二区精品久久久不卡蜜臀| 91精品人妻偷情| 欧美激情总合网| 亚州五月| 亚洲精品aa久久伊人| 青青青青草av在线观看| 亚洲人天堂| 天天做天天爱天天高潮| 劲爆欧美人妖三区91| 国产日韩精品人妻久久久久色欲网站| 国产女人高潮视频| 欧美日韩美女精品久草一区二区三区| 亚欧毛片基地国产毛片基地| 日韩人体偷拍| 2020中文字幕在线观看| 人妻激情偷乱视三区频一区二区| k频道色撸撸| ,成人免费啪啪视频| 丁香五月av| 亚洲男人天堂手机版| 欧美日韩性爱视屏免费看了| 亚欧操逼片在线观看| 啪啪资源网| 丰满人妻一区| 成人性爱美曰韩| 欧洲乱码视频| 影音先锋日本乱伦| 天美一二三在线观看Av| 亚洲 小说 欧美 激情 另类| 熟妇熟女亚洲天堂网| 电家庭影院午夜69久久夜色精品国产69乱| 超碰99在线| 99精品无码| 色婷婷香蕉| 国产后入式在线观看| 欧美在线视频99| AV久日| 婷婷久久五月| 欧美日韩小说| 亚洲情色91| a级免费在线观看| 91在线色| 久久久久久日韩| 日韩精品人妻中文字幕有码午| 亚洲?V无码专区在线电影| 98精品国产乱码久久久久久| 嫩草影院性色| 欧美日韩大陆黑人少妇99| 丁香六月激情| 亚洲色综网| 欧洲色| 色屁屁影院www国产| 超碰人妻中文在线| 大屁股人妻女教师撅着屁股| 久久久性爱视频| 高跟丝袜AV专区国产| 欧美色91| 东北黄色电影| 人人摸人人添人人操| 色欲久久99精品久久| 日本五十路熟女一区二区| 伊香蕉综合久久久久久久噜噜噜| 懂色AV一区二区三区| 日韩簧片免费看| 欧美日韩中国x| 夜夜操天| 人人贴人人摸| 亚洲情色 无码专区| 青青草在线成人视频| 亚洲欧洲综合成人av一区| 一区二区三区男人的天堂| 天天综合,91综合永久| 色综合一本| 天天搞欧美| 亚洲另类久操网| 熟女字幕| 91香蕉国产尤物视频| 天天干夜夜肏| 开心激情婷婷| 看免费的黄片| 夜夜爽夜夜摸夜夜操免费视频| 日韩AV电影网站| 无码人妻精品一区二区中文| 丰满人妻一区二区三区四区| 久久久久久久久九九久孕交| 99久久久无码国产精品性男| 中文字幕国产在线天堂| 伊人在线大香蕉视频久久| 亚洲、日韩、综合、另类| 欧美国产伊人久久久久| 囯产精品久久久久久久久久梁医生| 在线观看午夜婷婷久久久久清性观看| 夜夜爽夜夜爽| 综合情欲网| 青女在线| 日韩素人无码一区二区三区三州| 日本www操操操| 久久精品国产亚洲AV清纯| 可以看的av| 97超级久久| 久久综合久色欧美综合狠狠 | 亚州Av天美传媒| av资源在线观看少妇| 人人操人人干网页| 97综合在线| 欧美丝袜91| 亚洲综合射| 久久久久密臀一区二区| 久久久人体| 激情久久久| a级成人毛片免费视频高清| 国产无码三级视频在线观看| 男人天堂毛片| 99re这里| 超碰97最新人妻| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 久久国产精品91| 成人精品在线| 玖玖玖玖精品国产剧情| 淫荡熟女乱伦网| 欧美大波激情xxxx| 九九九九热| 中文字幕制服诱惑| 爱丝福利| 日本精品久久久久久久| 久久久久日本视| 手机av天堂久久久久| 婷色五月天| 亚洲精品一区中文字幕乱码| 亚洲操人| 色综合色欲色综合色综合色综合| 亚洲毛片一级带毛片基地| 亚洲第一狼人丝袜美女另类| 中文字幕日韩精品久久| 永久免费av无码网站国产app| 高清国产精品福利网站| 日韩av无码网站| 超碰欧美| 花花AV导航| 亚洲色宗合| 蜜臀中文字幕| 97在线看| 97视频在线免费观看| 色悠久| 啊啊啊啊啊在线| 成人怡红院| 神马九九| 欧美色图电影| 亚洲毛片基地专区| 久久午夜色播影院免费高清| 超碰地址久久| 中文乱码字幕观看| 亚洲综合色图欧美| 中国和日本人色哪个不下载能放| 日韩精品9区| 日日骚av| 亚洲第一男人天堂| 欧美极品少妇| 四季av一区二区凹凸精品小说| 亚洲九九视频| 欧美日韩另类激情图片| 香蕉欧美| 天天懆天天日| 手机在线观看不卡无码av| 亚洲国产成人高清在线| 吻戏激情性巴克| 久久9 9 9精品| 欧美亚洲涩涩| 亚洲熟女少妇免费视频| 综合色一区三区二区| 欧美日本成人一区二区| 夜夜操青青草| 国产97视频免费观看| 男人的天堂2010| 女人一区| 久久久999国产精品| 热99这里有精品综合久久| 成人七区| 色色五月丁香|