久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

PHP 接口壓力測(cè)試實(shí)戰(zhàn):用 wrk 從零搭建性能基線

PHP 接口壓力測(cè)試實(shí)戰(zhàn):用 wrk 從零搭建性能基線 很多同學(xué)第一次給 PHP 項(xiàng)目做壓力測(cè)試第一反應(yīng)都是找個(gè)工具把接口打爆看看會(huì)不會(huì)掛。我以前也這么想直到有次新功能上線前我用 wrk 隨手壓了一套接口發(fā)現(xiàn) QPS 連 200 都沒(méi)到RT 的 P99 卻已經(jīng)飆到 1.5 秒這才意識(shí)到一件事沒(méi)有一份可靠的 QPS、RT、CPU、內(nèi)存基線數(shù)據(jù)你根本沒(méi)法判斷系統(tǒng)是變好了還是變差了。這篇文章就把我從零開(kāi)始用 wrk 對(duì) PHP 系統(tǒng)做壓測(cè)、記錄基線的完整過(guò)程寫(xiě)下來(lái)適合完全沒(méi)碰過(guò)壓測(cè)的 PHP 開(kāi)發(fā)同學(xué)照著操作也能幫想搭一套壓測(cè)流程的人省掉不少?gòu)澛贰?. 壓測(cè)前先想明白你測(cè)的不是極限是一份可用基線1.1 為什么選 wrk輕量、快、不折騰壓測(cè)工具不少常見(jiàn)的有 ab、JMeter、wrk、k6 這幾類。我給 PHP 項(xiàng)目做日?;€測(cè)試首選就是 wrk原因很簡(jiǎn)單它是一個(gè)單文件編譯的 C 語(yǔ)言工具沒(méi)有圖形界面沒(méi)有插件體系一條命令就能跑完一輪壓測(cè)。對(duì)比下來(lái)大概是這個(gè)樣子工具上手成本適合場(chǎng)景主要限制ab很低臨時(shí)快速看一眼接口吞吐高并發(fā)下線程模型不如 wrk數(shù)值容易偏低JMeter高復(fù)雜業(yè)務(wù)流程、分布式壓測(cè)、報(bào)告美化配置麻煩跑少量線程時(shí)本地資源占用就不小wrk低單接口/多接口的并發(fā)壓測(cè)、基線回歸玩法要靠 Lua 腳本層級(jí)報(bào)告需要自己整理我說(shuō)的不折騰是有實(shí)際體會(huì)的。之前我試過(guò)在兩臺(tái)測(cè)試機(jī)上各跑一套壓測(cè)一邊用 ab一邊用 wrk同樣打到同一個(gè) PHP 接口ab 的 QPS 明顯低于 wrk。原因是 wrk 基于非阻塞事件模型可以用少量線程維持大量并發(fā)連接壓測(cè)機(jī)自身的 CPU 消耗低很多。換句話說(shuō)wrk 更容易讓壓力真正落到被測(cè)的 PHP 服務(wù)上而不是先把自己的進(jìn)程拖垮。1.2 壓測(cè)要記錄的四個(gè)數(shù)字各自代表什么很多人把壓測(cè)等同于測(cè) QPS但一份合格的基線報(bào)告至少要有四個(gè)維度的數(shù)據(jù)QPS每秒請(qǐng)求數(shù)系統(tǒng)在特定并發(fā)下每秒鐘能處理多少個(gè)請(qǐng)求這是吞吐量指標(biāo)。RT響應(yīng)時(shí)間單個(gè)請(qǐng)求從發(fā)出到收到響應(yīng)的時(shí)間通??雌骄岛透叻种槐热?P99。CPU 使用率壓測(cè)期間這臺(tái)機(jī)器到底忙不忙是代碼計(jì)算密集還是空等 IO。內(nèi)存占用PHP-FPM 是常駐內(nèi)存的進(jìn)程池隨著并發(fā)上升worker 數(shù)量增加內(nèi)存曲線非常值得盯。這四個(gè)數(shù)字必須放在一起看缺一個(gè)都容易誤判。比如 QPS 高了但 CPU 已經(jīng) 95% 以上說(shuō)明系統(tǒng)到上限了QPS 沒(méi)漲內(nèi)存卻一直在漲可能是 PHP-FPM worker 在不斷創(chuàng)建或者測(cè)試接口本身有泄漏。只有四者對(duì)齊才能說(shuō)這條基線的水位是健康的。1.3 開(kāi)始之前先確認(rèn)測(cè)試環(huán)境是干凈的這也是我第一次壓測(cè)踩過(guò)的坑。當(dāng)時(shí)我在本地開(kāi)發(fā)環(huán)境上直接壓機(jī)器上還跑著編譯器、數(shù)據(jù)庫(kù)腳本、一堆開(kāi)發(fā)工具測(cè)出來(lái)的 QPS 忽高忽低完全沒(méi)法當(dāng)參考?,F(xiàn)在我的習(xí)慣是壓測(cè)前必須確認(rèn)幾件事被測(cè)代碼是同一個(gè)穩(wěn)定分支并記錄 commit 號(hào)測(cè)試機(jī)只跑 nginx PHP-FPM 必要的數(shù)據(jù)庫(kù)后臺(tái)監(jiān)控進(jìn)程全部關(guān)掉壓測(cè)機(jī)的網(wǎng)絡(luò)和被測(cè)機(jī)之間沒(méi)有額外限速或代理PHP 的 opcache 保持與服務(wù)一致的開(kāi)關(guān)狀態(tài)。寧可多花十分鐘清理環(huán)境也不要拿一份臟數(shù)據(jù)當(dāng)基線后面做優(yōu)化對(duì)比時(shí)你會(huì)感謝當(dāng)時(shí)的謹(jǐn)慎。2. 從零搭環(huán)境裝好 wrk準(zhǔn)備一個(gè)能壓的 PHP 接口2.1 安裝 wrk 的兩種常規(guī)姿勢(shì)如果你的測(cè)試機(jī)是 Linux 系統(tǒng)最簡(jiǎn)單的辦法是直接用包管理器裝。以常見(jiàn)的 Debian/Ubuntu 系為例sudo apt install -y wrk wrk --version安裝完直接驗(yàn)證版本能輸出 wrk 的版本號(hào)就說(shuō)明裝好了。有些發(fā)行版?zhèn)}庫(kù)里沒(méi)有這個(gè)包或者你想用最新版本可以走編譯安裝sudo apt install -y build-essential libssl-dev git clone wrk 官方源碼倉(cāng)庫(kù)地址 cd wrk make sudo cp wrk /usr/local/bin/編譯之前務(wù)必保證有 openssl 的開(kāi)發(fā)頭文件wrk 默認(rèn)會(huì)編出支持 HTTPS 的版本如果缺了 libssl-devmake 階段會(huì)報(bào)錯(cuò)報(bào)錯(cuò)信息通常會(huì)直接指向 openssl 相關(guān)的頭文件。我第一次編譯時(shí)就在這卡過(guò)所以單獨(dú)提一句。這里多說(shuō)一句很多 PHP 項(xiàng)目部署時(shí)是 Windows 開(kāi)發(fā)環(huán)境 Linux 生產(chǎn)環(huán)境如果你只在 Windows 上開(kāi)發(fā)建議直接在 Linux 測(cè)試機(jī)上跑 wrk不要試圖在 Windows 下折騰編譯。wrk 本身的設(shè)計(jì)目標(biāo)就是 Linux/macOSWindows 下的兼容方案既費(fèi)時(shí)間又容易遇到網(wǎng)絡(luò)棧差異。2.2 一個(gè)足夠簡(jiǎn)單又不失真實(shí)的測(cè)試接口壓測(cè)接口選什么很有講究。我的做法是準(zhǔn)備兩層目標(biāo)第一層是一個(gè)最簡(jiǎn)單、不查數(shù)據(jù)庫(kù)、不調(diào)第三方接口的 JSON 返回接口用來(lái)測(cè)純 PHP 運(yùn)行時(shí) PHP-FPM 網(wǎng)絡(luò)棧的底子第二層再測(cè)真實(shí)業(yè)務(wù)接口比如帶一個(gè)簡(jiǎn)單的數(shù)據(jù)庫(kù)查詢觀察額外損耗。第一層接口可以長(zhǎng)這樣?php // test_api.php $data [ code 0, msg ok, data [ user_id 10086, time time(), ], ]; echo json_encode($data);為什么先拿這種接口打底因?yàn)閴簻y(cè)是為了定位瓶頸。如果連一個(gè)不查庫(kù)的接口 QPS 都很低那問(wèn)題大概率出在 PHP-FPM 配置、opcache、CPU 頻率或中間件上沒(méi)必要上來(lái)就懷疑 SQL。把這個(gè)底子摸清楚之后再去壓真實(shí)接口兩者對(duì)比就能算出業(yè)務(wù)邏輯本身消耗了多少吞吐量。部署上我建議走 nginx PHP-FPM 的標(biāo)準(zhǔn)組合監(jiān)聽(tīng) 127.0.0.1:8080 這樣的內(nèi)網(wǎng)地址避免在壓測(cè)過(guò)程中被防火墻或路由影響。測(cè)試機(jī) IP 用 127.0.0.1 還是內(nèi)網(wǎng) IP 都行但如果你想讓壓測(cè)機(jī)和被測(cè)機(jī)分離就要用被測(cè)機(jī)的內(nèi)網(wǎng) IP 訪問(wèn)。2.3 第一條壓測(cè)命令和輸出解讀把接口部署好之后先用 curl 手動(dòng)確認(rèn)返回正常然后再上 wrk。第一條命令建議放低并發(fā)跑通流程wrk -t2 -c10 -d10s --latency http://127.0.0.1:8080/test_api.php其中-t2表示用 2 個(gè)線程-c10表示維持 10 個(gè)并發(fā)連接-d10s表示持續(xù) 10 秒--latency會(huì)在結(jié)束時(shí)輸出更完整的延遲分布。正常跑完會(huì)看到類似這樣的輸出Running 10s test http://127.0.0.1:8080/test_api.php 2 threads and 10 connections Thread Stats Avg Stdev Max /- Stdev Latency 4.82ms 2.31ms 45.12ms 86.18% Req/Sec 1.05k 102.34 1.41k 70.31% Latency Distribution 50% 4.50ms 75% 5.20ms 90% 6.80ms 99% 14.20ms 10520 requests in 10.01s, 2.03MB read Requests/sec: 1051.12 Transfer/sec: 207.43KB這里最容易被新手誤讀的地方是 Thread Stats 里的 Req/Sec 和最后的 Requests/sec。Thread Stats 的 Req/Sec 是每個(gè)線程自己的平均吞吐如果你的線程數(shù)是 4那么這個(gè)數(shù)值大致是總 QPS 分割后的水平而最后的Requests/sec才是整體 QPS也就是我們基線里要記的那個(gè)數(shù)字。把這兩行搞混的人不少我第一次看輸出時(shí)也愣了半天。3. 正式壓測(cè)并發(fā)要加梯度數(shù)據(jù)要取多輪3.1 從低并發(fā)起步找到吞吐量的拐點(diǎn)壓測(cè)不是一上來(lái)就-c500那樣你只能得到一個(gè)打爆了的結(jié)果卻不知道系統(tǒng)是從哪個(gè)并發(fā)開(kāi)始扛不住的。我的標(biāo)準(zhǔn)操作是用一組并發(fā)梯度比如-c10、-c50、-c100、-c200、-c500每個(gè)梯度跑 30 秒記錄對(duì)應(yīng)的 QPS 和 RT。這個(gè)過(guò)程本質(zhì)上是尋找拐點(diǎn)一開(kāi)始并發(fā)上升QPS 會(huì)跟著漲因?yàn)橥瑫r(shí)能處理的請(qǐng)求變多了到某個(gè)點(diǎn)之后再往上加并發(fā)QPS 不再明顯增長(zhǎng)甚至開(kāi)始回落同時(shí) RT 快速拉高。這個(gè)拐點(diǎn)對(duì)應(yīng)的并發(fā)量就是系統(tǒng)當(dāng)前配置下的合理服務(wù)水位。舉個(gè)實(shí)際例子我之前壓一個(gè) PHP 8.2 opcache 的簡(jiǎn)單 JSON 接口-c10時(shí) QPS 約 1800-c50時(shí)漲到 4200-c100時(shí)是 5100-c200的時(shí)候只有 4600 了RT 的 P99 從 18ms 漲到 120ms。這就說(shuō)明 100 左右并發(fā)已經(jīng)接近這臺(tái)機(jī)器的服務(wù)上限繼續(xù)壓只會(huì)讓用戶體驗(yàn)變差。3.2 平均 RT 會(huì)欺騙你P99 才是真實(shí)用戶體驗(yàn)wrk 輸出里的 Latency 一欄Avg是平均響應(yīng)時(shí)間但平均值的迷惑性很大如果 90% 的請(qǐng)求都是 5ms剩下 10% 是 500ms平均值會(huì)被拉到一個(gè)看起來(lái)很溫和的數(shù)字。這也是為什么壓測(cè)一定要加--latency參數(shù)看延遲分布里的 50%、75%、90%、99% 分位。P99 的含義是99% 的請(qǐng)求都低于這個(gè)值剩下的 1% 是最慢的尾部請(qǐng)求。對(duì)線上服務(wù)來(lái)說(shuō)用戶體驗(yàn)往往由尾部延遲決定。我在做基線記錄時(shí)RT 這一欄至少記兩個(gè)數(shù)平均值和 P99。后續(xù)做優(yōu)化時(shí)如果平均值下降了但 P99 在上漲我會(huì)立刻警惕——這通常意味著某些慢請(qǐng)求變得更極端了可能存在于鎖競(jìng)爭(zhēng)或進(jìn)程池打滿的問(wèn)題。3.3 記錄多輪結(jié)果取穩(wěn)定而不是最高的一輪壓測(cè)數(shù)值天然有波動(dòng)尤其是 PHP-FPM 場(chǎng)景下進(jìn)程復(fù)用、opcache 冷熱、系統(tǒng)定時(shí)任務(wù)都可能讓某一輪結(jié)果偏高或偏低。我的做法是同一個(gè)并發(fā)梯度至少跑三輪每輪之間停 5 秒把三輪結(jié)果都記下來(lái)然后取中位數(shù)或者波動(dòng)最小的那一輪作為基線值。這里有個(gè)反直覺(jué)的點(diǎn)最高值往往不值得記錄。比如某輪跑到 5000 QPS下一輪只有 4100我會(huì)直接懷疑第一輪是不是正好命中了 opcache 預(yù)熱完成的窗口或者系統(tǒng) GC 還沒(méi)觸發(fā)。真正的基線應(yīng)該是可復(fù)現(xiàn)的那一組數(shù)字不是偶爾出現(xiàn)的峰值。如果接口需要 POST 請(qǐng)求wrk 也能通過(guò) Lua 腳本解決?;A(chǔ)寫(xiě)法大概是這樣-- post.lua wrk.method POST wrk.headers[Content-Type] application/json wrk.body {user_id:10086,page:1}然后用wrk -t4 -c100 -d30s -s post.lua http://...啟動(dòng)即可。這個(gè)用法不難但注意腳本里的 body 是所有并發(fā)連接共用同一個(gè)請(qǐng)求體如果業(yè)務(wù)要求每個(gè)請(qǐng)求參數(shù)不同就得用 Lua 腳本在請(qǐng)求時(shí)動(dòng)態(tài)生成復(fù)雜度會(huì)高不少一般做基線時(shí)不需要一步到位。4. 壓測(cè)時(shí)盯服務(wù)器CPU 和內(nèi)存基線的采集方法4.1 壓測(cè)期間要開(kāi)的幾個(gè)監(jiān)控命令wrk 跑起來(lái)只是整個(gè)壓測(cè)的一半另一半是被測(cè)服務(wù)器的資源狀態(tài)。我通常會(huì)在壓測(cè)開(kāi)始前先在被測(cè)機(jī)上開(kāi)一個(gè)后臺(tái)記錄腳本把壓測(cè)期間的數(shù)據(jù)落盤(pán)這樣壓測(cè)結(jié)束后可以回放當(dāng)時(shí)的資源曲線。最常用的命令有這幾個(gè)# 每2秒輸出一次系統(tǒng)概況共記錄30次 vmstat 2 30 # 每2秒輸出一次每個(gè)CPU核心的使用率 mpstat -P ALL 2 30 # 查看每個(gè)進(jìn)程的CPU和內(nèi)存占用 pidstat -u -r 2 30 # 內(nèi)存概況 free -m如果不想同時(shí)開(kāi)這么多終端可以用一個(gè)簡(jiǎn)單的循環(huán)腳本把關(guān)鍵數(shù)據(jù)拼進(jìn)同一個(gè)日志文件#!/bin/bash # load_monitor.sh interval2 end$((SECONDS60)) while [ $SECONDS -lt $end ]; do echo $(date %F_%T) /tmp/load_test.log top -bn1 | head -15 /tmp/load_test.log free -m /tmp/load_test.log sleep $interval done注意pidstat這個(gè)命令來(lái)自 sysstat 工具包如果系統(tǒng)里沒(méi)有需要先apt install sysstat。mpstat 也一樣。另外這些監(jiān)控命令本身也會(huì)消耗少量 CPU在低配機(jī)器上可能影響測(cè)試結(jié)果所以記錄完后記得把這些進(jìn)程都?xì)⒌粼偃∽罱K數(shù)據(jù)。4.2 從監(jiān)控?cái)?shù)據(jù)反推瓶頸在哪個(gè)環(huán)節(jié)拿到資源數(shù)據(jù)后重點(diǎn)看三個(gè)地方一是 CPU 的 us/sy 比例。us高說(shuō)明用戶態(tài)代碼在忙比如 PHP 腳本邏輯復(fù)雜、循環(huán)密集sy高說(shuō)明系統(tǒng)態(tài)開(kāi)銷大比如頻繁上下文切換、網(wǎng)絡(luò)包處理、系統(tǒng)調(diào)用太多。如果 sy 高于 us往往不是 PHP 代碼本身的問(wèn)題而是并發(fā)模型或網(wǎng)絡(luò)配置有瓶頸。二是 CPU idle 和等待 IO 的時(shí)間。vmstat里有個(gè) wa 列代表 IO 等待。wa 明顯偏高的時(shí)候QPS 上不去多半是磁盤(pán)拖后腿比如 nginx 訪問(wèn)日志瘋狂寫(xiě)盤(pán)或者 PHP slowlog 開(kāi)著。我之前確實(shí)遇到過(guò) CPU 只有 20%、QPS 卻卡在 800 的情況檢查后發(fā)現(xiàn)是訪問(wèn)日志寫(xiě)到了普通機(jī)械盤(pán)上IO 等待直接打滿。三是內(nèi)存里 PHP-FPM 的占用。用ps aux --sort-%mem | head -20看看是否有 worker 進(jìn)程內(nèi)存漲得異常。PHP-FPM 的每個(gè) worker 在默認(rèn)配置下可能占用幾十到一兩百 MB如果并發(fā)開(kāi)得高幾十個(gè) worker 同時(shí)駐留內(nèi)存很容易超預(yù)期。內(nèi)存基線就是用來(lái)記錄這個(gè)并發(fā)水位下FPM 進(jìn)程池到底吃掉了多少內(nèi)存。4.3 把服務(wù)端數(shù)據(jù)和 wrk 輸出對(duì)齊到同一時(shí)間線壓測(cè)結(jié)束后你會(huì)得到兩堆數(shù)據(jù)一堆來(lái)自 wrk 的匯總值一堆來(lái)自監(jiān)控日志的每秒采樣。很多人直接把這兩堆數(shù)字拼在一起寫(xiě)報(bào)告實(shí)際上不對(duì)齊時(shí)間線的基線是沒(méi)法定位問(wèn)題的。我的做法是壓測(cè)開(kāi)始前在監(jiān)控日志里手動(dòng)打一條標(biāo)記 start wrk 結(jié)束后再打一條 done 這樣壓測(cè)窗口內(nèi)的資源采樣就有明確的起止邊界。后續(xù)做對(duì)比時(shí)只看窗口內(nèi)的采樣平均值和峰值窗口外的數(shù)據(jù)直接丟棄。然后我習(xí)慣建一張映射表把每次壓測(cè)的命令參數(shù)、wrk 結(jié)果、資源監(jiān)控結(jié)果放在同一行這樣一旦某次基線異??梢粤⒖痰雇剖悄囊粚拥淖兞堪l(fā)生了變化。5. 把基線寫(xiě)成表格一份能長(zhǎng)期復(fù)用的記錄模板5.1 基線表該有哪些字段跑完一堆壓測(cè)之后如果只是把數(shù)字記在聊天軟件里過(guò)兩周就找不到了。我推薦用一張表格管理所有基線字段包括日期代碼版本測(cè)試接口并發(fā)QPSRT 均值RT P99CPU%內(nèi)存占用環(huán)境說(shuō)明2026-06-01某提交號(hào)test_api.php100510018ms46ms68%1.8Gopcache開(kāi)啟FPM動(dòng)態(tài)10-802026-06-02某提交號(hào)test_api.php200460088ms120ms66%2.4G同上超負(fù)荷區(qū)間2026-06-03某提交號(hào)user_info.php5062076ms210ms35%2.1G帶一次DB查詢這張表里每一行就是一條基線。環(huán)境說(shuō)明這欄特別重要因?yàn)?opcache 開(kāi)關(guān)、PHP 版本、FPM 參數(shù)都會(huì)直接影響結(jié)果不寫(xiě)清楚三周后再看數(shù)據(jù)等于瞎猜。5.2 什么時(shí)機(jī)需要重新測(cè)基線基線不是測(cè)一次就永久有效的。按我的經(jīng)驗(yàn)以下變化發(fā)生時(shí)必須重新采集PHP 版本升級(jí)、框架或核心依賴有大版本變更、php-fpm 池配置調(diào)整pm.max_children、pm.start_servers、nginx 的 keepalive 或 gzip 策略變化、測(cè)試接口本身的代碼邏輯改動(dòng)、測(cè)試機(jī)硬件規(guī)格變化。如果出現(xiàn)同一接口、同一代碼版本QPS 卻和上周記錄差很多的情況我也會(huì)重新測(cè)一遍基線而且會(huì)特意檢查是不是監(jiān)控腳本在后臺(tái)偷跑、是否有人改了系統(tǒng)參數(shù)。這個(gè)習(xí)慣幫我排查過(guò)好幾次假象——有一次 QPS 突然掉了一半最后發(fā)現(xiàn)是某臺(tái)機(jī)器上被同事裝了定時(shí)任務(wù)壓測(cè)窗口正好撞上了大規(guī)模日志清理。5.3 用基線做容量預(yù)估的簡(jiǎn)單算法基線最有價(jià)值的用法不是看數(shù)字好看而是用來(lái)做容量預(yù)估。公式不復(fù)雜需要實(shí)例數(shù) (預(yù)估峰值 QPS × (1 冗余系數(shù))) / 單機(jī)基線 QPS舉個(gè)例子基線表里單機(jī)在 100 并發(fā)下 QPS 是 5000如果業(yè)務(wù)方預(yù)測(cè)大促峰值請(qǐng)求是 15000 QPS目標(biāo) CPU 水位控制在 70% 左右那么單機(jī)預(yù)留 30% 冗余最終需要的實(shí)例數(shù)就是15000 × 1.3 / 5000 ≈ 4臺(tái)。如果只按 QPS 峰值算而不留冗余一旦流量抖動(dòng)所有實(shí)例都會(huì)沖到 90% 以上的 CPU尾部延遲會(huì)很難看。需要注意的是這種線性預(yù)估只適用于無(wú)狀態(tài)、可水平擴(kuò)展的 PHP 接口。如果接口嚴(yán)重依賴數(shù)據(jù)庫(kù)或第三方服務(wù)那么數(shù)據(jù)庫(kù)側(cè)的連接數(shù)、負(fù)載也是容量邊界單純按單機(jī) QPS 算會(huì)低估風(fēng)險(xiǎn)。遇到這種情況我會(huì)同時(shí)把數(shù)據(jù)庫(kù)的 CPU、連接數(shù)也拉進(jìn)基線表。6. 實(shí)操中最容易翻車的五個(gè)坑6.1 壓測(cè)機(jī)先崩了測(cè)出來(lái)的數(shù)就不可信wrk 雖然很輕量但也不是無(wú)限跑。如果你用一臺(tái) 2 核小機(jī)器去壓一個(gè) 8 核的服務(wù)端很可能會(huì)出現(xiàn)壓測(cè)機(jī) CPU 先到 100%而服務(wù)端還很從容的情況。這時(shí)的 QPS 數(shù)字反映的是壓測(cè)機(jī)的上限不是被測(cè)系統(tǒng)的上限。判斷方法很簡(jiǎn)單壓完看壓測(cè)機(jī)的top如果 wrk 進(jìn)程吃滿了 CPU 或者系統(tǒng)出現(xiàn)大量 TCP 連接排隊(duì)就說(shuō)明壓力工具先到極限了。解決方式一是減少 wrk 線程數(shù)通常-t設(shè)置為壓測(cè)機(jī) CPU 核心數(shù)左右即可沒(méi)必要開(kāi)太多二是把 wrk 放到另一臺(tái)閑置機(jī)器上跑讓壓測(cè)機(jī)和被測(cè)機(jī)分離。6.2 PHP-FPM 配置和 opcache 偷偷影響成績(jī)PHP 場(chǎng)景下最容易被忽略的兩個(gè)變量是 opcache 和 FPM 進(jìn)程池參數(shù)。opcache 關(guān)閉時(shí)每個(gè)請(qǐng)求都要重新編譯一遍 PHP 腳本CPU 消耗會(huì)明顯上升QPS 直接打折opcache 開(kāi)啟后前幾個(gè)請(qǐng)求還會(huì)觸發(fā)編譯緩存所以正式壓測(cè)前一定要先打幾發(fā)請(qǐng)求做預(yù)熱。FPM 這邊pm.max_children如果設(shè)置太小并發(fā)一旦超過(guò)進(jìn)程池上限請(qǐng)求就開(kāi)始排隊(duì)QPS 停滯、RT 暴漲如果設(shè)置太大內(nèi)存會(huì)被 worker 吃滿。我做基線時(shí)會(huì)把 FPM 配置快照寫(xiě)進(jìn)環(huán)境說(shuō)明這樣后續(xù)調(diào)整參數(shù)后對(duì)比才公平。另外注意pm.max_requests它是讓 worker 處理多少請(qǐng)求后自動(dòng)回收的機(jī)制設(shè)得太小會(huì)導(dǎo)致進(jìn)程頻繁創(chuàng)建銷毀CPU 忽高忽低。6.3 長(zhǎng)連接與并發(fā)數(shù)設(shè)置會(huì)帶來(lái)假數(shù)據(jù)wrk 默認(rèn)使用 HTTP/1.1 keep-alive 長(zhǎng)連接這能大幅提高 QPS因?yàn)槭∪チ舜罅?TCP 握手開(kāi)銷。但真實(shí)用戶往往不是這種訪問(wèn)模式連接會(huì)不斷建立和斷開(kāi)。所以壓測(cè)結(jié)果必須注明是否 keep-alive。如果你想知道斷開(kāi)連接場(chǎng)景下的表現(xiàn)可以在 wrk 里加一個(gè)請(qǐng)求頭wrk -t4 -c100 -d30s -H Connection: close http://127.0.0.1:8080/test_api.php你會(huì)看到 QPS 明顯下降這是正常的別慌。關(guān)鍵是基線表里要寫(xiě)清楚當(dāng)時(shí)是哪種連接模式否則拿 keep-alive 的基線去對(duì)比短連接場(chǎng)景你會(huì)以為系統(tǒng)退化了。6.4 日志和磁盤(pán) IO 拖垮整個(gè)壓測(cè)壓測(cè)期間nginx 的 access log 默認(rèn)每接收一個(gè)請(qǐng)求就寫(xiě)一行。QPS 高的時(shí)候日志寫(xiě)入本身就是巨大的磁盤(pán)壓力。更隱蔽的是 PHP-FPM 的 slowlog一旦觸發(fā)慢日志就會(huì)在請(qǐng)求處理路徑上產(chǎn)生額外 IORT 反而被日志拖得更慢。我的建議是做純性能基線時(shí)先把 access_log 臨時(shí)關(guān)閉或在配置里指向內(nèi)存盤(pán)壓測(cè)完再改回來(lái)。這個(gè)操作不算什么高級(jí)技巧但特別實(shí)用。我第一次壓測(cè) 2000 QPS 時(shí)就發(fā)現(xiàn)磁盤(pán) wait 占到 40%所有并發(fā)一上去 CPU 就在等 IO關(guān)掉訪問(wèn)日志后 QPS 直接翻了一倍?;€測(cè)試測(cè)的是系統(tǒng)處理能力不應(yīng)該讓日志寫(xiě)入變成隱形成本。6.5 壓完不收拾現(xiàn)場(chǎng)下一次基線直接失真壓測(cè)結(jié)束后的收尾工作同樣重要。需要做的包括停掉壓測(cè)期間的監(jiān)控腳本確認(rèn)沒(méi)有殘留的壓測(cè)進(jìn)程在跑清掉壓測(cè)產(chǎn)生的日志文件和臨時(shí)腳本如果臨時(shí)改過(guò) FPM 參數(shù)或 nginx 日志開(kāi)關(guān)記得恢復(fù)原狀把壓測(cè)時(shí)記錄的代碼 commit 號(hào)和配置快照歸檔。這些看起來(lái)瑣碎但直接影響下一次壓測(cè)是否可信。我之前有一回壓完就撤了第二天再測(cè)時(shí)發(fā)現(xiàn)系統(tǒng)后臺(tái)還掛著監(jiān)控腳本測(cè)出來(lái)的 CPU 基線高了十幾個(gè)百分點(diǎn)白白排查了一下午。從那之后我就養(yǎng)成了壓測(cè)結(jié)束三分鐘收尾的習(xí)慣寧可慢一點(diǎn)也不能讓基線數(shù)據(jù)帶傷入庫(kù)。最后再分享一個(gè)經(jīng)驗(yàn)壓測(cè)基線不是給上級(jí)看的一張表它是你自己理解系統(tǒng)的一把尺子。同一個(gè)接口在不同并發(fā)下的表現(xiàn)、不同配置下的差異、代碼提交前后的吞吐變化都藏在基線的對(duì)比里。把這套流程跑順之后你會(huì)發(fā)現(xiàn)自己對(duì)系統(tǒng)到底能扛多少量這件事終于有了基于數(shù)據(jù)的底而不是靠猜。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
九色 人妻 大香蕉| 96超碰网| 久久思思热| 婷婷超| 97人人中文网| 极品白嫩美女白浆成人福利在线看| 麻豆尤物视频网| 激情文学欧美| 亚洲综合五月天婷婷丁香| 四虎免费在线观看| 大香久久| 国产精品粉嫩福利在线| 欧美日韩婷婷中文| 精品成人女人久久| 美女啊啊啊啊pc| 无码乱人伦中文视频| 手机在线大香蕉| 蜜臀人妻少妇久久在线观看| 国产成人+综合亚洲+天堂| 国产精品不卡高清在线观看| 91无码人妻精品一区二区三区蜜桃| 少妇蜜汁| 老色69| 婷婷深爱五月| 免费操逼视频下载| 人人 操人人 操人人| 97久久超碰国产精品| 亚91亚洲网| 久久香蕉网| 欧美国产伊人久久久久| 99亚洲国产精品色一区二区三区| 91无码人妻精品一区二区三区蜜桃| 色综合加勒比四四季| 麻豆天美国美国产AV| 操我无码| 顶级丝袜熟女一区二区三区| 国产精品网址| 国精精品无码一二三区水多多| 男啪女色黄无遮挡免费观看| 婷婷涩嫩草鲁丝久久午夜精品| 国产美女91视频| 亚码激情| 国产地址二三| 男人天堂最新手机版在线青青草| 一区二区三区色综合| 亚洲国成人情色好看电影| 色婷婷综合网站| 殴美在线AⅤ| 综合在线导航一区| 91社操逼| 天天影视综合网欧美精品| 凹凸视频特色日本特黄| 亚洲熟女中文字幕在线| 91超碰人人操| 日韩啪啪啪啪啪| 337p大胆噜噜噜噜噜91Av| 人人做人人妻人人夜视频| 亚洲精品三| 欧美日韩不卡a片| 伊人九九九| 91人妻尻屄视频| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区 | 亚洲国产精品久久久久婷婷老年| 精品 码产区一区二-1080P高清在线www-B029AV | 日韩AV片| 日韩探花精品在线视频| 欧美国产精品久久九九| 免费一二区| 精品一二三区四视频| 大鸡吧尹人在线| 五月天偷拍| 天天澡天天爽日日av| 丁香五月成人| 亚洲永久AV无码精品秋霞| 日韩啪啪网| 国产精品黄色三级av| 亚洲色婷婷久久91| 亚洲午夜精品久久久中文影院| 天天摸天天碰天天添青青| 男人的天堂2018东京热啪啪啪| 97欧美性爱| 日本亚洲熟女视频| 久久婷婷亚洲| 欧美大香蕉卡久久| 老熟女熟妇| 中文字幕一区二区三区人妻少妇在线| 99999久久久久9国产精品| 日韩另类| 91色综合激情| 日韩综合97P| 中国小夫妻勾搭露脸淫荡对白| 人妻夜夜爽天天爽麻豆三区网站| 久久久九九九九| 国产无码三级视频在线观看| 女性喷水高潮在线观看| 久久五十路熟女人妻| 涩涩这里只有精品视频| 狠狠久久亚洲欧美专区| 嗯~啊~快点 死我视频免费看网站| 精人妻无码一区二区三区伊人直播 | 97天天爽| 欧美日本视频一区| 国产成人自拍视频视频| a在线观看| 国产一区二区在线播放,久久亚洲精品中文字幕第一区,亚洲精品在线中文字幕视频 | 97国产天堂岛| 91欧美经典| 四虎国产精品永久地址入口| 后入 亚洲 美女 射| 伊人网一本| 天天干天天舔| 午夜αv| 啪啪啪东京| 防屏蔽在线视频| 欧美色图小说综合| 一本久道在线综合视频| 色妹子A V| 好爽视频在线观看| 色综合久久88色综合久久天天| 亚洲精品欧美专业| 成人老鸭窝人人在线视频| 亚洲人久久久久日| 无码日韩网站| 亚洲色图 91| 麻豆天美国美国产| 91高潮| 狠狠色丁香| 精品无码一区二区人妻久久蜜桃| 曰韩人妻中文字幕在线| 日本人体九九九九九九| 欧美传媒| 97一区二压| 日韩,欧美,中文在线| 精品少妇人妻| 91婷婷| 黄色成年| 欧美在线视频播放| 少妇精品| 在线人妻熟女一区二区三区四区五区| 天天插夜夜操| 午夜精品久久久久久久第一页按摩| 九九Av| 成人开心网在线视频| 日本精品成人无码| 1人人看人人摸人人操| 天天拍天| 成人色女网| 欧美亚洲日本激情在线| 国产精品扒开腿做爽爽爽视频| 久久曰曰| 色爱综合网欧美| 亚洲日韩一区电影| 综合欧美日韩在线观看| 夜夜草我| 日本韩高清无砖码22o| 天天操天天日天天干| 91大学精品激情戏| 绑缚麻绳人妻寝取完整版| 亚洲国产麻豆一区二区三区| 老熟女搡BBBB搡BBBB视频| 人妻喷水| 日曰骚久久精品| 青青操视频在线| 久久精品免视看国产成人﹣蜜臀av一区. 久久精品免视看国产成人,蜜臀av一区 | 精品人妻av在线播放| A一区片| 亚洲蜜臀精品视频久久| 国产精品午夜精品| q2午夜理论片夜色av| 中文字幕在线2| 欧美色图在线视频少妇| 亚洲免费97免费| 人人爽夜夜操| 九9热伊人| 亭亭在线资源| 九九综合久久| 日本日逼视频网| 国产精品青草综合久久| 亚洲.欧美.丝袜.中文.综合| 少妇超碰在线| av大香蕉网站| 内射白嫩美女| 老鸭窝日丰县女人| 久久97| 大香蕉乱级| 国产一区免费午夜视频| 91在线精品| www.婷婷| 日本淫穴在线| 久草在线| 亚洲欧美成人在线| 欧中日成人免费影视| 亚洲精品国产精品乱码不卡| 人人艹亚洲| 8050午夜少妇无码| 欧美72网页| 啊v在线观看视频| 国产中文精品一区二区在线观看 | 美女视频尤物网在线看| 婷婷五月天激情网| 成人熟女视频一区二区三区| 精品人妻少妇| 久久九九99| 久久精9| 国产综合色精品在线观看| 国产伦乱91| 污污污8888| 中文一区二区三区影院| 插入综合网| 91激情国产| 国产精品久久妻无码网站| 玖玖资源视频一区二区三区| 日韩欧美aⅴ综合网站发布| 久久最新视频免费观看| 国产午夜精品理论片a大结局| 伊人天堂在线| 尹人免费观看视频在线| 330dv亚洲成年视频网| 无码精品久久| 欧美青青视频| 日韩成人大片在线观看| 九九九只有精品| 熟女乱伦二区| 一起草视频在线| 无码免费一区二区三区啪啪| 91色插| 色九九九| 95自拍视频在线观看| 日本一区二区三区免费观看| 啊啊啊啊二区好大| 多乙久久久久久| 欧美,日韩,中文,另类| 色噜噜人妻丝袜a∨先锋影 | www久久国产精品| 欧美熟妇乱码在线一区| 无码最新| 欧美丝袜中文字幕07在线| 九九色热| 91人妻尻屄视频| 欧美日韩国产成人高清| 国产精品成人午夜福利| 人乳av| 午夜天堂精品久久久久91| 欧美一级黄色免费专区| 中文字幕一区二区无码成人| 欧美999999| 男人夜色天堂ss| 亚洲男人天堂Av| 秋霞一区二区三区四区五区六区七区| 九九aV| 天天插天天插| 大香蕉啪啪啪啪在线| 啊啊啊啊啊,啊啊啊啊好舒服,操我舒服啊啊啊| 豆1无夜无码| 天天色综合影视网| 懂色av色欲av蜜臀av| 秋霞无码av鲁丝片一区| Blackedraw视频一区二区| 国产成人网| 宅男91视频在线播放| 啊啊啊不要啊啊受不了了视频在线| 91精产一区二区三区| 天天操天天干美女网址导航| 麻豆成人影音在线| 手机在线看片免费人成视频| 欧美99| 欧美日韩婷婷中文| 91美女小视频| 人人射人人操人人摸| www.色婷婷| 亚洲欧美另类少妇精品| 亚洲男人天堂手机版| 成人五级久久| 大香蕉免| 久艹日日日| 在线视频免费播放一区| 色欲人妻一区二区在线| 少妇大屁屁| 亚洲国产精品99久久久| 男人的天堂啪啪| 男人把坤坤插入女人的下体| 丝袜亚洲综合| 六月丁丁香| 国产精品久久久久久久免牛肉蒲团| 日本布卡一区二三区| 99在线免费公开视频| 亚洲另类在线观看| 新91视频.cmp| 超碰成人公开| 久久久内射良家| 女同女同恋久久级三级| 久久鲁夜| 国产精品直播在线观看直播| 国产高清1234区| 熟妇无码视频三区| 丰满人妻一区二区三区大胸懂色| 久久天天躁日日躁狠狠躁 | 哈哈操 大香蕉| 一个色导综合| 中文字幕乱碼在线| 免费精品无码一级毛片牛牛影视 | 屁屁影院一区二区三区国产| 日韩人妻精品| 上海一级黄片| 天天摸天天碰天天添青青| 91亚洲情色| 25国产精品免费观看| 国产精品另类一区大香蕉| 日va操| 自拍偷拍第26| 成人贴图日韩欧美| 乱性AV| 人妻啊啊人妻啊啊| 美女啊啊啊啊啊| 99久热| 超碰在线91| 口爆综合网| 97超碰中文在线| 素人播放一区| 欧美爱三级日韩久久| 99www.bibizy香蕉资源国产一区二区三区高清| 国产成人超碰在线| 天天天天天超碰| 中日亚韩免费视频| 久久亚洲天堂| 精品少妇后入一区二区三区四区人妻巨乳 | 日韩欧美亚洲一区二区三区影院 | 日本免费中文字幕在线| 超碰这里有精品| 国产呦精品一区二区三区下载| 欧美亚洲韩国视频十五区| www色色色com| 国产精品一二三区18| 欧美精品丝袜久久久中文字幕| 特级特黄一级毛片免费| com 首页 18岁 禁区 女优 免费 精选 同城 | 亚洲欧美天堂| 日韩情色AV| 人妻人人做人人澡人人爽欧美一区| 男人天堂网手机版婷婷| 成人五月香网在线| 日本免费人成视频播放120秒| 久久亚洲日韩国产欧| 综合五月天| 日本乱人伦片中文三区| 成人在线视频一区| 欧美色图欧美| 欧美精品 - 91爱爱| 国岛片视频| 国产精品久久久午夜夜伦鲁鲁| 啊啊啊啊嗯嗯嗯用力好爽 | 五月丁香拍拍激情综合三级| 九九九九亚洲| 九9热伊人| 欧美少妇性爱网站| 国产熟女无套内射| 啊啊啊要高潮了| 99热18| 超碰人人操97碰| 中文字幕一区二区三区人妻不卡| 成人精品一区二区三区| 97硬碰| 久久xx| 密乳AV免费观看| 亚洲天天操| 婷婷五月天无码 | 丁香五月色情| 日韩无码一级黄色av片| 男人的天堂VA| 丝袜翘臀后入欧美校园亚洲自拍另类小说一区中文字幕少妇诱惑 | 偷拍超碰| 国产一区二区三区中文字幕| 五月婷婷影院| 国产AV超爽| 欧美黑人精品在线播放| 久操网无码在线| 色在线综合| 日韩免费中文字幕视频| 黄色操人| 国模不卡| 9色国产精品一区粉嫩| 国产精品宅男免费| 欧美偷拍区| 久久精品国产亚洲AV清纯| 97ai亚洲| 凹凸 69堂 在线播放| 97超碰人操| 97干天天| 麻豆一区二区三区精品| 97久久精品国产| 天天干一区二区| 色综合天天| 五月丁香综合激情| 狠狠激情综合狠狠操中文字幕| 国产亚洲色婷婷久久99精品91 - 百度| 9久久久久久| 玖玖资源视频一区二区三区| 日韩亚洲97| 91处女在线视频| 蜜屁Av| 97免费视频网| 精品视频日日夜夜| 久久99手机免费视频| 欧美黄页在线| 日本精品人妻少妇一区二区| 久艹伊人精品综合在线| 欧美视频第二页| 中出789在线视频| a人欧美综合天堂麻豆| 禁十八久久| 超碰97最新人妻| 久久久婷婷| 91N综合在线| 日本中文字幕熟妇| 91天堂丝袜美腿| 人妻喷水| 97在线精品| 午夜精品久久久久久久99蜜桃一| 久久夜黄色无码A级大片| 最新日韩黄片| 亚洲色图a| 超碰97资源网亚洲| 91福利网在线观看| 日逼视频日本| 日韩人妻资源网| 99国内熟女露脸视频| 精品国产乱子伦一区二区三区,精品一| 亚洲性爱成人| 97人人射| 精品乱码在线观看| 精品国模无码| 久久久草成人网站久久久草成人久久久草久久久| 一道本东京热加勒比一区二区三区 | 久久久免费懂色| 伊人超碰97| 午夜操逼不卡| 97中文天堂| 999九九九九国产动| 国产精品美女久久久久久网站| 色久桃花影院在线观看| 亚洲国产欧美日韩精品一区二区三区,国产一区二区三区在线看片,欧美性猛交 XXX | 99国产精品| 91爆操视频| 91色黑人少妇| 欧美组图日韩亚洲中文字幕| 一区二区三区机械有限公司| 亚洲凸凹超碰成人| 日韩中文字幕精品一区在线| 高清不卡一二三区视频......| 精品国产乱码久久久久久免费| 国产精品久久久久久久AV大片 | 欧美激情专区| www.超碰| 日日躁夜夜躁狠狠躁超爽| 亚洲最新av无码成人精品区| 99热免费精品| 偷拍偷窥与盗摄视频专区| 亚洲成人av色网| 久热这里只有精品9| 亚洲av无线观看| 亚av顶级裸体一区二区三区四区五区 | 黄片无码在线制服| 99久在线精品99re8热视频在线| 看免费的黄片| aaa淫乱视频| 日韩黄片影院| 亚洲色性情三级| 免费A片三p视频| 欧美在线伊人色| 欧美不卡五十路| 亚州成人a∨| 久久久久久久免费A片国产成a人亚洲精∨品无码 | 操国产逼| 亚洲青色欧美| 操逼啊啊啊91| 97网站在线观看 | 免费亚洲国产精品久久一区| 激情干在线| 欧美色图片欧美色图| 日韩午夜精品一区二区三区电影| 日本免费一区二区不卡 | 国产一二三福利视频网| 日韩人妻少妇 一区二区三区| 久久久四区| 2025亚洲男人天堂| 一级片在线观看高清无码| 日韩人妻丝袜美腿中文| 色五月婷婷久久| 色综91| 乱理日韩中文| 2019天天干天天操| 中文字幕熟女人妻丝袜丝| 激情综合五| 91被操| 欧美熟女丝袜| 午夜天天碰综合视频| AV天堂国产| 色色青青久久| 嗯……啊…嗯嗯…啊…好舒服| 中文人妻av高清一区| 久久女女| 97久久超碰国产网站| 国产熟女免费观看久久| 天天综合欧美| 亚洲涩涩| 91蜜臀在线久久久久| 2019天天干天天操| 国产剧情在线| 日韩精彩视频| 97色爱| 色综合婷婷| 国产亚洲精品精AV.| 人澡逼| 极品粉嫩一区二区| 一区二区娱乐网站| 最新岛国大片| 秋霞午夜成人福利片片| 亚洲区小说| 欧美婷婷久久| 天天综合~91入口| 人人操人人uiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiii | 秋霞成人一级在线观看| 97视频免费播放| AV中文字幕剧情1区2区3| 人妻少妇久久久| 啪啪免费| 正在播放国产精品一区| 亚洲欧美另类小说| 亚洲干B| 久久久久9999妇女| 爱射综合| 亚洲情色第一页| 被体育老师抱着c到高潮| 亚洲欧洲av影音| 97在线免费看视频| 超碰97人妻自拍| 亚州国产成人精品女人久久| 性老妇一区二区三区| 国产精品青青草| 大香蕉综合在线| 国产一区二区三区导航| 国产亚洲精品农村妇女| 岛国片在线播放| 尤物视频视频官网| 蜜臀无码视频在线观看| 超碰91在线| 中国少妇啪啪视频| 992大香蕉| 骚鸭AV| 少好三P| 日韩有码回春沙龙第一页| 98福利在线视频| 欧洲精品久久| 久操影视| 亚洲怡春院| 91久久久老司机| 91天美传媒在线观看| 妇人噜噜| 韩国嫰模上门援交视频| 加勒比性爱成人在线| 91日日夜夜| 人人操超碰在线| 天堂亚洲精品| 97狠狠| 秋霞Av理论一级在线| 婷婷久久五月综合激情| 91丨九色丨国产丨人妻在线| 啪啪啪东京| blacked精品一区国产| 无码高清专| 欧美刺激色黄片免费看| 国产精品色色| 欧美 日韩 国产传媒| 中文字幕超碰CAO| 韩国毛片一区二区三区| www.人人摸在线视频| 欧美翘臀视频网站一区二区三区| 13小男生GAY自慰脱裤子| 天天色黄色影院天天操| 高清国产av无码| 欧美日韩m| 超碰久久草| 亚洲情色 自拍| 98久久| 色狠狠 - 百度| 超碰在线人妻| 狠插 制服 自拍| 久草久日| 国产乱伦视频污| 免费看A片毛毛片在线播| 超碰91在线| 中文久久一区| 日本幼女18+| 婷婷伊人五月| 无码伊人久久大杳蕉中文无码| 日本熟妇熟色97一本在线观看| 国产少妇高潮| 精品国产Av无码久久久伦古装| 国产精品亚洲高清在线| 久久精品人体AV| 美女黑人91神马| 久久9精品| av强奸乱轮| renqi久久久久久久久久久久| 最新av在线| 亚州男人天堂| 国产粉嫩出水在线播放| 色眯眯射| 在线亚洲欧美| 亚洲激情在线| 中文久久96| 1769成人国产精品视频| 免费啪啪啪网站18岁| 国产农村妇女精品1区二区| 精品人妻15区| 欧美日韩国内不卡| 美腿丝袜高跟网免费视频免费视频| 天天狂操夜夜狂日| 综合久久欧美| 色拍偷亚洲| 免费日韩黄片| 青青草吊丝| 免费国产视频| 久久97| 久久久久久中文| 亚洲中文日韩欧美大香蕉视频| 伊人久久国产免费观看视频| 69精品| 激情五月天网站| 天美传媒精品久久视频| 一个人免费HD91视频| 亚洲天堂日本| 国产人妖的免费的视频| 久久最新视频免费观看| 思思热在线视频在线| 女人的久久久| 精品国产Av无码久久久伦古装| 婷婷亚洲天堂| www欧美91| 丁香五月天堂网| 国际精品久久久| 久久99亚洲精品久久99果| 亚洲久草AV色图| 东亚亚洲无码高清| 欧美亚洲清纯| www.久久| 91成人18| 性欧美体内射精| 香蕉国产精品麻豆亚洲欧美日韩| 色婷婷在线视频精品导航| 亚洲国产成人精品久久久国产成人一区二区 | 超碰日韩美妻| 成人乱码一区二区三少妇| 一级性爱视频免费观看 | 日韩钢筋无码高清啾啾啾| 国产精品久久天天干| 一区 欧美 日韩 麻豆| 久草精品国产99| 天美传媒AV国产在线| 国产麻豆福利av在线播放| 97视频新免费| 97天堂| 国产自制av蜜乳| 激情终合网| 把腿张开老子CAO烂你| 高清孕妇孕交 交孕妇| 大香蕉av在线| 久久产精品一区二区三区电影| 成人A片男人的天堂| 一,爱啪啪,在线免费视频| 午夜亚洲| 大香蕉天天看妹子| 黄色网址在线免费观看| 欧洲视频在线| 天天日日本| 久久亚洲精品成人av| 国产精品久久久久久久久久久久久久| 熟妇高潮一区二区免费视频| 在线A日本| 午夜啊啊| 少妇极品熟妇人妻无码| 麻豆啪啪啪视频| 好爽免费视频| 日日噜噜夜夜久久亚洲一区二区 | 精品无码一区二区| 精品人妻av在线播放| 精品免费囯产一区二区三区| 日韩99神马视频片| 午夜男人一级A片7777| 久久久性| 久久大香蕉97| A级国产欧美激情在线| 国产精品乱人伊人网| 性高潮久久久| 熟妇高潮一区二区免费视频| 久久久久久国产无码精品| 亚洲欧美清纯| 91欧美另类| 色九九九九久| 国产美女mm131爽爽爽爽| 婷婷激情四射| 嗯~啊~快点 死我视频免费看网站| 少妇超碰在线| 男人的天堂一区三区| 99婷婷一区二区| 三及片网站| 精品久久艹| 欧美97日韩| 玖玖视频在线资源一区二区三区| 精品在线观看视频在线| 超清福利精品视频在线| 国产精品视频在线观看| 91中文字幕在线观看| 午夜精品久久久久| 久久精彩视频9| 天天日少妇逼AV| 一区二区三区视频在线观看免费| 欧亚性爱在线视频| 立川理惠被中出无码| 天天日夜干| 9精品久久久久| 人澡逼| 亚洲欧洲色情高清| 国产性感骚丝袜在线| 欧美激情综合色综合啪啪五月| 亚洲日韩美女中文字幕乱| 国产精品探花色| 色哟哟AⅤ| 色色毛片| a片久久久久久久久久久久 | 久久久97| 日逼97| 98超碰欧美| 久久激情视频| 亚洲骚男同com| 熟女露脸激情自拍视频| 人妻 欧美亚洲| 亚洲交换| JuliaAnnXXX888| 97久久超碰日韩精品| 久9爱精品| 美女9118禁| 亚洲丝袜诱惑| 免费A片三p视频| 无码精品久久| 欧美aaaaaaa| 人人干人人操人人..com| 欧美成人午夜免费福利785| 色牛牛AV| 国产91美女高潮| 欧美日韩人人精品| 骚熟女吞| 一级免费精品| 日韩猛交| AA级电影三区| 国产精品视频一区二区三区八戒| 爽 好舒服 无码刺激久久| 五月天啪啪| 亚洲情色1区| 久操大香蕉超碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰碰 | 精品999999| 日韩在线地址一| 日韩无码黄色片| 无套内射性感少妇视频| 国产精品天美传媒| 三级网站超变态精品| 天欧美在线| 欧美天堂在线| 无码人妻一区二区三区色欲aⅴ| 双插性欧美一二三区| 九九aV| 天美一二三在线观看Av| 日韩二区三四区五区六区在线看| 澳门色噜噜色噜噜色噜噜色噜噜色噜噜| 免费试看60秒| 日韩 欧美 另类 人妻| 五月天婷婷影院| 麻豆性爱视频在线播放| 91精品国| 五十路六十路素人熟女| 日韩精品一区的| 欧美色图天堂网m| 天天综合91入口| 国产精品白丝在线播放| 国产免费永久精品无码| 操B久久| 亚洲狠| 影音先锋视频在线| 91 在线亚洲| 91在线国产后入风骚翘臀美女素人| 极品销魂美女一区二区| 黄色欧美性爱视频| 97久久超碰国产网站| 干B网| 操逼片中文| 久九干| 久久97视频| 欧美日日操| 91人妻人人妻| 欧美性爱超碰97| 亚洲成人日韩小说| 青青草视频爽一爽| 国色综合天| 日韩AC| 精品无码久久久久| 韩国一级做a久久久久| 91啪啪视频| 狠狠爱夜夜干| 国产精品嫩草久久久久| 日韩 人妻 精品| 天美传媒AV在线播放| 久久综合激情| 2020中文字幕在线| 国产网红精品| 天操老女人| 青青青国产手线观看视频2| 嗯嗯啊中文字幕| 婷婷性网| 狠狠色婷婷777| 偷拍新久久| 日韩美女久久一区二区三区| 久久欧美激情| 九九热精品| 超碰97人妻自拍| 日本肉体xxxx裸交| 日韩丨制服丨中文|在线| 手机在线中文字幕国产 | 囯产精品久久久久久久久久梁医生 | 乱伦图av| 精品美女久久一二三| 亚洲小电影免费涩涩成人在线高清| 手机不卡视频不卡在线一二三区| 色香AV| 九九久久一区二区三区| 国产又粗又大硬免费色网视频| 一本一道人妻久久一区二区三区 | 亚洲午夜免费狠狠干| 国产又粗又长又大的视频| 爱我干综合| 在线二区不卡| 一区二区三区在线资源| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区老师黑人潮喷一 | 国产精品一区二区校花| 欧洲一区二区三区免费| 在线观看成人性爱免费小视频| 91成人社区| 在线无码操| 992大香蕉| 麻豆久久视频在线地址| 日韩一级性爱无码| 日韩久久艹| 夜色AV无码手机在线影院| 日韩综合第八区国产精品| 99性爱| 1000部熟女视频在线观看| 夜夜国产一区| 色牛牛AV| 超碰在线人人射| 男人网站婷婷| 香蕉久久国产AV一区二区| 一区二区高清视频| 91中文精品日韩欧美在线| 亚洲中文日韩欧美大香蕉视频| 亚州五月| 91人妻视频在线| 国产操逼逼网| 在线不欧美| 免费看污网址| 激情五月婷| 97资源视频| 午夜美女诱惑电源网| 超碰97资源大奶| 久精品无码av一区二免费国产在线观看 | 亚洲无992tv| 超碰1997| 吻戏激情性巴克| av一区二区三区四区| 国产精品夜夜夜| 欧亚乱色熟一区二区三四区| 精品一区二区综合熟妇| 欧美高清色| 天堂网 主播 亚洲| 欧美亚洲综合色| 啪啪免费| 插入逼91| 欧美色97| 亚洲熟女乱色一区二区三区久久久| 亚洲 日本 一 二 三| 国产精品免费日韩| 欧美色图色综合| wuyechaopeng| 白丝AV网站| 色爱综合网| 日韩av一级黄片| 国产精品嫩草影院午夜两性| 阿姨一区二区免费视频-高清正片西瓜视频下载app-T450AV | 九九人妻| 99国产精品久久久久久久成人热| 婷婷在线视频| 欧美一级黄片视频在线| 少妇久久久| 少妇大屁屁| 97超碰超欧美。| 97超碰色屌| 2001天天操| 亚洲色五月| 操逼网站地址| 日韩A优精品在线观看| 欧美性爱精品七区| 香蕉人欧美综合| 加勒比色99999| 美女91av| 欧美激情色婷婷花野真衣一区二区| 中文字幕在线观看网页| av天天在线观看| 欧美日韩91| www.色婷婷色综合| 欧美性爱三区二区| 亚洲国产ⅴ高清在线观看| 国产精品不卡高清在线观看| 色香欲影| 欧美综合网A| 日人妻视频91| 日欧亚洲二三区大片不卡| 无码高清操逼网址| 欧美大香蕉久| av爱爱爱| 成人免费毛片| 熟女这里只有精品6| 嫩草美女久久| 国产美女裸体秘 永久无遮挡| jizz啪啪| 人人操我人人干| 国产人妖的免费的视频| 免费超碰97在线观看| 黑人白女精品一区| www.大香| 激情久久av一区av二区av| 蜜乳AV色欲AVAV无码| 欧美成人性爱视频大全| 久久激情五月| 男人的天堂2010| 后X久久| 日日日啊啊啊| 目产99999久久999| 丝袜美女诱惑 91 视频| 好爽要喷了| 欧美色图20P| 久久久久少妇| 亚洲春色欧美激情自拍| 欧美经典一区二区三区| 777奇米影视777四色| 99热精品在线在线| 欧美专利1区2区3区4区5区免费| 欧美狠狠弄| 亚洲国产蜜臀系列在线观看| 老司机福利社视频在线观看| 人人妻人人澡人人爽人人精品浪潮| 青青草福利视频| 黄片qw| 天堂8在线新版官网| 天天插天天插| 少妇天堂网络| 国模久久在线| 久久久久久久97| 欧 美 自 拍 偷 拍| 国产伦乱91| 1024亚洲中文字幕久在线看片你懂的 | 青青操日韩| 一级性爱网| 国产精品宅男免费| 免费视频无码| 东北女人| 日骚逼视频| 免费日韩黄片| 99无码精品| m欧洲一级午老| 国产精品一区二区密臀| 成人AV超碰免费在线| 国产女人成人精品视频| 人人操天天爽| 五月天AV资源| 日韩熟女操逼| av九九| 99色日| 人妻少妇精品久久久久久久| 在线观看AV片| 97久精品| 后入式福利| 天天色天天干天天爱| 开心五月婷婷激情| 久久一本大香蕉| 国产精品 视频| 国产粉嫩出水在线播放| 女同性恋一区二区三区精品视频| 欧美少妇高潮视频| 粉嫩少妇自慰在线| 78m成人视线| 国产午夜无码片在线观看影视 | 精品国产av一区二区三区四区入口| 久久久免费一级黄片| 日本一区99| 久热一区二区| 激情综合网五月婷婷| 久久一本大香蕉| 日本伦乱九九九综合| 性爱综合网| www久久精品| 欧美综合娱乐久久| 91欧美偷拍| 男人亚洲天堂| 婷婷丁香六月| 久久激情四射婷婷丁香五月天| 人妻一区视频| 天天影视射综合网| AV乱伦国产| 97舔舔| 啪啪自拍九九综合| 国产成人+综合亚洲+天堂| 九九人妻| 操逼操网| 欧美一品道| 人人操人人uiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiii | 天天干人妻视频| 黄片aaaaa一区| 欧美亚洲激情一二三| 影视综合无码少妇| 国产亚卅97| 100啪啪视频大全| 激情露脸爱| 国产成人91一区二区三区| 九九视品黄色| 国产又黄又爽| 91 丝袜在线| 成人蜜乳小视频网站| 熟妇熟女一区二三区| 日本在线观看网址| 人妻天天爽夜夜爽精品2| 91综合色噜噜| caopeng97人妻| 一区操逼| 夜夜骑操视频| 一区二区三区精品视频| 亚洲双插| 韩日精品四区| 亚洲国产精品久久AV| 男人的天堂成人的社区| 高清在线不卡一区二区 视频| 久久久久亚洲精品| 岛国网址国产| 骚日日av| 中文字幕日韩综合| 人人性爱视频免费| 丁香婷婷激情五月天无毒不卡| 久久无码成人| 久久久三区二区一区| 99精品在线| 国产高清午夜成人在线观看| 欧美少妇性乱| 欧美性爱在线无码| 日本天天干天天操一区| 欧美爆操91| 亚洲一区二区三区AV无码 | 蜜桃久久综合视频| 免费成人在线观看91| 色眯眯av| 久久久爆乳翘臀一线天伦理视频| 亚洲精品国产精品成人| 欧美一级专区免费大片| 国产亚洲精品自在线亚洲情侣| 午夜精品久久99蜜桃的功能章节| 91夜夜蜜桃臀1区2区3区| 久久久一区二区| 26uuu国产| 国产亚洲精品精AV.| 亚洲影视高清第一页| 欧美中文字幕男人天堂久久精品| 日日噜噜夜夜狠狠视频无| 欧美97av| 玖玖蜜臀资源网| 高清国产av无码| 激情小说图片亚洲首页| 伊人久久亚洲色欲综合网站 | 加勒比综合88| 殴洲老熟女| 人妻AV 中文字幕的| 亚洲囯产精品女人久久久| 青草一区二区| 99精品人人爽| 精品国产网站| 成人AV在线电影| 精品久久久高清无码| 丰满人妻一区二区三区免费| 九九九九免费高| 国模限制级电影| 国产 v乱码一区二| 国产精品99精品视频网站| 男人的天堂VA| 青青草玖玖爱| 性色中出| 熟女人妻久久中文字幕一二区| 91在线视频免费播放| 1769成人国产精品视频| 少妇色欲综合网2| 狠狠色一区二区中文字幕| 神马久久久久眼| 激情综合亚洲| 一级久久久久久久久久久 | 呦女网站| 欧美暴力猛交| 亚洲中文人妻色| 欧美日韩国产在线| 欧美做爰无码A片视频| 免费的很黄很污的全部视频| 四虎国产精品永久在线囯在线| 欧美丝袜中文字幕07在线| 亚洲人人夜夜澡人人爽| 97超级欧美| 色爱欲亚洲| 国产精品自拍xxxx| 被体育老师抱着c到高潮| 伊人一区二区在线播放| 偷拍综合网| 中文字幕在线免费观看| 麻豆天美AV传媒第一页| 欧美在线色| 欧美韩国你懂得在线 | 国内外毛片在线观看| 99黄页网站| 欧美一区二区成人一卡| 97综合国产精品高潮久久| 熟妇最新先锋一二三区| 射 色综合| 精品久久青青草| 欧州色图区| 欧美久久草熟女| 丰满翘臀美女影院视频| 老鸭窝亚洲毛片| 1024亚洲中文字幕久在线看片你懂的 | 九九自拍伦理| 欧美国产有色电影| 91处女视频在线观看| 人人澡综合涩| 60秒免费小视频| 免费亚洲国产精品久久一区| 免费超碰97久久| 国语国产操逼伊人AV网| 国产黄色影片在线观看| 日本黄色大片一级视频免费麻豆| 亚洲国产精品99久久久| 国产一区自拍欧美日韩| 丰满人妻一区二区三区四区| 日韩国产乱子伦App| 日亚韩精品视频二区三| 色综合九九| 亚洲图片欧美日韩| 久久手机视直播| 一区二区三区蜜桃成人撸久久东京热 | 久9久9久9久9久9久9| 少妇精品|