免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

PHP 接口壓力測(cè)試實(shí)戰(zhàn):用 wrk 從零搭建性能基線

PHP 接口壓力測(cè)試實(shí)戰(zhàn):用 wrk 從零搭建性能基線 很多同學(xué)第一次給 PHP 項(xiàng)目做壓力測(cè)試第一反應(yīng)都是找個(gè)工具把接口打爆看看會(huì)不會(huì)掛。我以前也這么想直到有次新功能上線前我用 wrk 隨手壓了一套接口發(fā)現(xiàn) QPS 連 200 都沒到RT 的 P99 卻已經(jīng)飆到 1.5 秒這才意識(shí)到一件事沒有一份可靠的 QPS、RT、CPU、內(nèi)存基線數(shù)據(jù)你根本沒法判斷系統(tǒng)是變好了還是變差了。這篇文章就把我從零開始用 wrk 對(duì) PHP 系統(tǒng)做壓測(cè)、記錄基線的完整過(guò)程寫下來(lái)適合完全沒碰過(guò)壓測(cè)的 PHP 開發(fā)同學(xué)照著操作也能幫想搭一套壓測(cè)流程的人省掉不少?gòu)澛贰?. 壓測(cè)前先想明白你測(cè)的不是極限是一份可用基線1.1 為什么選 wrk輕量、快、不折騰壓測(cè)工具不少常見的有 ab、JMeter、wrk、k6 這幾類。我給 PHP 項(xiàng)目做日常基線測(cè)試首選就是 wrk原因很簡(jiǎn)單它是一個(gè)單文件編譯的 C 語(yǔ)言工具沒有圖形界面沒有插件體系一條命令就能跑完一輪壓測(cè)。對(duì)比下來(lái)大概是這個(gè)樣子工具上手成本適合場(chǎng)景主要限制ab很低臨時(shí)快速看一眼接口吞吐高并發(fā)下線程模型不如 wrk數(shù)值容易偏低JMeter高復(fù)雜業(yè)務(wù)流程、分布式壓測(cè)、報(bào)告美化配置麻煩跑少量線程時(shí)本地資源占用就不小wrk低單接口/多接口的并發(fā)壓測(cè)、基線回歸玩法要靠 Lua 腳本層級(jí)報(bào)告需要自己整理我說(shuō)的不折騰是有實(shí)際體會(huì)的。之前我試過(guò)在兩臺(tái)測(cè)試機(jī)上各跑一套壓測(cè)一邊用 ab一邊用 wrk同樣打到同一個(gè) PHP 接口ab 的 QPS 明顯低于 wrk。原因是 wrk 基于非阻塞事件模型可以用少量線程維持大量并發(fā)連接壓測(cè)機(jī)自身的 CPU 消耗低很多。換句話說(shuō)wrk 更容易讓壓力真正落到被測(cè)的 PHP 服務(wù)上而不是先把自己的進(jìn)程拖垮。1.2 壓測(cè)要記錄的四個(gè)數(shù)字各自代表什么很多人把壓測(cè)等同于測(cè) QPS但一份合格的基線報(bào)告至少要有四個(gè)維度的數(shù)據(jù)QPS每秒請(qǐng)求數(shù)系統(tǒng)在特定并發(fā)下每秒鐘能處理多少個(gè)請(qǐng)求這是吞吐量指標(biāo)。RT響應(yīng)時(shí)間單個(gè)請(qǐng)求從發(fā)出到收到響應(yīng)的時(shí)間通??雌骄岛透叻种槐热?P99。CPU 使用率壓測(cè)期間這臺(tái)機(jī)器到底忙不忙是代碼計(jì)算密集還是空等 IO。內(nèi)存占用PHP-FPM 是常駐內(nèi)存的進(jìn)程池隨著并發(fā)上升worker 數(shù)量增加內(nèi)存曲線非常值得盯。這四個(gè)數(shù)字必須放在一起看缺一個(gè)都容易誤判。比如 QPS 高了但 CPU 已經(jīng) 95% 以上說(shuō)明系統(tǒng)到上限了QPS 沒漲內(nèi)存卻一直在漲可能是 PHP-FPM worker 在不斷創(chuàng)建或者測(cè)試接口本身有泄漏。只有四者對(duì)齊才能說(shuō)這條基線的水位是健康的。1.3 開始之前先確認(rèn)測(cè)試環(huán)境是干凈的這也是我第一次壓測(cè)踩過(guò)的坑。當(dāng)時(shí)我在本地開發(fā)環(huán)境上直接壓機(jī)器上還跑著編譯器、數(shù)據(jù)庫(kù)腳本、一堆開發(fā)工具測(cè)出來(lái)的 QPS 忽高忽低完全沒法當(dāng)參考?,F(xiàn)在我的習(xí)慣是壓測(cè)前必須確認(rèn)幾件事被測(cè)代碼是同一個(gè)穩(wěn)定分支并記錄 commit 號(hào)測(cè)試機(jī)只跑 nginx PHP-FPM 必要的數(shù)據(jù)庫(kù)后臺(tái)監(jiān)控進(jìn)程全部關(guān)掉壓測(cè)機(jī)的網(wǎng)絡(luò)和被測(cè)機(jī)之間沒有額外限速或代理PHP 的 opcache 保持與服務(wù)一致的開關(guān)狀態(tài)。寧可多花十分鐘清理環(huán)境也不要拿一份臟數(shù)據(jù)當(dāng)基線后面做優(yōu)化對(duì)比時(shí)你會(huì)感謝當(dāng)時(shí)的謹(jǐn)慎。2. 從零搭環(huán)境裝好 wrk準(zhǔn)備一個(gè)能壓的 PHP 接口2.1 安裝 wrk 的兩種常規(guī)姿勢(shì)如果你的測(cè)試機(jī)是 Linux 系統(tǒng)最簡(jiǎn)單的辦法是直接用包管理器裝。以常見的 Debian/Ubuntu 系為例sudo apt install -y wrk wrk --version安裝完直接驗(yàn)證版本能輸出 wrk 的版本號(hào)就說(shuō)明裝好了。有些發(fā)行版?zhèn)}庫(kù)里沒有這個(gè)包或者你想用最新版本可以走編譯安裝sudo apt install -y build-essential libssl-dev git clone wrk 官方源碼倉(cāng)庫(kù)地址 cd wrk make sudo cp wrk /usr/local/bin/編譯之前務(wù)必保證有 openssl 的開發(fā)頭文件wrk 默認(rèn)會(huì)編出支持 HTTPS 的版本如果缺了 libssl-devmake 階段會(huì)報(bào)錯(cuò)報(bào)錯(cuò)信息通常會(huì)直接指向 openssl 相關(guān)的頭文件。我第一次編譯時(shí)就在這卡過(guò)所以單獨(dú)提一句。這里多說(shuō)一句很多 PHP 項(xiàng)目部署時(shí)是 Windows 開發(fā)環(huán)境 Linux 生產(chǎn)環(huán)境如果你只在 Windows 上開發(fā)建議直接在 Linux 測(cè)試機(jī)上跑 wrk不要試圖在 Windows 下折騰編譯。wrk 本身的設(shè)計(jì)目標(biāo)就是 Linux/macOSWindows 下的兼容方案既費(fèi)時(shí)間又容易遇到網(wǎng)絡(luò)棧差異。2.2 一個(gè)足夠簡(jiǎn)單又不失真實(shí)的測(cè)試接口壓測(cè)接口選什么很有講究。我的做法是準(zhǔn)備兩層目標(biāo)第一層是一個(gè)最簡(jiǎn)單、不查數(shù)據(jù)庫(kù)、不調(diào)第三方接口的 JSON 返回接口用來(lái)測(cè)純 PHP 運(yùn)行時(shí) PHP-FPM 網(wǎng)絡(luò)棧的底子第二層再測(cè)真實(shí)業(yè)務(wù)接口比如帶一個(gè)簡(jiǎn)單的數(shù)據(jù)庫(kù)查詢觀察額外損耗。第一層接口可以長(zhǎng)這樣?php // test_api.php $data [ code 0, msg ok, data [ user_id 10086, time time(), ], ]; echo json_encode($data);為什么先拿這種接口打底因?yàn)閴簻y(cè)是為了定位瓶頸。如果連一個(gè)不查庫(kù)的接口 QPS 都很低那問(wèn)題大概率出在 PHP-FPM 配置、opcache、CPU 頻率或中間件上沒必要上來(lái)就懷疑 SQL。把這個(gè)底子摸清楚之后再去壓真實(shí)接口兩者對(duì)比就能算出業(yè)務(wù)邏輯本身消耗了多少吞吐量。部署上我建議走 nginx PHP-FPM 的標(biāo)準(zhǔn)組合監(jiān)聽 127.0.0.1:8080 這樣的內(nèi)網(wǎng)地址避免在壓測(cè)過(guò)程中被防火墻或路由影響。測(cè)試機(jī) IP 用 127.0.0.1 還是內(nèi)網(wǎng) IP 都行但如果你想讓壓測(cè)機(jī)和被測(cè)機(jī)分離就要用被測(cè)機(jī)的內(nèi)網(wǎng) IP 訪問(wèn)。2.3 第一條壓測(cè)命令和輸出解讀把接口部署好之后先用 curl 手動(dòng)確認(rèn)返回正常然后再上 wrk。第一條命令建議放低并發(fā)跑通流程wrk -t2 -c10 -d10s --latency http://127.0.0.1:8080/test_api.php其中-t2表示用 2 個(gè)線程-c10表示維持 10 個(gè)并發(fā)連接-d10s表示持續(xù) 10 秒--latency會(huì)在結(jié)束時(shí)輸出更完整的延遲分布。正常跑完會(huì)看到類似這樣的輸出Running 10s test http://127.0.0.1:8080/test_api.php 2 threads and 10 connections Thread Stats Avg Stdev Max /- Stdev Latency 4.82ms 2.31ms 45.12ms 86.18% Req/Sec 1.05k 102.34 1.41k 70.31% Latency Distribution 50% 4.50ms 75% 5.20ms 90% 6.80ms 99% 14.20ms 10520 requests in 10.01s, 2.03MB read Requests/sec: 1051.12 Transfer/sec: 207.43KB這里最容易被新手誤讀的地方是 Thread Stats 里的 Req/Sec 和最后的 Requests/sec。Thread Stats 的 Req/Sec 是每個(gè)線程自己的平均吞吐如果你的線程數(shù)是 4那么這個(gè)數(shù)值大致是總 QPS 分割后的水平而最后的Requests/sec才是整體 QPS也就是我們基線里要記的那個(gè)數(shù)字。把這兩行搞混的人不少我第一次看輸出時(shí)也愣了半天。3. 正式壓測(cè)并發(fā)要加梯度數(shù)據(jù)要取多輪3.1 從低并發(fā)起步找到吞吐量的拐點(diǎn)壓測(cè)不是一上來(lái)就-c500那樣你只能得到一個(gè)打爆了的結(jié)果卻不知道系統(tǒng)是從哪個(gè)并發(fā)開始扛不住的。我的標(biāo)準(zhǔn)操作是用一組并發(fā)梯度比如-c10、-c50、-c100、-c200、-c500每個(gè)梯度跑 30 秒記錄對(duì)應(yīng)的 QPS 和 RT。這個(gè)過(guò)程本質(zhì)上是尋找拐點(diǎn)一開始并發(fā)上升QPS 會(huì)跟著漲因?yàn)橥瑫r(shí)能處理的請(qǐng)求變多了到某個(gè)點(diǎn)之后再往上加并發(fā)QPS 不再明顯增長(zhǎng)甚至開始回落同時(shí) RT 快速拉高。這個(gè)拐點(diǎn)對(duì)應(yīng)的并發(fā)量就是系統(tǒng)當(dāng)前配置下的合理服務(wù)水位。舉個(gè)實(shí)際例子我之前壓一個(gè) PHP 8.2 opcache 的簡(jiǎn)單 JSON 接口-c10時(shí) QPS 約 1800-c50時(shí)漲到 4200-c100時(shí)是 5100-c200的時(shí)候只有 4600 了RT 的 P99 從 18ms 漲到 120ms。這就說(shuō)明 100 左右并發(fā)已經(jīng)接近這臺(tái)機(jī)器的服務(wù)上限繼續(xù)壓只會(huì)讓用戶體驗(yàn)變差。3.2 平均 RT 會(huì)欺騙你P99 才是真實(shí)用戶體驗(yàn)wrk 輸出里的 Latency 一欄Avg是平均響應(yīng)時(shí)間但平均值的迷惑性很大如果 90% 的請(qǐng)求都是 5ms剩下 10% 是 500ms平均值會(huì)被拉到一個(gè)看起來(lái)很溫和的數(shù)字。這也是為什么壓測(cè)一定要加--latency參數(shù)看延遲分布里的 50%、75%、90%、99% 分位。P99 的含義是99% 的請(qǐng)求都低于這個(gè)值剩下的 1% 是最慢的尾部請(qǐng)求。對(duì)線上服務(wù)來(lái)說(shuō)用戶體驗(yàn)往往由尾部延遲決定。我在做基線記錄時(shí)RT 這一欄至少記兩個(gè)數(shù)平均值和 P99。后續(xù)做優(yōu)化時(shí)如果平均值下降了但 P99 在上漲我會(huì)立刻警惕——這通常意味著某些慢請(qǐng)求變得更極端了可能存在于鎖競(jìng)爭(zhēng)或進(jìn)程池打滿的問(wèn)題。3.3 記錄多輪結(jié)果取穩(wěn)定而不是最高的一輪壓測(cè)數(shù)值天然有波動(dòng)尤其是 PHP-FPM 場(chǎng)景下進(jìn)程復(fù)用、opcache 冷熱、系統(tǒng)定時(shí)任務(wù)都可能讓某一輪結(jié)果偏高或偏低。我的做法是同一個(gè)并發(fā)梯度至少跑三輪每輪之間停 5 秒把三輪結(jié)果都記下來(lái)然后取中位數(shù)或者波動(dòng)最小的那一輪作為基線值。這里有個(gè)反直覺的點(diǎn)最高值往往不值得記錄。比如某輪跑到 5000 QPS下一輪只有 4100我會(huì)直接懷疑第一輪是不是正好命中了 opcache 預(yù)熱完成的窗口或者系統(tǒng) GC 還沒觸發(fā)。真正的基線應(yīng)該是可復(fù)現(xiàn)的那一組數(shù)字不是偶爾出現(xiàn)的峰值。如果接口需要 POST 請(qǐng)求wrk 也能通過(guò) Lua 腳本解決?;A(chǔ)寫法大概是這樣-- post.lua wrk.method POST wrk.headers[Content-Type] application/json wrk.body {user_id:10086,page:1}然后用wrk -t4 -c100 -d30s -s post.lua http://...啟動(dòng)即可。這個(gè)用法不難但注意腳本里的 body 是所有并發(fā)連接共用同一個(gè)請(qǐng)求體如果業(yè)務(wù)要求每個(gè)請(qǐng)求參數(shù)不同就得用 Lua 腳本在請(qǐng)求時(shí)動(dòng)態(tài)生成復(fù)雜度會(huì)高不少一般做基線時(shí)不需要一步到位。4. 壓測(cè)時(shí)盯服務(wù)器CPU 和內(nèi)存基線的采集方法4.1 壓測(cè)期間要開的幾個(gè)監(jiān)控命令wrk 跑起來(lái)只是整個(gè)壓測(cè)的一半另一半是被測(cè)服務(wù)器的資源狀態(tài)。我通常會(huì)在壓測(cè)開始前先在被測(cè)機(jī)上開一個(gè)后臺(tái)記錄腳本把壓測(cè)期間的數(shù)據(jù)落盤這樣壓測(cè)結(jié)束后可以回放當(dāng)時(shí)的資源曲線。最常用的命令有這幾個(gè)# 每2秒輸出一次系統(tǒng)概況共記錄30次 vmstat 2 30 # 每2秒輸出一次每個(gè)CPU核心的使用率 mpstat -P ALL 2 30 # 查看每個(gè)進(jìn)程的CPU和內(nèi)存占用 pidstat -u -r 2 30 # 內(nèi)存概況 free -m如果不想同時(shí)開這么多終端可以用一個(gè)簡(jiǎn)單的循環(huán)腳本把關(guān)鍵數(shù)據(jù)拼進(jìn)同一個(gè)日志文件#!/bin/bash # load_monitor.sh interval2 end$((SECONDS60)) while [ $SECONDS -lt $end ]; do echo $(date %F_%T) /tmp/load_test.log top -bn1 | head -15 /tmp/load_test.log free -m /tmp/load_test.log sleep $interval done注意pidstat這個(gè)命令來(lái)自 sysstat 工具包如果系統(tǒng)里沒有需要先apt install sysstat。mpstat 也一樣。另外這些監(jiān)控命令本身也會(huì)消耗少量 CPU在低配機(jī)器上可能影響測(cè)試結(jié)果所以記錄完后記得把這些進(jìn)程都?xì)⒌粼偃∽罱K數(shù)據(jù)。4.2 從監(jiān)控?cái)?shù)據(jù)反推瓶頸在哪個(gè)環(huán)節(jié)拿到資源數(shù)據(jù)后重點(diǎn)看三個(gè)地方一是 CPU 的 us/sy 比例。us高說(shuō)明用戶態(tài)代碼在忙比如 PHP 腳本邏輯復(fù)雜、循環(huán)密集sy高說(shuō)明系統(tǒng)態(tài)開銷大比如頻繁上下文切換、網(wǎng)絡(luò)包處理、系統(tǒng)調(diào)用太多。如果 sy 高于 us往往不是 PHP 代碼本身的問(wèn)題而是并發(fā)模型或網(wǎng)絡(luò)配置有瓶頸。二是 CPU idle 和等待 IO 的時(shí)間。vmstat里有個(gè) wa 列代表 IO 等待。wa 明顯偏高的時(shí)候QPS 上不去多半是磁盤拖后腿比如 nginx 訪問(wèn)日志瘋狂寫盤或者 PHP slowlog 開著。我之前確實(shí)遇到過(guò) CPU 只有 20%、QPS 卻卡在 800 的情況檢查后發(fā)現(xiàn)是訪問(wèn)日志寫到了普通機(jī)械盤上IO 等待直接打滿。三是內(nèi)存里 PHP-FPM 的占用。用ps aux --sort-%mem | head -20看看是否有 worker 進(jìn)程內(nèi)存漲得異常。PHP-FPM 的每個(gè) worker 在默認(rèn)配置下可能占用幾十到一兩百 MB如果并發(fā)開得高幾十個(gè) worker 同時(shí)駐留內(nèi)存很容易超預(yù)期。內(nèi)存基線就是用來(lái)記錄這個(gè)并發(fā)水位下FPM 進(jìn)程池到底吃掉了多少內(nèi)存。4.3 把服務(wù)端數(shù)據(jù)和 wrk 輸出對(duì)齊到同一時(shí)間線壓測(cè)結(jié)束后你會(huì)得到兩堆數(shù)據(jù)一堆來(lái)自 wrk 的匯總值一堆來(lái)自監(jiān)控日志的每秒采樣。很多人直接把這兩堆數(shù)字拼在一起寫報(bào)告實(shí)際上不對(duì)齊時(shí)間線的基線是沒法定位問(wèn)題的。我的做法是壓測(cè)開始前在監(jiān)控日志里手動(dòng)打一條標(biāo)記 start wrk 結(jié)束后再打一條 done 這樣壓測(cè)窗口內(nèi)的資源采樣就有明確的起止邊界。后續(xù)做對(duì)比時(shí)只看窗口內(nèi)的采樣平均值和峰值窗口外的數(shù)據(jù)直接丟棄。然后我習(xí)慣建一張映射表把每次壓測(cè)的命令參數(shù)、wrk 結(jié)果、資源監(jiān)控結(jié)果放在同一行這樣一旦某次基線異常可以立刻倒推是哪一層的變量發(fā)生了變化。5. 把基線寫成表格一份能長(zhǎng)期復(fù)用的記錄模板5.1 基線表該有哪些字段跑完一堆壓測(cè)之后如果只是把數(shù)字記在聊天軟件里過(guò)兩周就找不到了。我推薦用一張表格管理所有基線字段包括日期代碼版本測(cè)試接口并發(fā)QPSRT 均值RT P99CPU%內(nèi)存占用環(huán)境說(shuō)明2026-06-01某提交號(hào)test_api.php100510018ms46ms68%1.8Gopcache開啟FPM動(dòng)態(tài)10-802026-06-02某提交號(hào)test_api.php200460088ms120ms66%2.4G同上超負(fù)荷區(qū)間2026-06-03某提交號(hào)user_info.php5062076ms210ms35%2.1G帶一次DB查詢這張表里每一行就是一條基線。環(huán)境說(shuō)明這欄特別重要因?yàn)?opcache 開關(guān)、PHP 版本、FPM 參數(shù)都會(huì)直接影響結(jié)果不寫清楚三周后再看數(shù)據(jù)等于瞎猜。5.2 什么時(shí)機(jī)需要重新測(cè)基線基線不是測(cè)一次就永久有效的。按我的經(jīng)驗(yàn)以下變化發(fā)生時(shí)必須重新采集PHP 版本升級(jí)、框架或核心依賴有大版本變更、php-fpm 池配置調(diào)整pm.max_children、pm.start_servers、nginx 的 keepalive 或 gzip 策略變化、測(cè)試接口本身的代碼邏輯改動(dòng)、測(cè)試機(jī)硬件規(guī)格變化。如果出現(xiàn)同一接口、同一代碼版本QPS 卻和上周記錄差很多的情況我也會(huì)重新測(cè)一遍基線而且會(huì)特意檢查是不是監(jiān)控腳本在后臺(tái)偷跑、是否有人改了系統(tǒng)參數(shù)。這個(gè)習(xí)慣幫我排查過(guò)好幾次假象——有一次 QPS 突然掉了一半最后發(fā)現(xiàn)是某臺(tái)機(jī)器上被同事裝了定時(shí)任務(wù)壓測(cè)窗口正好撞上了大規(guī)模日志清理。5.3 用基線做容量預(yù)估的簡(jiǎn)單算法基線最有價(jià)值的用法不是看數(shù)字好看而是用來(lái)做容量預(yù)估。公式不復(fù)雜需要實(shí)例數(shù) (預(yù)估峰值 QPS × (1 冗余系數(shù))) / 單機(jī)基線 QPS舉個(gè)例子基線表里單機(jī)在 100 并發(fā)下 QPS 是 5000如果業(yè)務(wù)方預(yù)測(cè)大促峰值請(qǐng)求是 15000 QPS目標(biāo) CPU 水位控制在 70% 左右那么單機(jī)預(yù)留 30% 冗余最終需要的實(shí)例數(shù)就是15000 × 1.3 / 5000 ≈ 4臺(tái)。如果只按 QPS 峰值算而不留冗余一旦流量抖動(dòng)所有實(shí)例都會(huì)沖到 90% 以上的 CPU尾部延遲會(huì)很難看。需要注意的是這種線性預(yù)估只適用于無(wú)狀態(tài)、可水平擴(kuò)展的 PHP 接口。如果接口嚴(yán)重依賴數(shù)據(jù)庫(kù)或第三方服務(wù)那么數(shù)據(jù)庫(kù)側(cè)的連接數(shù)、負(fù)載也是容量邊界單純按單機(jī) QPS 算會(huì)低估風(fēng)險(xiǎn)。遇到這種情況我會(huì)同時(shí)把數(shù)據(jù)庫(kù)的 CPU、連接數(shù)也拉進(jìn)基線表。6. 實(shí)操中最容易翻車的五個(gè)坑6.1 壓測(cè)機(jī)先崩了測(cè)出來(lái)的數(shù)就不可信wrk 雖然很輕量但也不是無(wú)限跑。如果你用一臺(tái) 2 核小機(jī)器去壓一個(gè) 8 核的服務(wù)端很可能會(huì)出現(xiàn)壓測(cè)機(jī) CPU 先到 100%而服務(wù)端還很從容的情況。這時(shí)的 QPS 數(shù)字反映的是壓測(cè)機(jī)的上限不是被測(cè)系統(tǒng)的上限。判斷方法很簡(jiǎn)單壓完看壓測(cè)機(jī)的top如果 wrk 進(jìn)程吃滿了 CPU 或者系統(tǒng)出現(xiàn)大量 TCP 連接排隊(duì)就說(shuō)明壓力工具先到極限了。解決方式一是減少 wrk 線程數(shù)通常-t設(shè)置為壓測(cè)機(jī) CPU 核心數(shù)左右即可沒必要開太多二是把 wrk 放到另一臺(tái)閑置機(jī)器上跑讓壓測(cè)機(jī)和被測(cè)機(jī)分離。6.2 PHP-FPM 配置和 opcache 偷偷影響成績(jī)PHP 場(chǎng)景下最容易被忽略的兩個(gè)變量是 opcache 和 FPM 進(jìn)程池參數(shù)。opcache 關(guān)閉時(shí)每個(gè)請(qǐng)求都要重新編譯一遍 PHP 腳本CPU 消耗會(huì)明顯上升QPS 直接打折opcache 開啟后前幾個(gè)請(qǐng)求還會(huì)觸發(fā)編譯緩存所以正式壓測(cè)前一定要先打幾發(fā)請(qǐng)求做預(yù)熱。FPM 這邊pm.max_children如果設(shè)置太小并發(fā)一旦超過(guò)進(jìn)程池上限請(qǐng)求就開始排隊(duì)QPS 停滯、RT 暴漲如果設(shè)置太大內(nèi)存會(huì)被 worker 吃滿。我做基線時(shí)會(huì)把 FPM 配置快照寫進(jìn)環(huán)境說(shuō)明這樣后續(xù)調(diào)整參數(shù)后對(duì)比才公平。另外注意pm.max_requests它是讓 worker 處理多少請(qǐng)求后自動(dòng)回收的機(jī)制設(shè)得太小會(huì)導(dǎo)致進(jìn)程頻繁創(chuàng)建銷毀CPU 忽高忽低。6.3 長(zhǎng)連接與并發(fā)數(shù)設(shè)置會(huì)帶來(lái)假數(shù)據(jù)wrk 默認(rèn)使用 HTTP/1.1 keep-alive 長(zhǎng)連接這能大幅提高 QPS因?yàn)槭∪チ舜罅?TCP 握手開銷。但真實(shí)用戶往往不是這種訪問(wèn)模式連接會(huì)不斷建立和斷開。所以壓測(cè)結(jié)果必須注明是否 keep-alive。如果你想知道斷開連接場(chǎng)景下的表現(xiàn)可以在 wrk 里加一個(gè)請(qǐng)求頭wrk -t4 -c100 -d30s -H Connection: close http://127.0.0.1:8080/test_api.php你會(huì)看到 QPS 明顯下降這是正常的別慌。關(guān)鍵是基線表里要寫清楚當(dāng)時(shí)是哪種連接模式否則拿 keep-alive 的基線去對(duì)比短連接場(chǎng)景你會(huì)以為系統(tǒng)退化了。6.4 日志和磁盤 IO 拖垮整個(gè)壓測(cè)壓測(cè)期間nginx 的 access log 默認(rèn)每接收一個(gè)請(qǐng)求就寫一行。QPS 高的時(shí)候日志寫入本身就是巨大的磁盤壓力。更隱蔽的是 PHP-FPM 的 slowlog一旦觸發(fā)慢日志就會(huì)在請(qǐng)求處理路徑上產(chǎn)生額外 IORT 反而被日志拖得更慢。我的建議是做純性能基線時(shí)先把 access_log 臨時(shí)關(guān)閉或在配置里指向內(nèi)存盤壓測(cè)完再改回來(lái)。這個(gè)操作不算什么高級(jí)技巧但特別實(shí)用。我第一次壓測(cè) 2000 QPS 時(shí)就發(fā)現(xiàn)磁盤 wait 占到 40%所有并發(fā)一上去 CPU 就在等 IO關(guān)掉訪問(wèn)日志后 QPS 直接翻了一倍?;€測(cè)試測(cè)的是系統(tǒng)處理能力不應(yīng)該讓日志寫入變成隱形成本。6.5 壓完不收拾現(xiàn)場(chǎng)下一次基線直接失真壓測(cè)結(jié)束后的收尾工作同樣重要。需要做的包括停掉壓測(cè)期間的監(jiān)控腳本確認(rèn)沒有殘留的壓測(cè)進(jìn)程在跑清掉壓測(cè)產(chǎn)生的日志文件和臨時(shí)腳本如果臨時(shí)改過(guò) FPM 參數(shù)或 nginx 日志開關(guān)記得恢復(fù)原狀把壓測(cè)時(shí)記錄的代碼 commit 號(hào)和配置快照歸檔。這些看起來(lái)瑣碎但直接影響下一次壓測(cè)是否可信。我之前有一回壓完就撤了第二天再測(cè)時(shí)發(fā)現(xiàn)系統(tǒng)后臺(tái)還掛著監(jiān)控腳本測(cè)出來(lái)的 CPU 基線高了十幾個(gè)百分點(diǎn)白白排查了一下午。從那之后我就養(yǎng)成了壓測(cè)結(jié)束三分鐘收尾的習(xí)慣寧可慢一點(diǎn)也不能讓基線數(shù)據(jù)帶傷入庫(kù)。最后再分享一個(gè)經(jīng)驗(yàn)壓測(cè)基線不是給上級(jí)看的一張表它是你自己理解系統(tǒng)的一把尺子。同一個(gè)接口在不同并發(fā)下的表現(xiàn)、不同配置下的差異、代碼提交前后的吞吐變化都藏在基線的對(duì)比里。把這套流程跑順之后你會(huì)發(fā)現(xiàn)自己對(duì)系統(tǒng)到底能扛多少量這件事終于有了基于數(shù)據(jù)的底而不是靠猜。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
丁香五月停停基地| 日日肏天天操| 亚洲中文AV网站| 精品人妻在线| 99热中文字幕久久| 天天干天天 亚洲| 99热超碰天堂网| 日本天天操| 国产色99| 丁香五月网在线观看| 婷婷综合精品| 婷婷综合色网| 色99无码| 大香蕉啪啪啪啪啪啪| 337p大胆噜噜噜噜噜91Av| 五月天激情社区| 色婷婷狠狠爱| 99人碰碰碰| 五月婷婷性爱网| 色999五月色| 99青青草| 久久人妻www| 久热只有这里有精品| 婷婷黄色网| 久久人妻久久| AV在线观看网站| 色婷婷丁香AV综合| 热99视频| 色人妻五月| 丁香六月婷婷| 青青热视频| 天堂五月婷婷| XX久久| 五月丁香影院| 丁香六月婷婷久久综合| 激情小说五月天| 丁香婷婷成人网站| 中文成人在线| 丁香五月久久| 日本色婷婷| 五月丁香激情综合啪啪| www.五月婷婷久久.com| 亚洲天天| www.久久99| 天天噜日日噜综合无码| 六月激情婷婷| 97久久人人操| 97九色| 高清成人综合| 99热精品在线播放| 色综久久AV| 日本精品99| 99久精品视频| 久久国产性爱A V| 99ri精品视频在线观看| 91热er| 色婷婷婷av | 中文字幕乱轮| 超碰网站在线观看| 97人人超| 久久人妻超碰一区| 婷婷五月天大香蕉| 亚洲五月婷婷| 精品夜夜澡人妻无码AV| 九月色婷婷婷| 五月丁香啪啪综合| 激情5月婷婷狠狠干| 丁香丁婷五月激情| 99热中国| 亚洲综合久| AV中文在线| 激情五月综合亚洲另类| 影音先锋91视频| 99精品偷拍视频| 婷婷激情人妻| 日日操日日射| 久9久9久9久9久9久9| 秋霞性爱AV| 国产激情综合五月久久| 中文字幕成人日韩| 无码地址| 五月六月婷| 欧美日韩成人在线网站| 亚洲精品久久久无码 | Av狠狠色丁香婷| 热99.com婷婷| 激情五月伊人婷婷| 99激情| 日韩在线视频中文字幕| 日欧一片内射VA在线影院| 欧美A A A A A| 丁香五月电影院在线观看| 色欲天天综合| 亚洲视色| 日本啪啪视频HD| 亚洲AV永久无码影院黑人| 欧美色图天堂网色| 亚洲aV写真天天综合网久久| 天天做天天爱天天高潮| 亚洲综合另类| 婷婷五月天美女视频| 能看的AV| 久久婷婷艹| 综合大香蕉| 婷婷狠狠五月综合| 婷婷六月色| 无码一区二区三区四区五区91c| w婷婷五月婷婷w| 噜噜噜噜在线| 久久人人看| 婷婷丁香97| 婷婷五月激情黄色| 日韩AV中文字幕在线| 99热在线观看| 天天干天天操天天上| 91色欲综合| 五月激情基地| 亚洲AV成人一区二区在线观看| 99热在线观看| 色情五月天丁香社区| 美女丁香五月天| 少妇激情五月天| 六月婷婷五月丁香| 色综合久久88色综合天天99| www.婷婷.com| 超碰免费人人肏| 99综合视频| 玖玖热视频| 欧美色五月| 日韩啪| ss99热| 在线播放成人网站| 亚洲AV网址| 五月丁香六月婷婷的女人| www.婷婷五月| 日本一级一级一级一级| 超碰超碰在线| 黄色成人网站在线播放| 亚洲精品视频在线播放| 欧美99热| 97色色色色色| 色五月综合网| 99在线观看| 天堂中文国产| 中文字幕 中文字幕明步| 久久99看免费| 五月丁香六月香香蕉| 99玖玖人人| 五月丁香六月香综合激情| 99热婷婷| 五月丁香色婷婷基地| 99精品久久| 亚洲超碰在线| 国产成人精品一区二三区熟女在线| 伊人网大香| 久久久人妻| 91久久国产综合久久| 五月综合缴情网| 九月丁香久久网| 丁香五月激情站| 色欲天天综合网| 亚洲五月天色| 成人精品视频99在线观看免费| 青青.com| 日韩成人中文| 亚洲综合五月天| 91综合网| 日韩成人网址| 色视五月天婷婷| 亚洲亚洲人成综合网络| 丁香婷婷色五月| 99久久婷婷综合| 日韩五月丁香| 婷婷六月激情小说网| 丁香五月天堂网| 98毛片| 99精品成人无码A片观看金桔| 色情五月天se| 99久久久久久久| 生活片五区| 六月婷婷综合激情| 性做久久久久久久免费看| 热久久99视频| 无码橾| 99精品免费视频| 色婷婷五月丁香在线观看| 国产精品A成V人在线播放| 79色色免费| 天堂在线婷婷| 亚洲日韩一页精品发布| www.婷婷五月天.com| 插逼综合网| 97人人射| 91九色丨国产丨爆乳| 3pAV| 婷婷五月丁香超碰| 五月婷A V在线| 色婷婷社区| 国产白丝在线一区| 婷婷五月丁香国产| 久久久久这里只有精品| 丁香五月伊人| 色婷婷五月天小说网| 激情性爱网站| 99riav 亚洲| 日本婷婷| 人人爽亚洲| 婷婷久久久| 久久桃花网色婷婷| 五月天啪啪| 五月婷婷丁香社区| 襙比视频| 九九精品这里只有| 欧美日韩成人| 99热销国产这里有精品| 五月天婷婷色综合| 97干干干丁香| 激情五月婷| 婷婷五月天基地| 五月丁香六月婷婷综合免| 激情婷婷网| 成片免费播放| 日本色婷婷| AV天堂婷婷五月天| 色情·com| 欧美久人人| 亚洲网站观看视频| 欧美性生交XXXXX无码小说| 超碰99热精品| 五月婷婷激情中文字幕| 99视频精品在线| 婷婷五月天激情在线观看| 九九人人看| 婷婷五月丁香五月基地| 日日躁夜夜躁狠狠久久AV| 99热精品观看| 亚洲另类婷婷综合| 九九色播五月丁香| 九月婷婷色色| WWW免费视频碰碰碰碰| 毛片毛片毛片毛片| 九九精品在线观看视频6| 亚洲美女婷婷五月天| 丁香五月天狠狠操| 久婷五月| 亚洲色综合| 狠狠色丁香久久| 丁香五月天日韩无码| 亚洲免费看片| 中文字幕有多少字| 久久人人添人人爽添人人片αV| 婷婷深爱五月天| 91色久| 男人的天堂五月丁香| 拳交大逼| 激情五月婷| 深爱五月网| 久久 视频这里只有精总| 色香五月天| 五月丁香在线偷拍视频| 丁香六月亚洲综合| 五月丁香六月婷婷激情网| 亚洲人成人五月天| 婷婷五月天网址| 五月天婷婷伊人| 婷婷丁香五月综合免费视频百花| 亚洲精品视频电影| 欧美99热| 五月丁香另类网| 玖玖九九9999在线观看视频精品| 国产亚洲色婷婷久久99精品9j| 五月丁香狠狠爱婷婷综合| 国产亚洲AV人片在线| 婷婷五月丁香青青草在线| 日韩av变天就操逼不卡区| 亚洲色无码A片一区二区麻豆| 亚洲V国产V欧美V久久久久久| 激情深爱五月天| 国产精品18久久久| 亚洲色频| 1024人妻| 国产另类综合| 99精品自拍视频| 久久538| 久久久久9| 国产精品久久欧美久久一区| 丁香五月色色婷| 成人网站av免费网站推荐| 96精品久久久久久久久| 五月永久激情| 丁香婷婷色情| 欧类av怡春院| 久久99综合网| 五月天婷婷丁香视频| 五月丁香亚洲婷婷| 婷婷婷婷婷婷婷五月丁香| 激情丁香五月婷婷| 亚洲成人网站在线| 五月社区婷婷激情| 最新av在线观看| 99在线精品观看99| 超级碰碰碰碰视频| 伊人五月久久| 99ri国产在线| 四色五月婷婷| 日韩一66精品| 超碰在线免费| 91窝窝| 日本色频| 久热69| 少妇性BBB搡BBB爽爽爽电影| 色婷婷五月综合在线| 51国精产品自偷自偷综合 | 热久久66| 色婷婷久久| 午夜天堂一区人妻| 色噜噜综合网| 五月婷婷成人| 亚洲黄网在线| 另类婷婷丁香| 996er热| 九热电影av| sS丁香五月婷婷| 亚洲美女网Va| www.韩日视频| 另类小说婷婷色| 狠狠色丁香| 亚洲殴洲精品Av在线| VA日本视频| 五月天另类激情在线| 思思久久99热只有频精品66| 婷婷九月色| 丁香婷婷基地| 亚洲无码猫咪| 337午夜福利| 色婷婷色99国产综合精品| 婷婷色在线播放| 这里只有精品在线看| 99久久网站| 久久hd| 四色AVwww| 最近韩国日本免费高清观看| 国产色色在线| 天天干天天插| 大香蕉久久伊人婷婷五月丁香| 狠狠干综合网| 久在线综合69| 99精品22| 日本在线观看aaa 99| 天天日天天狠狠操| 色色色综合网| 五月天婷婷在线观看精品男人| 99热在线中文字幕| 97人人草| 亚洲色五月| 亚洲婷婷视频| 色综合久| 五月天久久成人| 色色无码| 天天爽曰日爽| 九色亚洲| 五月婷婷丁香俺日污视频| 丁香五月成人自拍| 超爽内射| 偷拍五月丁香| 噜噜噜狠狠色综| 久色激情| 色色是色N一| 五月色综合| 久久综合干| 超碰日日操| 婷婷久久性爱| 大香蕉AV在线| 成人五月天在线视频在线观看| 91啪啪视频| 婷婷黄色五月天在线视频| 激情五月综合网| 亚洲性图一区二区三区| 丁香婷婷狠狠97| 青青草原福利在线| www.jiujiujiu| 99ri精品视频在线观看| 婷婷五月天 偷拍| 专区无日本视频高清8| 五月人人丁香婷婷五月人人丁香| 久久婷婷五月丁香蜜桃网| 99亚洲无码| 婷色视频| 婷婷综合网| 日 日干 日日做| 久久久亚洲精品一区二区三区浴池| 99在线视频精品| 免费91久久精品| 色欲一区二区三区精品A片| 狠狠色色综合| 亚洲精品又粗又大又爽A片| 天天模,夜夜模夜夜爽| 国产亚洲AV人片在线| 五月婷婷综合丁香视频| 99 热国产在| 久久久国产精品黄毛片| 五月丁香啪啪网| 婷婷午夜激情| 色综合77777| 激情婷婷六月天| 色五月婷婷av| www九月婷婷| 丁香五月色五月| www.xtbsty.cn.com蜜乳AV| 日韩无码AV电影网站| 婷婷成人五月天成人文学| 99操视频| 久久sp免费视频| 色婷婷在线视频| 五月激情婷婷开心| 99这里只有精品国产| 美女被肏网站在线看| 婷婷中文在线| 婷婷五月天伊人网| 视频这里只有精品16| 无码橾| 777影视理论片大全在线观看 | 99只有精品| 久久五月天网| 五月婷导航| www色色com| 婷婷九月丁香中文| 99精品偷自拍| 六月色婷婷| 欧美在线视频免费播放| 十月丁香九月婷婷综合| www.久久五月天.com| 欧美色九| 一操久久| 91女人18毛片水多国产| 亚洲熟妇AV乱码在线观看| 中文字幕,综合,91| 激情校园 亚洲| 欧日韩成人| 丁香六月激情国产| 五月激情婷婷偷拍| 最新无毒无码AV| 五月丁香综合网| 91九色国产| 婷婷天天婷婷天天澡| 色情一区二区播放| 亚洲久热无码| 五月色精品| 色婷婷综合五月| 噜噜狠狠| 26uuu国自产精品| 大香蕉久久草| www98日本小时间到了| 五月天堂六月丁香亚州中文字幕久久| 婷婷五月丁香基| 欧洲色色| 国产精品美女久久久久AV超清 | 99热免费| 国产日比| 国外亚洲成AV人片在线观看| 亚洲成人网站在线观看| 风流少妇A片一区二区蜜桃| 婷婷五月天伊人网| 色婷婷五月综合| 五月天精品视频| 97人妻碰碰中文无码久热丝袜| 影音先锋91资源站| 91人人操人人| 丁香色婷婷五月天| 色色色综合| 禁欲电影完整版在线播放| 日本99热| 99热在线极品极品| 高清av在线国产| 成人 九九九九| 久久青青日本视频| 97视频91| 狠狠夜夜五月丁香| 狠色狠色综合久久| 日本婷婷| 五月天婷婷综合| 色99色| AA片在线观看视频在线播放| 久久久久久久,99精品视频| 久久久亚洲成人无码A片| 99人妻碰碰碰久久久久| 99热成人精品| 日本本土色网第一区| 婷婷在线精品| 超碰人人操在线| 欧美日本高清视频99| 一本道在线电影| 亚洲久久婷婷| ss99热| 乱精品一区字幕二区| 久色五月婷婷综合| www.婷婷| 五月丁香六月婷婷免费| 怡红院一二三| www.99在线| 97人人射| 色亭亭九月| Www99热| 国产99久久久| 操丝袜视频影院导航| 亭亭五月色男人| 人人操AV| 国产毛片操B| 色婷婷四色| 超碰三级秋霞| 免费五月婷婷网| 五月丁香好婷婷A片网| 欧美久热| 丁香六月婷婷综合欧美| 青青草蜜臀| 开心深爱激情网| 婷婷综合久久| 久久精品五月| 日日噜狠狠色综| 九九性视频| 激情综合网五月婷婷| www婷婷色| 五月天堂婷婷| 五月激情综合美女久久| 色久综合| 日本久久综合| 真实亲子乱子伦高清在线观看| 99色综合| 天堂综合久久| 伊人色欲五月天| 婷婷色播婷婷| 精品久热69| 操一操插一插| 国产av天堂| 久久99精品久久久久子伦| 狠狠狠激情网| 婷婷五月天基地| 97在线日本| 岛国资源网| 97干在线| 99狠狠操一| 岛国av电影网站| 欧美日韩aaa| 哇嘎成人久久| 国产99久| 天天做天天爰天天爽天天无遮挡| yellow视频在线观看91| www,色综合| 激情九九这里只有精品| 少妇2做爰HD韩国电影| 综合激情五月丁香| 精品人人操| 亚洲超级碰| 丁香婷婷激情网站| 一本婷婷丁香久久 | WWW·色色色·COM| 丁香狠狠色婷婷久久无码视频| 99亚洲精品| 丁香婷婷人妻| 99这里| 婷婷久热| 婷婷五月天堂| 激情综合婷婷五月| 操人91| 激情五月天黄色小说| 九九re精品视频在线观看 | 色99日韩| 亚洲五月婷| 色丁香婷婷| 97在线碰| 五月丁香A片| 九九热只有精品| 五月丁香婷婷基地| 六月丁香网| 噜综合| 综合五月天| 五月婷成人网| 色插人人| 97干视频在线| 久久久久久久丁香五月天婷婷| 五月天天天色| 99色色网站| 国产午夜精品AV一区二区麻豆| 草操网| 激情五月丁香五月色| 99热这里只有精品无码| 色99无码| 国产亚洲在线观看| 狠狠 婷婷| 人与禽A片啪啪| w婷婷五月婷婷w| 性爱111111| 四色女婷婷| 五月色情婷婷| AV成人在线播放| 操人无码| 国产真实乱了老女人视频| 天天拍夜夜爽日日| 97ai婷婷| 亚洲成人在线播放| 99精品爱| 九九热99精品| 97视频久久| 丁香五月天天日| 久久您您综合网| 丁香五月天之婷婷影院| 婷婷在线精品| 日本不卡高字幕在线2019| 可以观看的AV| 丁香激情网| 精品亚洲国产成AV人片传媒| 日本婷婷色日| 六月色婷婷色| 国洲夜色亚热在线久久| av在线资源| 五月综合激情综合久| 婷婷五月天AV在| 91丨九色丨国产打屁股| 蜜臀嫩草| 丁香六月啪啪| 九九中文字幕九| 99久在线精品99re8| 色婷婷激情| 国产精品激情AV久久久青桔| 开心深爱激情网| 色婷婷婷av| 婷婷中文综合网| 久久综合婷婷| 婷婷六月激情综合| 包操45分钟网站| 色色色天堂网| 亚洲欧美在线观看| 91丨九色丨高潮丰满日本| 婷婷丁香五月六月激情| 久久婷婷色| 精品热青草| 五月天激情国产综合婷婷婷| 亚洲婷婷欧美婷婷| 99人人操人人摸| 婷婷丁香九月| 桃色激情网| 亚洲五月天色| 性热视频99精品| 亚洲狠9| 99色精品| 色九九九九| 这里只有精彩亚洲视频推荐| 天天人人综合| 五月婷婷六月天| 亚洲啪啪自拍| 日韩成人无码| 欧美精品999| 亚洲性爱电影| 开心五月婷婷婷美女| 亚洲avjiujiur91| 色婷婷97| 久久久久久99精品无码| 婷婷五月丁香成人网| 欧美成人AAA片一区国产精品| 综合五月婷婷| 99热主页日本| 开心激情婷婷| 九九在线视频| 五月在线| 五月婷婷六月丁香在线| 天天舔天天摸视频| 五月丁香激情六月| 天天插天天干天天舔| 激情婷婷五月亚洲| 79精品在线视频| 九九碰九九爱97超碰| 激情五月丁香社区| 97香蕉久久超级碰碰高清版 | 天天综合色| 操操碰| 久久99热这里只有精品| 色播五月婷婷五月| 五月婷婷视频在线观看| 色综合色| 国产激情AV| 色呦呦美女| 亚洲99综合| 丁香五月欧美成人| 97人人干| 丰满老熟妇BBBBB搡BBB| 亚洲精品又粗又大又爽A片| 国产精产国品一二三在观看| 婷婷丁香五月av| 色色色色色色色综合| 五月丁香久久综合| 丁香婷婷偷拍| 婷婷综合激情五月综合| 人人操超踫| 色婷婷久久综合丁香五月| 岛国av电影网站| 99色精品| 色伊人婷婷| 婷婷在线精品| 刘玥av在线| 狠狠色婷| 91色五月| 婷婷久久视频| 日日爽日日| www.五月丁香| 色综合久久久久| 超碰在线caop| 噜噜狠狠色综合久| 久久草人妻| 午夜无码精品色综合久久| 久久美女五月天| 久久综合婷婷| 任你搞免费视频观看| 99视频网址| 婷婷激情五月天激情在线| 五月天深爱激情网| 久操人妻| 婷婷不卡基地| 久久久久久欧美精品se一二三四| 日韩无码人妻一区二区三区综合| 五月天激情网址| 九色啦蜜臀| 五月丁香啪啪综合| 成人 在线观看国产| 男人天堂AV在线一区二区| 色色综合成人网| 五月天激情子轮| 天天狠天天叉| 国产在线网址1| 99在线精品观看99| 久久精品亚洲热| 性色五月天| 97日本操| 丁香婷婷偷拍| 婷婷五月综激情| 九日日夜夜69| 99re6热在线精品视频播放速度| 我爱婷婷五月天综合88| 99热超碰| 最新久久99视频网站| 五月丁香色婷婷伊人| 丁香五月亚综合图片| 久久色情| 天堂久久性| 色五月色五天色情网| caop在线视频| 婷婷伊人綜合中文| 开心婷婷五月花| 日本一级黄色电影| 日本九九九九九九| 丁香五月天啪啪激情综合网| 天天日天天爽夜夜爽| 在线综合啪| 人妻AV中文系列| 热99在线精品| 这里只有精品9| 国产精品美女| 亚洲AV成人片无码网站| 五月婷婷天| 五月天大香蕉av| 五月激情丁香六月狠狠干| www.五月婷婷| www激情网站| 天天日,天天射,天天舔| 香蕉久久国产AV一区二区| 性爱AV天堂| 五月丁香六月婷婷激情网| 一片AV片免费播放| 欧美激情2025| 天天日夜夜| 久操操| 丁香婷婷五月天激情四射| 婷婷色在线播放| 天天搞天天色综合| 久久ri精品视频| 激情纯色婷婷五月天在线不卡视频| 色婷婷激情| 亚洲精品国产成人AV在线| 超碰在线综合| 9婷婷内射| 亚洲av骚货| seuuu婷婷| 999热成人在线综合网| 久99999热视频在线观看免费| 久久亚洲网| 99色热| 五月丁香怕怕综合| 深爱开心激情| 色色色777| 狠狠干五月天| 天天做综合| 九久9精品| 91久久| 97福利视频| 久久AV无码精品人妻系列试探| WwW天天干| 91打屁股免费看| 色色色色av777| 精品人妻一区二区三区在| 插少妇综合网| 五月天丁香婷婷视频网址| 亚洲人妻一区二区| 丁香五月婷婷五月基地| 99亚洲日韩| 9视频1在线| 狠狠干婷婷| 五月丁香婷婷视频| 五月丁香久久网| 九月丁香婷婷| 丁香五月另类小说在线阅读| 精品欧美性爱超级爽| 亚洲综合色五月| 美女爆乳18禁www久久久久久| 操操操av| 五月综合激情啪啪啪啪啪| 亚洲丁香五月美女| 美女久久天堂| 99热这里| 九九热99re8热免费观看 | 五月婷丁香| 99久99热| 99熟女| 天天操屄网| 99riAv1国产在线观看| 五月婷婷无码| 五月婷婷免费视频| 丁香六月综合激| 欧美操人| 99视频精品全部免费 在线| 九月丁香欧美综合| wwwss在线观看| 九九亚洲小视频| 丁香五月婷婷激情完整版| 日本啪啪天堂| 九九激情综合| 六月丁花香啪啪激情欧美| 97在线/亚洲| 色综合色欲综合天天免费| 色五月97| 亚洲综合另类| 九九干视频| 婷婷五月天伦理| 99热性色| 久久小说网| 婷婷丁香激情综合色情| 激情纯色婷婷五月天在线不卡视频| 亚洲久艹| 人人97碰| 婷婷五月天首页| 中文字幕 码精品视频网站| 99久| 91狠狠综合久久| 色播五月婷婷| 日日撸日日操| 天天想夜夜爽天天爽| 91亚洲视频| 99无码视频| 色噜噜狠狠色综无码久久合欧美 | 色六月婷婷| 97人人妻人人艹| 日本99在线| 五月开心深爱激情网| 69热在线| 精品人人操| 狠狠色噜噜狠狠亚洲A∨| 人妻AV在线| 91丨九色丨白浆秘| 五月丁香六月激情欧美综合| 天天插综合在线| 亚洲九区| 99精品97| 欧美网站视频4399| 97涩婷婷| 欧美精品在线观看| 欧美人与性动交CCOO| 久久婷婷色综合| 婷婷色综合| 亚洲丁香五月| 天天草天天日| 日本人妻丁香婷婷久久寝取熟女五月| 婷婷狠狠操| 91xxxx九色| 97luluse| 久久综合九色综合97婷婷| 思思热在线| 久久99久久99精品免视看婷| 涩婷婷五月天在线精品视频| 午夜丁香五月天综合| 婷婷五月天亚洲精品| 综合大香蕉| 色五月天激情| 激情婷婷丁香五月天| 伊人狠狠色婷婷综合丁香一区| 国产操B| 亚洲网站观看视频| 黄色片avv| 婷婷五月丁香第四色超碰在线| 国产日产亚系列精品版优势| 777精品久无码人妻蜜桃| 九九亚洲| 国产av天堂| 亚洲狠狠爱婷婷| 夜夜嗨一区二区三区直播内容 | A久久| 九九無妻| 国产精品激情AV久久久青桔| 欧美日韩中文国产一区发布| 99网| 中文字幕无码AV| 国产日产亚洲系列最新| 影音先锋91在线资源站| 91人妻九色大屁股| 五月婷婷 婷婷五月 一区二区 久久久 | 久久三级视频| 丁香婷婷激情综合五月激情 | 十月丁香九月婷婷综合| 欧美VA在线| 九热视频在线精品15| 五月丁香六月激情综合| 天天干天天拍| 激情影院丁香五月| 天天色粽合合合合合合合| 中文字幕黄色片| 婷婷五月天激情四射| 国产69久久久欧美黑人A片| 天堂伊人干| www.com.色色| 久久久999精品| 婷婷色五月综合丁香| 婷婷五月激情丁香激情| 性生活久久人妻| 婷婷 伊人 久久| 99色在线视频| 丁香九月婷婷| 五月婷婷六月激情| 激情丁香久久| 色五月婷婷天天干| 日日操日日射| 久操综合| 97人妻碰碰中文无码久热丝袜| 大香蕉久操| 日韩AV在线免费| 婷婷五月丁香啪啪| 五月天婷婷影院影院| 天天狠狠干| 婷婷永久在线| 99超超碰| 五月天激情四射网站| 人妻久久做| 亚艹艹| 久久婷婷五月天懂色| 欧洲MV日韩MV国产| 亚洲人人操| WWW丁香五月| 99这里只有| 久久99精品视频| 色五月天丁香婷婷色| 99er这里只有精品视频| 五月婷导航| 色色色网站| 97婷婷五月激情六月丁香伊人| 丁香五月综合高清在线| 人人摸人人干人人做| 久久性视频| 五月天丁香久久| 丁香六月色情| 婷婷丁香五月综合| 噼里啪啦在线观看免费完整版视频 | 五月综合久久| 成人啪啪色婷婷久| 91操碰| 色色色成人网| 99精品久久| 大香蕉75线| 丁香五月综合高清在线| jiZZdr| 国产精产国品一二三在观看| 九九婷婷综合| 激情小说婷婷五月| 五月丁香六月婷| 99热自拍| 亚洲色五月天| 黄急一级视频| 天天日日夜夜爽| 五月天久久网站| 人操91在线| 激情图片婷婷| 99视频在线精品| 影音先锋91男人资源在线播放| 亚洲精品乱码久久久久99| 大香蕉婷婷色| 九九久久高清| 丁香婷婷成人网| 风流少妇A片一区二区蜜桃| 日韩成人无码人妻| 久久免费操| 99热www| 婷婷色成人| 成人国产欧美大片一区| 五月天啪啪| 91丨九色丨丰满人妖| 九一牛视频探花| 激情综合网 激情五月天| 亚洲视频一区| 色色亚洲无码| 婷婷大香蕉| 亚洲视频在线观看99| 91久久婷婷| 久久久久9| 丁香六月激情综合| 99在线视频精品| 丁香五月天网站| 久久久久8888| 九九色综合网| 99在线观看| 黄色五月婷婷| 五月色婷婷中文字幕| 天堂草在线看www| 久久婷婷青青| 99精品这里只有免费视频| 久久久这里有精品| 玖玖色资源站| 国产精产国品一二三在观看| 插插干干干色| 久久人人添人人爽添人人片αV | 婷婷日本在线| 久热精品视频| 婷婷成人av| 99精品视频网| 色色婷婷丁香五月天| 五月天桃色深爱网| 99热老司机| 婷婷刺激综合| 97人人干| 婷婷99狠狠| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 婷婷最新地址| 久久婷婷五月综合啪| 丁香五月 性爱| 久久精品视频在这里有| 色婷婷人人| 在线观看中文字幕| 天堂成人久久| 97人妻碰碰中文无码久热丝袜| 日韩免费乱轮网站| 欧美日韩aaa| 色插综合网| 《丁香激情综合久久伊人久久》影视在线观看 -高清预告手机免费播放 -三妹影院 | 色婷五月| 五月婷婷深深爱| 日本久久网| 就爱射中文字幕资源网| 丁香六月| 久久久精品AV| 国产欧美婷婷五月| 超碰激情五月| 久九色| 五月婷色丁香| 丁香五月瑟瑟| 99碰网站| 五月婷在线色视频| 日hao1区| 丁香婷婷五月| 99视频网| 淫视馆AV在线| 777影视理论片大全在线观看| 色色色色色色色色网站| 色婷婷大香蕉| 国产看真人毛片爱做A片| 色99网| 丁香五月婷婷啪| 六月丁香AV| 久久网日本| 天天干天天色天天干| www久久久久| 天天日天天插| 五月婷婷狠狠干| 丁香五月自拍| 久久九九亚洲| a久久| 狠狠色激情综合| www.婷婷.com| 超碰97在线观看免费| 97久久人人操| 久色网五月| 婷婷丁香五月天婷婷| 色婷婷av综合网| 丁香五月Av| 色婷婷社区| 婷婷五日b| 狠狠爱婷婷爱| 亚洲无码性爱| 免费做A爰片77777| 香蕉99网| 亚洲综合干| 人妻丰满精品一区二区A片| 在线观看av网站| 五月婷婷综合久久| 丁香五月天啪啪| 99热在线资源| 色七色九九| 日韩五月丁香| 久久久97| 亚洲人妻电影| 森林影视大全,最好看的2019年视频| 日本精品。999| 五月婷婷人妻| 六月丁香啪啪| 天花AV无码| 五月开心啪啪| 日本色道视频网站| 狠狠色婷婷丁香五月| 思思热国产视频| 色五月激情五月天| 第四色在线观看| 伊人婷婷大香蕉| 综合五月网| 婷婷五月天开心网| 婷婷丁香六月天激情四射网| 精品思思久久| 五月婷婷丁香在线| 99久久婷婷国产综合精品| 日韩欧美一区二区三区四区| 精品网站:999WWW| 99热高清在线| 欧美色图天堂网| 色人久久| 色五月婷婷色五月婷婷色五月婷婷| 91中文在线| 操操国产| 五月丁香亭亭操逼| 伊人久久婷婷| 五月丁香六月情| 婷婷久久五月| 激情婷婷五月天| 9.1综合网| 综合网五月| 久久精品爱爱| 成人五月丁香花| 五月丁香婷中文字幕| 久9热在线免费观看| 五月婷婷狠狠干| 99超超碰| av色色国产| www.99热精品| 丁香五月电影| 婷婷色五月综合丁香| 在线中文字幕免费视频| 丁香婷婷激情| 色婷婷19| 少妇大叫太大太粗太爽了A片| 五月色丁香婷婷中文字幕| 婷婷五月成人社区| 97人人操| 狠狠爱婷婷五月天| 9久国产精品| 欧洲亚洲免费视频区| 久re在线| 五月丁香综合网| 看国产探花操逼三级片| 综合一区二区三区| 天天天天操| 五月婷婷丁香六月| 天干天天干天天天天天| 热久久色| 成人精品在线观看| 九九热最新| 天天舔天天| 夜夜人妻五月天| www.爱婷婷.com| 婷婷在线五月综合| 99热综合网| 天天久| 影音先锋 91工厂| 五月丁香色色网| 中文字幕在线人妻| 天天日天天爽| 久久99精品久久久久久三级| 精品成人在线观看| 影院久久久| 日本一级淫| 538在线精品| 色五月五月婷婷| 综合色情网| 五月丁香激| 婷婷五月天黄色| 六月婷婷av| 99久久九九| 欧美色色色| 九九黄色网| 九九激情| 粉嫩AV久久一区二区三区| 天天狠天天叉| 激情网五月天| 日日操天天操| 极品人妻XXXXOOOO| 五月丁香va| 天天插天天| 五月丁香六月婷婷视频| 五月天影院| 婷婷丁香色无五月| 91视频精品99| 亚洲激情五月天| 一本道在线电影| 久久看九九90| 丁香五月婷婷Av| 亭亭玉立国色天香| 日本在线噜噜| 五月丁香综合在线| 五月天婷婷久久视频| 碰碰91| 五月天婷婷狂暴白浆| 十月丁香婷婷| 丁香五月激情五月| 成人网站高清无码| 丁香啪啪| 久久成人精品视频| 亚洲六月色婷婷| 99精品成人无码A片观看金桔| 五月丁香亭亭A片| 久久综合激情| 26uuu另类亚洲欧美日本一| 丁香五月偷拍| 99热这里只有精品8| 亚洲成人av在线观看| AV在线观看网站| 天天爽天天爽夜夜爽| 九九AV在线| 婷婷色色欧美综合网| 大香蕉520| 人人爽欧美婷婷久久久五月丁香| 99热首页| 婷五月天丁香婷五月| 午夜不卡成人一区二区| 久久精品9| 综合激情sV| 极品人妻videosss人妻| 五月丁香六月激情| 91成人品| 91九色无码日韩| 中文在线成人| a久久| 久久婷婷五月综合一| 五月婷婷综合色啪首页| 天天插天天干| 天天操加勒比| 99福利导航| 婷婷五月综激情| 婷婷丁香五月综合| 午夜婷婷久久| 日韩视频99| www一起操| 激情五月激情综合网| 狠狠狠夜夜夜| 丁香婷婷五月天成人| 精品国产va久久久| 岛国在线观看91| 5月丁香六月情| 婷婷丁香六月| 在线,国产,色,热视频| 国产肥白大熟妇BBBB视频 | 99热伊人| 亚洲综合色网站| 久草热8精品视频在线观看| 日本熟妇人妻在线| 99人人干人人操| WWW99热|