免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Linux磁盤配額實(shí)戰(zhàn)指南:從ext4到xfs的配置與避坑

Linux磁盤配額實(shí)戰(zhàn)指南:從ext4到xfs的配置與避坑 1. 磁盤配額到底解決了什么問題磁盤配額這個功能說復(fù)雜不復(fù)雜說簡單也不簡單。簡單理解就是給用戶或組設(shè)置一塊磁盤空間的消費(fèi)上限超過這個上限就禁止繼續(xù)寫入。這在多用戶服務(wù)器、共享存儲、虛擬主機(jī)生產(chǎn)環(huán)境里幾乎是剛需。我踩過最典型的一個坑是早年給公司搭文件共享服務(wù)器沒配配額結(jié)果某個同事直接往共享目錄里拖了幾百GB的虛擬機(jī)鏡像一夜之間整個存儲池滿了所有業(yè)務(wù)系統(tǒng)同時報錯磁盤空間不足。從那以后我學(xué)乖了凡是要給多人用的目錄配額一定先配好再交付。那磁盤配額能干什么幾條實(shí)在的能力限制單個用戶在特定文件系統(tǒng)上的空間占用按塊block限制限制單個用戶可創(chuàng)建的文件數(shù)量按inode限制限制一組用戶的總空間占用和文件數(shù)量組配額設(shè)置軟限制和硬限制軟限制是警告閾值超過后系統(tǒng)會提示但允許繼續(xù)用一段時間硬限制是絕對上限超過就直接拒絕寫入通過寬限期grace time控制在軟限制之上還能撐多久到期后軟限制自動變成硬限制這套機(jī)制特別適合幾類場景企業(yè)對內(nèi)文件服務(wù)器、高校機(jī)房或?qū)嶒?yàn)室共享存儲、云服務(wù)器上給客戶開通的多租戶站點(diǎn)、以及任何形式的公共FTP/NFS存儲目錄。單機(jī)個人電腦其實(shí)不太用得上但如果你的電腦上建了多用戶賬號給家人或同事用配一下也省心。2. 配額機(jī)制的底層原理搞懂這些再動手2.1 限制的是塊和inode而不是文件大小這件事很多人第一次看配額會困惑為什么有的配額配置界面顯示的是1K Blocks其實(shí)Linux文件系統(tǒng)在底層管理空間的時候是以**塊block**為單位劃分的一個塊默認(rèn)是4KB。一個100KB的文件實(shí)際占用的是25個塊而不是一個100KB的文件。配額限制的就是這些塊的總數(shù)也就是用戶實(shí)際消耗的物理空間。inode這個維度就更底層了。每個文件至少要占用一個inodeinode里存的不是數(shù)據(jù)而是文件的元數(shù)據(jù)——權(quán)限、所有者、時間戳、數(shù)據(jù)塊指針等。如果一個文件系統(tǒng)inode耗盡即使物理空間還一大堆你也創(chuàng)建不了新文件。所以配額表里通常同時提供blocks和inodes兩個維度blocks管空間大小inodes管文件數(shù)量。2.2 軟限制、硬限制和寬限期三者協(xié)作的邏輯軟限制soft limit是一個提醒值。比如你給某個用戶設(shè)了軟限制5GB、硬限制8GB、寬限期7天。用戶用到5GB之后系統(tǒng)會告警但用戶還是能繼續(xù)寫一直寫到8GB被硬限制堵死但如果用戶一直是超了5GB但沒到8GB的狀態(tài)超過7天寬限期系統(tǒng)就會直接禁止繼續(xù)分配塊除非刪除文件把用量壓回5GB以下。硬限制hard limit就是一道硬墻。到了這個值not only新寫入被拒絕之前的文件也刪不掉不是的硬限制只阻止新數(shù)據(jù)的寫入用戶依然可以刪除自己的文件騰出空間。這一點(diǎn)在排查問題的時候特別重要——用戶說我刪了文件還是寫不進(jìn)去多半是刪除后仍然超出硬限制或者配額按塊計算、小碎文件刪了不少但釋放的塊不多。2.3 用戶配額、組配額、項(xiàng)目配額有什么區(qū)別Linux配額支持三個作用域用戶user quota、組group quota、項(xiàng)目/目錄project quota。用戶配額最容易理解限制的對象是UID每個人的占用獨(dú)立算賬。適合個人目錄、home目錄這類場景。組配額限制的對象是GID。比如某個項(xiàng)目組共享一個目錄組內(nèi)5個人都往里寫配額只統(tǒng)計這5個人共同消耗的總量。這比單獨(dú)給每個人限制更有實(shí)際意義——項(xiàng)目組需要的是一個項(xiàng)目總盤子。項(xiàng)目配額是較新內(nèi)核2.6.35引入的機(jī)制按目錄維度管理目錄打上project ID標(biāo)簽后不管哪些用戶往里寫都?xì)w到同一個配額賬戶里。適合托管目錄、共享目錄這種以目錄為邊界的管理模型。實(shí)務(wù)上最常用的組合是用戶配額組配額同時啟用。舉例用戶A限額2GB、用戶B限額2GB同時A和B組成的組G限額3GB。這樣既防止個人濫用也防止整個團(tuán)隊用爆公共盤。2.4 開啟配額對文件系統(tǒng)有什么要求不是隨便一個分區(qū)就能直接開啟配額的關(guān)鍵前提有三個文件系統(tǒng)類型要支持。ext3、ext4、xfs、btrfs都原生支持配額ext4和xfs是生產(chǎn)環(huán)境中最穩(wěn)的選擇。老舊的ext2也可以但沒必要。FAT32/NTFS這類文件系統(tǒng)在Linux下掛載的話配額支持很弱建議不要折騰。必須掛載在獨(dú)立分區(qū)上。配額是一個文件系統(tǒng)級別的特性不能跨多個掛載點(diǎn)統(tǒng)一配額。你如果只給/home配了配額用戶把數(shù)據(jù)塞到/data下配額管不著。所以規(guī)劃配額之前先想清楚哪些目錄需要配額最好一開始就把它們單獨(dú)分區(qū)。掛載參數(shù)要帶上配額開關(guān)。ext4需要usrquota和/或grpquota掛載選項(xiàng)xfs比較特殊配額是文件系統(tǒng)自帶的特性掛載時需要uquota/gquota或prjquota參數(shù)不同發(fā)行版寫法略有差異。注意改掛載選項(xiàng)要寫入/etc/fstab并正確重掛載或重啟否則重啟后配額狀態(tài)會丟失。xfs格式的配額文件在掛載時是不能直接使用quotacheck等傳統(tǒng)命令的操作方式不同這個后文細(xì)說。3. 實(shí)操前準(zhǔn)備分區(qū)、掛載點(diǎn)、工具安裝3.1 推薦的環(huán)境與版本基準(zhǔn)我后面寫的所有步驟都是基于主流的RHEL/CentOS 7/8/9 或 Ubuntu 20.04/22.04 環(huán)境內(nèi)核版本4.x及以上文件系統(tǒng)以ext4為主xfs部分單獨(dú)說明。如果你用的是老系統(tǒng)命令參數(shù)可能會有細(xì)微差別但整體流程不變。先說一個實(shí)用判斷拿到一臺機(jī)器做配額之前先跑一下df -hT看清楚當(dāng)前分區(qū)和文件系統(tǒng)類型。見過太多人不管三七二十一先裝quota工具裝完發(fā)現(xiàn)要配額的分區(qū)是xfs手忙腳亂。先看環(huán)境再動手能省一半排查時間。3.2 安裝quota工具包quota工具在絕大多數(shù)發(fā)行版的基礎(chǔ)倉庫里都有# CentOS / RHEL / Rocky yum install -y quota # Ubuntu / Debian apt install -y quota # 新一點(diǎn)的系統(tǒng)可能要用 dnf dnf install -y quota裝完之后驗(yàn)證一下rpm -qa | grep quota dpkg -l | grep quota如果這條命令沒有輸出說明沒裝上。此外建議順手裝一個ncdu或du習(xí)慣后面核對配額用量的時候要用到。3.3 準(zhǔn)備好一個獨(dú)立分區(qū)硬性條件為了演示我們假設(shè)機(jī)器上有一塊獨(dú)立磁盤/dev/sdb1掛載在/data目錄專門用于多用戶共享文件。先把分區(qū)格式化mkfs.ext4 /dev/sdb1如果有現(xiàn)成的/home獨(dú)立分區(qū)也可以直接拿它演示。但不管用哪個你絕對不能對根分區(qū)/做配額操作實(shí)踐因?yàn)楦謪^(qū)一旦配額配置失誤很可能導(dǎo)致系統(tǒng)起不來或用戶登錄異常。演示環(huán)境怎么折騰都行生產(chǎn)環(huán)境務(wù)必小心。格式化完成后創(chuàng)建掛載點(diǎn)并掛載mkdir -p /data mount /dev/sdb1 /data df -h /data3.4 修改fstab讓配額開關(guān)永久生效很多教程會教你先手動改掛載參數(shù)掛載一遍再來說fstab。我建議直接一步到位編輯/etc/fstab加上配額選項(xiàng)然后用mount -o remount重掛載。這樣不重啟也能生效而且重啟后配置不會丟。以/dev/sdb1 /data為例fstab里的寫法是/dev/sdb1 /data ext4 defaults,usrquota,grpquota 0 0usrquota表示啟用用戶配額grpquota表示啟用組配額。如果你只需要用戶配額只寫usrquota即可如果兩個都需要就都寫上別漏。改完fstab后執(zhí)行mount -o remount /data然后確認(rèn)掛載參數(shù)已經(jīng)生效cat /proc/mounts | grep /data輸出里能看到usrquota,grpquota字樣就說明掛載參數(shù)帶上了。如果fstab寫錯了這個命令可能報錯系統(tǒng)會提示你重新檢查。千萬別跳過這一步去重啟重啟后發(fā)現(xiàn)系統(tǒng)起不來再去改fstab那就被動了。提示如果是xfs文件系統(tǒng)fstab里的掛載選項(xiàng)通常寫uquota,gquota或者usrquota,grpquota在新內(nèi)核同樣識別xfs下的配額文件是作為文件系統(tǒng)內(nèi)部元數(shù)據(jù)自動管理的不需要手動創(chuàng)建aquota.user等文件。3.5 確認(rèn)內(nèi)核是否支持配額絕大多數(shù)發(fā)行版內(nèi)核都默認(rèn)打開了配額支持但保險起見可以確認(rèn)一下grep -i quota /boot/config-$(uname -r)能看到類似CONFIG_QUOTAy、CONFIG_QUOTACTLy、CONFIG_QUOTA_NETLINK_INTERFACEy的輸出就行。如果這些配置項(xiàng)是m或沒有需要重新編譯內(nèi)核或換個內(nèi)核版本。這個步驟在標(biāo)準(zhǔn)云鏡像上幾乎從沒出過問題但檢查成本極低順手做沒壞處。4. 初始化配額數(shù)據(jù)庫并設(shè)置用戶/組配額4.1 創(chuàng)建配額文件quotacheckext文件系統(tǒng)啟用配額后系統(tǒng)需要在文件系統(tǒng)根目錄維護(hù)配額記錄文件傳統(tǒng)上是aquota.user和aquota.group新版系統(tǒng)也支持quota.user但aquota系列最通用。初始化命令quotacheck -cug /data參數(shù)解釋-c創(chuàng)建配額文件如果不存在-u啟用用戶配額檢查-g啟用組配額檢查-v顯示詳細(xì)過程可選但推薦能看到每個文件系統(tǒng)的處理情況你可以在/data目錄下用ls -l確認(rèn)ls -l /data/aquota.user /data/aquota.group如果跑完quotacheck報錯“Cannot find quota file”或者“Permission denied”多半是前面掛載參數(shù)沒生效或者SELinux在攔。解決辦法后面第7節(jié)會單獨(dú)講。4.2 首次掃描的作用與注意事項(xiàng)quotacheck的機(jī)制是遍歷文件系統(tǒng)里每個文件的屬主和所屬組把所有已占用空間和inode數(shù)據(jù)匯總寫入配額文件。在已有大量數(shù)據(jù)的目錄上首次啟用配額這一步是必須的因?yàn)橄到y(tǒng)此前并不知道每個用戶已經(jīng)消耗了多少。這里有一個關(guān)鍵的運(yùn)維經(jīng)驗(yàn)對線上正在服務(wù)的數(shù)據(jù)目錄執(zhí)行quotacheck要在業(yè)務(wù)低谷期做最好先卸載或只讀掛載在做。因?yàn)閽呙杵陂g文件的變化可能導(dǎo)致配額記錄和實(shí)際不一致。生產(chǎn)實(shí)例如果實(shí)在不能停機(jī)可以接受短暫的不一致跑完后再用quotacheck重掃一次。但千萬別在配額文件生成過程中貿(mào)然重啟。4.3 用edquota交互式為單個用戶設(shè)置配額創(chuàng)建好配額數(shù)據(jù)庫之后給用戶zhangsan設(shè)置配額edquota -u zhangsan這條命令會打開一個文本編輯器界面內(nèi)容類似Disk quotas for user zhangsan (uid 1001): Filesystem blocks soft hard inodes soft hard /dev/sdb1 104 12 24 7 3 5各列含義blocks該用戶當(dāng)前已占用的塊數(shù)每塊大小在掛載參數(shù)里確定默認(rèn)1KB單位顯示soft/hard空間塊軟限制和硬限制inodes該用戶當(dāng)前已創(chuàng)建的文件/目錄數(shù)量soft/hard右側(cè)兩列inode的軟限制和硬限制注意編輯時左右兩組soft/hard要對應(yīng)清楚左側(cè)是存儲空間、右側(cè)是文件數(shù)量。我自己第一次配置時就搞混過把文件數(shù)硬限制當(dāng)成空間限制了害得用戶沒法建目錄反而可以隨便寫數(shù)據(jù)——這錯得很隱蔽。把數(shù)字改好保存退出。比如要限制空間2GB硬限制2048MB即2048個1KB單位不對這里單位是1K blocks2GB要寫成2048000個1K block稍微算一下和文件數(shù)10000個Filesystem blocks soft hard inodes soft hard /dev/sdb1 104 1843200 2048000 7 9000 10000這里就是單位換算的關(guān)鍵坑1K blocks進(jìn)位的單位是KB2048000個單位是2048000KB約2GB實(shí)際2,048,000KB 1.95GB但四舍五入可接受。我建議直接按KB來換算2GB 2 × 1024 × 1024 2097152 KB但寫的時候注意2048000和2097152就差一點(diǎn)分區(qū)大小足夠就行設(shè)置成整數(shù)比較方便管理。我的習(xí)慣是用2048000這種整數(shù)因?yàn)榭粗庇^。4.4 批量設(shè)置配額從參考用戶復(fù)制如果用戶數(shù)量多一個個edquota顯然低效。edquota提供了-p參數(shù)可以把一個參考用戶的配額原樣復(fù)制給其他用戶edquota -p zhangsan lisi wangwu這樣lisi和wangwu就復(fù)制了zhangsan的配額設(shè)置。對幾十個用戶批量初始化時非常方便。更徹底的方式是寫個循環(huán)腳本結(jié)合setquota命令非交互設(shè)置for user in zhangsan lisi wangwu; do setquota -u $user 1843200 2048000 9000 10000 /data donesetquota的參數(shù)順序是-u 用戶名 軟塊數(shù) 硬塊數(shù) 軟inode數(shù) 硬inode數(shù) 文件系統(tǒng)。所有值都是數(shù)字單位是1KB塊/個。4.5 配置組配額組配額設(shè)置方式和用戶配額幾乎一樣只是-u換成-gedquota -g project_team組配額默認(rèn)會統(tǒng)計該組所有成員寫入的塊數(shù)總和。假設(shè)project_team組里有5個人你給組配額設(shè)了10GB硬限制那么這5個人加在一起最多寫到10GB。這里有個重點(diǎn)用戶配額和組配額是疊加生效的。比如用戶A個人硬限制2GB組G硬限制3GB那么A的寫入受“兩者中先命中的那個”約束。他寫到2GB會撞到用戶硬限制但整個組才消耗了1.5GB組配額還沒觸發(fā)。反之如果A已經(jīng)寫了1GB組里其他人寫了2.5GB組硬限制已經(jīng)觸發(fā)A即使個人沒用完也寫不進(jìn)去。這種雙維度限制在項(xiàng)目制環(huán)境里非常好用但要跟用戶解釋清楚規(guī)則不然會被罵“為什么我限額還沒到就寫不進(jìn)去了”。4.6 設(shè)置寬限期寬限期的默認(rèn)值是7天如果你覺得太長或太短可以改edquota -t界面會顯示類似Grace period before enforcing soft limits for users: Time units may be: days, hours, minutes, or seconds Filesystem Block grace period Inode grace period /dev/sdb1 7days 7days改成3天/dev/sdb1 3days 3days寬限期只對軟限制有意義。如果你直接設(shè)置硬限制寬限期對它完全無效——硬限制從生效那一刻起就不可逾越。5. 配額狀態(tài)查看與配額報告5.1 用quota命令查單用戶用量切換成普通用戶身份執(zhí)行quota -u zhangsan輸出類似Disk quotas for user zhangsan (uid 1001): Filesystem usage quota limit grace files quota limit grace /dev/sdb1 104K 1843200K 2048000K 7 9000 10000這里的quota列對應(yīng)軟限制limit列對應(yīng)硬限制。用戶自己也可以執(zhí)行這個命令看自己用了多少。如果某個用戶進(jìn)入了grace期輸出里會顯示剩余時間一眼就能看出他是不是“踩線”了。5.2 用repquota生成全體配額報告運(yùn)維視角下最常用的命令其實(shí)是repquotarepquota -a-a表示報告所有啟用了配額的文件系統(tǒng)。輸出*** Report for user quotas on device /dev/sdb1 Block grace time: 3days; Inode grace time: 3days Block limits File limits User used soft hard grace used soft hard grace ---------------------------------------------------------------------- root -- 215424 0 0 5500 0 0 zhangsan -- 104 1843200 2048000 7 9000 10000 lisi - 4096 102400 2048000 2days 12 9000 10000注意第二行zhangsan前面的標(biāo)記--代表一切正常沒有超過軟限制-代表空間或inode超了軟限制但硬限制還沒到正在grace期內(nèi)-同理只是方向不同代表軟硬限制都超了比如lisi那行出現(xiàn)了-和2days說明他已經(jīng)超過了塊軟限制還剩2天寬限期。這種輸出非常適合寫腳本監(jiān)控如果報告中出現(xiàn)非--的行就告警通知管理員查看。5.3 用quotacheck重新校正配額數(shù)據(jù)配額數(shù)據(jù)是動態(tài)維護(hù)的正常情況下每次寫入都會實(shí)時更新。但偶爾會遇到配額記錄和實(shí)際不符的怪問題比如用戶copy了文件但配額統(tǒng)計沒變或者明明刪了大量文件配額占用卻不降。這時重新跑一次quotacheck就能校正quotacheck -avug-a檢查所有配額文件系統(tǒng)-v打印詳細(xì)過程。跑完后配額記錄會和實(shí)際用量重新對齊。這個命令本身有開銷文件越多、體量越大耗時越長。建議在文件系統(tǒng)變化不頻繁的窗口期跑比如深夜定時任務(wù)。6. xfs文件系統(tǒng)配額配置的特異性6.1 為什么xfs不能照抄ext4的步驟很多人在xfs上執(zhí)行quotacheck會得到類似quota not enabled on filesystem的報錯或者直接卡死原因在于xfs的配額機(jī)制和ext系完全不同。xfs從誕生起就把配額作為文件系統(tǒng)內(nèi)建的“日志型”功能配額信息通過掛載參數(shù)直接開啟不需要外部配額文件因此也不存在aquota.user這種文件。xfs的掛載選項(xiàng)常見寫法是/dev/sdb1 /data xfs defaults,uquota,gquota 0 0其中uquota用戶配額gquota組配額。老內(nèi)核版本也接受usrquota,grpquota但新版xfs更推薦直接用uquota,gquota。掛載后在xfs文件系統(tǒng)上設(shè)置配額也有專門工具xfs_quota -x -c limit bsoft1843200 bhard2048000 isoft9000 ihard10000 -u zhangsan /data參數(shù)分解-x進(jìn)入專家模式-c執(zhí)行命令limit bsoft1843200 bhard2048000設(shè)置塊軟限制/硬限制isoft9000 ihard10000設(shè)置inode軟限制/硬限制-u zhangsan針對用戶/data目標(biāo)文件系統(tǒng)查看xfs配額報告的指令是xfs_quota -x -c report -u /data輸出和repquota類似同樣能列出每個用戶的使用量、軟硬限制和grace狀態(tài)。6.2 ext4和xfs配額管理的差異對照我列一個簡單的對照表方便你判斷自己該按哪套流程走對比項(xiàng)ext3/ext4xfs是否生成磁盤配額文件存在aquota.user/aquota.group不生成外部文件由元數(shù)據(jù)管理是否需要quotacheck需要用于初始化和校正不需要底層掃描配額信息可靠啟用掛載參數(shù)usrquota,grpquotauquota,gquota/prjquota配額設(shè)置命令edquota / setquotaxfs_quota -c limit ...配額報告命令repquota / quotaxfs_quota -c report ...日志型一致性一般掃描校正強(qiáng)日志記錄適合規(guī)模中小型單機(jī)/家庭服務(wù)器企業(yè)級/大容量/高并發(fā)如果你用的是新版CentOS/Rocky默認(rèn)安裝的xfs根文件系統(tǒng)想給home目錄配配額直接走xfs路線別再折騰edquota了。但傳統(tǒng)ext4環(huán)境在所有舊文檔和老教程里還是絕對主流兩種都掌握才不會被卡住。7. 常見問題排查與實(shí)戰(zhàn)避坑技巧7.1 quotacheck報錯Cannot find quota file或Operation not permitted這兩類報錯出現(xiàn)時最先懷疑的方向不是quota工具本身而是掛載參數(shù)或SELinux。排查順序# 確認(rèn)掛載參數(shù)是否帶上了 mount | grep /data # 確認(rèn)fstab是否寫對 cat /etc/fstab | grep /data # 臨時禁用SELinux測試排查用 setenforce 0 quotacheck -cug /data如果setenforce 0后要再次測試出問題看ausearch -m avc -ts recent | grep quota確認(rèn)是否被SELinux攔截。真正的修復(fù)方法是調(diào)整SELinux布爾值或文件上下文而不是長期關(guān)閉SELinux。quota相關(guān)目錄的SELinux類型通常需要設(shè)為quota_db_trestorecon -Rv /data但最直接的做法是給掛載目錄設(shè)置正確的上下文。這個知識點(diǎn)容易被人忽略因?yàn)槟J(rèn)SELinux策略下普通數(shù)據(jù)目錄的上下文不是quota專用類型導(dǎo)致寫aquota文件被拒。7.2 配額已設(shè)但用戶仍能無限寫入這類問題是我在群里看到提問頻率最高的。原因通常是下面幾種掛載參數(shù)根本沒帶上配額標(biāo)志。檢查/proc/mounts輸出如果只有defaults而沒有usrquota,grpquota配額功能形同虛設(shè)。配額作用于了錯誤的分區(qū)。用戶把文件寫到了另一個沒開配額的分區(qū)上配額當(dāng)然管不到。比如你只在/data開了配額用戶的$HOME在/home且沒開配額他把數(shù)據(jù)放到家目錄就繞過了所有限制。軟限制設(shè)置得太大或忘記了硬限制。有些人只設(shè)了軟限制沒設(shè)硬限制寬限期一過系統(tǒng)可能直接拒絕——但這個“可能”取決于版本和配置。老版本在寬限期結(jié)束后才會把軟限制變硬限制如果你的版本行為不是這樣就會看起來“沒限制”。用戶是root。root用戶默認(rèn)不受配額限制這是設(shè)計如此不要花時間去“修復(fù)”。逐一排查時別忘了看quota -u 用戶名的實(shí)際輸出。有時候你以為設(shè)置了實(shí)際上沒保存成功。7.3 刪除文件后配額用量不下降這個情況很多人遇到以后第一反應(yīng)是系統(tǒng)壞了其實(shí)大概率不是。原因在于配額統(tǒng)計的是塊占用不是文件數(shù)量并且塊是預(yù)分配的。舉個例子用戶寫了一個100GB的稀疏文件比如dd創(chuàng)建大文件然后seek跳著寫文件系統(tǒng)可能預(yù)分配或稀疏映射了很多塊。刪除部分文件后如果還在硬限制之上寫入依然被拒看起來就是“我刪了但還是寫不進(jìn)去”。另一個常見情況是文件被進(jìn)程持續(xù)占用。用戶刪了文件但因?yàn)槟硞€服務(wù)還持有文件句柄磁盤空間并沒有真正釋放進(jìn)程內(nèi)read/write不會中斷。這種情況你可以這樣確認(rèn)lsof L1 | grep deleted看到still open的deleted文件就知道是哪個進(jìn)程占了。殺掉對應(yīng)進(jìn)程或重啟服務(wù)后空間才真正歸還。7.4 重啟后配額丟失重啟后配額丟失幾乎可以確定是fstab沒有修改或者掛載參數(shù)沒有正確寫入。有些人圖省事只手動mount時帶了參數(shù)重啟后系統(tǒng)按fstab默認(rèn)配置掛載配額開關(guān)自然沒了。排查cat /etc/fstab | grep /data如果fstab里沒配額選項(xiàng)重新編輯并重啟或者重新mount -o remount。還有一個細(xì)節(jié)是老舊的Linux版本fstab中連續(xù)掛載參數(shù)之間不能有空格寫成defaults,usrquota,grpquota而不是defaults, usrquota, grpquota否則重啟時解析會出問題。7.5 生產(chǎn)環(huán)境第一次啟用配額的操作節(jié)奏這個屬于經(jīng)驗(yàn)篇了。生產(chǎn)環(huán)境第一次啟用配額我建議的節(jié)奏是先在測試機(jī)上完整走一遍全流程記錄每個命令的實(shí)際輸出找業(yè)務(wù)低谷窗口備份數(shù)據(jù)或做快照修改fstab添加配額掛載選項(xiàng)執(zhí)行mount -o remount觀察系統(tǒng)日志dmesg | tail確認(rèn)掛載成功無報錯執(zhí)行quotacheck -cugm /data其中-m是“不阻止寫入”的強(qiáng)制模式適合在線執(zhí)行雖然我還是推薦短時只讀掛載更穩(wěn)用edquota/setquota批量設(shè)置配額用repquota -a核對數(shù)據(jù)是否準(zhǔn)確觀察24小時確認(rèn)無異常后再把流程納入常規(guī)維護(hù)手冊7.6 監(jiān)控配額使用率的實(shí)用腳本思路配額管理不能設(shè)完就撒手不管建議寫個簡單的告警腳本放到cron里。我用得最多的核心邏輯是解析repquota的輸出找到超過軟限制的用戶并發(fā)送通知一個bash函數(shù)就夠repquota -a | awk $3 ~ /[0-9]/ $3 $4 {print $1, $2, $3, $4}這段的意思是輸出文件中第三列used超過第四列soft limit的記錄。你把它接入短信或釘釘webhook就成一個最小可用的配額告警系統(tǒng)。當(dāng)然生產(chǎn)環(huán)境用成熟監(jiān)控平臺如zabbix、prometheusnode_exporter更正規(guī)但這個“做殼”思路能幫你快速發(fā)現(xiàn)問題。8. 一個小眾但在多項(xiàng)目環(huán)境非常實(shí)用的擴(kuò)展項(xiàng)目配額上文提了一句project quota這里展開說一下。傳統(tǒng)的用戶/組配額在“一個用戶參與多個項(xiàng)目”的場景里會失控一個用戶分了2GB總配額但他可能給項(xiàng)目A、項(xiàng)目B、項(xiàng)目C各寫了1GB加在一起自己先撞了墻項(xiàng)目之間的隔離也沒做到。項(xiàng)目配額project quota把“誰寫”變成“寫到哪里”以目錄為維度做限制。典型操作# 對目錄打項(xiàng)目ID標(biāo)簽 mkdir -p /data/proj_a chattr -R p /data/proj_a # 打開project屬性非所有文件系統(tǒng)支持ext4需要內(nèi)核CONFIG_EXT4_FS_PROJECTy # xfs上直接分配prjquota xfs_quota -x -c project -s -p /data/proj_a proj_a /data xfs_quota -x -c limit -p bhard10g proj_a /dataext4項(xiàng)目配額的配置流程相對繁瑣而且需要內(nèi)核編譯支持。我自己的經(jīng)驗(yàn)是如果你想用目錄維度配額直接選xfs別在ext4上硬磕省心太多。xfs的項(xiàng)目配額是RHEL/CentOS特意在系統(tǒng)安裝時預(yù)置了prjquota支持生產(chǎn)上非常穩(wěn)。項(xiàng)目配額有一個附帶的好處即使權(quán)限上不同用戶混寫同一個目錄項(xiàng)目配額也能統(tǒng)一算總賬非常適合臨時拉人進(jìn)項(xiàng)目又不想逐個改用戶配額的協(xié)作環(huán)境。9. 我踩過幾次坑之后的最終體會說實(shí)話磁盤配額本身并不難大部分坑都出在文件系統(tǒng)類型判斷錯誤和掛載參數(shù)沒有真正生效這兩件事上。我給新手的忠告是上手之前先用df -hT認(rèn)清楚文件系統(tǒng)再決定走ext4流程還是xfs流程改完fstab后不要偷懶跳過mount -o remount加cat /proc/mounts驗(yàn)證這兩個動作加起來不過幾秒鐘卻能在配額全流程里省掉成小時的排查。另外配額始終是管理工具不是存儲備份。它只能防止單點(diǎn)用戶撐爆磁盤不能替你處理誤刪、病毒、磁盤物理故障。真正重要的業(yè)務(wù)目錄配額要和監(jiān)控告警、定期快照、定期巡檢配合起來才是一套比較完整的數(shù)據(jù)保護(hù)方案。如果你目前只是在一臺小服務(wù)器上給幾個同事分空間按照第4節(jié)的流程配好用戶配額就足夠了沒必要一開始就上項(xiàng)目配額。真到了多項(xiàng)目、多目錄、多人交叉寫入的規(guī)模再切xfs項(xiàng)目配額完全不遲。配額這東西配好之后平時幾乎感覺不到它存在但一旦有人把整盤寫滿你會慶幸當(dāng)初花了一個下午把這事兒做完了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月婷婷久久大香蕉| 久色大| 99ri视频在线观看| 婷婷五月激情的图片| 久久久区区一久久久久久| 久久98| 大香AV| 亚洲天堂久久| 色色免费网站| 、激情六月天| 丁香六月婷婷| 99re思思| www。久久久久一b。Cc| 欧美综合激情五月| 日本高清不卡免费一区二区三区| 中文字幕性爱丰满| 五月婷婷在线网站| 五月色丁香婷婷综合| 亚洲综合丁香婷婷六月天| 超碰在线91| AV色五月婷婷| 日比视频91| 亚洲激情精品| 99玖玖在线视频| 美国十月色婷婷在线观看| 成人在线精品| 年轻的妺妺伦理HD中文| 国产午夜一区二区三区| 九九碰九九爱97超碰| 久综合网| 婷婷五月色综合| 免費亭亭成人| 精品一二三区久久AAA片 | 五月天堂婷婷| www.99热精品99.com| 色爽九九| 亚洲色图五月丁香| 国产AV一区二区三区最新精品| 99热日韩| 爱婷婷五月| www99在线观看视频| 9久热精品在线视频| 天天AV导航网| 99久久婷婷五月| 婷婷婷久久久| 停停五月丁香| 久久久久久人妻久久久久久久久久人妻久久久| 五月天婷五月天综合网小说首页-五月天激激婷婷大综合,婷婷亚洲综合五月天小说 | av操一操| 五月婷天堂视频| 五月天婷婷综合网| 色99视频| 婷婷视频在线| 婷婷色5月天在线。| 亚洲成人av在线播放| 国产毛片欧美毛片久久久| 婷婷五月天免费视频| 亚洲 精品 综合 精品| 婷丁五月| 夜夜操少妇| 99热这里只有精品国产免费| 日本天堂免费99| 日本少妇AA一级特黄大片| 1234操逼网| 六月激情网| 欧美色色色色色色色| 国精产品一区二区三区| 色五月大| 欧美日韩91| 久草婷婷| 婷婷激情视频| 五月婷婷亚洲色视频| 98色花堂98t.R| 9久久久久久久久久久| 六月丁香激情网| 123草逼网| 天天干天天插| 色婷天天| 色婷五月| 五月丁香色综合| 天天爽天天干| 日曰躁夜夜躁2026| 久久三级视频| 精品怡红九九九| 六月婷婷五月丁香| 操操操97| 激情综合五月激情XXXX| 激情五月狠狠| WWW,五月| 色噜噜夜夜夜综合网| 国产视频久色| 超碰在线成人| 精品人妻午夜一区二区三区四区 | 国产精品久久久久久亚洲毛片| 久热在线中文字幕色999舞| 97操视频| 久久婷婷五月综合成人d啪| 日日操,天天操| 婷综合| 色五月婷婷影院| 丁香色婷婷五月天| 色综合色综合色综合| 五月丁香美女视频| 大香蕉人妻| 丁香五月花婷婷开心| 欧美五月婷婷| 丁香五月综合婷婷| 日狠狠| 97香蕉碰碰人妻国产欧美| 激情五月婷婷丁香综合网| 婷婷五月天Av| 激情九月婷婷| 天天操综合网| www,99视频| 综合久久综合| 色综色网| 色丁香久久| 在线观看欧美3区| 六月婷婷网站| 在线99热| 婷婷色色综合激情| 天天拍天天操| 天天日天天狠狠操| 极品五月天| 亚洲最大在线| 激情六月一二| 五月综合激情图片 | 伊人狠狠丁香婷婷综合尤物| 天天操综合网站| 玖玖无码中文| 色五月激情综合网| 久久只有18视频| 色噜噜狠狠色综合无码久久欧美| 激情99| 99噜噜噜在线播放| 超碰丁香五月| 直接看的AV| 狠狠色狠狠爱| 91九色无码内射| 婷激情五月天视频导航| 99综合99| 沈娜娜av| 99国产精品久久久久久久久久久| 九九在线免费观看| 北条麻妃伊人 | 超碰免费99| 婷婷五月激情综合网| 欧美色五月天| 五月丁香综合成人社区| 美女被肏网站在线看| 久久人妻人人| 激情五月天影院| www.91操| 91九九| 婷婷少妇激情| 先锋五月婷婷丁香草草| 99热这里只有精品4| 天天拍久久| AAA久久久AAA久久久AAA| 亚洲天堂色| 五月婷婷丁香大陆免费| www.久久爱.c n| 久久久婷| 波多婷婷久久| 97色色色| 婷婷五月久久| 色哟哟性爱av| 婷婷五月天国产手机在线视频观看| 99热国产在线| 操操操91| 日韩人妻白浆视频系列| 99九九99九九九视频精品| av高清无码| 国产无套精品一区二区| 五月丁香亚洲综合| 狠狠插狠狠操| 91干婷婷| 熟妇人妻中文字幕无码老熟妇| 丁香伊人网| 97精品自拍| 99热久久日本| 色婷婷亚洲在线观看| 久久人妻熟女一区二区| 99视频在线| 色五月激情婷婷| 婷婷色香六月综合激情| 色婷婷免费视频| 中文人妻主播久久| 色色丁香婷婷综合| 天天插天天日天天爽| 天天操夜夜夜拍拍拍| 中文字幕色色| 26UUU精品一区二区| 久久视9精| 猫咪伊人久久| 伊人网色婷婷五月天| 五月丁香成人| 国产AV熟妇人震精品一品二区| 丁香五月天天| 久9无码视频| 久久婷婷原创视频| 亚洲精品又粗又大又爽A片 | 日本强伦片中文字幕免费看| 国产精品涩涩涩视频网站| 久久九九玖玖| 91啪啪| 播五月开心婷婷欧美综合| 五月丁香六月玩女人| 免费观看日韩成人av| 精品成人无码A片观看香草视频| 国产亚洲精品AAAA片APP| 1级欧美日韩| 狠狠色五月| 91精品综合久久久久久五月丁香| 99玖玖在线视频| 第五婷婷伊人丁香色| 丁香婷婷激情网站| 99热日本精品| 噜噜色五月| 伊人激情啪啪| 欧美色99| 天干夜夜操| 亚洲欧美一区二区三区四区爱爱动图| 色优久久| 99热热热99精品婷婷| 性爱网久久| 五月天综合网| 丁香色播五月天| 激情久久伊人| 激情深爱五月天| 婷婷久久色| 久久亚洲A| 国自产拍偷拍精品啪啪一区二区| 在线成人国产| 人人爱操| 99热这里只有精品2024| 婷婷五月天免费99| 五月丁香婷婷免费视频| 久久99操| 婷香五月| 午夜成人av在线| 玖玖99福利| 精品欧美一区二区三区久久久| 亚洲色夜| 六月婷婷开心| 狠狠人妻久久久久久综合丁香| 少妇大叫太大太粗太爽了A片| 日本特黄aaaaa| 日本在线99| 国产探花一片区| 国产乱人偷精品人妻A片| 激情啪啪五月| 五月丁香影院| 这里只有精品在线免费视频| 99久久66综合| 五月婷婷香蕉| 丁香婷婷久久| 国色天香伊人狠狠色| 天天干天天玩天天夜天天射天天操天天日蜜臀少妇 | 婷婷五月综合视频| 久久久人人操A V| 丁香九月激情久久| 五月丁香婷婷色| 久久亚洲激情五码| 色综合色婷婷色伊人| 这里只有精品96| 99色干| 综激情网| 国产乱轮一区二区三区| www.91在线观看| 久久宗合影| 99激情| 婷婷六月激情| 亚洲情a| www.com五月天| 热久久999| 五月综合无码| 熟女网站久久| 开心激情网在线| 九九九九九无码| 玖玖综合网| 久久婷婷五月天激情| 亚洲午夜在线视频| 99久热视频在线| 激婷网| 92久久精品一区二区| 色啪影院| 玖玖在线| 99在线资源视频| 伊人狠狠干| 五月婷综合性中心| 六月丁香婷婷开心综合基地| 天天操夜夜夜夜爽| 韩国婷婷丁香五月| 蜜桃人妻无码AV天堂三区| 色丁香婷婷| 久99久在线观看| 久久婷婷91| 6月丁香婷婷| 丁香色五月婷婷17C| aaa久久| 人人爱人人添| 久草婷婷网| 亚洲成人网站在线观看| 精品久久99码| 日韩精品一区二区三区,四区,五区视频 | 五月丁香久久| 99久久这里只有精品免费官网| 婷婷五月香蕉| www.五月天婷婷| 538在线精品| 丁香香蕉婷婷| 婷婷丁香77777| 五月婷六月| bbwcuckold精品熟妇| 色五月久久成人婷婷| 综合亚洲五月天| 五婷婷六月合| 丁香五月婷婷骚视屏| 在线,国产,色,热视频| 噜噜在线| 啄木鸟黑丝一区二区| 婷婷情色五月天| 江苏少妇性BBB搡BBB爽爽爽| 国产亚洲精品久久久久久郑州| 超碰在线91| 26uuu在线观看| 亚州操人在线视频| 色五月色五天色情网址| 五月天婷婷色综合| 久久九九综合| 免费无码毛片一区二区A片| 99色网站| 天天操,天天插| EEUSS鲁片一区二区三区| 日在线V视频在线播放| 91丨九色丨白浆| 97碰精品| 99丁香五月婷| 亚洲视频久久| 热99久久这里只有精品| 婷婷不卡基地| 色五月婷婷91| 天天日天天做天天操| 99re热视频这里只有综合亚洲| 六月婷婷网站| 亚洲天堂99| 婷婷狠狠香蕉综合| 思思视频这里是精品| 精品亚洲国产成AV人片传媒| 色偷偷五月天| 5月婷婷激情网| 另类国产区| 五月丁香久久呀| 97自拍视频在线| 五月丁六月香av| 日韩AAAAA| 婷婷D区| 色色色在线免费视频| 婷婷五月天久久| 在线超碰91| 丁香亚洲婷婷五月| 一本久道综合99| 大香蕉五月婷婷| 国产综合81p| 丁香五月婷婷亚洲另类| se色婷婷视频| 激情五月综合婷婷| 色婷婷97| 午夜少妇在线观看视频| 婷婷五月天色综合| 91色碰| 天天摸天天做天天爱天天爽| 五月丁香啪啪综合网| 丁香六月啪啪啪| 久9热视频在线观看| 91九色国产| 狠狠爱综合| 色五月播五月| 午夜无码精品色综合久久| 9热网站| 99热这里只有精品在线播放| 婷婷射图| 九九热免费视频| 丰满人妻一区三区三区| 久久九九婷婷| 五月丁香婷婷综合| 婷婷五月天成人综合网| 国产激情av| 免费视频无码| 丁香五月色欲| 99热最新地址在线| 久久久久久久久久久jjjj| 色综合色综合色综合色综合| 成人做爰A片免费看网站找不到了| 色婷婷久久| 婷婷五月天美女视频| 久热AⅤ| 在线中文字幕视频| 亚洲成人在线五月天| 婷婷六月综合| 久久婷婷五月天激情新地址| 日本啪啪网| 青青草搞屄视频网站| 婷婷亚州综合| 天天爽天天操| 亚洲激情综合| 五月天激情国产综合AV| 久久久久98| 91丨九色丨国产打屁股| 99视频精品在线| 日韩婷婷五月| 无码yw| 噼里啪啦在线观看免费完整版视频| 国产婷婷色综合AV蜜臀AV| www.久久久久久久| 婷婷狠狠青青| 国外亚洲成AV人片在线观看| 五月丁香久久网| 激情婷婷丁香五月天| 亚洲亚洲人成综合网络| 婷婷色影院| 五月花婷婷丁香| 九九碰九九爱97超碰| 久久五月天影院| 色色色综合色| 婷婷伊人网| 天天综合五月| 91大神操美女| 九九婷婷五月天影视| 国产成人精品一区二三区熟女在线| 色色色色色色97| 色五月婷婷综合| 色婷婷中文在线| 99操逼| 99精品国产在热久久| 99久在线精品| 五月丁香WWW| 天天插天天日天天爽| 久久综合激情| 婷婷激情五月| 最新无毒无码AV| 婷婷色在线播放| 成人做爰黄A片免费看直播室男男 A片试看120分钟做受图片 | 超碰在线caop| 天天综合精品| 成年人丁香五月| 婷婷六月天| 丁香婷婷在线| 狠狠狠五月婷婷六月丁香| 九九热AV| 丁香色五月直播| 婷婷99狠狠躁天天躁中| 久久免费操| 影音先锋 一区| 国产乱子轮XXX农村| 成人丁香五月| 五月婷婷六月丁香在线| 激情综合网五月激情| 日本成人噜噜噜噜噜| 婷婷六月丁香在线| 思思99精品视频在线观看| 五月婷婷大香蕉| 激情综合区| 91综合国免费久入| 激情五月天久久丁香| 大香蕉网站,大香蕉综合| 丝袜激情网| 五月天伊人网| 91人妻九色大屁股| 久久香蕉网| 国产成人网| 五月婷婷深深爱| 99精品国产在热久久| 99国产精品白浆在线观看免费| 五月丁香综合| 久久综合五月天激情小说网站| 少妇被下春药玩弄A片| 97人妻碰碰碰久久| 丁香五月AV综合| 99色中文| 2020久久婷婷五月| 激情综合丁香五月| 中文字幕,综合,91| 亚洲操精品| 色一情一乱一乱一区91Av| 996热| 五月天精品| 五月天综合| 成人草榴视频| 久久超视频| 97人妻碰碰中文无码久热丝袜| 女性自慰系列第五页| se色99| 婷婷五月天亚洲综合| 日日操天天操| www激情| 五月丁香久久综合91| txt五月激情四射网综合俺也来了| 欧美日韩成人在线免费| 99免费青青蜜臀| 丁香花五月天激情| 六月婷色六月| 99热主页日本| 五月婷A V在线| 2016日日夜夜操| 思思99热热热99| 狠狠色婷婷六月激情网| 亚洲热久久| 亚洲狠狠终合停停终合| av久热| 欧美色色色| 日本天堂爱爱| 超碰免费观看| 99热思思久| 丁香五月天网友自拍啪啪啪视频| 99热精品在线观看| 99人人精品| 色情五月丁香婷婷网| 色色COm| 激情六月综合| 操逼巨乳91| 五月综合777| 99人妻碰碰碰久久久久视| 国产精品18久久久| 99九九热在线观看| 婷婷五月天成人小说| 天天爽天天| 色色影院黄大片| 青青操avbb| 色爱99| 婷婷五月综合丁香久久| 开心婷婷五月天电影院| 色人久久| 丁香五月婷婷偷拍| 99色免费观看全部| 亚洲字幕AV一区二区三区四区| 亚洲黄色精品| 九九精品免费| 婷婷国产五月天17c| 伊人深爱综合| 亚洲操逼片| 九九中文字幕九| 亚洲五月婷天天操| 久久久久9| 五月丁香色婷婷久久| 涩涩涩.com| www色色色com| 六月丁香视频网站| 99热这里只有精品免费| 欧美在线干| 久久性刺激| 狠狠色丁香婷婷五月| 亚洲综合婷婷五月天| 丁香六月婷婷综合| 五月丁香激情五月天| 99ri国产在线| 狼人久草| 精品久久99码| 五月丁香大香蕉| 翔田千里 50岁 无码| 五月丁香888| 狠狠色综合久久| 色青青电影色五月| 99久久免费精品| 精品热青草| 色婷婷伦理| 蜜桃五月天| 国内裸舞二区| 秋霞免费视频| 亚洲色色色色| 国产精品A片在线| 精a品a| 狠狠色婷婷7777久综合| 99婷婷国产最新视频| 色播播婷婷| 国产97色在线| 五月天婷婷激情网| 99热这里有精品| 五月婷婷少妇之| 青草视频在线播放| 久久婷婷综合五月趴| 亚洲人成网站999综合| 小视频久久久aaa| 蜜臀久久99精品久久久久久酒店| aaa日韩| 久久激情婷婷| 婷婷天堂综合| 五月婷高清视频| 精品欧美性爱超级爽| 九九精品在线网| 亚洲精品网址| 99ri精品| 丁香色五月婷婷| 9有码中文| 天天做天天爽| 婷婷五月六月激情| 色狠狠综合网| 国产五月视频| 综合XX网| 五月婷婷开心爱| 九九99精品免费播放| 丁香婷婷社区| 26uuu色噜噜精品一区| 新激情五月天| 91色综合| 色婷婷久久综合丁香五月| 婷婷综合在线播放| 少妇熟女视频一区二区三区| 激情综合色播| 亚洲 综合中文| 五月婷护士| 91精品无码| 婷婷亚洲五月丁香综合在线 | 久9无码视频| 色五月久久成人婷婷| 91丨九色丨国产打屁股网站| 日韩亚洲视频| 婷婷五月天欧美图片在线播放电驴| 国产精品视频免费看| 专区无日本视频高清8| 日韩五月丁香| 四色 爱 婷婷 精品 亚洲 五月天| 五月激情久久| 99色综合| 婷婷97碰碰| anquye五月| 丁香婷婷网| 亚洲va久久久噜噜噜久久天堂| 婷婷激情人妻| 99热这里只有精品22| 99热99ai| 91丨九色丨熟女|新版| A短视频免费在线观看| 亚洲精品亚洲人成人网| 激情综合网五月在线播放| 九九中文色色| 全部老头和老太XXXXX| 激情综合网五月| 九九久久综合网站| 九九99视频精品| 91porn一起草| 久久久久久18| 高清免费在线视频| 亚洲精品又粗又大又爽A片| 97人人干人人操| 婷婷色五月色| 五月婷婷自拍视频| 免费观看的AV| AV 3P| www.激情在线| 亚洲色五月| 激情久久久久久久久久| 绿色小导航AV| 亚洲AV无码电影| 丁香五月激动深爱欧美| 青草青草视频2免费观看| 婷婷五月天电影网| 五月丁香激情综合网| 色色色婷婷五月天| 色五月五月婷婷| 另类激情综合| 性爱视频久久| 丁香婷婷色九月| 99只有这里有精品在线视频| 综合激情站| 五月丁香婷婷潮喷中文字幕| www久热com| 精品色色网| 婷婷伊人激情婷婷| 亚洲激情99| 婷婷激情五月吧| 五月丁香六月婷婷精品| 亚州激情网| 激情五月天色| 99在线观看免费精品视频| 人人干天天舔| 色五月天中文字幕| 99热日本| 婷婷丁香五月综合激情小说| 亚洲成人在线五月天| 五月婷婷六月丁香色| 尔尔AV一区| AⅤ色区| 深爱激情av| 亚洲色情网站| 久色大| 婷婷五月天久久久| 五月婷婷深深爱| 色色色综合| 蜜乳久AV| 色蜜婷婷| 这里只有精彩小视频视频网站| WWW,激情五月天,COM| www.minyis.com【JT】实力收量可预付TG@LXSPSW8 | 久久激情五月| 国产国产乱老熟女视频网站97| 亚洲妇女熟BBW| 中文字幕成人版| 激情性爱网站| 66精品国产成人| 丁香五月天婷婷久久| 婷婷五月天综合小说网| 日本九九视频| 涩五月婷婷| 99久久婷婷综合| 久久婷婷国产| 婷婷五月AA五月在线| 婷婷爱五月天人人爱| 97婷婷丁香| 国产精品99久久久久久久女警| 婷婷色综合网日韩国产| 香蕉国产2013| 婷婷五月色网| 五月丁香久久综合| 青青草伊人婷婷| 五月激情网站| 亚州日本欧州韩美高青高潮一| 精品人妻伦一二三区久| 天天做天天爱天天爽| 韩日AV片| 天天操夜夜夜夜爽| 俺去也综合| 丁香五月AV| 久操97| 五月丁香天天| 色99网| 九九九九九九热| 人妻AV在线| 丁香五月婷婷俺也要去| 99热.com| 激情久久月| site:minyis.com| 激情五月六月婷婷综合啪啪| 狠狠爱婷婷爱| 99热人人艹| 五月天激情小说| 欧美成人五月天| 婷婷综合五月| 欧美综合五月丁香六月婷| 色小说五月婷婷| 婷婷五月综合在线| 人人操 色| 日韩小视频在线99| 婷婷亚洲综合| 亚洲黄色精品| 婷婷五月激情丁香| 色五月综合激情网| 色在线五月天免费| AV操操操| 大香蕉久久久久| 色色色色色色网| 婷婷五月花.97| 日韩人妻无码一区二区| 啪啪啪大香蕉| 成人五月天丁香| 26uuu在线观看| a免费在线| 九九九成人在线视频| 成片免费播放| 色情性爱视频网址| 五月激情六月宗合| 玖玖爱资源站| 色欲天天综合| 香蕉国产2013| 91碰碰视频| 亚洲另类av| 婷婷深爱五月| 亚洲AV无码成人精品区电影网| 国产精品久久久丁香五月八戒视频| 色色婷婷丁香| 99热这里只有精品手机在线观看| 另类视频五月天| 大香蕉五月天婷婷| 操91| 噜噜噜噜婷婷五月天| 久热大香蕉| 国产99久久久| 天天爱天天做天天操| 丁香五月婷婷激情小说| 狠狠综合网| 婷婷久久午夜网| 99九九精品| 婷婷丁香77777| 99精品免费| 青青草婷婷综合五月| 9色91视频| 丁香五月激情婷婷| 欧美碰碰| 六月丁香色色| 另类视频在线| 搡BBBB搡BBB搡18| 五月婷婷影视| 伊人影院久久网| 一级性爱视频| WwW色婷婷| 五月丁香啪啪综合| 9久国产| 亚洲九区| 色色色精品无码区| 真实的国产乱XXXX在线91| 丁香五月激情无码视频| 99伊人婷婷在线| 大香蕉久久久| 丁香激惜男女| 91fuliwang| 99自拍网| 丁香婷停五月激情综合深爱| 涩涩激情五月婷婷| 五月丁香激情婷婷| 婷婷五月天视| 中文字幕在线视频播放| 五月婷婷激情综合| 激情综合五月婷| 色婷婷成人色网| 天天干天天做| 久久五月天激情婷婷| 99热每日| 99久久久久久| 色五月婷婷大| 亚洲婷婷久久综合| 亚洲操操操| 激情五月天无人视频在线| 97视频.干com| 五月天色小说| 啪啪99| 天天干天天干天天干天天干天天| 在线超碰91| 狠狠干综合| 综合网视频| 熟女色专区| 日本在线wwww| 色99色| 日日噜噜夜夜狠狠久久丁香六月| 视频综合网| 月色色综合婷婷网| 国产精品18久久久| 日韩精品一品二区三区的使用体验| 欧美va亚洲va| 亚洲在线视频321| 五月婷婷丁香六月| 超级碰碰91| 婷婷综合五月色播| 激情五月婷婷| 一级性爱大片| 熟女人妻视频| 91一起操| 强伦轩人妻一区二区电影| 婷婷五月天改成什么了| 色婷婷情片| 久久婷婷青青草| www.久热| www.色9| 六月婷婷九月丁香亚洲综合| 琪琪秋霞| 在线成人网站| 五月婷婷六月丁香首页| 7777国产盗摄农村女人| 综合网激情| 五月婷婷啪啪网| 丁香色婷婷| 色婷婷五月网| 26uuu欧美日韩| 久草a片| 婷婷九月丁香中文| 青草青草视频2免费观看| 五月丁香婷婷色| 91超级碰在线| 婷婷五月丁香六月综合网| 99秘 在线| 丁香五月1页| 婷婷久久综| 日本97久久久精品| 丁香婷婷综合喷| www久久久久久久久久久久久久久久久| 天天干天天色综合| 91超碰在线播放| 狠狠色成人影片| 日日操夜夜骑| 九热视频| 精品成人a v无码内射| 男女久久婷婷五月天| 日日鲁鲁夜夜爽爽| 狠狠色狠狠鲁| 五月亭亭激情综合| 五月天播播综合| 人妻内射麻豆视频| 久久99热免费| 婷婷5月天激情综合| 五月丁香六月婷婷,婷| 色播五月丁香| 色噜噜狠狠色综合无码久久欧美| 激情九月综合| 人妻AV在线| 那里有AV网址| 2020久久婷婷五月| 激情五月天综合图片小说网站| 婷婷五月天综合激情| 天天日日夜夜爽| 六月激情久久婷婷| 成人欧美一区二区三区在线观看| 天天在线久久综合 | 日韩性爱无码| 99人人操人人爱久久久| 日本WWW九九九| 久草视频一,二三四| 五月丁香激情综合网| 四色综合网| 婷婷丁香五月天色区| 五月婷婷色吧!| 99热99热不卡| 色狠狠婷婷| 99人妻碰碰碰久久久久视| www.久久爱.com| 五月花免费视频| 亚洲亚洲人成综合网络| 婷婷影视久久| 九九综合图片网| 丁香九九九九| 国产伊人五月天| VA婷婷亚洲| 99热综合网| 丁香五月自拍| 免费观看全黄做爰的视频| 99色在线观看视频者| 很很色丁香久久停停| 久久久999精品| 天天婷婷操| 26uuu另类亚洲欧美日本一| 五月婷婷激情综合av| Av大香蕉| 91男同视频| 丁香婷婷五月综合| 人妻狠狠操| 99青青草| 丁香五月性| 九九色婷婷五月天| 91九色欧美| xxxx五月| 色婷婷久久综合久色综| 久久激情五月婷婷| WWW.HENHENL.| 啊V视频在线观看| 六月丁香婷婷天堂| 五月天伊人久久久久| 五月婷婷激情综合| 超碰人人妻| 五月丁香猫咪久久婷婷综合视频激情四射网入口 | 久久婷网| 激情五月com| av在线中文| 久久精品国产AV一区二区三区 | 九九久久五月天综合伊人| 婷婷成人AV| 中字幕视频在线永久在线观看免费| 五月天丁香欧美激情| 99ri在线视频| 色播五月婷婷五月| 久久婷婷伊人| 9月色婷婷| 天天爽夜夜爽天天爽夜夜爽| 欧美激情综合| 一片AV片免费播放| 激情六月丁香综合| 色五月综合| 婷婷五月激情欧美大胆视频| 久久资源网五月婷| 丁香成人色情五月天| 啪啪啪大香蕉| 国产精品视频免费看| 天天操夜夜爱| 亚洲中文字幕av| 六月婷婷香蕉| 五月婷婷人妻| 日本欧美成人片AAAA| 99久久久免费| 六月丁香综合| 狠狠婷婷色综合| 另类五月婷婷| 五月天大香蕉| 国产综合81p| 99成人小视频| 丰满少妇乱A片无码| 五月丁香婷婷六月| 日本三级中国三级99人妇网站| 欧美25p| 五月6香色婷婷视频| 狠狠色噜噜狠狠狠狠综合| 婷婷色情五月| 97久久久久久久久久久| 亚洲AV日韩无码| 色色色热| 中文精品在| 天天干天天拍| 日日爽日日操| 大香蕉天堂色| 99人人干人人| 五月婷婷激情性爱| 色爽九九| 综合色色网| 爆乳熟女-区二区三区| 狠狠干夜夜干| 狠狠色婷婷7777久| 亚洲激情网站无码| 久婷久婷激情肉| 国产高清av黄色看片| 亚洲色综合| 色五月婷婷亚洲| 五月丁香婷婷激情久久| 久久性视频| 五月天激情黄色网址| 欧亚成人A片一区二区| 26uuu精品一区二区| 五月丁香花开综合网| 五月丁香啪啪啪免费看| 婷婷色色丁香五月天| 大香蕉视频99| 亚洲精品V天堂中文字幕| 欧美一级色| 亚洲顶级VA在线观看-高清完整版在线影院观看-S022AV | 婷婷九月色| 五月婷激情| 丁香五月第四色88| 情五月亚洲婷婷| 色色色五月婷婷| 人人操女人| 九九热99在线视频| 超碰人人在线观看| 成人片黄网站色大片免费毛片| www.狠狠| 五月色色色| 久久色亭亭五月天| 色婷婷丁香| 大陆肏屄视频| 丁香五月天啪啪激情综和网 | www.精品99| 亚洲超级碰| 日韩三及成人AV片| 国产中文字幕在线视频免费观看 | 色情一区二区播放| 久久这里都是精品视频| 操笔无码| site:wpjngj.com| site:hcxsz888.com| 久久激情网| 色播综合| 日本欧美在线| 91操人| 激情五月婷婷综合| 99精品热视频| 人人操91| 91欧美| 激情五月,色五月| 丁香六月色香蕉视频| 丁香五月精品视频| 五月丁香婷婷无码中文| 婷婷99狠狠躁天天躁| 天天玩夜夜操天天爽| 日本精品在线噜噜噜| 激情五月天久久丁香| 夜夜躁狠狠 | 色色网站日本91| 成人国产网| 婷婷新网址| 日韩无码人妻一区二区| 一本色道久久88加勒比—| 久操干| 色色五月婷婷| 97丁香花五月天激情小说| 色婷婷激情小说网| 深爱开心五月天| 综合五月激情网| 五月婷婷香| 五月婷婷深深爱| 丁香五月天堂网| 色五月丁香五月| AA片在线观看视频在线播放| 日韩限制级大尺度黑料泄密大尺度视频一区二区在线观看 | 九九五月天| 欧美狠狠草| 五月噜噜| 5月丁香啪啪啪| 丁香婷婷九月| se99视频| 国产精品久久欧美久久一区| 婷婷五月天性色| 亚洲AVwwwwwww| 婷婷五月电影| av 一区三区四区| 丁香五月婷婷乱| 欧美五月丁香| 国产激情综合五月久久| 色婷婷av在线观看| 日本激情综合| 六月婷基地| 色婷婷五月天激情| 婷婷成人小说综合| 五月天婷综合| 亚洲五月天婷婷| 牛牛澡牛牛爽| 中文字幕,综合,91| 五月激情日本在线| 五月天精品综合| 五月丁香无码| 99免费在线视频| 1024在线观看免费视频| 成人 在线 日韩| 乱抡小BB| 国产三级片91| 全部老头和老太XXXXX| 欧美日本高清视频99| 91欧美| 六月久久狠狠| 狠狠操狠狠爱| 丁香婷婷五月色综合| 超碰在线观看9| 六月色婷婷欧美| 五月丁香免费看| 伊人色综合网| 九九热99在线视频| 激情综合婷婷五月| 人妻操逼视频| 五月天激情四射| 99热99| 成人色站,在线视频,看片-SS1AV| 五月丁香淫淫婷婷婷| 色五月天电影| 久久男人网婷婷| 99视频超级精品| 色播播五月| 国产精品涩涩涩视频网站| 骚五月婷婷| 婷婷四色五月| 伊人91| 亚洲第二AV| 五五月丁香花激情综合网| 色综合伊人网| 裸睡玩奶头(高H)| 夜夜大香蕉婷婷丁香| 亚洲中文乱字字幕线在永久| 色五月天丁香| 狠狠 久久| 情五月亚洲婷婷| 婷婷久月| 五月天色站| 99热这里有精品24| 九九AV| 五月天婷婷激情在线色图| 日操五月婷| www.99热| 99热日| 久久丁香久久| 色五月情| 激情网第九色| 婷婷色操| 国产色色色色色| 很操日本7| www.婷婷五月| 丁香久久综合| 青青草成人网| 婷婷亚洲在线| 五月永久激情| 五月婷婷六月丁香| 日日噜狠狠| 在线中文亚洲| 丁香五月成人自拍| 97干婷婷五月天| 开心五月婷婷| 亚洲色综合| 六月丁香婷婷综合狠狠爱夜夜爱| 99色人| WWW.桔色成人.COM| 国产精品涩涩涩视频网站| 久热久| 天天摸天天肏| 97影院一级片| 色噜噜狠狠色综合日日| 日韩成人精品中文字幕| 东京热免费视频网站| 欧美激情综合色丁香婷婷五月天| 男妓跪趴把舌头伸进我的嘴巴| 五月丁香色情| 狠狠综合久久| 精品在线网站| 久婷婷婷| 热99免费在线| 99资源在线视频| 大香蕉免费9| 天天草天天爽| 久久九九99桃花视频| 狠狠搞狠狠操| 丁香六月婷婷久久亚洲天堂| 天天干天天爽天天操| 操日本99| 99久久大片| 99干在线视频| 五月丁香六月婷婷国产视频| 中文字幕av网站| 丁香色婷婷| 亚洲免费av观看| 九九色热| 91九色精品| 任你爽精品免费视频6| 99热综合在线| 九色PORNY9l原创自拍| www.99热| 99精品在线| 久久奄也去色色网站| 99久久国产宗和精品1上映| 亚洲色情一区二区三区四区| 亚洲精品白浆高清久久久久久| 五月婷婷m| av首页在线| 天天精品视频免费观看| 另类丁香综合| 亚洲六月色婷婷| 99啪啪视频| 九九在线精品| 爱草视频在线观看| www.久99| 成人va视频| 久久精品4| 色区久久| 丁香五月在线视频黑人| 色色综合网。| 精品人妻一区| 欧美久久婷婷| 99精品偷自拍| 思思热国产在线| 九九十99视频| 欧美日韩999| 另类小说五月天综合| 国产免费一区二区三州老师F1…… | 色婷婷五月六月丁香综合视频| 北京熟妇搡BBBB搡BBBB| 99热这里只有免费| 伊人网啪啪| 99视频内射三四| 亚洲五月婷天天操| 婷婷五月六月| 91精品综合久久久久久五月丁香| 99久久99热| 丁香九月激情在线视频| 九九这里是免费的视频5| 99久久久国产大片| 激情五月四色| 庭庭久久内射| 色综合久久88色综合天天人守婷| 伊人在线大香蕉网| 五月婷婷99热| 26uuu亚洲色| 日韩黄色电影| 综合久久99| 99热在线这里| 色婷婷视频| 久久9情免费| 婷婷的99视频网站| 激情合网婷婷| 午夜九九九九九九九九九九九九九| 婷婷五月婷婷| 激情六月综合| 天天玩夜夜操天天爽| 人人操婷婷| 天天狠狠夜夜狠狠2023| 拳交大逼| 人妻爽爽爽久久久久久久久|