免费国产精品自在自线-91精品国产色综合久久久浪潮-99热久久免费频精品-国产精品国模在线观看-久久亚洲国产精品成人?V秋霞-久久国产一级A片免费播放-亚洲国产欧洲综合97久久-久久国产白嫩美女呻吟高潮

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

Linux磁盤配額實(shí)戰(zhàn)指南:從ext4到xfs的配置與避坑

Linux磁盤配額實(shí)戰(zhàn)指南:從ext4到xfs的配置與避坑 1. 磁盤配額到底解決了什么問題磁盤配額這個功能說復(fù)雜不復(fù)雜說簡單也不簡單。簡單理解就是給用戶或組設(shè)置一塊磁盤空間的消費(fèi)上限超過這個上限就禁止繼續(xù)寫入。這在多用戶服務(wù)器、共享存儲、虛擬主機(jī)生產(chǎn)環(huán)境里幾乎是剛需。我踩過最典型的一個坑是早年給公司搭文件共享服務(wù)器沒配配額結(jié)果某個同事直接往共享目錄里拖了幾百GB的虛擬機(jī)鏡像一夜之間整個存儲池滿了所有業(yè)務(wù)系統(tǒng)同時報錯磁盤空間不足。從那以后我學(xué)乖了凡是要給多人用的目錄配額一定先配好再交付。那磁盤配額能干什么幾條實(shí)在的能力限制單個用戶在特定文件系統(tǒng)上的空間占用按塊block限制限制單個用戶可創(chuàng)建的文件數(shù)量按inode限制限制一組用戶的總空間占用和文件數(shù)量組配額設(shè)置軟限制和硬限制軟限制是警告閾值超過后系統(tǒng)會提示但允許繼續(xù)用一段時間硬限制是絕對上限超過就直接拒絕寫入通過寬限期grace time控制在軟限制之上還能撐多久到期后軟限制自動變成硬限制這套機(jī)制特別適合幾類場景企業(yè)對內(nèi)文件服務(wù)器、高校機(jī)房或?qū)嶒?yàn)室共享存儲、云服務(wù)器上給客戶開通的多租戶站點(diǎn)、以及任何形式的公共FTP/NFS存儲目錄。單機(jī)個人電腦其實(shí)不太用得上但如果你的電腦上建了多用戶賬號給家人或同事用配一下也省心。2. 配額機(jī)制的底層原理搞懂這些再動手2.1 限制的是塊和inode而不是文件大小這件事很多人第一次看配額會困惑為什么有的配額配置界面顯示的是1K Blocks其實(shí)Linux文件系統(tǒng)在底層管理空間的時候是以**塊block**為單位劃分的一個塊默認(rèn)是4KB。一個100KB的文件實(shí)際占用的是25個塊而不是一個100KB的文件。配額限制的就是這些塊的總數(shù)也就是用戶實(shí)際消耗的物理空間。inode這個維度就更底層了。每個文件至少要占用一個inodeinode里存的不是數(shù)據(jù)而是文件的元數(shù)據(jù)——權(quán)限、所有者、時間戳、數(shù)據(jù)塊指針等。如果一個文件系統(tǒng)inode耗盡即使物理空間還一大堆你也創(chuàng)建不了新文件。所以配額表里通常同時提供blocks和inodes兩個維度blocks管空間大小inodes管文件數(shù)量。2.2 軟限制、硬限制和寬限期三者協(xié)作的邏輯軟限制soft limit是一個提醒值。比如你給某個用戶設(shè)了軟限制5GB、硬限制8GB、寬限期7天。用戶用到5GB之后系統(tǒng)會告警但用戶還是能繼續(xù)寫一直寫到8GB被硬限制堵死但如果用戶一直是超了5GB但沒到8GB的狀態(tài)超過7天寬限期系統(tǒng)就會直接禁止繼續(xù)分配塊除非刪除文件把用量壓回5GB以下。硬限制hard limit就是一道硬墻。到了這個值not only新寫入被拒絕之前的文件也刪不掉不是的硬限制只阻止新數(shù)據(jù)的寫入用戶依然可以刪除自己的文件騰出空間。這一點(diǎn)在排查問題的時候特別重要——用戶說我刪了文件還是寫不進(jìn)去多半是刪除后仍然超出硬限制或者配額按塊計算、小碎文件刪了不少但釋放的塊不多。2.3 用戶配額、組配額、項(xiàng)目配額有什么區(qū)別Linux配額支持三個作用域用戶user quota、組group quota、項(xiàng)目/目錄project quota。用戶配額最容易理解限制的對象是UID每個人的占用獨(dú)立算賬。適合個人目錄、home目錄這類場景。組配額限制的對象是GID。比如某個項(xiàng)目組共享一個目錄組內(nèi)5個人都往里寫配額只統(tǒng)計這5個人共同消耗的總量。這比單獨(dú)給每個人限制更有實(shí)際意義——項(xiàng)目組需要的是一個項(xiàng)目總盤子。項(xiàng)目配額是較新內(nèi)核2.6.35引入的機(jī)制按目錄維度管理目錄打上project ID標(biāo)簽后不管哪些用戶往里寫都?xì)w到同一個配額賬戶里。適合托管目錄、共享目錄這種以目錄為邊界的管理模型。實(shí)務(wù)上最常用的組合是用戶配額組配額同時啟用。舉例用戶A限額2GB、用戶B限額2GB同時A和B組成的組G限額3GB。這樣既防止個人濫用也防止整個團(tuán)隊用爆公共盤。2.4 開啟配額對文件系統(tǒng)有什么要求不是隨便一個分區(qū)就能直接開啟配額的關(guān)鍵前提有三個文件系統(tǒng)類型要支持。ext3、ext4、xfs、btrfs都原生支持配額ext4和xfs是生產(chǎn)環(huán)境中最穩(wěn)的選擇。老舊的ext2也可以但沒必要。FAT32/NTFS這類文件系統(tǒng)在Linux下掛載的話配額支持很弱建議不要折騰。必須掛載在獨(dú)立分區(qū)上。配額是一個文件系統(tǒng)級別的特性不能跨多個掛載點(diǎn)統(tǒng)一配額。你如果只給/home配了配額用戶把數(shù)據(jù)塞到/data下配額管不著。所以規(guī)劃配額之前先想清楚哪些目錄需要配額最好一開始就把它們單獨(dú)分區(qū)。掛載參數(shù)要帶上配額開關(guān)。ext4需要usrquota和/或grpquota掛載選項(xiàng)xfs比較特殊配額是文件系統(tǒng)自帶的特性掛載時需要uquota/gquota或prjquota參數(shù)不同發(fā)行版寫法略有差異。注意改掛載選項(xiàng)要寫入/etc/fstab并正確重掛載或重啟否則重啟后配額狀態(tài)會丟失。xfs格式的配額文件在掛載時是不能直接使用quotacheck等傳統(tǒng)命令的操作方式不同這個后文細(xì)說。3. 實(shí)操前準(zhǔn)備分區(qū)、掛載點(diǎn)、工具安裝3.1 推薦的環(huán)境與版本基準(zhǔn)我后面寫的所有步驟都是基于主流的RHEL/CentOS 7/8/9 或 Ubuntu 20.04/22.04 環(huán)境內(nèi)核版本4.x及以上文件系統(tǒng)以ext4為主xfs部分單獨(dú)說明。如果你用的是老系統(tǒng)命令參數(shù)可能會有細(xì)微差別但整體流程不變。先說一個實(shí)用判斷拿到一臺機(jī)器做配額之前先跑一下df -hT看清楚當(dāng)前分區(qū)和文件系統(tǒng)類型。見過太多人不管三七二十一先裝quota工具裝完發(fā)現(xiàn)要配額的分區(qū)是xfs手忙腳亂。先看環(huán)境再動手能省一半排查時間。3.2 安裝quota工具包quota工具在絕大多數(shù)發(fā)行版的基礎(chǔ)倉庫里都有# CentOS / RHEL / Rocky yum install -y quota # Ubuntu / Debian apt install -y quota # 新一點(diǎn)的系統(tǒng)可能要用 dnf dnf install -y quota裝完之后驗(yàn)證一下rpm -qa | grep quota dpkg -l | grep quota如果這條命令沒有輸出說明沒裝上。此外建議順手裝一個ncdu或du習(xí)慣后面核對配額用量的時候要用到。3.3 準(zhǔn)備好一個獨(dú)立分區(qū)硬性條件為了演示我們假設(shè)機(jī)器上有一塊獨(dú)立磁盤/dev/sdb1掛載在/data目錄專門用于多用戶共享文件。先把分區(qū)格式化mkfs.ext4 /dev/sdb1如果有現(xiàn)成的/home獨(dú)立分區(qū)也可以直接拿它演示。但不管用哪個你絕對不能對根分區(qū)/做配額操作實(shí)踐因?yàn)楦謪^(qū)一旦配額配置失誤很可能導(dǎo)致系統(tǒng)起不來或用戶登錄異常。演示環(huán)境怎么折騰都行生產(chǎn)環(huán)境務(wù)必小心。格式化完成后創(chuàng)建掛載點(diǎn)并掛載mkdir -p /data mount /dev/sdb1 /data df -h /data3.4 修改fstab讓配額開關(guān)永久生效很多教程會教你先手動改掛載參數(shù)掛載一遍再來說fstab。我建議直接一步到位編輯/etc/fstab加上配額選項(xiàng)然后用mount -o remount重掛載。這樣不重啟也能生效而且重啟后配置不會丟。以/dev/sdb1 /data為例fstab里的寫法是/dev/sdb1 /data ext4 defaults,usrquota,grpquota 0 0usrquota表示啟用用戶配額grpquota表示啟用組配額。如果你只需要用戶配額只寫usrquota即可如果兩個都需要就都寫上別漏。改完fstab后執(zhí)行mount -o remount /data然后確認(rèn)掛載參數(shù)已經(jīng)生效cat /proc/mounts | grep /data輸出里能看到usrquota,grpquota字樣就說明掛載參數(shù)帶上了。如果fstab寫錯了這個命令可能報錯系統(tǒng)會提示你重新檢查。千萬別跳過這一步去重啟重啟后發(fā)現(xiàn)系統(tǒng)起不來再去改fstab那就被動了。提示如果是xfs文件系統(tǒng)fstab里的掛載選項(xiàng)通常寫uquota,gquota或者usrquota,grpquota在新內(nèi)核同樣識別xfs下的配額文件是作為文件系統(tǒng)內(nèi)部元數(shù)據(jù)自動管理的不需要手動創(chuàng)建aquota.user等文件。3.5 確認(rèn)內(nèi)核是否支持配額絕大多數(shù)發(fā)行版內(nèi)核都默認(rèn)打開了配額支持但保險起見可以確認(rèn)一下grep -i quota /boot/config-$(uname -r)能看到類似CONFIG_QUOTAy、CONFIG_QUOTACTLy、CONFIG_QUOTA_NETLINK_INTERFACEy的輸出就行。如果這些配置項(xiàng)是m或沒有需要重新編譯內(nèi)核或換個內(nèi)核版本。這個步驟在標(biāo)準(zhǔn)云鏡像上幾乎從沒出過問題但檢查成本極低順手做沒壞處。4. 初始化配額數(shù)據(jù)庫并設(shè)置用戶/組配額4.1 創(chuàng)建配額文件quotacheckext文件系統(tǒng)啟用配額后系統(tǒng)需要在文件系統(tǒng)根目錄維護(hù)配額記錄文件傳統(tǒng)上是aquota.user和aquota.group新版系統(tǒng)也支持quota.user但aquota系列最通用。初始化命令quotacheck -cug /data參數(shù)解釋-c創(chuàng)建配額文件如果不存在-u啟用用戶配額檢查-g啟用組配額檢查-v顯示詳細(xì)過程可選但推薦能看到每個文件系統(tǒng)的處理情況你可以在/data目錄下用ls -l確認(rèn)ls -l /data/aquota.user /data/aquota.group如果跑完quotacheck報錯“Cannot find quota file”或者“Permission denied”多半是前面掛載參數(shù)沒生效或者SELinux在攔。解決辦法后面第7節(jié)會單獨(dú)講。4.2 首次掃描的作用與注意事項(xiàng)quotacheck的機(jī)制是遍歷文件系統(tǒng)里每個文件的屬主和所屬組把所有已占用空間和inode數(shù)據(jù)匯總寫入配額文件。在已有大量數(shù)據(jù)的目錄上首次啟用配額這一步是必須的因?yàn)橄到y(tǒng)此前并不知道每個用戶已經(jīng)消耗了多少。這里有一個關(guān)鍵的運(yùn)維經(jīng)驗(yàn)對線上正在服務(wù)的數(shù)據(jù)目錄執(zhí)行quotacheck要在業(yè)務(wù)低谷期做最好先卸載或只讀掛載在做。因?yàn)閽呙杵陂g文件的變化可能導(dǎo)致配額記錄和實(shí)際不一致。生產(chǎn)實(shí)例如果實(shí)在不能停機(jī)可以接受短暫的不一致跑完后再用quotacheck重掃一次。但千萬別在配額文件生成過程中貿(mào)然重啟。4.3 用edquota交互式為單個用戶設(shè)置配額創(chuàng)建好配額數(shù)據(jù)庫之后給用戶zhangsan設(shè)置配額edquota -u zhangsan這條命令會打開一個文本編輯器界面內(nèi)容類似Disk quotas for user zhangsan (uid 1001): Filesystem blocks soft hard inodes soft hard /dev/sdb1 104 12 24 7 3 5各列含義blocks該用戶當(dāng)前已占用的塊數(shù)每塊大小在掛載參數(shù)里確定默認(rèn)1KB單位顯示soft/hard空間塊軟限制和硬限制inodes該用戶當(dāng)前已創(chuàng)建的文件/目錄數(shù)量soft/hard右側(cè)兩列inode的軟限制和硬限制注意編輯時左右兩組soft/hard要對應(yīng)清楚左側(cè)是存儲空間、右側(cè)是文件數(shù)量。我自己第一次配置時就搞混過把文件數(shù)硬限制當(dāng)成空間限制了害得用戶沒法建目錄反而可以隨便寫數(shù)據(jù)——這錯得很隱蔽。把數(shù)字改好保存退出。比如要限制空間2GB硬限制2048MB即2048個1KB單位不對這里單位是1K blocks2GB要寫成2048000個1K block稍微算一下和文件數(shù)10000個Filesystem blocks soft hard inodes soft hard /dev/sdb1 104 1843200 2048000 7 9000 10000這里就是單位換算的關(guān)鍵坑1K blocks進(jìn)位的單位是KB2048000個單位是2048000KB約2GB實(shí)際2,048,000KB 1.95GB但四舍五入可接受。我建議直接按KB來換算2GB 2 × 1024 × 1024 2097152 KB但寫的時候注意2048000和2097152就差一點(diǎn)分區(qū)大小足夠就行設(shè)置成整數(shù)比較方便管理。我的習(xí)慣是用2048000這種整數(shù)因?yàn)榭粗庇^。4.4 批量設(shè)置配額從參考用戶復(fù)制如果用戶數(shù)量多一個個edquota顯然低效。edquota提供了-p參數(shù)可以把一個參考用戶的配額原樣復(fù)制給其他用戶edquota -p zhangsan lisi wangwu這樣lisi和wangwu就復(fù)制了zhangsan的配額設(shè)置。對幾十個用戶批量初始化時非常方便。更徹底的方式是寫個循環(huán)腳本結(jié)合setquota命令非交互設(shè)置for user in zhangsan lisi wangwu; do setquota -u $user 1843200 2048000 9000 10000 /data donesetquota的參數(shù)順序是-u 用戶名 軟塊數(shù) 硬塊數(shù) 軟inode數(shù) 硬inode數(shù) 文件系統(tǒng)。所有值都是數(shù)字單位是1KB塊/個。4.5 配置組配額組配額設(shè)置方式和用戶配額幾乎一樣只是-u換成-gedquota -g project_team組配額默認(rèn)會統(tǒng)計該組所有成員寫入的塊數(shù)總和。假設(shè)project_team組里有5個人你給組配額設(shè)了10GB硬限制那么這5個人加在一起最多寫到10GB。這里有個重點(diǎn)用戶配額和組配額是疊加生效的。比如用戶A個人硬限制2GB組G硬限制3GB那么A的寫入受“兩者中先命中的那個”約束。他寫到2GB會撞到用戶硬限制但整個組才消耗了1.5GB組配額還沒觸發(fā)。反之如果A已經(jīng)寫了1GB組里其他人寫了2.5GB組硬限制已經(jīng)觸發(fā)A即使個人沒用完也寫不進(jìn)去。這種雙維度限制在項(xiàng)目制環(huán)境里非常好用但要跟用戶解釋清楚規(guī)則不然會被罵“為什么我限額還沒到就寫不進(jìn)去了”。4.6 設(shè)置寬限期寬限期的默認(rèn)值是7天如果你覺得太長或太短可以改edquota -t界面會顯示類似Grace period before enforcing soft limits for users: Time units may be: days, hours, minutes, or seconds Filesystem Block grace period Inode grace period /dev/sdb1 7days 7days改成3天/dev/sdb1 3days 3days寬限期只對軟限制有意義。如果你直接設(shè)置硬限制寬限期對它完全無效——硬限制從生效那一刻起就不可逾越。5. 配額狀態(tài)查看與配額報告5.1 用quota命令查單用戶用量切換成普通用戶身份執(zhí)行quota -u zhangsan輸出類似Disk quotas for user zhangsan (uid 1001): Filesystem usage quota limit grace files quota limit grace /dev/sdb1 104K 1843200K 2048000K 7 9000 10000這里的quota列對應(yīng)軟限制limit列對應(yīng)硬限制。用戶自己也可以執(zhí)行這個命令看自己用了多少。如果某個用戶進(jìn)入了grace期輸出里會顯示剩余時間一眼就能看出他是不是“踩線”了。5.2 用repquota生成全體配額報告運(yùn)維視角下最常用的命令其實(shí)是repquotarepquota -a-a表示報告所有啟用了配額的文件系統(tǒng)。輸出*** Report for user quotas on device /dev/sdb1 Block grace time: 3days; Inode grace time: 3days Block limits File limits User used soft hard grace used soft hard grace ---------------------------------------------------------------------- root -- 215424 0 0 5500 0 0 zhangsan -- 104 1843200 2048000 7 9000 10000 lisi - 4096 102400 2048000 2days 12 9000 10000注意第二行zhangsan前面的標(biāo)記--代表一切正常沒有超過軟限制-代表空間或inode超了軟限制但硬限制還沒到正在grace期內(nèi)-同理只是方向不同代表軟硬限制都超了比如lisi那行出現(xiàn)了-和2days說明他已經(jīng)超過了塊軟限制還剩2天寬限期。這種輸出非常適合寫腳本監(jiān)控如果報告中出現(xiàn)非--的行就告警通知管理員查看。5.3 用quotacheck重新校正配額數(shù)據(jù)配額數(shù)據(jù)是動態(tài)維護(hù)的正常情況下每次寫入都會實(shí)時更新。但偶爾會遇到配額記錄和實(shí)際不符的怪問題比如用戶copy了文件但配額統(tǒng)計沒變或者明明刪了大量文件配額占用卻不降。這時重新跑一次quotacheck就能校正quotacheck -avug-a檢查所有配額文件系統(tǒng)-v打印詳細(xì)過程。跑完后配額記錄會和實(shí)際用量重新對齊。這個命令本身有開銷文件越多、體量越大耗時越長。建議在文件系統(tǒng)變化不頻繁的窗口期跑比如深夜定時任務(wù)。6. xfs文件系統(tǒng)配額配置的特異性6.1 為什么xfs不能照抄ext4的步驟很多人在xfs上執(zhí)行quotacheck會得到類似quota not enabled on filesystem的報錯或者直接卡死原因在于xfs的配額機(jī)制和ext系完全不同。xfs從誕生起就把配額作為文件系統(tǒng)內(nèi)建的“日志型”功能配額信息通過掛載參數(shù)直接開啟不需要外部配額文件因此也不存在aquota.user這種文件。xfs的掛載選項(xiàng)常見寫法是/dev/sdb1 /data xfs defaults,uquota,gquota 0 0其中uquota用戶配額gquota組配額。老內(nèi)核版本也接受usrquota,grpquota但新版xfs更推薦直接用uquota,gquota。掛載后在xfs文件系統(tǒng)上設(shè)置配額也有專門工具xfs_quota -x -c limit bsoft1843200 bhard2048000 isoft9000 ihard10000 -u zhangsan /data參數(shù)分解-x進(jìn)入專家模式-c執(zhí)行命令limit bsoft1843200 bhard2048000設(shè)置塊軟限制/硬限制isoft9000 ihard10000設(shè)置inode軟限制/硬限制-u zhangsan針對用戶/data目標(biāo)文件系統(tǒng)查看xfs配額報告的指令是xfs_quota -x -c report -u /data輸出和repquota類似同樣能列出每個用戶的使用量、軟硬限制和grace狀態(tài)。6.2 ext4和xfs配額管理的差異對照我列一個簡單的對照表方便你判斷自己該按哪套流程走對比項(xiàng)ext3/ext4xfs是否生成磁盤配額文件存在aquota.user/aquota.group不生成外部文件由元數(shù)據(jù)管理是否需要quotacheck需要用于初始化和校正不需要底層掃描配額信息可靠啟用掛載參數(shù)usrquota,grpquotauquota,gquota/prjquota配額設(shè)置命令edquota / setquotaxfs_quota -c limit ...配額報告命令repquota / quotaxfs_quota -c report ...日志型一致性一般掃描校正強(qiáng)日志記錄適合規(guī)模中小型單機(jī)/家庭服務(wù)器企業(yè)級/大容量/高并發(fā)如果你用的是新版CentOS/Rocky默認(rèn)安裝的xfs根文件系統(tǒng)想給home目錄配配額直接走xfs路線別再折騰edquota了。但傳統(tǒng)ext4環(huán)境在所有舊文檔和老教程里還是絕對主流兩種都掌握才不會被卡住。7. 常見問題排查與實(shí)戰(zhàn)避坑技巧7.1 quotacheck報錯Cannot find quota file或Operation not permitted這兩類報錯出現(xiàn)時最先懷疑的方向不是quota工具本身而是掛載參數(shù)或SELinux。排查順序# 確認(rèn)掛載參數(shù)是否帶上了 mount | grep /data # 確認(rèn)fstab是否寫對 cat /etc/fstab | grep /data # 臨時禁用SELinux測試排查用 setenforce 0 quotacheck -cug /data如果setenforce 0后要再次測試出問題看ausearch -m avc -ts recent | grep quota確認(rèn)是否被SELinux攔截。真正的修復(fù)方法是調(diào)整SELinux布爾值或文件上下文而不是長期關(guān)閉SELinux。quota相關(guān)目錄的SELinux類型通常需要設(shè)為quota_db_trestorecon -Rv /data但最直接的做法是給掛載目錄設(shè)置正確的上下文。這個知識點(diǎn)容易被人忽略因?yàn)槟J(rèn)SELinux策略下普通數(shù)據(jù)目錄的上下文不是quota專用類型導(dǎo)致寫aquota文件被拒。7.2 配額已設(shè)但用戶仍能無限寫入這類問題是我在群里看到提問頻率最高的。原因通常是下面幾種掛載參數(shù)根本沒帶上配額標(biāo)志。檢查/proc/mounts輸出如果只有defaults而沒有usrquota,grpquota配額功能形同虛設(shè)。配額作用于了錯誤的分區(qū)。用戶把文件寫到了另一個沒開配額的分區(qū)上配額當(dāng)然管不到。比如你只在/data開了配額用戶的$HOME在/home且沒開配額他把數(shù)據(jù)放到家目錄就繞過了所有限制。軟限制設(shè)置得太大或忘記了硬限制。有些人只設(shè)了軟限制沒設(shè)硬限制寬限期一過系統(tǒng)可能直接拒絕——但這個“可能”取決于版本和配置。老版本在寬限期結(jié)束后才會把軟限制變硬限制如果你的版本行為不是這樣就會看起來“沒限制”。用戶是root。root用戶默認(rèn)不受配額限制這是設(shè)計如此不要花時間去“修復(fù)”。逐一排查時別忘了看quota -u 用戶名的實(shí)際輸出。有時候你以為設(shè)置了實(shí)際上沒保存成功。7.3 刪除文件后配額用量不下降這個情況很多人遇到以后第一反應(yīng)是系統(tǒng)壞了其實(shí)大概率不是。原因在于配額統(tǒng)計的是塊占用不是文件數(shù)量并且塊是預(yù)分配的。舉個例子用戶寫了一個100GB的稀疏文件比如dd創(chuàng)建大文件然后seek跳著寫文件系統(tǒng)可能預(yù)分配或稀疏映射了很多塊。刪除部分文件后如果還在硬限制之上寫入依然被拒看起來就是“我刪了但還是寫不進(jìn)去”。另一個常見情況是文件被進(jìn)程持續(xù)占用。用戶刪了文件但因?yàn)槟硞€服務(wù)還持有文件句柄磁盤空間并沒有真正釋放進(jìn)程內(nèi)read/write不會中斷。這種情況你可以這樣確認(rèn)lsof L1 | grep deleted看到still open的deleted文件就知道是哪個進(jìn)程占了。殺掉對應(yīng)進(jìn)程或重啟服務(wù)后空間才真正歸還。7.4 重啟后配額丟失重啟后配額丟失幾乎可以確定是fstab沒有修改或者掛載參數(shù)沒有正確寫入。有些人圖省事只手動mount時帶了參數(shù)重啟后系統(tǒng)按fstab默認(rèn)配置掛載配額開關(guān)自然沒了。排查cat /etc/fstab | grep /data如果fstab里沒配額選項(xiàng)重新編輯并重啟或者重新mount -o remount。還有一個細(xì)節(jié)是老舊的Linux版本fstab中連續(xù)掛載參數(shù)之間不能有空格寫成defaults,usrquota,grpquota而不是defaults, usrquota, grpquota否則重啟時解析會出問題。7.5 生產(chǎn)環(huán)境第一次啟用配額的操作節(jié)奏這個屬于經(jīng)驗(yàn)篇了。生產(chǎn)環(huán)境第一次啟用配額我建議的節(jié)奏是先在測試機(jī)上完整走一遍全流程記錄每個命令的實(shí)際輸出找業(yè)務(wù)低谷窗口備份數(shù)據(jù)或做快照修改fstab添加配額掛載選項(xiàng)執(zhí)行mount -o remount觀察系統(tǒng)日志dmesg | tail確認(rèn)掛載成功無報錯執(zhí)行quotacheck -cugm /data其中-m是“不阻止寫入”的強(qiáng)制模式適合在線執(zhí)行雖然我還是推薦短時只讀掛載更穩(wěn)用edquota/setquota批量設(shè)置配額用repquota -a核對數(shù)據(jù)是否準(zhǔn)確觀察24小時確認(rèn)無異常后再把流程納入常規(guī)維護(hù)手冊7.6 監(jiān)控配額使用率的實(shí)用腳本思路配額管理不能設(shè)完就撒手不管建議寫個簡單的告警腳本放到cron里。我用得最多的核心邏輯是解析repquota的輸出找到超過軟限制的用戶并發(fā)送通知一個bash函數(shù)就夠repquota -a | awk $3 ~ /[0-9]/ $3 $4 {print $1, $2, $3, $4}這段的意思是輸出文件中第三列used超過第四列soft limit的記錄。你把它接入短信或釘釘webhook就成一個最小可用的配額告警系統(tǒng)。當(dāng)然生產(chǎn)環(huán)境用成熟監(jiān)控平臺如zabbix、prometheusnode_exporter更正規(guī)但這個“做殼”思路能幫你快速發(fā)現(xiàn)問題。8. 一個小眾但在多項(xiàng)目環(huán)境非常實(shí)用的擴(kuò)展項(xiàng)目配額上文提了一句project quota這里展開說一下。傳統(tǒng)的用戶/組配額在“一個用戶參與多個項(xiàng)目”的場景里會失控一個用戶分了2GB總配額但他可能給項(xiàng)目A、項(xiàng)目B、項(xiàng)目C各寫了1GB加在一起自己先撞了墻項(xiàng)目之間的隔離也沒做到。項(xiàng)目配額project quota把“誰寫”變成“寫到哪里”以目錄為維度做限制。典型操作# 對目錄打項(xiàng)目ID標(biāo)簽 mkdir -p /data/proj_a chattr -R p /data/proj_a # 打開project屬性非所有文件系統(tǒng)支持ext4需要內(nèi)核CONFIG_EXT4_FS_PROJECTy # xfs上直接分配prjquota xfs_quota -x -c project -s -p /data/proj_a proj_a /data xfs_quota -x -c limit -p bhard10g proj_a /dataext4項(xiàng)目配額的配置流程相對繁瑣而且需要內(nèi)核編譯支持。我自己的經(jīng)驗(yàn)是如果你想用目錄維度配額直接選xfs別在ext4上硬磕省心太多。xfs的項(xiàng)目配額是RHEL/CentOS特意在系統(tǒng)安裝時預(yù)置了prjquota支持生產(chǎn)上非常穩(wěn)。項(xiàng)目配額有一個附帶的好處即使權(quán)限上不同用戶混寫同一個目錄項(xiàng)目配額也能統(tǒng)一算總賬非常適合臨時拉人進(jìn)項(xiàng)目又不想逐個改用戶配額的協(xié)作環(huán)境。9. 我踩過幾次坑之后的最終體會說實(shí)話磁盤配額本身并不難大部分坑都出在文件系統(tǒng)類型判斷錯誤和掛載參數(shù)沒有真正生效這兩件事上。我給新手的忠告是上手之前先用df -hT認(rèn)清楚文件系統(tǒng)再決定走ext4流程還是xfs流程改完fstab后不要偷懶跳過mount -o remount加cat /proc/mounts驗(yàn)證這兩個動作加起來不過幾秒鐘卻能在配額全流程里省掉成小時的排查。另外配額始終是管理工具不是存儲備份。它只能防止單點(diǎn)用戶撐爆磁盤不能替你處理誤刪、病毒、磁盤物理故障。真正重要的業(yè)務(wù)目錄配額要和監(jiān)控告警、定期快照、定期巡檢配合起來才是一套比較完整的數(shù)據(jù)保護(hù)方案。如果你目前只是在一臺小服務(wù)器上給幾個同事分空間按照第4節(jié)的流程配好用戶配額就足夠了沒必要一開始就上項(xiàng)目配額。真到了多項(xiàng)目、多目錄、多人交叉寫入的規(guī)模再切xfs項(xiàng)目配額完全不遲。配額這東西配好之后平時幾乎感覺不到它存在但一旦有人把整盤寫滿你會慶幸當(dāng)初花了一個下午把這事兒做完了。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
五月婷婷视频在线观看| 久久丁香九| 婷婷五亚洲| 五月婷久久草| 欧美性爱专区| 五月婷婷啪啪| 成人视屏在线观看| 日韩aaa| 97操操| 午夜不卡久久精品无码免费| 久操操| 亚洲综合在线丁香五月| 91丨熟女丨首页| www...com黄在线观看| 成人色图情色成人网 www.5b5b5bcom 五月天| 午夜色婷婷| 欧美色必爱| 99人人干| 深爱婷婷丁香五月激情| 激情五月天色婷婷| 中国AV性爱观看| 97综合在线| 色五月美女| 天天日夜夜拍| 九九热免费视频| 激情五月婷婷综合| 五月丁香亚洲综合| 天天激情5月天亚洲| 超碰成人在线免费观看| 久久久精品免费啪啪国| 99ER热精品视频| 97碰免费视频在线| 婷婷综合五月| 97人妻碰碰中文无码久热丝袜| 色色色色色网站| www.日韩艹| 永久的网站AAAA| 婷婷97C| 中文中文在线| 婷婷91视频| 色播五月天激情| 人妻九九九九| 五月天开心色情网| 人妻中文在线| 狠狠五月天| 六月丁香激情网| 丁香五月AV综合激情| 亚洲AV综合在线观看| 操操操97| 色99久草在线| 激情碰碰碰| 播丁香五月婷婷欧美| 色五月91| 五月丁香六月婷| 亚洲综合五月天婷婷丁香| www.99情趣网| 99色精品| 色999五月色| 久久婷狠狠色| 激情九月婷婷| 99精品久久久久久| 亚洲色图81p| 久久婷婷丁香视频网| 婷婷热色| 五月丁香啪啪综合| 色婷婷国产精品综合在线观看| 综合婷| 九色视频九色九色91jiuseshipin| 欧美成人AAA片一区国产精品| 丁香五月婷婷在线| 日本操B视频| 香蕉久操| 久re热视频| 日日操夜夜操无码免费| 99色在线观看| 99热骚货| 五月亭亭直播| 欧美激情综合| 人妻丰满精品一区二区A片| 国产精品A成V人在线播放| 国产亚洲在线观看| 伊人激情网| 丁香五月97视频| 久久R激情| 91夫妻网站九色| 久久密臀婷婷| 成人在线网| 九玖视频这里只有精品| 五月丁香另类网| www.99热. com这里只有精品| 久久婷婷综合五月趴| 久久激情五月婷婷| 天天色视频| 九九热精品在线| 玖玖色综合色| 99性视频| 人人舔天天| 五月天婷婷色综合| 色五月天电影| 色播激情婷婷| 五月花综合| 天天日人人| 久久色这里只有精品| 久久怡红院| 婷婷五月色播放| 久久五月激情| 无码AV大香线蕉伊人| 操日视频| 性生活视频98791| 亚洲综合五月天| 超碰AV在线| www.色五月| 五月久久丁香| 丁香五月自拍| 97视频.干com| 亚洲超碰中文字幕| 丁香五月图片| www色色色com| 另类激情首页| 日本乱子人伦在线视频| 99热1| 色色五月天丁香婷婷| 日日噜人人人做人| 狠狠色五月天| 99在线视频。| 婷婷五日b| 色婷婷激情| 欧美性猛交 XXXX 乱大交| 日产精品一线二线三线芒果| 99精品在线播放| 99久久免费精品| 五月天婷婷在线观看| 婷婷五月丁香亚洲| 日韩成人AV在线| 五月色丁香激情| 亚洲成人免费在线| 久久曰曰| 中文在线视频久9| 五月天婷婷色紫薇阁| 丁香五月天在线观看| 天天做天天爱天天爽| 激情久久久| 久久99看免费| 色亚洲欧洲| 开心五月婷婷激情| 99精品久久| 久热视频这里只有精品| 国产亚洲精品久久久久久久久动漫| 久久电影4399| 亚洲综合五月天| 在线看的免费网站| 天天婷婷操| 国产精品久久..4399| 婷婷桃色网| 99久久这里只有精品免费官网| 先锋资源婷婷| 婷婷伊人75| 一级A片天天操夜夜操| 中文字幕在线观看视频www| 免费观看2018www黄色操逼网站| 亚洲综合干| 五月天色不卡| 精品思思久久| 五月天激情久久| 五月天婷婷社区久久综合| 天天干天天操天天爱| 成人精品视频99在线观看免费| 欧美在线看| 99热6精品| 在线看九一V图片| 久久99视频| 五月婷婷六月天| 9999热精品| 俺也高清无码高清视频| 久热99久热| 日韩99色99| 色综合77777| 国产精品久久99| 99综合免费视频| 人妻激情在线| 色五月大香蕉| 97视频久久| 色玖玖综合| 激情婷婷五月少妇| 99热九九在线| 色色色色色色色色色色色色色色,网站| 日日射天天射| 色色丁香五月天社区| ji'qi'luan'ren'lun| 色婷婷小视频| 99色 | AV中文在线| 九九色综合| 欧美情月伍月天| 九九热在线99| 五月丁香久久激情网| 国外亚洲成AV人片在线观看| 天天操,夜夜骑| 五月刺激丁香月综合| 婷婷久久亚洲| 日韩在线视频中文字幕| 精品一区二区三区免费毛片爱| 【乱子伦】黄色| 蜜桃五月天| www,欧美干干干干干干| ady狠狠入| 丁香婷婷成人网| 玖色色综合| 伊人AV五月婷| 五月婷婷综合激情网| 五月丁香六月激情在线| 色五月六月婷婷| 色色色九九九五月婷婷| A1片久久久| 8区视频在线| 综合99综合久久久久久久| 国产99久久久| 激婷网| 丁香五月婷婷色情综合| 玖玖资源站国产| 激情五月久久| 人人射人人高潮| 日本婷婷在线| 欧美电影在线观看| 丁香五月区| 日日操夜夜爽白洁| 男人的天堂97| 丁香网站| 91碰| 久久婷婷五月综合色丁香| 97色婷婷在线观看| 成人 在线观看国产| 天天操天天操天天操天天操天天操天天操天天操天天操天天操 | 超碰免费人人肏| 五月天国产| 91操碰| 日本婷婷| www久久艹| 99热6这里之有精品| 婷婷色五月大香蕉在线| 色五月丁香网| 精品无吗va视频免费观看| 五月丁香久久呀| 九九热精品视频在线观看| 婷婷五月天综合色| 天天做天天爱天天日| AV片在线观看| 婷婷五月综合在线| 七七九色| 日韩aaa| 欧韩性爱| 伊人久久大香蕉网| 色色丁香五月天社区| 26uuu日韩| 久久成人人妻| 99re这里有精品手机在线| 欧美久久网| 99婷婷精品推荐在线视频| 欧美性爱中文字幕| 激情综合色播| 丁香五月亚洲综合| 99热久久这里只有精品| 99免费综合网| 婷婷综合色图| 丁香五月天堂婷婷| A片试看120分钟做受视频红杏| 国产白丝在线一区| 久久99精品久久久久久三级| 激情综合色播| 婷婷丁香综合成人| 99秘 在线| 色情婷婷| 色婷婷五月影院| 丁香五月天久久| 婷婷天天色| 亚洲婷婷久久综合| 丁香五月欧美| 丁香五月播播| 99无吗| 伊人五月久久| 六月激情婷婷综合| 五月天 综合 在线| 综合激情网五月激情| 五月天婷婷綜合院| 欧美日比视频| 五月丁香啪啪啪啪| 五月丁香色情| 激情五月天久久丁香| 97性视频| 乱码操操| 91超碰人人操| 久久这里这里有精品免费视频| 9l视频自拍9l视频自拍九色学生| 99热线观看9| www九九热| 日韩成人综合网| 久久婷婷内射| 开心激情站| 五月婷婷丁香网| 亚洲AV激情五月综合网| 亚洲色婷婷网站| 久久综合激情五月天| 999热在线视频| www.99精品在线| 亚洲啪啪精品| 久久丝袜婷婷| 久久婷婷视频| 日本狠狠爽| 色综合色综合色综合高潮| 久久丁香五月婷婷激情综合网| 色婷婷丁香五月天| 欧美黑人巨大猛烈cuckold| 天天搽天天射| 婷婷五月丁香色情| 综合五月网| 天天日天天做天天操| 99亚洲大片精品永久在线观看| 色五月丁香婷婷综合| 狠狠五月天婷婷| 色婷| 天干天天干天天天天天| 久久66成人网站| 99精品大片| 婷婷久久丁香| 国产激情视频在线观看| 99久在线观看| 偷拍九九热| www.五月天| 久热一区| 禁欲电影完整版在线播放| 亚洲五月天第一综合干| 久久182| 五月丁香激情啪啪| 五月丁香天天| 欧美图片丁香五月天| 成人精品视频99在线观看免费 | 亚洲欧洲中文日韩久久AV乱码| 婷婷日日夜夜| 九九热只有精品6| 亚洲天堂制| 五月天婷婷在线观看| 国产精品久久久丁香五月八戒视频| 丁香五月停停基地| 婷婷五月天A V| 最新色色五月天| 六月天六月婷| 亚洲色啪| AV在线大香蕉| 欧美黄色AA片哗啦啦啦| 色丁香在线视频| 丁香五月婷婷少妇| 中文字幕一色哟哟哟哟| 色欲色香综合网| 丁香色综合| 亚洲一级AV在线免费播放| 99热伊人| www.五月婷婷久久.com| 色五月婷婷亚洲| 夜夜躁狠狠 | 2050人人操免费工开爱| 日本综合久久| 91干| 婷婷久久五月天| 天天爱天天做天天爽| 亚洲欧洲国产精品| 丁香五月天婷婷91| 被男人添B超爽视频| 亚韩在线视频| 色色无码| 激情五月天综合婷婷网| 国模淫穴色图| 丁香五月激情六月| 五月丁香六月婷婷,婷| 黑人无码一区| 热九九九九| chaopengdaxiangjiao| 国产精品成人AV在线| 色丁香婷婷| 最新激情五月天| 欧美操逼天堂| 久久99精品久久久久久青青AR| 亚洲无AV在线中文字幕| 97色色色| 乱岳熟女50岁| 最新色色五月天| 玖操97| 色色99色色| 色色综合网站| 综合亚洲六月婷婷在线| 久久九色| 九九综合精品| 亚洲色啪| 亚洲色精彩| 亚洲综合婷婷| 久久久网站| 99久久www| 97人人看一| 99热热热99精品丁香| 狠狠操狠狠爱| 九热视频| 五月香婷婷| 五月丁香激情综合网| 久草热视频在线观看| 99色爱| 99精品爱| 99这里只有精品国产| 俺也去在线久久精品23欧美综合视频网站,丰满人妻一区二区三区在线视频53,丰满 | 超碰国产一区| 婷婷综合性爱网| 黄桃AV无码免费一区二区三区| 婷婷精品视频| 日本黄色三级片内射| 久久视频婷婷| 九九五月天| 国产视频婷婷| 综合色五月| 亚洲AAAA网| 日本噜噜色网| 亚艹艹| 五月婷婷免费视频| 另类五月激情| 99热免费| 日本久久综合| 另类小说色婷婷| 91五月天| 依人大香蕉在钱1| 熟女人妻一区二区三区免费看| 国精产品一区一区三区免费视频| 日比网免费国产| 六月丁花香啪啪激情欧美| 夜色热久| 色婷婷情片| yellow视频在线观看91| 婷婷第六色| 插插插色综合网| 激情色情五月天| 六月丁香色婷婷| 婷婷五月天基地| AV在线免费网站| 成人丁香| 婷婷字幕在线| 欧美日比视频| 一本久久亚洲五月婷婷| 激情99在线视频| 亚洲秘 无码一区二区三区妃光/1| 六月99天天婷婷激情综合| 婷婷娌伦网| 激情五月天电影| 免费无码毛片一区二区A片| www.91av.com| 五月婷婷色播| 伊人久久婷婷五月天激情四射| 五月婷婷激情中心| 五月丁香激情四射| 亚洲精品国产熟女久久久| 五月丁香婷婷伊人日韩| 久久婷婷网| 思思视频精品| 久久久久人妻精品| 亚洲精品色| 五月丁香六月激情网站| 久久婷婷色情7777网站| 狠狠色狠狠色综合日日91| 99网| 人妻丰满精品一区二区A片| 欧美一级毛卡片无码| 九九亚洲无码| Va另类视频| 丁香五月人妻| 精品成人在线| 91九色精品熟女内射| 丁香涩涩五月天| 日韩 中文 欧美| 成人精品视频99在线观看免费| aaaa.黄| 丁香五月综合久久八| 激情综合婷婷| 综合久久99| 天天爽夜夜操| 五月天色色婷婷| 99免费视频久久| 自拍盗摄 另类| 狠狠色噜噜狠狠狠888| WWW.HENHENL.| 4399亚洲视频| 99精在线| 亚洲AV免费在线| 丁香五月大香蕉AV| 五月色天五月色| 九色91国产| 婷婷五月丁香青青草在线| 午夜激情久久| 欧美综合丁香网| 久久作爱| 色综合久久88| 青青草蜜臀| AV在线免费播放| 精品综合网在线| 九九这里只有精品在线视频| 超碰99资源站| 4399在线观看免费高清毛片| 超碰在线91| 丁香六月婷婷综合缴| 无码日本精品XXXXXXXXX | 色琪琪一综合久久激情五月视频| 色五月丁香网| 激婷网| 色噜噜狠狠色综合无码久久欧美| 九九热精品99| 99re视频在线| 看国产探花操逼三级片| 五月丁香婷婷综合网| 婷婷色片| 五月天另类小说| 日韩黄在免| 综合激情啪啪| 泰州成人视频| 久久性爱视频| 五月婷婷丁香大陆免费| 色色婷婷丁香五月天| 丁香五月婷婷深爱综合激情| 天天插天天射| 激情综合在线播放| 婷婷成人小说综合| 国产乱子轮XXX农村| 综合丁香婷婷五月天| 国产精品成人AV在线| 久久久噜噜噜www成人| 五月婷婷欲色| 五月丁香久久综合91| 五月婷婷综合激情| 欧美交换配乱吟粗大25P| 九九热a| WWW.99视频| 婷婷激情六月中文| 天堂草在线观看| 色狠狠婷婷| RenRenSe在线视频网站| 国产亚洲精品久久久久苍井松| 在线观看五月婷婷网| 婷婷激情综合网| 激情久久综合| 天天爽天天干| 九九亚洲视频| 色欲天天综合网| 久久免费精品小视频| 免费AV播放| 婷婷久久综合| 五月婷婷无码| 五月丁香啪啪激情| 玖玖色综合色| 色婷婷久综合久久一本国产AV| 无码激情AAAAA片-区区| 婷婷综合网伊人| 五月丁香狠狠爱| 视频这里只有精品| 国产97色在线 | 日韩| 中文字幕人妻AV| 第四色26uuu| 一点色成人网| 丁香欧美| 亚洲国产网站| 97碰| 人人干天天舔| 变态 另类 在线 | 丁香婷婷五色月| 色婷婷丁香女女| 五月丁香无码| 熟女91九色| 婷婷激情九月| 99惹在线精品免费观看| 少妇熟女视频一区二区三区| 亚洲狠狠操| 久久久久久久久18久久| 成人精品99| 五月色亭丁香| 久久99久久99精品免观看粉嫩| 丁香九月婷婷综合| 五月天色五月| 久久婷婷五月综合色和| 99在线视频资源| 99热精品在线播放| 九九热手机在线视频| 亚洲偷| 99色精品| 久久婷婷五月天激情新地址| 99热 精品在线| 亚洲99热| 狠狠干狠狠色| 国外亚洲成AV人片在线观看| 巴基斯坦粉嫩无码视频| 久久婷婷五月综合成人d啪| WWW,五月| 婷婷五月丁香六月天亚洲综合| 亚洲激情五月| 大香蕉人妻| 欧美噜噜久久久XXX| av婷婷六月丁香社区在线观看| 五月六月婷| 99碰视频| 夫妇交换刺激做爰| 丁香五月综合| 日本www五月婷婷| 日韩av高清| 五月丁香六月天| 99热只有精品在线播放| 超碰自拍天堂| 亚洲中文乱字字幕在线永久| 五月天婷婷在线播放免费| 色婷婷狠狠禁久久| 99久久极情精品一区| 亚洲另类久久| 超碰97久久| 五月丁香综合| 97色色综合| 人人干人人干骚美女| 免费无码毛片一区二区A片| 狠狠操狠狠插| 国产精品-第3页-91JQ就要激情网91JQ5.JQJQ926.XYZ | 日本九九热| 九九99九九99九九99视频网| 夜夜嗨一区二区三区直播内容 | 亚洲操操操| 欧美色性色好| renre人人操国产超碰在线 | 大香蕉五月天| 亚洲啪啪精品| 偷偷与邻居做爰完整视频| 天天综合色丁香| 婷婷丁香一月| 99熟女| 在线免费观看激情视频| 久久久久er热| 俺去也综合| 乱抡小BB| 欧美五月丁香啪啪响视频| 日日噜噜久久婷婷五月天| 亚洲另类在线观看| 五月婷婷亚洲| 日本VA视频| 色综久久AV| 久热 91| 操精品9| 婷婷色网| 91视频精品99| 激情五月小说婷婷| 操你av| 色婷婷影视| 色色色婷婷| 亚洲xx在线| 97精品综合久久| 99视频在线精品| 五月丁香六月婷婷在线播放| 丁香六月天AV| 欧亚洲在线高清视频| 中文字幕五月久久婷| 一区二区无码视频| 高清资源站日A美A欧亚…| 97色色视频| 91碰视频| 激情图片婷婷| 综合网啪| 91精品久久久久、久五月天| 99热这里只有免费精品| 婷婷综合六| 色五月开心五月激情五月| 久久综合九九| 99人人干| 色99在线视频| www.五月天色色.com| 色五月中文字幕| 碰人人97| 天天婬色综合| 情色五月天 网站| 久草婷婷网| 亚洲va成人va成人va在线观看| 亚洲综合五月天婷婷丁香| 色五月 五月婷婷| 亚洲va欧洲va国产va不卡| 婷婷五月综合啪| 五月天成人手机在线视频| 丁香五月婷婷成人色区| 婷婷五月天av| 九月色婷婷| 激情视频网址| 亚洲国产精品成人免费一区久久久在线观看AAAA| 九热免费视频| 91狠狠色| 久这里只有精品99| 激情婷婷内射| 五月婷免费视频久久久| 五月婷婷新网站| 天天射影| 精品国产va久| 丁香五月亚洲综合| 99愛国产| 亚洲精品国产精品乱码视99| 久久久天天啊| 色婷婷www| 丁香美女五月天婷婷| 99热官网| 日韩成人av在线| 丁香五月婷久久| 丁香五月天激情| 国产美女无遮挡裸体毛片A片| 国产成人精品一区二三区熟女在线 | 五月天婷婷视频30| 天天骑天天操| 97人凄人人操人人爽| 99人妻碰碰碰久久久久禁片| 狠狠五月天| 激情五月天婷婷| 国产亚洲精品久久久久久久久动漫| 亚洲狠狠终合停停终合| 色色五月综合| 久久久99久久| VA国产在线综合网站| 亚洲熟妇AV乱码在线观看| 久久婷婷五月综合色区| 欧美男女婷婷| 国产成人av在线| 5月色亭亭视频| 5月婷婷五月天| 欧美日韩成人在线网| 日韩另类在线观看| 成人精品在线| 国产免费性爱| 婷婷欧美激情| 五月婷婷在线丁香| 欧洲亚洲激情五月天在线| 可以直接看的AV| 91久久精品无码一区二区三区| 激情色色| 在线播放人妻| 99男人的天堂| 丁香六月婷婷综情欧美| 色五月婷婷激情五月| 婷婷五月天视频亚洲| 激情婷婷| 亚洲182在线观看| 另类精品视频在线观看| 色噜噜狠狠色综合日日免费| 久色婷婷200| 狠狠干狠狠色| 丁香婷婷五月综合欧美另类| 亚洲六月婷婷| 99re这里只有精品国产99| 婷婷丁香在线播放| 五月大香蕉| 91操黄| 中文无码婷婷| 思思热在线视频99| 亚洲第一黄网| 玖玖婷婷免费| 国产亚洲99久久精品| 色五月婷激情| 色五月色五天色情网| 最近中文字幕2019视频1| 丁香五月开心亚洲| caopeng超碰| 99视频在线精品| 天天做天天爱天天高潮| 中文字幕欧美精品久久| VA婷婷| 99精品综合| 成人综合网站| 第五婷婷伊人丁香色| 国产精品-91JQ就要激情网91JQ6.91JQ27.CASA:16888 | 思思久久思思| 色~性~乱~伦~噜| 热99玖玖99玖玖99九九| 色婷婷69| 日夜夜久久| 伊人久久婷婷| 26UUU欧美激情一区二区| 99热6这里之有精品| 婷婷五月天AV在线| 黄色网址五月婷婷| 欧美久草在线日本一级特黄大片做受9在线观看韩国电影《两个女人》未删减-毛片 | 欧美日韩aaaa| 色色色综合| 97碰碰视频在线观看免费| 久久婷婷五月天亚洲欧美| 婷婷五月天视频| 大伊香蕉玖玖爱| www.五月丁香av| 大香蕉520| 在线网黄| 久久婷婷五月| 婷婷六月丁香五月图区| 婷婷五月天激情四射五月天激情| 色噜噜狠噜噜视频| 性av| 天天曰夜夜爽| 久久婷婷色| 久久婷婷综合拍| 日逼免费视频| 亚洲爆乳无码精品AAA片蜜桃| 久久久性爱视频| 婷婷基地爱| 人妻无码视频网| 色色激情五月天| 狠狠色噜噜狠狠| www,99色| 曰日爽日日操| 九九九九中文字幕| 青草少妇激情| 大香蕉懂9| 婷婷五月天激情文学| 色婷婷五月丁香色| 婷婷成人五月天成人文学小说| 色色999三级片| 五月丁香在线婷婷美女| 双性美人被调教到喷水A片| 久9久9久9久9久9久9| 丁香五月婷婷AV在线| 亚洲啪啪自拍| 精品无码99| 99久久婷婷国产综合精品| 丁香五月综合福利视频导航| 激情婷婷丁香| 99在线爽| 欧亚成人A片一区二区| 婷婷激情五月天综合| 久久综合首页| 开心五月婷婷综合在线精品素人| 天天天操天天天日| 亚洲天堂玖玖| 丁香五月电影| 91精品丝袜久久久久久久久粉嫩| 99无吗| 久久五月天激情婷婷| 色五月婷婷在线观看| 久久蜜臀婷婷| 天天摸天天做天天爱天天爽| 婷婷影院欧美| 五月天天久久香| 天天综合久久| 任你日视频| 无码人妻激情| 日日干天天射| 色综合久久888| 影音先锋噜一噜| 成人婷99最新| 久久女人天堂| 激情综合网五月在线播放| 九九热精品| 五月人人丁香婷婷五月人人丁香| 精品国产乱码久久久久久免费| 中文字幕簧片| 色婷婷亚洲综合网站| 五月色精品| www.韩日视频| 欧美乱码国产一级A片| 伊人久久婷| 另类视频在线| 中文乱子伦视频| 五月婷婷深深爱| 久久精彩视频| 婷婷开心六月| 色婷婷婷婷| 亚洲精品一区无码A片| 五月丁香操亭亭网| 99自拍网| 91蝌蚪窝视频在线| 天天爽天天爽| 五月丁香激情五月天| 久久日婷婷| 久久久999精品| 亚洲mm色| 婷婷丁香亚洲色综合91| 99热精品在线观看| 另类小说激情五月天| 在线成人网址| 丁香性爱在线视频| 在线观看av网站| 日日爽日日操| 婷婷九月在线| 天天干天天干天天| 色屌丝中文字幕| 精品视频这里只有精品| 99ri6在线视频| 九九黄色网| 五月婷婷我| 亚洲中文字幕网| 日韩三十六页| 五月亭亭直播| 深爱激情丁香五月| 99久久精彩视频。| 狠狠色九月| 大香蕉啪啪啪| 五月天综合| 五月天婷婷久色| www.色9| 五月丁香婷婷欧美色图视频五月丁香777电影| 婷婷大乡焦噜噜| 丁香综合伊人AV| 久久资源网五月婷| www.第四色99| 99视频精品| 综合网啪| 五月丁香婷婷伊人| 久久久人妻不卡| 中文字幕五月久久婷婷| 大陆极品少妇内射AAAAAA| 六月色播| 激情五月色在线播放| 人人爽在线视频综合网| 五月开心久久| 999热视频精品99免费在线| 五月天婷婷激情小说电影| 天天操天天曰| 国产精品色色色色| 无码色色色色色| 久久九精品| 开心色色五月天综合| 九九在线精点品| 婷婷刺激综合| 天天干狠狠艹| 久久狠色噜噜狠狠狠狠97| 色综合久久99色| 综合日本婷婷| 四季8848精品成人免费网站| 激情五月天综合| 欧美精品18| 丁香婷婷视频一区二区| 性小说五月天| 五月天激情小说| 狼人婷婷综合| 99 福利 导航| 蒲京久久无码视频| 久久人妻熟女一区二区| 99热在线看| 在线成人网址| 99精品无码| 五月激情六月婷婷| 欧美丁香五月天| 天天摸,天天爽| www,五月天com| 婷婷五月AV| 色五月欧美| 婷婷色一二三区波多野结衣| 婷婷激情久久| 老美AA片| 久久er99热精品一区二区| 激情五月天电影| 日本久久人人| 婷婷的色色五月天| 久久久久人妻精品| 日日夜夜婷婷| 五月婷精品| 天天爽天天做| 亚洲最大五月天成人网| 五月丁香六月婷婷a v| 情五月亚洲婷婷| 亚洲avjiujiur91| 婷婷六月丁香在线| 996er在线观看| 97人人草| 五月天丁香六月综合| 久久久中文| 五月婷婷无码| 天天情天天狠天天透| 99热啪啪| 久久九九怡红院| 只有精品视频在线观看| 永久的网站AAAA | 综合五月天天天天天五月| 婷婷深爱色五月| 丁香五月综合图片在线观看| 亚洲狠狠狠色婷婷综合激情久久久| 秋霞三级影视资源| 色五月激情五月丁香五月婷婷啪啪综合 | 91超级碰碰碰| 久久五月天激情美女| 538午夜激情| 久久最新色色色| 激情美女五月天| 99热www.| 六月天六月婷| 天堂AV在线看| 人人摸人人搞| www热久久yy9| 欧美日韩99| 婷婷五月成人| 三男玩一女三A片| 欧美特大片黄| 丁香婷婷久| AV在线收看| 99热在线观看精品| 欧美内射AA| 色播五月婷婷综合| 九九视频精品视频精品| 五月天激情社区| 激情五月天com| 五月丁香啪啪综合| 五月婷婷六月激情| 精品久久久久成人码免费动漫| 丁香五月影| 色色五月丁香婷婷综合| 9久热在线视频精品| 色婷婷狠狠| 日本婷婷丁香五月| 狠狠色噜噜| 99re热在线观看| 天天干天天干天天操| 极品人妻VIDEOSSS人妻| a级毛片一区二区免费视频| 婷婷成人在线| 丁香五月激情啪啪| 色婷婷色久综| 激情丁香五月天| 丁香六月综合激情| 丁香五月花| 超级碰碰视频无码| 色婷久久| 丁香五月天欧美在线| 思思久久精品| 天天干天天操天天拍| 久久一级AV| 9婷婷内射| 深爱婷婷基地| 五月丁香六月香综合激情| 天天综合五月| 狠狠干,狠狠操| 天堂网亚洲色图| 五月婷婷黄色| 激情五月色综合国产精品| 99热在线播放| 亚洲成人网站在线观看| 99五丁香月| 51XX午夜影福利| 69午夜成人影片| 影音先锋91资源站| 精品一二三区久久AAA片| 六月丁香啪| 亚洲国产婷婷色五月| 亚洲激情综合五月婷婷啪啪| 91九色熟女| 国产性爱在线| 六月婷婷综合激情| 免费久久这里只有精品99| 五月天激情小说网| 中文字幕日产A片在线看| 色99婷婷五月天| 天天日夜夜高潮| 深爱激情五月网| www.婷婷| 五月天丁香婷婷社区| 热无码A∨| 色婷婷精品视频| 亚洲乱码日产精品BD| 激情丁香九九五月综合网| 五月丁香激情综合六月涩涩爱| 夜色综合网| 成人.在线日韩| 欧洲亚洲欧洲99久久| 激情综合色| 久久久久久久五月| 天堂爱爱| 9久热在线视频精品| 青草视频在线播放| 日本久久婷婷| 婷婷色网站| 欧美色五月| 4438成人电影| 婷婷开心综合人妻小说网址| 男女99免费视频| 狠狠 久久| 婷婷五月激情基地| 久久六月天| 超级碰碰碰久久网站| 天天拍夜夜撸 | 日韩操逼大片| 婷婷丁香人妻天天| 五月激情影院| 丁香五月影视| 色在线视频网2025| 六月成人网| 天天日天天添| 9热精品| 五月天综合色| 久久这里只有精品视频26| 色色五月婷婷| 波多野结衣AV无码Porn| 思思热久久婷婷五月天| 亚洲综合色婷婷| 婷婷午夜精品久久久| 五月天啪啪| 熟女强人妻一区二区三区四区无| 性日本激情| 亚洲婷婷丁香| 色色色色色综合| 丁香九月婷婷色| 99热国品| 色婷丁香五月| 九九综合九九| 九九综舍久久| 五月天婷婷影院影院观看| 久久黄色片| 婷婷5月天激情综合| 人妻久久久久久久 | 久久66er久久| 五月婷久久| 婷婷色在线视频| 草综合14| 五月天婷婷丁香人人操91| 天天爽天天透天天爱| 久久精品国产一区二区三区四区| 婷婷丁香69精华| 久久五月天婷婷| 99热1| 欧美丁香五月| 人碰91| 玖玖热视频| 色婷婷成人久久| 天天综合网亚洲网站| 九九操屄| 五月天五月婷五月激情网| 欧美丰满熟妇BBB久久久| site:wpjngj.com| 丁香五月电影| 精品久久人妻热| 九九热在线精品视频| 欧美成人色婷婷| 午夜九九九九九九九九九九九九九| 久久天堂女人| 色婷婷丁香| 丁香久久激情俄| 五月婷婷激情综合网| 亚洲国产色婷婷| 亚洲va在线∨a天堂va欧美va| 日噜噜色| AV性爱在线| 91chinese 在线| 久9免费视频| 九九久久99精品免费观看www| 91狠狠综合网| 丁香色色色| 99热都是精品| 五月天婷综合网站| 99热精品在线观看| 亚洲天堂AAA| 五月丁香色停停啪啪啪| 亚洲色 视频| 日韩性爱无码| 五月天另类激情在线| 中文字幕精品在线观看| 日韩亚洲视频| 综合亚洲色色| 99ER热精品视频| 国精产品一区二区三区| 在线不卡的视频| 五月天激情图片| 成年人夜夜喷水| 天天插天天插天天插天天插| 亚洲 25P| 色五月丁香五| 99热6精品| 99精品视频偷拍| 色无码| 五月丁香综合精品| 五月天婷婷Av| 99国产精品久久久久久久久久久| 4399在线日本A片| 成人日韩欧美| 久久亚洲婷婷| 午夜婷婷久久| 99亚州综合精品成人网| 99综合婷婷五月| 玖玖婷婷五月天毛片| 99在线免费视频| 婷婷五月色播网| 国产偷人爽久久久久久老妇APP | 一区二区三区四区牛| 伊人色综合久久久| 色就是色婷婷五月亚洲激情| 风流少妇A片一区二区蜜桃| 五月天狠狠草| 精品牛仔裤超碰| 开心激情婷婷| 九九在线这里只有精品视频| 色综合丁香婷婷| 91久久婷婷| 婷婷综合色播网| 五月婷婷色影院| 成人无码髙潮喷水A片| 色女伊人| 日本九九九九| 九九热123| 91九色中文| 色亚洲中文| 日本欧美999久久久三级片| 一级黄色影片| 色婷婷色五月综合| 超碰资源在线| 白人荫道BBWBBB大荫道| 欧美黄色韩日网| 婷香五月网在线| 白度黄视频| 欧美人妻一区二区| 天天色天天色天天色天天色天天色| 99久久www| www.色五月| 91色色色18| 久久 这里只有精品1| 九九色大香蕉| 国产午夜精品一区二区三区四区| 婷婷五月天福利| 2025最新亚洲激情在线| 婷婷五月天综合AV| 久久精品99国产精品日本| 婷婷亚洲综合| 综合久久丁香婷婷,五月婷婷六月丁香,开心激情综合网,六月丁香在线观看,婷婷丁 | 五月丁香好婷婷A片网| 99人人操人人爱久久久| 国产精品99久久久久久久女警| 狠狠穞A片一區二區三區| 美臀自射自家人妻| www,com,五月色色| 丰满少妇乱A片无码| 变态另类9| 欧美日韩AAA| 再綫Av免费視品| 九九色院| 夜夜操加勒比| 9999久久久久| 五月丁查人人| 99热久久这里只有精品| 大香蕉久久婷婷精品综合| 不卡在线中文字幕无| 欧美色色色| 久久99网| 99热精品一区| 91丨九色丨东北熟女| 91丨九色丨国产在线| 丰满少妇乱A片无码| 亚洲操操| 爽天天天天天天天| 5月丁香六月情| 性爱先锋AV| 狠狠色丁香婷婷久久综合| 伊人婷婷99热精品| 六月丁香五月婷婷| 色欲婷婷五月天丁香| 这里只有精品69| 九九成人高清视频| 婷婷激情性爱| 综合精品99| 日碰日| 中字幕视频在线永久在线观看免费| 久久久久久激情| 人妻啪啪啪| 26uuu亚洲欧美| 婷婷五月丁香在线观看| 色五月综合网| 九九99热| 婷婷久久婷婷色五月| 影音先锋自拍网| 九九99精品视频在线观看| 操碰99| 亚洲婷婷久久综合| 色婷婷五月天偷拍| 五月婷婷激情综合视频| 91啪级电影| 免費亭亭成人|