久久亚洲成a人片熟女精品色一区二区三区|国产精品视频第一精品视频|av天堂热无码手机版|亚洲?v无码久久无遮挡|国产精品偷伦视频免费观看国产|麻豆国产自产精品丰满熟妇|av无码av不卡一区二区|久久亚洲精品中文字

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運營的一線實戰(zhàn)洞察。

臨時文件自動化清理:從腳本到容器環(huán)境的完整方案

臨時文件自動化清理:從腳本到容器環(huán)境的完整方案 先說點實在話。臨時文件這東西幾乎每個用電腦的人都會碰到但真正把它當(dāng)回事的人不多。我曾經(jīng)在一臺測試服務(wù)器上見過 /tmp 目錄里堆了接近 30GB 的垃圾里面全是各種安裝包殘留、編譯中間產(chǎn)物和半年前的日志切片。更麻煩的是這臺機(jī)器磁盤已經(jīng)告警了可沒人敢手動刪——因為誰都不確定里面有沒有哪個文件正在被某個服務(wù)使用。這種場景相信不少運維和開發(fā)朋友都遇到過。臨時文件自動化方案說白了就是用一套確定的規(guī)則和工具代替“人工不定期清理”這個不靠譜的習(xí)慣。它解決的是三個層面的問題磁盤空間被不知不覺吃光、臨時文件混亂導(dǎo)致排障困難、以及手動刪除時誤刪正在使用的文件造成事故。這篇文章適合運維工程師、開發(fā)者、以及想把自己電腦整理干凈但不想天天操心的朋友。我會從方案選型、腳本設(shè)計、定時任務(wù)配置、誤刪防護(hù)一直講到 CI/CD 和容器環(huán)境里的進(jìn)階玩法全程給可復(fù)現(xiàn)的命令和配置。1. 臨時文件為什么需要一套自動化清理方案1.1 臨時文件是怎么悄悄長大的臨時文件不是只有一個 /tmp 目錄那么簡單。按照來源大致能分成幾類操作系統(tǒng)運行時會產(chǎn)生的套接字文件、PID 文件、軟件安裝包殘骸包管理器緩存比如 apt、pip、npm、yarn 留下的緩存開發(fā)工具的編譯產(chǎn)物像 dist、build、target 目錄以及 node_modules/.cache還有日志切割后的歷史文件。每一類單獨看都不大但架不住積少成多。我見過一個很典型的例子一個 Java 項目的編譯構(gòu)建每次會在 /tmp 里留下幾百 MB 的中間文件。開發(fā)環(huán)境跑了幾周/tmp 就被撐到了 20GB。還有個前端項目node_modules/.cache 里緩存了幾百 MB 的 webpack 持久化緩存磁盤空間莫名其妙就少了。這種問題最大的迷惑性在于你根本不知道是誰寫的也不知道什么時候?qū)懙呐挪槠饋硖貏e費勁。如果是在 Linux 服務(wù)器上inode 耗盡比磁盤滿更隱蔽。一個目錄里塞了上百萬個小文件df -h 看著還有空間但 df -i 已經(jīng) 100% 了這時候任何新文件都創(chuàng)建不了系統(tǒng)行為變得非常詭異。這類問題一旦發(fā)生手動清理難度極大沒有自動化方案幾乎只能靠重建文件系統(tǒng)來恢復(fù)。1.2 手動清理的三個硬傷手動清理臨時文件看起來簡單實際做起來有三個繞不過去的硬傷。第一個是頻率問題。人一定會忘記。磁盤告警才想起來去清理往往已經(jīng)是火燒眉毛的時刻。我見過很多人平時不關(guān)心等到發(fā)現(xiàn)磁盤滿了才臨時抱佛腳地刪文件刪完過兩個星期又滿了陷入無限循環(huán)。第二個是判斷問題。哪些臨時文件可以刪、哪些不能刪需要根據(jù)文件的修改時間、訪問時間、當(dāng)前是否被進(jìn)程占用來判斷。手動操作時沒人愿意逐項分析結(jié)果要么一刀切亂刪要么干脆一個都不敢動。第三個是路徑問題。臨時文件分布在系統(tǒng)的各個角落從 /tmp、/var/tmp 到用戶目錄下的 .cache、項目目錄里的構(gòu)建產(chǎn)物甚至容器運行時的 overlay 層。手動清理很難覆蓋全而且每次執(zhí)行的操作命令可能都不一樣最終效果完全不可控。1.3 自動化方案解決的核心問題自動化清理最大的價值不是“替你點了刪除按鈕”而是把清理這回事從“隨機(jī)事件”變成“確定性行為”。確定性的含義包括定期執(zhí)行、規(guī)則明確、操作可審計、結(jié)果可追蹤。規(guī)則明確指的是你可以精確指定哪些目錄、按什么條件、刪除多老的文件。比如“刪除 /tmp 下超過 7 天沒修改過的文件”這是一條可執(zhí)行、可驗證的規(guī)則。操作可審計指的是每次執(zhí)行都留下日志刪了多少文件、釋放了多少空間都記錄在案出問題能回溯。結(jié)果可追蹤則意味著你能通過日志和告警知道清理動作是否成功、是否有異常。一旦這套東西搭建起來它就能自己運轉(zhuǎn)不再依賴人工的臨場判斷。我自己的習(xí)慣是“先盤家底、再定規(guī)則、后上自動化”下面幾個章節(jié)就是圍繞這個思路展開的。2. 方案選型從“能用”到“好用”2.1 系統(tǒng)自帶方案不用白不用如果只看 Linux 系統(tǒng)本身其實已經(jīng)內(nèi)置了幾套基礎(chǔ)的臨時文件管理機(jī)制其中最值得了解的是 systemd-tmpfiles 和 tmpreaper。systemd-tmpfiles 通過配置文件來聲明哪些目錄要清理、按什么規(guī)則清理。配置文件放在 /etc/tmpfiles.d/ 下語法很直白。舉個例子# /etc/tmpfiles.d/clean-tmp.conf d /tmp 1777 root root 7d D /var/tmp 1777 root root 30d第一行表示 /tmp 目錄保留 7 天超過這個期限的文件會被 systemd-tmpfiles --clean 處理。第二行的 D 表示目錄本身和里面的內(nèi)容一起清理保留周期 30 天。這個方案的好處是零額外依賴、聲明式管理適合規(guī)則不復(fù)雜的場景。tmpreaper 則是傳統(tǒng) tmpwatch 的增強(qiáng)版用起來更靈活。比如這條命令tmpreaper 7d /tmp含義是刪除 /tmp 下 7 天未訪問的文件。tmpreaper 的優(yōu)勢在于它考慮了很多邊界情況比如不會去動正在被進(jìn)程使用的文件、知道怎么處理符號鏈接、還支持排除規(guī)則。不過在不少現(xiàn)代 Linux 發(fā)行版里systemd 已經(jīng)成為默認(rèn) init 系統(tǒng)systemd-tmpfiles 明顯是更“原汁原味”的選擇。還有一個很實用的系統(tǒng)機(jī)制是 logrotate。它管理的是日志文件不是普通臨時文件但日志和臨時文件經(jīng)?;煸谝黄?。給日志配置好按大小或日期切割再配合 rotate 份數(shù)限制能從源頭上避免日志文件無限增長。很多生產(chǎn)事故其實就是日志把磁盤寫滿了。這兩類系統(tǒng)方案的共同問題是“夠用但不夠細(xì)”。如果只有幾條靜態(tài)規(guī)則那直接用 systemd-tmpfiles 就夠了如果你需要按目錄、按條件、按項目自定義復(fù)雜的清理邏輯就得用腳本。2.2 腳本方案最靈活也最危險腳本方案的核心就是兩個工具find 負(fù)責(zé)查找cron 或 systemd timer 負(fù)責(zé)定時執(zhí)行。它靈活在哪里你可以自由組合路徑、時間條件、文件類型、大小條件還可以在刪除前做任何你想做的預(yù)處理。但是腳本方案也是最危險的。原因在于find 命令是一個純粹的“執(zhí)行者”它不會理解文件是否重要。一條命令寫錯可能把不該刪的全刪了。比如很多人剛接觸時會寫 find / -name *.log -exec rm {} ;這行命令會去系統(tǒng)里找所有 .log 文件然后刪掉包括某些應(yīng)用正在寫入的日志后果不堪設(shè)想。因此腳本方案的準(zhǔn)入門檻是你必須嚴(yán)格遵守“先 dry-run、再真實執(zhí)行”的原則。dry-run 就是只打印會刪除哪些文件不真正執(zhí)行刪除。這一步能幫你提前發(fā)現(xiàn)規(guī)則寫錯的問題。下面這行命令就是 dry-run 的典型寫法find /tmp -type f -mtime 7 -print先看輸出確認(rèn)列出來的文件全是該清的再把 -print 換成 -delete或者接上 -exec rm 來真正執(zhí)行。2.3 工具鏈方案處理特定生態(tài)的殘留系統(tǒng)方案和腳本方案解決的是通用臨時文件。但在真實場景里最有價值的是針對特定生態(tài)做清理。我舉例說明幾類項目構(gòu)建產(chǎn)物。node 項目里的 node_modules/.cache、dist、buildJava 項目里的 targetPython 項目里的pycache。這些目錄量大、增長快而且重建成本低。清理它們通常不用猶豫??梢詫懸粋€項目級清理腳本當(dāng)項目不再活躍時自動清掉這些構(gòu)建緩存。包管理器緩存。pip 的 ~/.cache/pipnpm 的 ~/.npmapt 的 /var/cache/apt。這些緩存刪掉之后下次安裝包會重新下載但在磁盤緊張的時候它們是最好的“出血點”。我通常在 CI 鏡像構(gòu)建的最后階段清掉這些緩存能顯著減小鏡像體積。Docker 相關(guān)的殘留。docker system prune -f 能清理懸空鏡像和停止的容器/var/lib/docker/overlay2 里堆積的層文件是磁盤大戶。配合日志輪轉(zhuǎn)和鏡像保留策略能避免 Docker 占據(jù)大量磁盤。每種生態(tài)都有自己的一套清理規(guī)則腳本的靈活性在這里體現(xiàn)得淋漓盡致。但要注意工具鏈方案往往涉及特定業(yè)務(wù)邏輯最好能結(jié)合項目實際情況做保留策略而不是一刀切全刪。2.4 選型建議與對比我直接給一個決策表格方便你對號入座方案優(yōu)勢劣勢適用場景systemd-tmpfiles零依賴、聲明式、系統(tǒng)原生規(guī)則表達(dá)能力有限常規(guī) /tmp 和 /var/tmp 清理tmpreaper安全邊界處理較好、主動檢查占用部分發(fā)行版需額外安裝傳統(tǒng)服務(wù)器、復(fù)雜排除規(guī)則自寫腳本 cron/timer完全可控、可定制業(yè)務(wù)邏輯風(fēng)險高依賴編寫者水平多目錄、混合規(guī)則的項目環(huán)境docker system prune專攻容器殘留、集成度高只處理 Docker 生態(tài)CI 跑機(jī)、容器化部署環(huán)境商業(yè)/平臺級工具集中管理、告警完善引入成本高多機(jī)、多團(tuán)隊的大規(guī)模治理選型的核心原則是盤子里有多少菜決定你用多大鍋。單機(jī)服務(wù)器上幾條規(guī)則別一上來就上重量級平臺方案而真正的大規(guī)模集群環(huán)境光靠幾個 cron 腳本也撐不住這時候才需要集中管理和統(tǒng)一的度量體系。3. 實操搭一套最小可用的自動清理系統(tǒng)這一節(jié)我會完整走一遍實際搭建流程從盤家底、寫規(guī)則到掛定時任務(wù)全部是可復(fù)現(xiàn)的命令和配置。我先說明一下我的環(huán)境假設(shè)一臺 Ubuntu 22.04 服務(wù)器Docker 和 Node 環(huán)境都有目標(biāo)是每天自動清理各類臨時文件。3.1 第一步盤點目錄和設(shè)計保留策略在動任何命令之前先花半小時做一次“家底盤點”。你需要明確知道這臺機(jī)器上哪些目錄是真正需要清理的以及每個目錄的合理保留周期。我推薦的盤點方法是先全盤掃一遍目錄占用定位最大的幾個目錄du -h --max-depth1 /tmp 2/dev/null | sort -hr | head -20 du -h --max-depth1 /var/tmp 2/dev/null | sort -hr | head -20 du -h --max-depth2 ~/.cache 2/dev/null | sort -hr | head -20然后根據(jù)目錄實際內(nèi)容和業(yè)務(wù)要求給每個目錄設(shè)定保留周期。我給一套通用的初始策略你可以直接抄目錄保留周期說明/tmp1~3 天系統(tǒng)臨時文件生命周期極短/var/tmp7~30 天相對持久但也不應(yīng)長期堆積~/.cache/pip、~/.npm30 天重新下載成本低但沒必要天天刪項目 target、dist、node_modules/.cache7 天構(gòu)建產(chǎn)物可重建日志切割后的舊文件7~14 天由 logrotate 管理更佳Docker 懸空鏡像立即清理docker system prune 處理注意保留周期的設(shè)定不是拍腦袋。太短可能導(dǎo)致正在使用的文件被刪太長則清理沒意義。我的經(jīng)驗是“寧保守勿激進(jìn)”初次設(shè)定可以給到雙倍周期運行一兩周觀察后再逐步縮短。3.2 第二步寫核心清理腳本腳本是整套系統(tǒng)的核心。我給出一個我實際在用的版本做了精簡但核心邏輯完整。它支持日志輸出、支持排除規(guī)則、也支持 dry-run 模式。#!/usr/bin/env bash # 臨時文件自動清理腳本 # 用法: # ./clean-tmp.sh --dry-run # 只打印將刪除的文件不實際刪除 # ./clean-tmp.sh # 真實執(zhí)行清理 set -euo pipefail DRY_RUNfalse if [[ ${1:-} --dry-run ]]; then DRY_RUNtrue fi LOG_FILE/var/log/clean-tmp.log # 需要清理的目錄列表空格分隔 CLEAN_DIRS(/tmp /var/tmp /root/.cache/pip /root/.npm) # 各目錄保留天數(shù), 默認(rèn)7天 declare -A KEEP_DAYS KEEP_DAYS[/tmp]3 KEEP_DAYS[/var/tmp]14 # 排除規(guī)則的正則表達(dá)式 EXCLUDE_PATTERN(\.dockerenv|\.X11-unix|\.ICE-unix|systemd-private.*-(systemd.*)/) log() { echo $(date %Y-%m-%d %H:%M:%S) $* $LOG_FILE } clean_dir() { local dir$1 local keep_days${KEEP_DAYS[$dir]:-7} local threshold${keep_days} if [[ ! -d $dir ]]; then log SKIP: $dir not exists return 0 fi log START: $dir keep_days$keep_days if [[ $DRY_RUN true ]]; then # dry-run: 只打印 find $dir -type f -mtime $threshold \ -regextype posix-extended ! -regex $EXCLUDE_PATTERN \ -printf %p %s bytes\n else # 真實刪除刪除前統(tǒng)計空間 local before0 local after0 before$(du -sb $dir 2/dev/null | awk {print $1}) find $dir -type f -mtime $threshold \ -regextype posix-extended ! -regex $EXCLUDE_PATTERN \ -delete after$(du -sb $dir 2/dev/null | awk {print $1}) log DONE: $dir released $((before - after)) bytes fi } for d in ${CLEAN_DIRS[]}; do clean_dir $d done log ALL DONE這個腳本有幾個關(guān)鍵設(shè)計我說一下理由。set -euo pipefail 是必須的。set -e 讓腳本在遇到錯誤時立即退出set -u 直接爆出未定義變量pipefail 保證管道中任一環(huán)節(jié)失敗都會讓整個命令失敗。這三個組合起來能讓你第一時間發(fā)現(xiàn)腳本本身的問題而不是讓它帶病運行。find 命令中 -type f 避免了誤刪目錄。如果直接 -delete目錄也會被遞歸刪除風(fēng)險極大。保留目錄結(jié)構(gòu)只刪除文件是更穩(wěn)妥的路徑。-delete 相比于 -exec rm {} 更安全因為 find 內(nèi)置的 -delete 會在內(nèi)部處理一些邊界情況比如先檢查目錄是否為空避免刪非空目錄時出錯。排除規(guī)則用的是 -regextype posix-extended 和 -regex它的作用是保護(hù)特殊路徑。比如 systemd-private 動態(tài)生成的私有目錄里面可能存有運行時 socket不能亂刪。腳本里的 du 統(tǒng)計可以幫你直觀看到每次釋放了多少空間日志對排查很有幫助。3.3 第三步配置定時任務(wù)腳本寫好后剩下的就是讓它按時跑起來。Linux 下有兩種主流方式cron 和 systemd timer。cron 是最傳統(tǒng)的方式配置很簡單。編輯 /etc/crontab 或使用 crontab -e加入一行0 2 * * * root /opt/scripts/clean-tmp.sh /var/log/clean-tmp.log 21這表示每天凌晨 2 點執(zhí)行一次清理腳本。為什么選這個時間因為臨時文件清理的最佳窗口是業(yè)務(wù)低峰期大多數(shù)服務(wù)在凌晨的負(fù)載最低。如果服務(wù)器上跑著夜間批處理任務(wù)就需要避開那段時間。systemd timer 是更現(xiàn)代的選擇。我需要先創(chuàng)建一個 service 單元和一個 timer 單元# /etc/systemd/system/clean-tmp.service [Unit] DescriptionClean temporary files Afternetwork.target [Service] Typeoneshot ExecStart/opt/scripts/clean-tmp.sh# /etc/systemd/system/clean-tmp.timer [Unit] DescriptionRun clean-tmp daily at 02:00 [Timer] OnCalendar*-*-* 02:00:00 Persistenttrue [Install] WantedBytimers.target然后執(zhí)行systemctl daemon-reload systemctl enable --now clean-tmp.timersystemd timer 相比 cron 有幾個優(yōu)勢可以設(shè)置 Persistenttrue即使機(jī)器當(dāng)時關(guān)機(jī)下次開機(jī)后也會補(bǔ)跑錯過的任務(wù)可以用 systemctl status 查看任務(wù)最近執(zhí)行情況日志集中管理方便排查。我個人的建議是新環(huán)境優(yōu)先用 systemd timer老環(huán)境沿用 cron 也沒問題。如果你用的是 Windows 服務(wù)器最常用的方式是“任務(wù)計劃程序”配合 PowerShell 腳本。PowerShell 里頭找臨時文件同樣簡單$threshold (Get-Date).AddDays(-7) Get-ChildItem -Path C:\Windows\Temp -Recurse -File | Where-Object { $_.LastWriteTime -lt $threshold } | Remove-Item -Force -ErrorAction SilentlyContinue在任務(wù)計劃程序里設(shè)置每天執(zhí)行一次即可。注意 C:\Windows\Temp 有很多文件被系統(tǒng)占用刪除時要帶上 -ErrorAction SilentlyContinue 忽略失敗否則任務(wù)會報錯。3.4 第四步先演練再上崗腳本和定時任務(wù)都配置好了但我不建議直接讓它以真實刪除模式運行。正確做法是先 dry-run 跑幾天。第一輪演練手動執(zhí)行 --dry-run仔細(xì)觀察輸出內(nèi)容。重點看兩個問題是否有不該刪的文件被列出來了是否有應(yīng)該清理的目錄被排除規(guī)則擋掉了。發(fā)現(xiàn)異常就調(diào)整腳本改完再跑。第二輪演練真實刪除但選擇業(yè)務(wù)最低峰期手動執(zhí)行一次。執(zhí)行前確保已經(jīng)備份哪怕只是備份腳本并且開啟了日志。等腳本連續(xù)跑了一周沒有異常再把它交給 cron 或 systemd timer 去自動執(zhí)行。這時候才算真正上崗。我特別想強(qiáng)調(diào)一點自動清理系統(tǒng)的“上線”不是一錘子買賣。它應(yīng)該像監(jiān)控系統(tǒng)一樣需要持續(xù)迭代。磁盤增長趨勢變化了、業(yè)務(wù)新增了臨時文件目錄、某個服務(wù)生命周期變短了這些都要反映到清理規(guī)則里。我基本上每季度會重盤一遍目錄占用同步更新一次腳本。4. 誤刪與安全清理工具的底線工程自動化清理的恐怖之處在于它不會疲倦也不會猶豫它是按照你的規(guī)則去執(zhí)行每一個刪除動作。如果規(guī)則有誤它會毫不猶豫地把所有命中的文件殺掉。所以守住安全底線是這套系統(tǒng)的生死線。4.1 正在被使用的臨時文件會怎樣這個現(xiàn)象值得單獨講。很多人在 Linux 上發(fā)現(xiàn)一個詭異的事情某個文件明明被刪除了但磁盤空間并沒有釋放。這是因為有一個進(jìn)程仍然持有該文件的打開句柄。在 Linux 的文件系統(tǒng)語義里文件刪除只是把目錄項移除但如果文件還被進(jìn)程打開著它的 inode 和磁盤塊并不會立刻釋放要等所有句柄關(guān)閉之后才真正回收。這意味著什么如果服務(wù)在運行時寫了一個日志文件你把它刪了服務(wù)并不會立刻崩潰日志會繼續(xù)寫入這個已經(jīng)“不存在”的文件里但你再也找不到這個文件了。直到服務(wù)重啟文件才被真正刪除期間磁盤空間一直占用著。排障的時候這種情況非常隱蔽。你 df -h 看磁盤空間沒少但目錄里文件又不見了很容易懷疑是被病毒入侵或者有日志清理任務(wù)出了問題。其實根因可能就是有人在 /tmp 里刪了某個正在使用的文件。避免這種問題最直接的辦法是用 lsof 檢查文件是否被占用。生產(chǎn)環(huán)境的清理腳本里我建議加一段# 檢查目錄中是否有被進(jìn)程打開的文件 find /var/tmp -type f -mtime 7 -print0 2/dev/null | xargs -0 -r lsof 2/dev/null如果 lsof 輸出有結(jié)果說明有文件正在使用中應(yīng)該調(diào)整保留策略或者將這些文件排除掉。4.2 權(quán)限、符號鏈接和變量空值三個經(jīng)典大坑清理腳本里最容易翻車的三個點權(quán)限、符號鏈接和變量空值。權(quán)限問題很好理解很多臨時目錄屬于 root普通用戶清理不了這需要用 root 或 sudo 執(zhí)行清理腳本。但問題在于一旦用 root 執(zhí)行腳本里哪怕有一個地方邏輯混亂后果會被無限放大。我的建議是腳本執(zhí)行的用戶權(quán)限要有明確邊界比如用獨立用戶跑清理任務(wù)不給不必要的 root 權(quán)限。符號鏈接坑是最隱蔽的。想象一下 /tmp/link 是一個指向 /etc 的符號鏈接。如果你執(zhí)行 find /tmp -type d -name link -delete危險不大但如果你在腳本里寫了 rm -rf /tmp/*在某個特殊情況下rm 會對符號鏈接指向的目標(biāo)進(jìn)行操作尤其是配合 --no-preserve-root 之類參數(shù)時可能把系統(tǒng)關(guān)鍵目錄刪掉。我見過一次事故有人把 find 的 -exec rm -rf {} ; 誤應(yīng)用于一個包含符號鏈接的目錄結(jié)果把鏈接指向的應(yīng)用目錄整個刪了。所以腳本里涉及目錄刪除時務(wù)必加上 -type d 的限制并且顯式排除符號鏈接find ... ! -type l。變量空值是最容易被新手忽視的經(jīng)典坑。在 bash 腳本中如果某個變量沒有賦值默認(rèn)就是空字符串。假設(shè)你寫了 rm -rf $DIR/而 $DIR 因為某種原因是空的那么命令行就變成 rm -rf /結(jié)果是災(zāi)難性的。防范手段很簡單腳本開頭用 set -u 讓未定義變量直接報錯或者在刪除前斷言變量非空[[ -n $DIR ]] || exit 1。順便說一個和空格相關(guān)的坑。文件名里帶空格是合法的但很多腳本在拼接路徑時沒有加引號find 的輸出在管道傳給 xargs 時會被錯誤分隔。處理辦法是使用 -print0 和 xargs -0或者直接用 -delete。我在 3.2 的腳本里使用 -delete就是考慮到這個。4.3 從“刪”到“移”更穩(wěn)妥的回收站模式對很多場景來說直接物理刪除是不必要的冒險。更穩(wěn)妥的方式是“移動”也就是先設(shè)置一個回收桶目錄把該清理的文件移動進(jìn)去觀察一段時間沒有異常再真正刪除。這在生產(chǎn)環(huán)境里非常實用。比如我可以把臨時文件先移到 /var/tmp/trash保留 14 天后再自動徹底刪除。這樣即使有誤判你還有回旋余地可以手工恢復(fù)到原位置。實現(xiàn)起來也不復(fù)雜在之前的清理腳本基礎(chǔ)上把 -delete 替換成 -exec mv {} /var/tmp/trash/ 即可。我實際用下來這個模式既滿足了清理需求又大幅降低了誤刪造成的不可逆風(fēng)險。唯一要注意的是回收桶目錄自身的清理別讓它變成另一個堆積點。給回收桶設(shè)置一個更長的保留周期比如 30 天然后定期清一遍。4.4 日志、告警與問題速查自動化清理必須留痕。日志是事后排查的唯一依據(jù)。我在腳本里已經(jīng)把每次清理的路徑和釋放空間寫入 /var/log/clean-tmp.log。如果你有集中日志平臺建議把這份日志同步上去如果沒有至少確保日志會按天切割避免單個文件無限增大。告警也很重要。單純把任務(wù)掛到 cron 里有效期是“靜默失敗”如果腳本出錯了可能只會默默寫個日志就完事。我的做法是在腳本末尾加上簡單的健康檢查如果本次釋放空間為 0或者腳本執(zhí)行異常就通過 webhook 發(fā)送告警到值班群。這不需要復(fù)雜的監(jiān)控平臺curl 一條 webhook 就能搞定。梳理一下常見問題方便你快速定位癥狀可能原因排查方法磁盤空間沒減小文件被進(jìn)程占用未釋放lsof 檢查句柄、重啟服務(wù)后觀察日志顯示刪除了但目錄還在find 匹配的是文件目錄未被刪除檢查排除規(guī)則、目錄層級某些目錄從未被清理名稱包含空格/特殊字符路徑拼接失敗用 -print0 驗證開啟 set -u清理任務(wù)不執(zhí)行cron 環(huán)境變量或 systemd timer 狀態(tài)異常systemctl status clean-tmp.timer誤刪了業(yè)務(wù)文件排除規(guī)則不完整、保留周期過短立即停止任務(wù)檢查回收桶恢復(fù)這些坑我基本上都踩過一遍。最有價值的教訓(xùn)是永遠(yuǎn)先 dry-run永遠(yuǎn)先移動后刪除永遠(yuǎn)要留日志。記住這三條自動清理就不會成為災(zāi)難制造機(jī)。5. 進(jìn)階多機(jī)、CI 與容器環(huán)境里的臨時文件治理5.1 給 CI 跑機(jī)做磁盤減負(fù)CI 系統(tǒng)是臨時文件堆積的重災(zāi)區(qū)。尤其是自建 GitLab Runner 或 Jenkins 節(jié)點每跑一次構(gòu)建都會在 workspace 和 /tmp 里留下大量中間產(chǎn)物。如果構(gòu)建頻率高磁盤空間兩三天就能告警。我處理過一臺 GitHub Actions 自建 runner每天跑幾十次構(gòu)建每次構(gòu)建產(chǎn)生的臨時文件從幾十 MB 到數(shù) GB 不等。最初磁盤 100GB半個月就滿了。后來加了雙重機(jī)制解決第一重是定時清理用上面說的腳本每天早上 4 點清一次第二重是構(gòu)建結(jié)束鉤子在每一個 job 收尾時主動清理該構(gòu)建產(chǎn)生的臨時目錄。構(gòu)建結(jié)束鉤子其實就是 CI 配置文件里的一段代碼比如 GitHub Actions 的 post 步驟- name: Cleanup workspace if: always() run: | docker system prune -f sudo rm -rf /tmp/* /var/tmp/* || true sudo rm -rf /home/runner/work/*/node_modules /home/runner/work/*/*/dist || true注意這里用的是 if: always()保證即使構(gòu)建失敗清理也會執(zhí)行。CI 跑機(jī)的治理思路是定時清理兜底構(gòu)建鉤子主動清理雙保險。另外 CI 鏡像構(gòu)建階段清掉包管理器緩存能顯著減小鏡像體積、縮短推送時間。5.2 多機(jī)統(tǒng)一治理從“單機(jī)腳本”到“批量執(zhí)行”當(dāng)服務(wù)器數(shù)量多到一定程度逐臺配置 cron 是不可維護(hù)的。這時候需要把清理規(guī)則集中管理。我常用的方案有兩種。一種是用 Ansible 之類的配置管理工具。把清理腳本和 timer 單元作為基礎(chǔ)設(shè)施代碼推送到所有目標(biāo)機(jī)器。好處是配置變更可以快速批量生效而且可以統(tǒng)一版本管理。另一種是搭建一個簡單的中心化日志和告警管道每臺機(jī)器跑完清理后把結(jié)果匯總到同一處比如收集日志到 Elasticsearch 或用簡單的 Webhook 上報。批量執(zhí)行時有一個重要細(xì)節(jié)不要在同一時間讓所有機(jī)器同時清理否則可能會同時觸發(fā)集中監(jiān)控平臺的告警風(fēng)暴也可能造成集中的 I/O 沖擊。給每臺機(jī)器的清理時間加上隨機(jī)偏移量比如 2 點到 3 點之間隨機(jī)執(zhí)行是一個成熟的做法。在 Kubernetes 集群里情況稍有不同。節(jié)點的臨時目錄和容器的 emptyDir 卷由 kubelet 管理kubelet 會根據(jù) eviction 閾值自動驅(qū)逐容器釋放臨時存儲。但這是“兜底式”的治理主要目的是避免整個節(jié)點磁盤寫滿。業(yè)務(wù)層面仍然需要自己管理鏡像殘留和構(gòu)建緩存。docker system prune 在容器節(jié)點上仍然很有用配合定期執(zhí)行能顯著減少磁盤占用。5.3 容器場景的特殊考量容器里的 /tmp 和宿主機(jī)上的 /tmp 有本質(zhì)不同。容器內(nèi)每個文件系統(tǒng)層都是臨時的容器刪除后層也隨之消失。但也因此產(chǎn)生了一個問題如果你在容器里堆積了大量臨時文件而容器長期不重建這些文件會一直占著內(nèi)存或磁盤。兩個實踐建議第一容器內(nèi)盡量避免使用 /tmp 做持久化存儲應(yīng)該使用掛載卷或者 emptyDir第二對跑長時間任務(wù)的有狀態(tài)容器定期重建是比清理內(nèi)部臨時文件更徹底的辦法。docker system prune 這個命令我在前面提到了展開說幾個參數(shù)docker system prune -f --volumes --filter until72h-f 表示不交互確認(rèn)--volumes 表示同時清理未使用的卷--filter until72h 只清理 72 小時前創(chuàng)建的懸空資源。這個命令特別適合 CI 跑機(jī)清理效果立竿見影。但注意默認(rèn)情況下 docker system prune 不會清理還在使用的鏡像和容器這一點安全性還可以不過加上 --volumes 之后要確認(rèn)沒有重要的持久卷被誤傷。還有一類常見容器殘留是構(gòu)建緩存。BuildKit 的緩存目錄可能非常龐大。對應(yīng)清理命令是 docker builder prune -f建議在 CI 構(gòu)建完成后定期執(zhí)行。總結(jié)一下容器的清理哲學(xué)優(yōu)先重建其次治理鏡像最后才是容器內(nèi)部清理。5.4 建立長效機(jī)制從“清理”到“預(yù)防”臨時文件治理的終極目標(biāo)不是“清得多”而是“產(chǎn)生得少”。當(dāng)自動化方案穩(wěn)定運行之后我會建議你花更多時間從源頭減少臨時文件的產(chǎn)生。具體可以做的事情很多規(guī)范日志切割配置 logrotate 的 maxsize 和 rotate統(tǒng)一包管理器緩存目錄并設(shè)置定期清理在 CI 流水線里對構(gòu)建產(chǎn)物做歸檔并自動刪除舊版本使用 tmpfs 掛載 /tmp讓系統(tǒng)重啟時臨時空間自動清空對需要的臨時數(shù)據(jù)直接寫入內(nèi)存文件系統(tǒng)而不是寫盤再刪。以 tmpfs 為例把 /tmp 掛載到內(nèi)存中讀寫速度快是一個好處更關(guān)鍵的是重啟后內(nèi)容自動清空完全不需要人為干預(yù)。但有個前提內(nèi)存要夠大否則 /tmp 占滿內(nèi)存反而影響系統(tǒng)穩(wěn)定性。在內(nèi)存資源充足的服務(wù)器上這是一個很優(yōu)雅的方案。預(yù)防思維的本質(zhì)是把“清理臨時文件”這件苦差事從“事后補(bǔ)救”變成“設(shè)計時考慮”。你可以在系統(tǒng)設(shè)計階段就把臨時文件的存儲路徑、保留時長、清理責(zé)任劃分清楚。能做到這一步之后維護(hù)的負(fù)擔(dān)會直線下降?;氐轿易约旱捏w會臨時文件自動化治理最被低估的價值其實不是省了多少 GB 磁盤而是讓系統(tǒng)行為變得可預(yù)期。定時任務(wù)每天都在跑日志每天都在記磁盤占用曲線慢慢變得平緩。那種“不知道哪一天磁盤會滿”的焦慮感消失之后你才有余力去做更有價值的事。這套方案本身不復(fù)雜但它需要你一點點打磨從單機(jī)腳本到多機(jī)批量從被動清理到主動預(yù)防每一步都是在為系統(tǒng)的長期穩(wěn)定夯實基礎(chǔ)。最后再分享一條個人經(jīng)驗每次清理腳本變更后至少保留一周的 dry-run 日志不要急著刪除。這些日志是你在排查“是不是清理腳本誤刪了文件”時最有力的證據(jù)。臨時文件清理這種操作寧可慢一點、啰嗦一點也千萬別拿生產(chǎn)環(huán)境做賭注。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
久久精品国产亚洲AV无码做| 蜜桃视频一区二区三区| 中文视频在线观看| 丝袜美腿校园春色| 一区二区三区网站日日骚| 熟女这里只有精品6| 操淫穴亚洲五月丁香| 婷婷丁香五月天综合东京热| 久久久无码视频| 大香蕉天天看妹子| AV中文在线| 午夜乱轮操逼视频免费看| 日韩精品操少妇| 欧美疯狂做爰xxxx| 国产精品精品系列在线观看| 视频二区熟女人妻| 九一精品牛牛一区二区| 一本色道久久综合狠狠操| 2024人人操人人摸| 高清无码在线播放网站| 大香蕉综合久久| 久久99人妖视频国产| 亚州综合色| 91欧美美女日韩国产婷婷| 99久在线精品99re8| 欧美人人曰人人操人人射射| 欧美日韩亚洲少妇寂寞影院正在播放| 国产亚洲色婷婷99精品91| 婷婷久久五月| 琪琪精品免费一区二区三区| 69一区二区| 婷婷九月国产| 日本999精品视频| 成人午夜视频免费播放| 久草视频观看视频在线| 日韩成人高清一区二区| 天天拍夜夜| 久久久久久久久国产| 国产欧美日韩女同性恋ww喷水精品 | 日本久操视频| 亚洲丁香花色| 亚洲成人久久一区二区| 欧美日韩性爱操大逼| 欧美人黑A片无码免视费| 阿姨一区二区免费视频-高清正片西瓜视频下载app-T450AV | 日本影视久久免费| 精品综合久久久久久五月天| 97在线视频观看| 天天影视综合色| 精品人妻无码一区二区三区不卡-精品人妻无码一区二区...|精品少妇一区二区三 | 超碰97日韩| 一区二区视频你懂的| 91操碰| 国产 丝袜 欧美中文 另类| 日本加勒比无码专区| 欧洲站一级二级三级h| 欧美日韩国产三级黄色| 被体育老师抱着c到高潮| 免费黄色片。| 国产AV激情无码久久无码| 亚洲色图一区二区三区| 91综合色| 综合久久久久久久久91| 精品无码秘 人妻一区二区| 欧美色偷偷| 国产精品久久久久久久久久久久久久| 校园春色 欧美| 91久久婷婷| 成年人黄色| 日韩欧美性吧婷婷乱伦大香蕉| 999热日韩精品| 丰满人妻-区二区三区免费看| 97chaopengongkai| 97资源久久| 69精品| 青娱乐休闲视频在线观看| 探花视频免费观看国产专区| 青娱乐国产精品| 国产剧情AV不卡在线观看| 成人福利视频网| 亚洲色图亚洲无码强奸乱伦| 91黑丝露脚| 欧美亚综合色图| 青草香蕉网| 西西美女视频网| 精品二999| 日韩特一级久久| 97国产|免费| 亚洲福利影院一区久久| 日韩av一级黄片| 黑人精品成人一区二区三区| 日韩啪啪啪啪啪| 欧美成人亚洲精品| 综合少妇网| 中文字幕在线免费观看2| 天天影视亚洲| 久久久久久久久久久精| 日韩人妻播放| 久久亚洲欧美中文字幕国语| 丁香色狠狠色综合久久小说| 久久久久久久| 久久久久白虎| 夜色综合| 91精品人| 亚州免费啪啪视频| 亚洲三区视频| 婷婷久久综合久| 国产精品小视频一区二区三区| 欧美色图片91| 亚洲精品蜜桃久久久| 天天看天天日| 超碰国产在线| 老熟女天天操| 久久久无码av精| 97超碰美国| 风月影院男女十八禁| 夜夜欧美 | 自拍欧美| 一二三区操逼国产91| 97资源视频| 青娱乐亚洲自拍| 日韩另类色图| 国产精品久久久久久久免牛肉蒲团| 清清草影| 99re视频这里只有精品| 12一15性XXXX粉嫩国产| 伊人天堂在线| 超碰人妻久久| 日韩不卡av一二三| 国产一区二区在线播放,久久亚洲精品中文字幕第一区,亚洲精品在线中文字幕视频 | 中文字幕在线播放2中文字幕在线观看2| 欧美综合站| 亚洲色图综合网| 91美女小视频| 欧美日韩丝袜| 91精品91久久久中77777| 一二三四视频中文字幕在线看| 色婷婷五月天| 中文字幕精品三级久久久| 久久人| 亚乱色| 老熟女熟妇| 操婢日韩| 99久久婷婷丁香| 欧美在线综合| 久久精品视频28| 国产精品香蕉热久久新品| 国产精品欧美在线观看| 亚洲激情天堂网| 欧美18老人禁| 人人澡人人弄| 2010男人的天堂| 日本影视久久免费| 久久久精品中文字幕麻豆| 日本色婷婷| 极品销魂美女一区二区| 后入精品| 97在线观看免费| 蜜桃久久一区二区三区| 色天使亚洲综合在线观看| 亚洲色图8| 99久在线精品99re8热| 9久9久| 91老司机在线视频免费观看| 人人干人人搞人人摸| 久区视频| 日日摸日日碰| 99热免费精品| 亚洲91少妇| 亚洲一区二区精品福利| 一区二区三区黄色片a| 伊人91| 碰人碰碰人人开房人肉| 精品十三区| 999岛国大片| 欧美十八禁视频| 成人欧美日超碰| 大香蕉五月天婷婷| 天天天天天天天天天天干美女| 欧美成人一级麻豆| 中欧人妻丝袜中文字幕| 丰满人妻一区二区三区色-百度| 亚洲图片欧美偷拍| 后入式福利| 久草毛片| 男女无套 免费网站| 欧美99999| 白嫩少妇| 精品日韩中文在线| 91人妻最真实刺激绿帽| 免费一级性爱久久| 免费簧片在线观看| av天堂手机版追回| 综合一区中亚洲国产成人综合精品| 亚洲国产综合图区中文字幕| 亚洲欧美综合| 男人的天堂午夜av| 久久久亚洲高清不打码| 成人性爱全视频观看| 国产不卡免费在线视频| 玖玖资源综合在线视频| 国产在线视视频有精品| 国产成人+综合亚洲+天堂| 亚洲导航深夜福利| 狠狠中文字幕| 婷婷性网| 国产三级多多影院2022国产AA一级毛片无码| 伊人精品久久网站| 精品伊人久久久大香线蕉小说| 人妻精品综合中文字幕在线| 欧美日韩天堂| 中文字幕日韩精品久久| 久草综合京东| 少妇久久久久久久| 六月婷婷激情| 久久亚洲一区女同性恋中文字幕 | 免费在线观看国内色片网站网址| 97精品国产97久久久| 9999久久久久| 国产精品麻豆视频网站| 97视频在线观看高清资源| 午夜男人的天堂| 亚洲成人av电影在线| 97精品国产97久久久久久户外免费| 亚洲青色欧美| 最新av网站在线观看| 97色冈| 久久久偷拍| 手机在线视频国内精品| 97香蕉人人乳| 强被迫伦姧在线观看无码网站| 亚洲激情在线| 亚洲中文字幕一区二区| 337p大胆噜噜噜噜噜91Av| 91五月天| 一类无码操逼视频| 婷婷操视频| 岛国1区2区3区在线观看| 偷拍欧美激情| 18禁精品网站在线看| 久久m| 人人人人插| 日韩中文字幕宗合在线| 综合啪啪| 欧美日韩国产一区二区小黄片大全| 天美传媒国产原创中文字幕亚洲欧美另类 | 新91视频.cmp| 国产成人主播| 91free福利| 欧美色就是色| 加勒比无码毛片| 91原创在线观看| 国产女性无套 免费观看| 亚洲色图欧美一区二区不卡| 热热色综合网| 天天做天天爱天天爽AV| 333kkkk·亚洲com久久| 婷婷五月天激情四射| 一级AAA片一区二区三区| 无码99| 高潮的A片激情扒开一区| 日韩精品怡红院| 婷婷啪啪| 99久久e免费热视| 老妇女91| juliaann丝袜| 98久久超碰| 亚洲污污网站| 77国产精品| 国产久久日韩网站导航| 大香蕉综合| 中文字暮97| 乱日视频| 丁香婷婷激情五月天无毒不卡| 中文字幕欧洲有码| 新怡红院| 射综合网| 国产一区二区免费福利片| 激情文学亚洲| 欧美青青草视频| 99热 按摩 日韩| 亚洲人人操| 色色色色日本| 人妻99p| 日本精品一区二区中文字幕| 97啪啪| 婷婷五月天激情网| 久久久久久久国产视频| 欧美性生活免费网| 在线观看高清AV| 精品人妻中文字幕4399| 亚洲乱熟女一区二区三区大香蕉| 欧美日韩国产中文精品字幕自在自线,| 久久a久久| 人人澡人人弄| 91精品国产一区三一| 操逼免费视频无码国产| 一区二区偷拍拍视频| 亚州精品人妻一二三区| 91粉嫩萝控精品福利网站_精品影音先锋国| 麻花豆传媒剧国产MV出差| 国产精品自拍欧美在线| 强上我不卡卡| 91亚州| av天堂5| 久久只有精品一区二区三区| 日韩在线电影| 艹比视频国产精品| 欧美在线l亚洲| 男人综合网| 国产探花精品在线| 二区熟妇韩日| 久操免费在线| 2020视频1区2区3区| 久久一二三级一一一| 久久风骚城市| 国产精品香蕉热久久新品| 久久AV无码AV| 国产欧美精选激情视频| 国产欧美一区二区| 日本孕妇一区二区视频操逼免费看 | 午夜福利区| 国产无码精品成人| 97在线观看免费视频l| 亚洲AV成人精品网站在AV| 欧美亚洲玖玖玖| 欧美78P| 激情综合五月丁香| 欧洲一区二区| wwwss在线观看| 欧美另类天堂| 日本亚洲熟女视频| 色97欧美| 九九热视频这里只有精品| 影音先锋新男人| 91影视亚洲| 自怕偷自怕亚洲精品| 蜜臀久久久| 日本色色色视频| 亚洲天堂电影网99999| 一,爱啪啪,在线免费视频| 神马久久69| 亚洲超碰AV| 日韩熟女精一区二区三区不卡| 荡小穴在线观看| 顶级丝袜熟女一区二区三区 | 超碰美女97| 婷婷激情啪啪| 亚洲欧美另类激情小说| AV色图| 69精品少妇一区二区三区蜜桃| 丁香九月 婷婷| 亚洲欧美伦综合| 午夜福利在线视频1000| 久久黄黄| 六九九九| 女优视频第10页| www.av在线观看| 日韩在线一区高清在线| 深夜福利黄片| 一区二区三区麻豆| 久久精品99久久久久久| 丁香五月天婷婷姐| 97婷婷色| 一区| 老司机福利青青草| 国产馆| 91色伦| 后入日本1234| 九九超碰综合网| 97资源免费视频| 国产精品老熟女一区二区| 欧美大香蕉专区网| 99re公开精品免费视频| 人人艹亚洲| 日韩操逼HD| 最新国内自拍av免费| 九九视频黄色片| 超碰在线人妻中文字幕| ..日韩av毛片精品久久久| 26uuu国产日韩综合在线观看| 亚洲系列第一页| 白嫩国模丰满一二三区| 激情久久av一区av二区av| 久久东京国产精品视频| 97精品久久久久久久| 熟妇亚洲一区二区三区| av在线人气| 色狠人在线99| 青木玲在线不卡| 久热久操| 亚洲精品97p| 欲香欲色综合天天伊人| 超碰九区| 一类av片在线看| 成人av毛片在线观看| 91三级理论片播放器| 丁香五月婷婷基地| 亚洲天堂日本| 欧美亚洲| 这里只有精品久久| 久久久精品中文字幕麻豆| 草草电影院| 丁香五月电影| 中文字幕一区二区三区四五区| 久久久久久人妻一区精品色欧美| 超踫中文字幕| 日日躁夜夜躁狠狠躁超爽| 亚洲在线网站| 国产成人网址| 色在线69堂| 女沟厕偷窥piss小便| 97最新在线播放视频| 青青草在线视频人人想人人上| com 首页 18岁 禁区 女优 免费 精选 同城 | 色九月综合| 天天综合网在线91| 人人扣人人操| 成年在线视频日本亚洲在线视频区精品江靖宇公司| 成人羞羞视频国产| 日日爽夜夜爽| 女优大全 - 91n| 五月香婷婷| 色97干| 国产少妇内射| 秋霞视频一区二区 | 国产久久日| 日本高清免费一本视频在线观看| 91网站18在线观看| 一级做a爰片性色毛片久久| 天天干天天日天天射黄色大片| 在线午夜成人无码视频| 91国产美女丝袜足交精品视频| 久久天天艹| 超碰97在线色男人??| 91一起操| 人妻 丝袜美腿 中文字幕| 后入式五六区| 99国产在线绯色一区| a一区二区三区乱码在线| 亚洲日韩久久精品一区| 大香蕉啪啪啪| 欧美人人操人人插| 人妻激情在线视频| 五月婷视频| AVE乱伦| 中文字幕美女91| 不卡六六在线91| 懂色AV一区二区三区| 97色亚洲| ,成人免费啪啪视频| 99热亚洲天堂| 无码伊人久久大杳蕉中文无码| 超碰人妻97| 天美欧美国产| 丝袜喷水在线| 69精品在线| 婷婷久久五月天| 亚洲成人美女无吗| 成全在线观看免费观看| 美女诱惑一区| 日本三级精品| 日韩欧美中文字亚洲慕| 粉嫩小泬久久久一区二区| 天天看综合网| 中文字幕在线24| 日韩午夜啪啪视频| 免费AV播放| 婷婷丁香五月激情啪啪| 国产女人91精品嗷嗷嗷嗷| 国产成人亚洲精品无码最新在线| 国产精品成人午夜福利| 超碰久草| 欧美日本视频一区| 日韩在线一区高清在线| A 天堂在线观看视频| 18禁精品网站在线看| 亚洲第一黄色av网站| 欧美性爱精品一区二区| 国产少妇肉丝在线观看| 天美传媒av 在线| 久草色悠悠在线视频| 国产精品久久久九九九| 久9爱精品| 四虎精品永久在线播放| 中文字幕AV乱伦| 国产免a费看黄片在线| 日本欧美一区二区三区免费| 欧美人与性动交a美精品| 在线观看岛国有码| 岛国网址国产| 激情看片网站| 欧美性,亚州色| 美女网站黄页| 东京热一区二区中文字幕| 国产二区三区免费视频| 欧美情色贴图| 中日韓欧美高清| 精品国产乱码| 中文一区二区婷婷视频| 日日97| 亚洲精品一二区| 欧美色三级片91| 久久久一二三四区| 中文字幕aⅴ在线视频| 九九九午夜| 嗯嗯不要 视频| 亚洲第一狼人丝袜美女另类| 久久欧美1卡2卡3| 一本大道青青| 婷婷影院入口| 传媒免费一区二区三区| 欧美性生活男人的天堂| 超碰亚洲97| 蜜臀中文无码午夜| 久久精品国产72国产精品福利| 熟妇一区二区三区| 亚洲男人天堂AV| 深夜激情无码| 极品销魂美女一区二区 | 视频国产成人精品日本亚洲18| 九九色精品| 激情视频图片| 色色五月婷婷| 91在线视频国产网站| 男人的天堂2018.| 二男一女成人A片| 麻豆a'v电影| 少妇干B| 亚州高清AV| 丁香五月婷婷色| 午夜毛片亚洲精品片国产久久久| 午夜大香蕉| 97久操| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | 图片区小说区| 日韩一级二级三级免费看完整版 | 狠狠91| 日韩免费性爱视频在线观看| 亚洲文学偷乱拍啪啪啪啪| 国产乱色国产精品免费视| 综合视频91| 骚逼高潮久久精品| 久久精品日韩| 九热中文字幕| 日本高清加勒比| 日韩三级一区 | 极品极品色影院| 97国产精品一区| 伦在线97| 国产精品久久久久久夜夜夜| 欧美成人午夜免费福利785| 欲香欲色| 射久久| 欧美综合网站999| 欧美色图天堂网m| 免费精品福利在线观看| 自怕偷自怕亚洲精品| 久热热| 成人资源中文字幕在线观看| 人妻精品综合中文字幕在线 | 夜夜操天天肏| 亚欧成人中文字幕一区| 国产日韩欧美亚洲精品95| 96国产污污污丝袜| 性欧美另类高清| 国产精品人妻熟女aⅴ| 岛国免费视频在线| 秋霞网—男女啪啪亚洲免费体验区 | 激情久久久| 色婷婷色99国产综合精品| 国产女性无套 免费观看| 日本熟女中文字幕一区| 精品偷拍13p欧美dodk视频| 狠狠操官网| 国产丝袜美女在线一区| 超碰97人人cao| 亚洲码在线中文在线观看| 国产三级片在线观看| 97在线免费视频| 色97干| 色综合一区二区三区| 鸥美中出| 性爱Av免费| 激情AV| 色老汉色| 97这里有精品| а√天堂资源官网在线资源| 婷婷午夜成人色中色| 精品人妻美妇91job| 能看的AV| 一区二区 电影 亚洲| 嗯嗯啊啊的视频| 日本道人妻久久久在线不卡色视频| 国产9熟妇视频网站| 91狠狠综| 无码丰满熟妇一区二区浪潮AV| 乱论91| www.97在线| 亚州欧美综合| 青娱乐淫乱1314| www.大香| 91网站18在线| 国产97视频| 97资源视频| 7月婷婷综合| 99re99| 久久精品国产亚洲AV成人直播| 91美女视屏| 精人妻一区二区三区| 夜夜影视四色| 超碰97.com| 啪一啪免费视频| 后入式在线免费观看60秒| 成人国产视频在线观看| 色色99| 97超碰国产亚洲精品| 国产探花日韩援交| 日本精品国产视频| 日本一级特级毛片视频| 天美传媒国产原创中文字幕亚洲欧美另类| 欧美亚洲高清晰| 亚洲一卡2卡3卡4卡乱码网站 | 人妻精品综合中文字幕在线 | 欧美日韩国产男人| 伊人专区一区二区三区| 爱欲AV| 日韩卡一卡二卡三在线| 亚洲美女黄色| 韩国黄色片精品久久久| 亚洲熟妇A V黑人| 国产又爽又黄| 日韩综合97p| 色九九九九久| 在线国产福利网址导航| 亚洲激情深爱文学小说网站| 91一起操| 国产午夜福利电影免费在线观看| 97视频在线观看网站| 激情婷婷| 精品久久久久久中文字幕三区| 91超碰在线播放| 激情五月激情综合网| 秋霞午夜成人福利片片| 午夜后入| 啊啊啊啊一区| 青青久久手机线视频| 亚洲中文字幕熟女少妇一区二区| 婷婷日韩一区二区三区中文字幕在线| 好属操| 97精品人妻一二三四| 国产一级久久久| 夜夜草网站| 性videos欧美熟妇hdx| 就去色综合| 国产第二页| 美女啊啊啊啊pc| 久久久国产成人一区二区三区在线| 人人操欧美风骚| 国产精品夜夜夜| 天天做天天爱天天爽AV| 亚洲黑丝在线| 国产成人精品亚洲日本| 少妇熟女1区2区3区| 久久αⅴ| 好爽免费视频| 懂色Av| 中文一区二区三区影院| 91色欧美| 97精品全部| 九九五月天| 亚洲另类色综合网站| 91久热| 欧美综色欧| 亚洲天堂一区二区| 亚洲欧美综合网| 夜夜春夜夜操| 精品一区二区三区蜜桃| 天天射夜夜骑| 色图综合网| 国产精品久久久久9999小说| 中文字幕国产在线天堂| 久久双插| 六月色色| 久久爱超碰网| 东京热av影院| 久久成年片色大黄全免费网站| 不卡中文字幕aⅴ在线| 中国国国产一级特黄毛片| 欧美视频在线视频免费va| 91人妻爽爽人人做人人澡| 暖暖精品二区三区观看| 国产成人精品午夜福利| 96一区二区三区| 99热销国产这里有精品| 国产丝袜美女在线一区| 亚洲偷拍自拍在线视频| 亚洲欧洲无码97久久精品| 夜色97| 国产精品内射婷婷一级二| 99久久精品无码一区二区| 青青草在线成人视频| 熟妇精品juliaannAV| 天天综合91入口| 午夜男女爽爽大片免费观看| 能直接看AV的网站| 2025亚洲男人天堂| 中文字幕免费看| 婷婷影院入口| 国产精品色哟哟| 国产白丝精品在线观看| 九九99精品| 97超碰总站| 亚洲免费在线探花| 97伪v| 三级AV入口| 亚洲天堂电影精品一区| 人妻另类| 99久久网站| 伦理日韩国产久久| 成人亚欧免费视频| 亚州欧美一区| 26uuu国产日韩综合在线观看| 亚洲精品男人的天堂| 丝袜足交视频| 夜夜嗨AV一区天天| 国产偷拍网站| 涩涩久久精品| 99热这里| 51一区二区三区| 日本欧美不卡| 伊人色综合超碰| 尹人免费观看视频在线| 久久一本大香蕉| 秋霞影音一区二区三区| 欧美—性—交—色| 91黑丝少妇| 日本三级A片网站com| 97超碰人操| 天天爱天天韩国日本牛牛牛牛| 欧美天天综合网| 国产黄色动态精品| AV网站高清无码在线观看| 不卡视频一区蜜桃视频 | 精久久久| 国产黄色动态精品| 久久婷婷热| 天天综合欧美| 啊啊啊水好多| 久久久国产护士丝袜美腿一| AV天堂电影网| 久久婷婷伊人| 天天操天天射天天日| 超碰99在线| 欧美 青青草| 男人的天堂2019AV| 国产热RE99久久6国产精品首| 免费av在线播放二区| 国产精品国产精品国产| 欧美啪啪啪91| 亚洲。天堂。日本在线观看| 久久亚州高清| AV天堂男人的天堂| 精品免费一区二区三区在线亚洲人成| 蜜臀AV网站| 首页中文字幕中文字幕免费| 欧美岛国精品在线观看| 麻豆尤物视频网| 亚欧成人一级片在线播放| 欧美精品激情| 一区二区三| 成人羞羞视频国产| 日本成人在线不卡一区二区三区| 久热最新在线杭州| 99999国产精品| 伊人宅男大香蕉| 久久久久深夜无码| 97在线播放| 2019午夜福利视频| 9999九九九久久久| 国产人妻久久精品一区二区三区| 国产91 丝袜在线播放00-百度| 舔足天天操天天射| 国产婷婷综合在线观看| 国产操伦| 婷婷激情五月综合| av优播| 大香蕉一人在线| 激情综合av| 伊人991| 性九九九九九九| 91中出视频| 亚洲精品人体| 日韩性爱毛片操骚逼| 五月天激情小说| 日本 情色 1区2区3区| 欧美性91| 色yeye成人免费视频| **一级毛片国产| 亚洲综合影视| 97se亚洲| 亚洲中文字幕久久人妻| 人人透人人操| 老司机午夜精品福利视频一区二区| 91熟女丨老女人| 黄片色区软件| 日韩内射视频| 国产农村妇女精品| 99国产人成精品| 96一区二区三区| 国产AV毛片| 日本999精品| 91爱网| 人看人人摸人人操| 三级网站超变态精品| 精品美女少妇一区二区| 日韩黄片视频试看| 久久97资源 网| 国产精品永久免费10000| 大香蕉伊人在线成人AV在线观看| 色波多| 日本日日色视频| 夜夜草我| 日本欧美m v精品网站加| 中国农村熟妇毛片视频| 无码99| 天堂69亚洲精品中文字| 香蕉99秘 精品一区丁香| 天天色欧美| 一区二区久久天天干狠狠| 九九九久久久| 搡老女人老91妇女熟女| 东北操逼| 99久视频| 思思视频免费看网站| 丝袜美腿射精91| 99激情视频| 一级做a爰片性色毛片久久| 99热精品青草在线| 日韩欧美成人性爱在线| 无码精品啪啪啪一区二区三区三州| 粉嫩不卡一区二区性爱 | 熟女人妻一区二区三区| 东京热一区二区中文字幕| 激情四射五月天| 欧美亚性天堂| 精品一区二区人妖| 无码 黑人一区二区三区| 欧美日本视频一区| 国产亚卅97| 99∨VTV| 国人欧美精品一区二区| 91天天| 日日爽熟女| 天天躁狠狠躁av| 欧美亚洲20p| 性吧在线视频| 国产精品一区人妻精品阁在线| 粉嫩不卡一区二区性爱| 精品无码秘 人妻一区二区 | 日韩亚洲欧美中文字幕| 亚春色色| 亚洲精品蜜桃久久久| 白 大 人妻 区 在线| 中文字幕一区二区三区蜜臀| 男人综合网| 亚洲欧美清纯| 亚洲人妻久久久| 久草精品一区 | 果冻国产精品麻豆成人av| 9国产超碰| 无码动漫av中文字幕| 人妻熟妇一区二区三区| 国产美女高潮叫床视频| 亚洲综合在线91| 密臀AV在线| 搡老女人老91二区| 久久久久成人蜜桃精品| 97色碰| 91狠狠综合久久| 亚洲一区二区AV| 婷婷综合网站| 日韩少妇无码| 日韩不卡a级视频专区| 夜夜骑日日| 97超碰国产精品| 另类TS人妖一区二区三区| 男人的天堂日本东京热| 91人妻Pr| 91操熟女视频 | 男男H黄动漫啪啪无遮挡网站| 国产97综合| 日韩素人无码一区二区三区三州| 国内偷拍精品一区二区| 2017大香蕉国产精品久久| 欧美亚洲日本激情在线| 91精品老女人| 97AV在线免费观看| 色五月婷婷中文字幕| TS人妖另类精品视频系列| 是还免费视频1727我| 口爆综合网| 26uuu性| 久久成人午夜狠狠| 亚洲色图超碰在线| 国产 亚洲 丝袜 制服| 日本欧美不卡| 日韩天天本| 丁香五月综合| 亚洲中文国际强奸字幕| 91精品大奶人妻| 亚洲影院365| 精品国产99999| 男人 天堂 日 亚洲| 俺去也婷婷| 91香蕉视频在线观看免费| 久久大香蕉97| 日本九九久久99| 久久国色天香香蕉| 中文字幕一区二区三区视频播放| 日韩免费一级性爱视频| 成人区人妻精品一| 色老牛| 国产白嫩精品久久| 激情综合网激情五月天| 亚洲成人福利电影免费| 久久久啊啊啊| 内射中出日韩在线观看视频| 在线观看综合精品亚洲| 在线岛| 日韩性爱啪啪视频| 成人国产二区三区在线,男女精品。| 99热 按摩 日韩| 中文久久一区| 美女露胸露尿口| 五月色丁香| 成人性爱高清视频免费看| 美女黄网| 天堂成人网| 大香蕉99re| 国产情色在线| 福利天堂| 北京美女一区二区| 久久的网站啊啊啊啊啊| 国产精品交换一区二区| 大香蕉五月天婷婷| 日本精品高清一二区一本到| 亚洲 无码 偷拍| 国产激情视频一区区三区| 国产白丝AV| 欧美性性性| 久久国产精品m码| 日日躁天天躁狠狠躁| 欧美色图在线视频少妇| 色网综合网| 2017天天透天天通天天擦| 麻豆伊人网| 亚洲色资源| 亚洲男人天堂2013| 91成人在线| 精品乱码久久久久| 日韩精品操少妇| 久久久久亚洲精品| 亚洲人妖网| 大屁股国产在线视频| 欧美与日韩97| 欧美色图亚洲色,麻豆| 婷婷五月天色网| 91爱剪切久久| 国产精品日日摸夜夜添骚逼| 91青青草| 中文字幕日韩电影人妻| 九色精品视频导航1| 国内毛片婷婷六月色| 中文字幕一区二区三区字幕| 26UUU欧美日本| 在线岛| 欧美网站免费| 99亚洲精品| 91在线限制级| 老女人碰碰在线碰碰视频| 四虎在线免费视频| 婷婷10月天青娱乐| 97久久超碰| 无码人妻精品一区二区中文| 亚洲国产成人精品999| 中文精品一区二去| 深夜激情无码| 亚洲综合97中文网| 国产精品久久久蜜臀| a人欧美综合天堂麻豆| 伊人四虎综合| 久 久无码人妻AV| 欧美A片中文字幕| 曰韩操B| 日本精品无码三级网站| 人妻-91porn| 国产精品天美传媒| 欧美久久人妻少妇一区二区| 久久精品国产97欧美精品亚洲 | 少妇高潮九九九九| 久久无码一区二区二三区性色| 亚洲暴力强奸AV| 天天综合精品| 97频视在线| 亚洲一区二区三区婷婷| 97操| 久久精品三级影视| 国产精品视频电影| 97超碰中文字幕| 91中文字幕| 蜜乳AV一区二区三区四| 日韩在线视频1234| 欧美第二页午夜| 欧美精品黑人猛交高潮| 国产精品一区二区校花| 97天天摸天天碰| 91少妇通奸网站| 国产午夜精品理论片a大结局| 久久社区一区二区三区| 九九亚洲视频| 欧美性天天影院| 天天激清| 五月婷婷基地| 91久久久老司机| 国产偷拍网站| 亚洲色婷婷| 色偷偷超碰亚洲| 免费少妇一区二区| HEYZO高无码国产精品227| 国产高清不卡视频| 亚洲欧美不卡线| 精品性爱无码在线播放| 日本精品免费一区二区三区四区| 青青草福利视频| 九月婷婷久久| 久久m| A级毛片在线看免费| 久久精品人体| 欧美超碰在线| 老熟妇一区二区三区…| 岛国人妻少妇av在线观看| 97碰久久| 四虎AV在线观看| 欧美日韩97在线| 亚洲欧美日韩中文播放| 色色色综合网| 超碰97男女| 色情综合| 狠狠97| 黄色欧美性爱视频| 亚洲精品人伦一区二区| 伊人久久在线视频观看| 大香网伊人久久综合网eew| 九九精品99| 亚洲欧美日韩中文久久自慰| 国产AV高清AV无码| 超碰碰97资源站| 中文字幕日韩国产传媒欧美精品| 人妻精品视频一区二区三区| 亚洲三级网址久久最新| 自拍偷拍亚洲熟女妇人精品| 欧美男人亚洲天堂| 日韩午夜啪啪视频| 久久精品一区二区| 91中文精品日韩欧美在线| 天堂中文日本在线观看| 麻豆色约约| 91肏屄网| 黄色小视频日本txt| 亚洲欧洲第二视频在线观看色图| 亚洲系列第一页| 国产性爱欧美性爱在线| 大香蕉黄色一级片免费看| 国产专区路线| 乱伦a片视频| 自拍视频大全亚洲专媒视频/一区二区三区 | 欧美成人色| 亚洲av综合色区无码一| 久久久神马影院| 九色婷婷| 久久婷婷苹果| 亚洲情色电影网| 日本人妻中文字幕| 视频二区熟女人妻| 国内三级自拍小视频在线观看| 免费在线视频97| 99热精品青草在线| 26uuu性| 呦女网站| 91狠| 一级片在线观看高清无码| 台湾佬中文娱乐网久久久久久久久久com | 久久久精品网站| 日韩影片中文字幕一区二区三区| 日韩精品国产一区二区| 蜜臀99久久精品| 精品中文字幕一区二区| 怡红院成人视频| 丁香激情网| 少妇人妻好深太紧了vr91| 日韩欧美麻豆 | 色噜噜国产精品视频一区二区| 91色综合激情| 激情婷婷| 乱欲一区二区| 亚洲国产成人7777| 天天天干977| julia中文字幕在线观看| 岛国小电影| 一二三四区电影| 97超碰逼| 欧美黑人XXXⅩ高潮交| 亚洲国产高清福利视频| 91大神精品长腿在线观看网站| 精品国产乱码久久久久久久久久毛片| 少妇500双飞99| 亚洲色图超碰在线| 国产无码一二三区| 国产精品亚洲无码| 一起草三级AV电影在线观看 | 91在线秘 男同| 好吊色综合| 97欧美资源| 超碰是碰在线观看| 久久久久久9999| 色女99一级片在线观看| 日本超碰在线国产一区| 亚洲国产无码精品首页久久久| 中文字幕丝袜国产第一页不卡| 国产一区二区在线播放量| 一区二区中文| 欧美黑人极品高潮喷吹熟女黑人性暴力日韩在线欧美极品一区二区 | 天天爽夜夜欢视| 亚洲天堂性爱| 精品一区二区3区| 婷婷丁香六月| 东京热免费视频| 99碰碰| HEYZO高无码国产精品227| 超97在线精品视频| 久操网无码在线| 7777奇米影视久久| 黄色电影在线播放综合网站| 人人操人人爽人人操人人| 中文字幕国产在线天堂| 七月丁香婷婷| 日本韩高清无砖码22o| 超碰95| 12一15性XXXX粉嫩国产| 一区二区三区视频| 日本孕妇一区二区视频操逼免费看 | 一牛影视成人片免费| 国产成人一级av88| 中文字幕一区电影在线观看| 精品一区二区综合熟妇| 激情视屏国产乱伦强奸| 国产麻豆一级精品视频| 乱老女人一区二区视频| 亚洲激情综合|