磁碟空間耗盡是導致服務宕機的前三大原因之一。df (disk free) 看**檔案系統級**剩餘空間與 inode;du (disk usage) 看**目錄/檔案級**實際佔用。兩者視角互補,配合 lsblk、find、ncdu 可構建完整的磁碟空間可觀測體系。本文深度解析參數、輸出欄位、inode 耗盡排查、LVM/RAID/NFS 特殊情況與自動化告警實作。
df:檔案系統級空間鳥瞰圖
$ df -hT
Filesystem Type Size Used Avail Use% Mounted on
/dev/sda2 ext4 200G 85G 105G 45% /
/dev/sda1 vfat 511M 12M 499M 3% /boot/efi
/dev/sdb1 xfs 1.8T 1.2T 600G 67% /data
tmpfs tmpfs 32G 0 32G 0% /dev/shm
192.168.1.10:/share nfs4 10T 8.5T 1.5T 86% /mnt/nfs
| 欄位 | 含義 | 關鍵指標 |
| Filesystem | 裝置/遠端路徑 | LVM 顯示 /dev/mapper/vg-lv;NFS 顯示 ip:path |
| Type | 檔案系統類型 | ext4, xfs, btrfs, vfat, nfs4, cifs, fuse... |
| Size | 總容量 | 含保留區 (ext4 預設 5%) |
| Used | 已用容量 | 含資料 + 中繼資料 |
| Avail | **非 root 可用空間** (扣除保留區) | 真實可寫入空間 |
| Use% | 使用率 (含保留區) | > 80% 警告,> 90% 危急 |
| Mounted on | 掛載點 | 目標目錄 |
關鍵參數
-h:人類可讀 (K/M/G)
-T:顯示檔案系統類型 (**必加**)
-i:顯示 **inode 使用率** (極重要,見下文)
-x:排除檔案系統類型 (如 -x tmpfs -x devtmpfs)
--output:自訂欄位 (適合腳本解析)
du:目錄/檔案級空間佔用顯微鏡
# 顯示當前目錄下一級子目錄大小 (人類可讀)
du -h --max-depth=1 | sort -hr
# 顯示含檔案
du -ah /var/log | sort -hr | head -20
# 僅顯示總計
du -sh /var/log
# 排除特定目錄
du -sh --exclude=/var/log/journal /var/log
# 顯示 apparent size (邏輯大小,不含稀疏/壓縮/重複刪除節省)
du -sh --apparent-size /var/lib/docker
| 參數 | 效果 |
-a | 包含檔案 (預設只顯示目錄) |
-h | K/M/G 可讀 |
-c | 顯示總計 |
-s | 僅總計 (不遞迴顯示子目錄) |
--max-depth=N | 限制遞迴深度 (1=只看一級) |
--exclude=PATTERN | 排除模式 |
--apparent-size | 邏輯大小 (不計算稀疏/壓縮/去重節省) |
-B 1M | 固定區塊大小 (對齊輸出) |
inode 耗盡:隱形殺手 (df -i 才看得到)
$ df -hi
Filesystem Inodes IUsed IFree IUse% Mounted on
/dev/sda2 13M 12M 1.0M 93% /
/dev/sdb1 1.2G 1.1G 100M 92% /data
# 症狀:df -h 顯示空間充足,但無法建立新檔案 (No space left on device)
# 原因:大量小檔案 (郵件隊列、Session 檔案、容器層、Git 物件、PHP session、緩存檔)
# 定位:
find / -xdev -type f | wc -l # 全盤檔案數 (慎用)
find /var -xdev -type f | awk -F/ '{print $3}' | sort | uniq -c | sort -rn | head # 找大戶目錄
# 或用 ncdu (互動式、極快)
ncdu /
inode 耗盡典型場景與清理
| 場景 | 路徑 | 清理策略 |
| Postfix/Exim 郵件隊列 | /var/spool/postfix/maildrop/ | postsuper -d ALL 清除隊列 |
| PHP Session 檔案 | /var/lib/php/sessions/ | 設定 session.gc_probability、改用 Redis |
| Docker 映像層/容器 | /var/lib/docker/overlay2/ | docker system prune -a --volumes |
| Git 倉庫 objects | /.git/objects/ | git gc --aggressive --prune=now |
| 系統日誌輪轉失效 | /var/log/ | 檢查 logrotate 配置、手動 rm *.gz |
| 臨時檔案堆積 | /tmp, /var/tmp | systemd-tmpfiles --clean、重啟 |
LVM / RAID / NFS / Docker 特殊情況
LVM 邏輯卷擴容 (線上擴容,ext4/xfs 均支援)
# 1. 確認 VG 有剩餘 PE
vgs
# 2. 擴容 LV
lvextend -L +50G /dev/mapper/vg-data
# 3. 擴容檔案系統
resize2fs /dev/mapper/vg-data # ext4
xfs_growfs /data # xfs (掛載點)
# 4. 驗證
df -h /data
RAID 陣列監控
# mdadm RAID
cat /proc/mdstat
mdadm --detail /dev/md0
# 硬體 RAID (需廠商工具)
storcli64 /c0 show
hpssacli ctrl all show config
NFS 掛載點 df 誤導
NFS df 顯示的是 **Server 端** 檔案系統空間,非 Client 本地。若 Server 空間滿,Client 寫入會報錯,但 Client df 可能仍顯示有空間 (快取)。**監控必須在 Server 端進行**。
Docker 佔用空間分析
docker system df -v
# 顯示 Images, Containers, Local Volumes, Build Cache 詳細佔用
# 清理
docker system prune -a --volumes --filter "until=168h" # 7 天前未使用
自動化告警腳本 (Prometheus Pushgateway / Zabbix / Email)
#!/bin/bash
# check_disk.sh 每 5 分鐘 cron 執行
THRESHOLD_PCT=80
THRESHOLD_INODE=85
ALERT_WEBHOOK="https://hooks.slack.com/services/xxx/yyy/zzz"
alert() {
local msg="$1"
curl -X POST -H 'Content-type: application/json' \
--data "{\"text\":\"🚨 Disk Alert: $msg\"}" "$ALERT_WEBHOOK"
}
# 1. 檢查空間使用率 (排除虛擬檔案系統)
df -hP -x tmpfs -x devtmpfs -x overlay -x squashfs | tail -n +2 | while read line; do
usep=$(echo "$line" | awk '{print $5}' | sed 's/%//')
mountp=$(echo "$line" | awk '{print $6}')
fs=$(echo "$line" | awk '{print $1}')
if [ "$usep" -ge "$THRESHOLD_PCT" ]; then
alert "$(hostname) $fs mounted on $mountp usage ${usep}% (threshold ${THRESHOLD_PCT}%)"
fi
done
# 2. 檢查 inode 使用率
df -hiP -x tmpfs -x devtmpfs -x overlay -x squashfs | tail -n +2 | while read line; do
iusep=$(echo "$line" | awk '{print $5}' | sed 's/%//')
mountp=$(echo "$line" | awk '{print $6}')
fs=$(echo "$line" | awk '{print $1}')
if [ "$iusep" -ge "$THRESHOLD_INODE" ]; then
alert "$(hostname) $fs mounted on $mountp inode usage ${iusep}% (threshold ${THRESHOLD_INODE}%)"
fi
done
進階工具推薦
| 工具 | 特色 | 安裝 |
| ncdu | 互動式 TUI、極快 (ncurses)、可刪除、導出 JSON | apt/yum/dnf install ncdu |
| duc | 建立索引資料庫、Web UI、圖形化 (sunburst/treemap) | pip install duc 或 apt install duc |
| agedu | 顯示檔案**最後存取時間**,找出冷資料 | apt install agedu |
| dfc | 彩色 df、顯示圖形進度條 | apt install dfc |
| btrfs usage / btrfs filesystem df | Btrfs 專用 (Data/Metadata/System/Unallocated 細分) | 內建 |
建立「df -hT 日巡檢 + df -hi 週巡檢 + du -h --max-depth=1 月度熱點分析 + 自動化告警」的三層防線,徹底杜絕「磁碟滿導致宕機」的生產事故。