萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 伺服器教學

Linux避免大文件刪除導致I/O Hang:硬鏈接+truncate漸進式釋放空間技巧

問題場景

資料庫伺服器刪除巨大.ibd表空間文件(數十GB),直接rm會觸發內核同步刪除所有數據塊,導致I/O風暴、系統假死、業務停頓。

核心思路:硬鏈接+truncate分步釋放

  1. 創建硬鏈接:ln huge.ibd huge.ibd.hardlink,inode引用計數+1。
  2. 刪除原文件名:rm huge.ibd,引用計數-1,但inode與數據塊保留(硬鏈接仍持有),瞬間完成,零I/O壓力。
  3. 漸進截斷:對huge.ibd.hardlink反覆truncate -s -1G逐步縮小,每次釋放1GB數據塊,I/O平滑分攤。
  4. 最終刪除:縮至0後rm huge.ibd.hardlink,最後一塊釋放完成。

truncate關鍵參數詳解


truncate -s -1G huge.ibd.hardlink   # 縮小 1GB
truncate -s 0 huge.ibd.hardlink     # 直接歸零(等同刪除所有數據塊,慎用)
# 單位後綴:K=1024, M=1024^2, G=1024^3, T, P, E, Z
# 符號:+擴展 -縮小 <至多 >至少 /向下捨入倍數 %向上捨入倍數

實測示例


touch abc
truncate -s +1K abc
truncate -s +1K abc
ls -l abc
# -rw-r--r-- 1 root root 2048 Nov 28 05:31 abc

適用條件與注意事項

  • 文件系統支援fallocate(FALLOC_FL_PUNCH_HOLE)或truncate(ext4/xfs/btrfs均支援)。
  • 需確保無其他進程持有該文件打開句柄,否則空間不會真正釋放(lsof | grep huge.ibd確認)。
  • 配合ionice -c 3或cgroups blkio.weight限制I/O優先級,進一步降低業務影響。
  • 對於InnoDB共享表空間ibdata1不可用此法,僅適用innodb_file_per_table=ON的獨立.ibd文件。

延伸:coreutils版本要求

truncate屬於GNU coreutils 7.5+,主流發行版(CentOS 6+/Debian 7+/Ubuntu 12.04+)均內建。

copyright © 萬盛學電腦網 all rights reserved