核心概念:打包 ≠ 壓縮
- 打包:將多文件/目錄合併為單一文件,**不減小體積** (tar、cpio)
- 壓縮:通過算法減小文件體積,**不改變文件結構** (gzip、bzip2、xz、zstd、lz4)
- 歸檔+壓縮:tar 打包後管道給壓縮工具,慣用
.tar.gz、.tar.xz 後綴
主流格式對決表
| 格式 | 算法 | 壓縮比 | 速度 | 內存佔用 | 普及度 | 典型場景 |
| gzip (.gz) | DEFLATE (LZ77+Huffman) | 中等 | **快** | 低 | ★★★★★ | 日志輪轉、網頁傳輸、備份通用 |
| bzip2 (.bz2) | BWT + MTF + Huffman | 較高 | 慢 | 中 | ★★★☆☆ | 源碼分發、需較高壓縮比 |
| xz (.xz) | LZMA2 | **最高** | **極慢** | 高 (可調) | ★★★★☆ | 軟件包分發 (Arch/Termux)、長期歸檔 |
| zstd (.zst) | Zstandard (Facebook) | 高 (接近 xz -3) | **極快** (多線程) | 可調 | ★★★★↑ | **現代首選**:備份、鏡像、日志、內核模塊 |
| lz4 (.lz4) | LZ4 | 較低 | **最快** (GB/s 級) | 極低 | ★★★☆☆ | 實時壓縮、內核模塊、消息隊列 |
| zip (.zip) | DEFLATE | 中等 | 中 | 低 | ★★★★★ | 跨平台交換、Windows 兼容 |
| 7z (.7z) | LZMA/LZMA2 | 最高 | 慢 | 高 | ★★★★☆ | 高壓縮比歸檔、分卷、加密 |
| tar (.tar) | 無 (打包) | 1.0 | 極快 | 極低 | ★★★★★ | 配合壓縮工具、增量備份 |
tar 三大核心操作模式
# 1. 創建/打包壓縮 (c = create)
tar czvf archive.tar.gz /path/to/src # gzip
tar cjvf archive.tar.bz2 /path/to/src # bzip2
tar cJvf archive.tar.xz /path/to/src # xz (大寫 J)
tar --zstd -cvf archive.tar.zst /path/to/src # zstd (推薦)
tar -cvf archive.tar /path/to/src # 僅打包
# 2. 列表/查看 (t = list)
tar tvf archive.tar.gz
tar tvf archive.tar.zst
# 3. 解包/解壓 (x = extract)
tar xzvf archive.tar.gz # 自動識別壓縮格式 (現代 tar)
tar xvf archive.tar.zst -C /target/dir # 指定解壓目錄
tar xvf archive.tar --strip-components=1 # 去除頂層目錄
關鍵參數詳解
| 參數 | 長選項 | 作用 | 注意 |
-c | --create | 創建歸檔 | — |
-x | --extract | 解包 | — |
-t | --list | 列表內容 | 不解壓 |
-v | --verbose | 顯示過程 | 大量文件會刷屏,生產腳本建議去掉 |
-f | --file | 指定歸檔文件名 | **必須緊跟文件名**,建議放最後 |
-z | --gzip | gzip 過濾 | — |
-j | --bzip2 | bzip2 過濾 | — |
-J | --xz | xz 過濾 | 大寫 J |
--zstd | — | zstd 過濾 (tar 1.31+) | 需安裝 zstd |
-C | --directory | 切換目錄後操作 | 相對路徑打包神器 |
--exclude | — | 排除模式 | --exclude='*.log' --exclude='.git' |
--strip-components=N | — | 解包去除前 N 級目錄 | 部署項目常用 |
-p | --preserve-permissions | 保留權限 (默認 root 需加) | 備份/遷移必加 |
--numeric-owner | — | 以數字 UID/GID 存儲 | 跨系統備份避免用戶映射錯誤 |
相對路徑打包最佳實踐 (-C 參數)
# 需求: 打包 /data/a/b/directory 內容, 解壓後直接得到 directory/ 而非 data/a/b/directory/
# 錯誤寫法:
tar czvf /backup/test.tar.gz /data/a/b/directory
# 解壓產生: /data/a/b/directory/...
# 正確寫法:
tar czvf /backup/test.tar.gz -C /data/a/b directory
# 或
cd /data/a/b && tar czvf /backup/test.tar.gz directory
# 解壓任意目錄:
tar xzvf /backup/test.tar.gz -C /target
# 得到 /target/directory/...
分卷與加密
# tar + split 分卷 (通用、無壓縮)
tar cvf - /data | split -b 1G - /backup/data.tar.part
# 7z 分卷壓縮加密 (AES-256)
7z a -v1g -mx=5 -mhe=on -p'StrongPassword' /backup/data.7z /data
# zip 加密 (傳統 ZipCrypto 弱, 推薦 AES-256)
zip -r -e -P 'Password' /backup/data.zip /data # 傳統
# 現代 AES-256 需 7z 或 zip -e (Info-ZIP 3.1+)
增量/差異備份策略
# 1. GNU tar 列表文件增量
tar czvf /backup/full_$(date +%F).tar.gz -g /backup/snar /data
# 每日增量
tar czvf /backup/inc_$(date +%F).tar.gz -g /backup/snar /data
# 2. rsync + 硬鏈接 (rsnapshot/rdiff-backup/borgbackup/restic)
# 推薦: restic (去重、加密、多後端、掛載瀏覽)
restic -r s3:bucket/path backup /data --tag daily
性能調優建議
- 多線程壓縮:
tar --zstd -cvf archive.tar.zst -Ipigz /data (pigz 並行 gzip)、zstd -T0 (自動全核)
- 避免雙重壓縮:已壓縮文件 (jpg/mp4/gz/xz) 再壓縮浪費 CPU,
--skip-compress 或預先識別
- 大文件直讀直寫:
tar cf - /data | pv | zstd -T0 > /backup/data.tar.zst (pv 顯示進度)
- NVDIMM/持久內存:
DAX 掛載繞過頁面緩存,配合 tar --no-recursion 直接 DMA
快速參考卡片
# 日常備份 (推薦 zstd)
tar --zstd -cvf backup_$(date +%F).tar.zst -C /data .
# 快速傳輸 (ssh 管道, 無落地)
tar czf - -C /data . | ssh user@remote "tar xzf - -C /restore"
# 排除緩存/日志/版本控制
tar --zstd -cvf app.tar.zst -C /var/www/app \
--exclude='.git' --exclude='node_modules' --exclude='vendor' \
--exclude='storage/logs' --exclude='storage/framework/cache' .
# 只打包修改時間 24h 內的文件
find /data -mtime -1 -type f -print0 | tar --null -czvf recent.tar.gz --files-from -