萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 伺服器教學

Linux cgroups 記憶體子系統實戰:限制、監控與 OOM 防護

cgroups v1/v2 記憶體子系統核心檔案

掛載點通常為 /sys/fs/cgroup/memory (v1) 或 /sys/fs/cgroup (v2 unified)。關鍵檔案成對出現:

檔案 (無 memsw)檔案 (含 memsw)含義
memory.limit_in_bytesmemory.memsw.limit_in_bytes硬性限制:物理記憶體 / 物理+Swap (虛擬記憶體)
memory.usage_in_bytesmemory.memsw.usage_in_bytes當前使用量
memory.max_usage_in_bytesmemory.memsw.max_usage_in_bytes歷史峰值使用量
memory.failcntmemory.memsw.failcnt因超限導致分配失敗/觸發 OOM 的計數
memory.soft_limit_in_bytes (軟限制)、memory.oom_control (OOM 開關)、memory.swappiness (Swap 傾向)、memory.use_hierarchy (階層繼承)、memory.stat (詳細統計)

實戰:限制進程組記憶體

# 1. 建立控制組
mkdir /sys/fs/cgroup/memory/myapp

# 2. 設定硬限制:物理記憶體 1GB
echo 1073741824 > /sys/fs/cgroup/memory/myapp/memory.limit_in_bytes
# 或人類可讀單位
echo 1G > /sys/fs/cgroup/memory/myapp/memory.limit_in_bytes

# 3. 設定虛擬記憶體限制 (必須 >= 物理限制)
echo 2G > /sys/fs/cgroup/memory/myapp/memory.memsw.limit_in_bytes

# 4. 將進程加入控制組 (假設 PID 12345)
echo 12345 > /sys/fs/cgroup/memory/myapp/cgroup.procs

# 5. 觀察統計
cat /sys/fs/cgroup/memory/myapp/memory.stat

軟限制:記憶體壓力下的緩衝

# 設定軟限制 800MB,系統記憶體緊張時優先回收超過此值的頁面
echo 800M > /sys/fs/cgroup/memory/myapp/memory.soft_limit_in_bytes

不會直接殺進程,配合 memory.reclaim (v2) 在記憶體壓力下平滑回收。

OOM Killer 控制

# 查看當前 OOM 狀態
cat /sys/fs/cgroup/memory/myapp/memory.oom_control
# oom_kill_disable 0/1
# under_oom 0/1

# 禁用該控制組的 OOM Killer (進程不被殺,但會長期 D 狀態不可中斷睡眠)
echo 1 > /sys/fs/cgroup/memory/myapp/memory.oom_control

# ⚠️ 生產環境慎用!建議保持啟用,配合合理硬限制作為最後防線。

階層繼承

# 啟用階層模式 (僅在無子控制組時可設定)
echo 1 > /sys/fs/cgroup/memory/myapp/memory.use_hierarchy

# 子控制組自動繼承 use_hierarchy=1
# 所有子孫進程記憶體總和受父限制約束,觸發回收時波及全樹

Swappiness 調優

# 0 = 僅在物理記憶體耗盡才用 Swap (適合低延遲/資料庫)
# 60 = 預設平衡
# 100 = 激進使用 Swap
echo 10 > /sys/fs/cgroup/memory/myapp/memory.swappiness

systemd 整合 (現代標準做法)

不建議手動操作 cgroup 檔案,改用 systemd 服務單元聲明式管理:

# /etc/systemd/system/myapp.service
[Service]
MemoryLimit=1G           # 物理記憶體硬限制
MemorySwapMax=2G         # 虛擬記憶體限制 (MemoryLimit + Swap)
MemoryHigh=800M          # 軟限制 (觸發主動回收)
MemoryLow=100M           # 保護下限 (盡量不回收低於此值)
OOMScoreAdjust=-100      # 降低 OOM Killer 殺掉優先級 (等效 oom_score_adj)

# 重載並重啟
systemctl daemon-reload
systemctl restart myapp

# 查看狀態
systemctl status myapp
systemd-cgtop            # 即時 cgroup 資源佔用顯示

cgroups v2 (Unified Hierarchy) 關鍵差異

  • 單一掛載點 /sys/fs/cgroup,控制器啟用由 cgroup.controllers / cgroup.subtree_control 管理。
  • 記憶體檔案改名:memory.max (硬限)、memory.high (軟限)、memory.low (保護)、memory.swap.max (Swap 限制)、memory.oom.group (群組 OOM)。
  • memory.stat 欄位標準化,新增 anon, file, kernel_stack, slab, sock, shmem 等細分。

生產環境建議清單

  • ✅ **所有容器/服務必須設定 MemoryLimit** (防止單一失控拖垮宿主機)。
  • ✅ **MemoryHigh 設為 MemoryLimit 70-80%**,提前觸發回收平滑緩衝。
  • ✅ **關鍵服務 (DB, 核心微服務) 設定 OOMScoreAdjust 負值** 保護優先級。
  • ✅ **監控 memory.failcnt / memory.events (v2: oom_kill, oom_group_kill)** 告警。
  • ✅ **Swap 限制略大於物理限制** (1.5-2x),給 OOM Killer 緩衝空間。
  • ❌ **不要依賴禁用 OOM Killer** 當作常規保護,會導致系統假死。

總結

cgroups 記憶體子系統提供 **硬限制 (limit/max)、軟限制/保護 (soft/high/low)、階層聚合、Swap 控制、OOM 開關、詳細統計** 完整工具箱。現代運維請**全面拥抱 systemd 聲明式配置**,配合 Prometheus cgroup_memory_* 指標建立觀測體系,實現「限制有邊界、監控有數據、保護有優先級」的記憶體治理閉環。

copyright © 萬盛學電腦網 all rights reserved