萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 伺服器教學

Linux OOM Killer 機制深度解析:原理、排查與防護實戰

現象與痛點

VPS 上 MySQL、Java 應用頻繁「無故」被殺,/var/log/messages 出現:

Out of memory: Kill process 9682 (mysqld) score 9 or sacrifice child
Killed process 9682, UID 27, (mysqld) total-vm:47388kB, anon-rss:3744kB...

這是 Linux 核心 OOM Killer (Out-of-Memory Killer) 為防止系統崩潰而犧牲進程的保護機制。

核心原理:過度承諾與評分機制

記憶體過度承諾

核心允許進程申請超過物理記憶體+Swap 的虛擬記憶體,賭進程不會用滿。當大多數進程同時用滿,物理資源耗盡 → 觸發 OOM Killer。

選擇犧牲者:oom_badness() 評分演算法

核心遍歷所有進程,計算 badness 分數,分數最高者被殺。核心邏輯(簡化版):

points = 進程 RSS + Page Table + Swap 使用量
# root 進程享 3% 加分優惠(分數降低 30)
if (has_capability(CAP_SYS_ADMIN)) adj -= 30;
# 使用者空間可調整 oom_score_adj(-1000 ~ +1000)微調分數
points += adj * totalpages / 1000;

佔用記憶體越大、權限越低 → 分數越高 → 越容易被殺。這解釋為何 MySQL、Java 等大記憶體進程常成「犧牲品」。

三大防護策略

策略一:調整進程優先級(臨時/緊急)

降低關鍵進程 oom_score_adj(負值 = 較不易被殺):

# 找到進程 PID
ps aux | grep mysqld
# 例:PID 2196
echo -15 > /proc/2196/oom_score_adj  # 分數大幅降低

# 驗證
cat /proc/2196/oom_score  # 觀察分數下降

⚠️ 重啟失效,需寫入啟動腳本或 systemd 服務單元。

策略二:核心參數調優(系統級)

參數建議值作用
vm.overcommit_memory2嚴格模式:拒絕超額分配,從源頭避免 OOM(可能導致分配失敗報錯)
vm.panic_on_oom1觸發 OOM 直接 Kernel Panic,配合 kernel.panic=10 自動重啟
vm.oom_kill_allocating_task1直接殺掉觸發分配請求的進程,而非評分最高者

永久生效寫入 /etc/sysctl.conf 並執行 sysctl -p。

策略三:根治優化(長久之計)

  • 增加記憶體 / 新增 Swap(最直接)。
  • 應用層優化: MySQL innodb_buffer_pool_size、JVM -Xmx、PHP-FPM pm.max_children 限制上限。
  • 系統層優化: 關閉無用服務、調整 vm.swappiness、使用 jemalloc/tcmalloc 減少碎片。
  • 容器化限制: Docker --memory、K8s resources.limits.memory 硬性限制,避免單容器拖垮宿主機。

實用腳本:找出最容易被殺的 Top 10 進程

#!/bin/bash
# oomscore.sh
for proc in $(find /proc -maxdepth 1 -regex '/proc/[0-9]+'); do
  printf "%2d %5d %s\n" \
    "$(cat $proc/oom_score 2>/dev/null)" \
    "$(basename $proc)" \
    "$(cat $proc/cmdline 2>/dev/null | tr '\0' ' ' | head -c 50)"
done | sort -nr | head -n 10

輸出範例:

18  981 /usr/sbin/mysqld
 4 31359 -bash
 4 31056 -bash
 1 31358 sshd: root@pts/6
...

總結

OOM Killer 是核心最後防線,非 Bug。理解其評分機制,結合 進程級微調 + 核心參數調優 + 應用/系統根治優化 三層防護,才能徹底告別「無故被殺」噩夢。生產環境請務必建立記憶體使用監控告警(如 Prometheus + Grafana),在 OOM 發生前介入。

copyright © 萬盛學電腦網 all rights reserved