萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 網路程式設計 >> 程式語言綜合

Shell 腳本監控指定進程運行狀態(CPU/內存/僵屍檢測)

場景與目標

在自動化測試、守護進程、故障診斷場景下,需持續監控目標進程的關鍵指標:

  • 進程是否存活(PID 存在)
  • CPU 使用率、內存使用率
  • 進程狀態碼(R/S/D/Z 等)
  • 異常退出/僵屍進程檢測並觸發動作(告警、重啟、停止關聯任務)

核心腳本實現


#!/bin/bash
# monitor_process.sh — 監控指定進程,異常退出時執行清理
# 用法: ./monitor_process.sh <進程名關鍵字> [檢查間隔秒數] [關聯清理命令]

set -euo pipefail

TARGET_NAME="${1:-mainApp}"          # 進程名關鍵字(pgrep 匹配)
INTERVAL="${2:-10}"                  # 採樣間隔,默認 10s
CLEANUP_CMD="${3:-}"                 # 可選:異常退出時執行的清理命令
LOG_FILE="${TARGET_NAME}_monitor.log"

# 顏色輸出
RED='\033[0;31m'; GREEN='\033[0;32m'; YELLOW='\033[1;33m'; NC='\033[0m'

log() {
    local level=$1; shift
    echo -e "$(date '+%Y-%m-%d %H:%M:%S') [${level}] $*" | tee -a "${LOG_FILE}"
}

get_process_info() {
    # 使用 ps 獲取:PID, %CPU, %MEM, STAT, COMMAND
    # STAT 狀態碼: R=運行 S=睡眠 D=不可中斷睡眠 Z=僵屍 T=停止
    ps -eo pid,pcpu,pmem,stat,comm --no-headers | grep -E "[${TARGET_NAME:0:1}]${TARGET_NAME:1}" | grep -v grep | head -1
}

main() {
    log "INFO" "啟動監控: 目標='${TARGET_NAME}', 間隔=${INTERVAL}s, 日誌=${LOG_FILE}"
    
    while true; do
        info=$(get_process_info)
        if [[ -z "${info}" ]]; then
            log "WARN" "${RED}進程 '${TARGET_NAME}' 不存在或已退出${NC}"
            break
        fi
        
        read -r pid cpu mem stat cmd <<< "${info}"
        
        # 僵屍進程檢測
        if [[ "${stat}" == *"Z"* ]]; then
            log "ERROR" "${RED}檢測到僵屍進程: PID=${pid}, STAT=${stat}${NC}"
            break
        fi
        
        log "INFO" "${GREEN}進程正常${NC} | PID=${pid} CPU=${cpu}% MEM=${mem}% STAT=${stat} CMD=${cmd}"
        
        sleep "${INTERVAL}"
    done
    
    # 進程結束後的清理邏輯
    log "INFO" "監控結束,執行後續處理..."
    if [[ -n "${CLEANUP_CMD}" ]]; then
        log "INFO" "執行清理命令: ${CLEANUP_CMD}"
        eval "${CLEANUP_CMD}"
    fi
    
    # 顯示最終進程狀態
    log "INFO" "最終進程列表:"
    ps -eo pid,pcpu,pmem,stat,comm | grep -E "[${TARGET_NAME:0:1}]${TARGET_NAME:1}" | grep -v grep | tee -a "${LOG_FILE}"
}

main "$@"

使用示例


# 1. 基礎監控(每 10 秒檢查一次 mainApp)
./monitor_process.sh mainApp

# 2. 高頻監控(每 2 秒),進程關鍵字 java
./monitor_process.sh java 2

# 3. 異常退出時自動重啟關聯服務
./monitor_process.sh myworker 5 "systemctl restart myworker-sidecar"

# 4. 後台靜默運行,輸出重定向
nohup ./monitor_process.sh mainApp 10 "pkill -f MyTester" > /dev/null 2>&1 &

關鍵技術點解析

1. 進程匹配策略

grep -E "[${TARGET_NAME:0:1}]${TARGET_NAME:1}" 技巧:避免 `grep` 進程自身出現在結果中(經典 `grep -v grep` 替代)。

2. 狀態碼解讀(STAT 欄位)

3. 更精準的資源採集:/proc//stat

若需更詳細指標(如用戶/系統 CPU 時間、線程數、上下文切換),直接解析 `/proc`:


parse_proc_stat() {
    local pid=$1
    local stat_file="/proc/${pid}/stat"
    if [[ ! -r "${stat_file}" ]]; then return 1; fi
    
    # 字段參考: man 5 proc
    # (1) pid  (2) comm  (3) state  (4) ppid  (5) pgrp  (6) session
    # (14) utime  (15) stime  (16) cutime  (17) cstime
    # (20) starttime  (22) vsize  (23) rss  (24) rsslim
    read -r _ _ state _ _ _ _ _ _ _ _ _ _ utime stime _ _ _ _ _ vsize rss _ < "${stat_file}"
    
    # 計算 CPU 使用率需兩次採樣差值,這裡僅示例字段提取
    echo "STATE=${state} UTIME=${utime} STIME=${stime} VSIZE=${vsize} RSS=${rss}"
}

生產級增強建議

  1. 系統日誌集成:使用 `logger` 命令寫入 syslog/journald,而非僅本地文件。
  2. 指標推送:集成 Prometheus Node Exporter 或 Pushgateway,將指標暴露給監控平台。
  3. 多進程組監控:支持進程組(如 systemd service unit)而非單一進程名。
  4. 自動重啟策略:結合 `systemd` 的 `Restart=on-failure` 或 Supervisor,而非腳本內 `eval` 重啟(避免孤兒進程、權限問題)。
  5. 配置文件化:將目標、間隔、閾值、動作提取到 YAML/JSON 配置,腳本只做執行引擎。

總結

這個 Bash 監控腳本實現了:

  • 基於 `ps` 的輕量級進程狀態輪詢(CPU/MEM/STAT)。
  • 僵屍進程(Z 狀態)自動檢測與退出觸發。
  • 可配置間隔、日誌記錄、異常後清理命令鏈。
  • 純 Shell 實現,零依賴,可直接在最小容器/嵌入式環境運行。

對於關鍵生產系統,建議升級為 **systemd 服務單元 + Prometheus 監控 + Alertmanager 告警** 的標準化運維棧,腳本方案適用於臨時診斷、輕量級部署、CI/CD 流水線輔助監控等場景。

copyright © 萬盛學電腦網 all rights reserved
代碼含義關注度
RRunning/Runnable(運行/就緒)正常
SSleeping(可中斷睡眠)正常
DDisk Sleep(不可中斷睡眠,通常 IO 等待)關注:可能掛起
ZZombie(僵屍,父進程未回收)嚴重異常
TStopped(被信號停止)異常
XDead(即將消失)正常退出過程
<高優先級正常
N低優先級正常
+前台進程組正常
l多線程正常