萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 伺服器教學

Linux glibc 導致 Kernel Panic 緊急修復實戰:Rescue Mode 重裝核心套件

前言:Kernel Panic 是什麼?為什麼 glibc 會觸發?

Kernel Panic 是 Linux 核心偵測到無法恢復的錯誤時的自我保護機制,系統停止運作並輸出錯誤資訊。glibc (GNU C Library) 是幾乎所有使用者空間程式依賴的核心執行庫,提供系統呼叫封裝、標準 C 函數、動態連結器等基礎設施。若 glibc 損毀、版本不匹配、升級中斷、或硬體記憶體錯誤導致庫檔案損壞,核心在啟動階段載入 init (PID 1) 時即會因無法連結必要符號而 Panic。

常見觸發情境

  • 套件管理器升級中斷:yum update glibc 過程斷電、網路中斷、磁碟滿。
  • 手動 rpm 強制安裝錯誤版本:架構不符 (i686 vs x86_64)、釋出版本不符 (fc17 on fc18)。
  • 第三方腳本/安裝程式覆蓋系統庫。
  • 硬體故障:記憶體位元翻轉、磁碟壞軌導致檔案損毀。

核心修復策略:進入 Rescue Mode 重裝 glibc 相關套件

原則: 不重裝作業系統,僅修復受損套件。需使用安裝媒體 (ISO/USB) 進入救援環境,掛載系統根分區,以 rpm --root 重新安裝 glibc、glibc-common、libgcc。

詳細操作步驟 (以 CentOS/RHEL 7/8/9、Rocky/AlmaLinux 為例)

準備工作

  • 對應版本安裝 ISO (可從官網下載,掛載至虛擬光碟或燒錄 USB)。
  • 確認目標系統架構 (uname -m,通常 x86_64)。
  • 備份重要資料 (若可進入單人模式或透過 LiveCD 掛載備份)。

步驟 1:啟動安裝媒體進入救援模式

  1. 開機選單選擇 Troubleshooting → Rescue a CentOS/RHEL system (或 Rescue installed system)。
  2. 選擇語言、鍵盤版面。
  3. 網路設定:通常選 No (除非需下載套件)。
  4. 系統會嘗試掛載偵測到的 Linux 根分區至 /mnt/sysimage。選擇 Continue (掛載) 或 Skip (手動掛載)。
  5. 進入 Shell 提示符:sh-4.2#。

步驟 2:切換根目錄至系統環境

chroot /mnt/sysimage

此後所有指令將在目標系統環境執行,rpm --root=/mnt/sysimage 亦可改為直接 rpm (因已 chroot)。

步驟 3:確認 glibc 相關套件狀態

rpm -qa | grep -E 'glibc|libgcc|nss-softokn'
# 應輸出類似:
# glibc-2.34-60.el9.x86_64
# glibc-common-2.34-60.el9.x86_64
# glibc-minimal-langpack-2.34-60.el9.x86_64
# libgcc-11.2.1-9.el9.x86_64
# nss-softokn-freebl-3.67.0-3.el9.x86_64

步驟 4:從安裝媒體 / 網路倉庫重新安裝核心套件

方法 A:使用安裝媒體上的 RPM 檔 (離線、版本精確匹配)

# 掛載安裝 ISO (若救援模式未自動掛載)
mkdir -p /mnt/iso
mount -o loop /dev/cdrom /mnt/iso  # 或 /dev/sr0

# 進入 Packages 目錄
cd /mnt/iso/BaseOS/Packages   # CentOS/RHEL 8/9
# 或 cd /mnt/iso/Packages       # CentOS 7

# 重新安裝 (依序:libgcc → glibc-common → glibc)
rpm -Uvh --replacepkgs libgcc-*.x86_64.rpm
rpm -Uvh --replacepkgs glibc-common-*.x86_64.rpm
rpm -Uvh --replacepkgs glibc-*.x86_64.rpm
# 若有 nss-softokn-freebl 也一併重裝
rpm -Uvh --replacepkgs nss-softokn-freebl-*.x86_64.rpm

--replacepkgs 強制重新安裝已安裝套件,修復損毀檔案。

方法 B:使用 yum/dnf 從配置倉庫重裝 (需網路)

# 在 chroot 環境中
yum reinstall -y glibc glibc-common libgcc nss-softokn-freebl
# 或 dnf (RHEL 8+)
dnf reinstall -y glibc glibc-common libgcc nss-softokn-freebl
救援模式下 yum/dnf 可能需手動掛載 repo 或啟用網路。離線 RPM 法更可靠。

步驟 5:處理 SELinux 標籤 (關鍵步驟)

重裝套件後,檔案安全性內容可能遺失,導致開機失敗 (SELinux 拒絕載入)。

# 選項 1:重新標記整個檔案系統 (下次開機自動執行,較慢)
touch /.autorelabel

# 選項 2:針對 glibc 相關路徑手動恢復 (較快)
restorecon -Rv /lib64 /usr/lib64 /etc/ld.so.cache /etc/ld.so.conf.d

# 選項 3:暫時關閉 SELinux 驗證 (僅為救急,事後必須恢復)
# 編輯 /etc/selinux/config → SELINUX=permissive
# 開機後執行 restorecon -Rv / 並改回 enforcing

步驟 6:重建 initramfs (若核心模組相依性受影響)

# 查看當前核心版本
ls /boot/vmlinuz-*

# 重建對應版本 initramfs
dracut -f /boot/initramfs-$(uname -r).img $(uname -r)
# 或指定版本
dracut -f /boot/initramfs-5.14.0-284.11.1.el9_2.x86_64.img 5.14.0-284.11.1.el9_2.x86_64

步驟 7:退出 chroot、卸載、重啟

exit          # 離開 chroot
umount /mnt/sysimage
umount /mnt/iso  # 若有掛載 ISO
reboot

Ubuntu/Debian 系統對應修復

Ubuntu 使用 dpkg/apt,核心庫為 libc6:

# 進入救援模式 (GRUB 選單 → Advanced options → recovery mode → root shell)
# 掛載根分區為讀寫
mount -o remount,rw /

# 重新安裝核心套件
apt update
apt install --reinstall libc6 libc-bin libgcc-s1 libstdc++6

# 修復 dpkg 狀態
dpkg --configure -a
apt install -f

# 重建 initramfs
update-initramfs -u -k all

# 重啟
reboot

預防與最佳實踐

  • 鎖定核心套件版本:yum versionlock add glibc* / apt-mark hold libc6 (謹慎使用,需定期手動更新)。
  • 升級前快照/備份:虛擬機快照、LVM 快照、檔案系統快照 (Btrfs/ZFS)。
  • 分階段升級:先 yum update --downloadonly 下載套件,確認完整再安裝。
  • 監控磁碟空間:/var/cache/yum、/boot 空間不足是升級中斷主因。
  • 硬體健康監控:smartctl、memtest86+ 定期檢測。

延伸閱讀

Kernel Panic 令人恐慌,但只要理解 glibc 是使用者空間基石,掌握 Rescue Mode + rpm --root 重裝核心套件 + SELinux 重標記 + initramfs 重建這套標準流程,大多數情況可在 30 分鐘內恢復服務,避免完整重裝系統的巨大成本。

copyright © 萬盛學電腦網 all rights reserved