萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 伺服器教學

Linux文件系統變唯讀?從fsck修復到硬件故障排查的完整應急手冊

現象

提示Read-only file system,mount顯示rw但實際寫入失敗,重啟後直接halt,iLO日誌報硬盤/SAS控制器故障。

應急處理流程(由輕到重)

  1. 嘗試重新掛載為讀寫:
    mount -o remount,rw /dev/sda1
    成功則可能為暫時性錯誤,立即備份關鍵數據。
  2. 卸載後fsck修復(必須卸載,否則損壞文件系統):
    
    umount /dev/sda1
    fsck -y -C -t ext3 /dev/sda1
    # -y 自動yes,-C 進度條,-t 指定類型
    # 修復後文件多移至 lost+found,文件名變為 inode 編號
        
  3. 處理「device busy」無法卸載:
    
    fuser -m /mountpoint      # 顯示佔用進程 PID
    fuser -mk /mountpoint     # 直接殺掉佔用進程
    umount /mountpoint
        
  4. 檢查掛載表一致性:
    
    cat /proc/mounts
    cat /etc/fstab
    mount
    # 發現 ro 掛載則重新 mount -o rw,remount
        

硬件級故障鐵證(Dell PowerEdge 1950 典型案例)

  • iLO/前面板報錯:E171F PCIE Fatal Err B0 D3 F0 / Critical Event sensor, bus fatal error (Bus 0 Device 3 Function 0)。
  • 根因:SAS 5/i RAID卡上兩顆液態電容鼓包爆漿(1500μF/6.3V/105℃)。
  • 維修:拆下RAID卡 → 電腦維修店更換同規格電容(建議升級為三洋固態電容) → 裝回測試。
  • 成本:約10-20元,耗時30分鐘。

SAS 5/i卡拆裝步驟

  1. 開機箱蓋,定位前面板後方左前段PCIe插槽。
  2. 拔除右側排線(硬盤背板連接線)。
  3. 抬起左側藍色塑料提手,向右抽出卡片。
  4. 防靜電袋+硬紙盒郵寄/送修。

預防與監控體系

  • SMART監控:smartd + smartctl -a /dev/sdX 定期巡檢 Reallocated_Sector_Ct、Current_Pending_Sector。
  • RAID卡電池/BBU狀態:megacli -AdpBbuCmd -GetBbuStatus -aALL (LSI) 或 storcli (Broadcom)。
  • IPMI/iLO/IDRAC:配置告警郵件/短信,監控風扇、溫度、電壓、硬盤狀態。
  • 定期備份驗證:異地備份 + 定期恢復演練,RPO/RTO量化指標。

總結

文件系統唯讀多為軟件邏輯錯誤(fsck可修)或硬件邊緣故障(電容、纜線、背板、控制器)。先備份、再修復、後排查硬件,建立全鏈路監控才是根治之道。

copyright © 萬盛學電腦網 all rights reserved