萬盛學電腦網

您现在的位置: 萬盛學電腦網 >> 程式設計 >  >> 資料庫 >> MS SQL 資料庫

SQL Server 2008 R2 數據庫進入 Suspect 模式:從故障診斷到故障轉移恢復全記錄

環境與發現

  • 環境:SQL Server 2008 R2 Active/Passive 叢集,Windows Server 2008 R2 SP1,vSphere 5.x
  • 06:00:應用團隊報告 BizTalkMsgBoxDb 進入 Suspect 模式,不可訪問。

初期應對:溝通與壓力釋放

  • 電話確認應用層停機影響,記錄發生時間、描述、近期變更。
  • 若無工單系統,群發郵件通知相關人員;電話 Incident Manager 統一對外更新,安撫恐慌情緒。

自我梳理與錯誤日誌分析

06:30 腦暴可能原因:文件組損壞?磁盤滿/SAN 故障?備份可用?

06:40 查閱 Error Log,定位首個錯誤(發生於成功日志備份後 1 分鐘):

2014-03-17 03:15:56.05 spid5s Error: 17053, Severity: 16, State: 1.
LogWriter: Operating system error 1117 (failed to retrieve text for this error. Reason: 15105) encountered.
Write error during log flush.
Error: 9001, Severity: 21, State: 4.
The log for database 'BizTalkMsgBoxDb' is not available...

分析:OS Error 1117 屬磁盤 I/O 錯誤;日志文件存在、磁盤未滿 → 考慮遷移日志文件。

嘗試一:DBCC Repair(果斷放棄)

ALTER DATABASE [xxx] SET EMERGENCY; -- 失敗:數據庫被鎖,無法 ALTER
DBCC CHECKDB (N'xxx', REPAIR_ALLOW_DATA_LOSS) ...

放棄理由:

  1. REPAIR 需 EMERGENCY 模式,會嘗試用現有日志恢復一致性;若日志損壞則重建日志,100GB+ 數據庫可能耗時數小時,違背 RTO/SLA。
  2. 錯誤提示「日志被鎖」暗示日志可能未損壞,無需急著 REPAIR。
  3. 未確認用戶是否接受丟失最近 15 分鐘事務(日志備份間隔)。

反思:武斷認定日志損壞是錯誤的;Methodology 第一步應為確認文件損壞、聯繫 Server Team 排查 I/O 異常。

嘗試二:故障轉移遷移日志文件(成功)

遇到 Resource Lock,常規反應是 Kill 或重啟資源。受限於技能,選擇叢集故障轉移到被動節點,等效於實例重啟與恢復。日志文件恢復可寫,數據庫變 Active。再 Switch Over 回原主節點,無錯誤,證明非磁盤本身問題,疑為磁盤接口故障。Event Viewer 僅有日志備份記錄,sp_who2 無可疑鎖。

問題管理與總結

07:00 移交 Problem Manager 持續跟進 SAN (EVA) 狀況。

標準化處理流程

  1. 確認磁盤/存儲問題
  2. 確認數據庫進程鎖定
  3. 確認文件損壞

嚴重性遞增,恢復後數據丟失風險遞增。必須與客戶確認在線修復風險。最後防線:完備備份策略與定期恢復演練。

copyright © 萬盛學電腦網 all rights reserved