某視頻伺服器連接 EMC CX3-10C 存儲陣列,分配的兩塊虛擬磁盤頻繁「消失」,現象詭異:存儲管理端與 PowerPath 顯示連線正常、無錯誤,唯有系統日誌記錄錯誤。本文完整記錄從光纖線、交換機端口、網通施工干擾到最終鎖定 HBA 卡故障的曲折排查過程。
現象回顧
- 首發:管理端提示光纖未連接,指示燈不亮。機房檢查發現光纖鬆動,重插重啟恢復。
- 次日復發:管理端顯示正常,PowerPath 正常,但作業系統看不到磁盤。重啟恢復。
- 高頻復發:兩小時後再掉,更換光纖線、交換機端口、重啟均暫時緩解,下午三點又壞。傍晚備份數據時再次掉線。
排查邏輯與試錯
- 物理層優先:懷疑網通機房遷移施工碰動線纖,但對方否認進入機房,且無門禁記錄可查。
- 存儲與交換機排除:SPA/SPB 日誌、光纖交換機
supportshow 輸出均無異常,戴爾工程師協助分析後同樣判斷非存儲與交換機端口問題。
- 鎖定 HBA 卡:伺服器雙 HBA 卡架構,已更換光纖線、切換交換機端口,故障仍按原 HBA 卡規律復發。排除法指向該 HBA 卡硬體故障(可能為光模組或控制器異常)。
解決方案:切換至備用 HBA 卡
將光纖接至第二塊 HBA 卡,在存儲管理端重新註冊該 HBA 的 WWN,建立有效訪問路徑。切換後系統穩定運行,故障徹底消失。
經驗總結
- 虛擬磁盤間歇性消失、管理面板卻顯示正常,強烈暗示主機端 HBA 卡或驅動層異常。
- 雙 HBA 設計正是為冗餘,關鍵時刻可快速切隔離故障域。
- 存儲端日誌、交換機
supportshow、主機系統日誌三方對照,能快速縮小故障域。
- 「神奇的烏龍」背後,是扎實的排除法思維與冗餘架構的價值體現。