路由器「崩潰」非簡單重啟,而是處理器檢測到不可恢復錯誤(總線錯誤、非法指令、內存校驗失敗等)觸發的保護性重啟。崩潰現場證據隨重啟即時揮發,能否在重啟前完成取證,決定故障能否根因定位。本文基於Cisco IOS體系,構建完整崩潰診斷方法論。
show version —— 硬件/軟件版本、重啟原因、運行時間、配置/映像文件來源show stacks —— 進程/中斷棧使用情況,**崩潰現場最核心證據**show context —— NVRAM保存的上下文:重啟原因、棧追蹤、所有寄存器值、信號碼show tech-support —— 大全集:version/running-config/stacks/interface/controller/process/buffers/logs| 來源 | 獲取方式 | 關鍵價值 | 易失性 |
|---|---|---|---|
| 控制台輸出 | 崩潰時終端顯示 | 實時見證:Signal/Code/PC/寄存器/中斷寄存器 | 極高(重啟即失) |
| Syslog服務器 | 遠程日志服務器 | 崩潰前事件時間線、鄰居變化、接口翻動 | 低(持久化) |
| Crashinfo文件 | bootflash:/crashinfo / flash:/crashinfo | 自動保存的崩潰快照,含stacks/context/version等 | 低(存儲介質) |
| Core Dump | FTP/TFTP/本地存儲 | 完整內存鏡像,深度分析內存洩漏、數據結構損壞 | 需主動配置觸發 |
| ROM Monitor | config-register末位=0 進入ROMMON | 無IOS時獲取堆棧(k命令)、context、寄存器 | 需配置寄存器預留入口 |
show version / show context 輸出中的 Signal = x 對應異常類型:
| Signal | 異常類型 | 典型成因 | 排查方向 |
|---|---|---|---|
| 10 (0x0A) | Bus Error / 總線錯誤 | 硬件內存錯誤、DMA傳輸故障、軟件訪問無效地址 | 運行內存測試、檢查硬件錯誤計數器、升級IOS修復已知Bug |
| 11 (0x0B) | Address Error / 地址錯誤 | 非對齊內存訪問、野指針、棧溢出 | 分析PC指向函數、檢查IOS版本已知缺陷(Cisco Bug Toolkit) |
| 23 (0x17) | Software Forced Crash / 軟件強制崩潰 | 主動調用abort()、檢測到邏輯不一致(如校驗和失敗、死鎖檢測) | 最常見,查Cisco Bug ID匹配,升級修復版本IOS |
| 4 (0x04) | Illegal Instruction / 非法指令 | 代碼損壞、CPU故障、編譯器Bug、模塊版本不匹配 | 驗證映像文件校驗和、重刷IOS、懷疑CPU換板 |
| 7 (0x07) | Cache Parity Error / 緩存校驗錯誤 | CPU L1/L2緩存硬件故障 | 換CPU/換板,極少數IOS workaround可繞過 |
| 1,2,3,5,6,8,9,12-22,24+ | 其他 | 除零、浮點異常、監視器超時、看門狗、NMI等 | 查閱《Cisco IOS System Error Messages》對應條目 |
當常規手段無法定位(如疑似內存洩漏、數據結構損壞、Heap腐敗)時:
ip ftp source-interface Loopback0 / ip tftp source-interface Loopback0exception dump debug sanity / scheduler heapcheck process / memory check-interval 1show tech-support配合本地分析腳本。service timestamps debug datetime msec localtime show-timezone:日誌帶毫秒級時間戳,便於關聯分析。logging persistent:關鍵日誌落盤,重啟不丟。exception core-file + exception protocol ftp/tftp:自動導出Core Dump。reload in 而非 reload now:預留取證時間窗口。show version、show stacks、crashinfo文件。ip_cef_switch函數,Signal=23,show context顯示「CEF adjacency inconsistency detected」。no bgp next-hop-recursive。路由器崩潰不可怕,可怕的是重啟後一無所獲。建立「崩潰即取證、取證即分析、分析必閉環」的肌肉記憶,配置自動化留證機制,讓每一次崩潰都成為網絡更強健的養料。記住:show stacks 是靈魂,crashinfo 是骨架,core dump 是血肉——三者合一,無Bug不破。