數據包在Internet傳輸本質是「存儲-轉發」,丟包不可避免,但丟包率>1%即影響體驗,>5%業務基本不可用。系統化掌握檢測方法、根因分類、分級解決方案,是網絡運維核心技能。
ping -t 目標IP/域名
# 統計:發送=100,接收=98,丟失=2 (2% loss),時間<1ms TTL=64
# Request timed out = 丟包
mtr -r -c 100 目標IP
# 輸出每跳:Loss% Snt Last Avg Best Wrst StDev
# 關注:某跳Loss%驟增 → 該段鏈路/設備故障
iperf3 -u -b 100M -c server:UDP帶寬壓測,直接看丟包率/抖動。smokeping:長期可視化丟包/延遲趨勢圖。| 層級 | 典型原因 | 檢測手段 | 解決方案 |
|---|---|---|---|
| 物理/鏈路層 | 網線超長(>100m/實際>50m)、水晶頭氧化/壓接不良/線序錯(T568B)、線纜受損/受潮/鼠咬 | 線纜測試儀、換線測試、MTR首跳丟包 | 重做水晶頭、縮短佈線、更換Cat6/6a屏蔽線、管道保護 |
| 網卡/交換機端口故障:速率雙工不匹配、硬件老化、雷擊損壞、光模塊光功率異常 | ethtool/交換機show interface錯誤計數(CRC/Runts/Giants/Collisions)、光功率計 | 強制雙工/速率、更換網卡/模塊/端口、整機換修 | |
| 交換機/路由器硬件故障:緩存耗盡、背板擁塞、CPU 100%、固件Bug | 設備日誌、CPU/內存歷史、版本發布說明 | 升級固件、調整QoS緩存、擴容/堆疊/換設備 | |
| 網絡/傳輸層 | 路由震盪/環路、MTU不匹配(導致分片/丟棄)、ICMP被禁導致PMTUD失效 | 路由表波動、ping -f -l 1472測MTU、抓包見Fragmentation needed | 路由聚合/抑制、統一MTU 1500/9000、允許ICMP Type 3 Code 4通過 |
| 擁塞丟包:出口帶寬飽和、突發流量超緩存、TCP全局同步 | 接口利用率>80%、show queueing見尾部丟包、TCP重傳率高 | 擴容帶寬、啟用RED/WRED/ECN、優化TCP初始窗口/擁塞控制算法(BBR/CUBIC) | |
| 協議攻擊:SYN Flood、UDP反射、DNS放大、ICMP洪水 | 流量特徵:單一標志位、固定源/目的端口、放大倍數高 | DDoS清洗設備/雲防護、ACL/速率限制、源地址驗證(BCP38/SAVI) | |
| 系統/應用層 | 作業系統協議棧Bug、TCP/IP參數錯誤、防火牆/殺毒軟件攔截、驅動衝突 | 內核日誌dmesg、netstat -s重傳計數、安全軟件日誌 | 內核升級/參數調優、白名單/例外規則、驅動更新/卸載衝突軟件 |
| 應用層邏輯:長連接心跳超時、數據庫鎖等待、GC停頓、線程池耗盡 | APM(SkyWalking/Pinpoint/Zipkin)、業務日誌、JVM/Go/Python運行時指標 | 代碼優化、連接池調優、異步化、熔斷降級、擴容 | |
| 運營商/骨幹網 | 跨網互聯擁塞、光纜斷裂/割接、設備升級維護、路由策略變更 | 多ISP測試點(MTR/RIPE Atlas/ThousandEyes)同向丟包、工單響應 | 提交運營商工單(附MTR/抓包/時間點)、啟用備用線路/多線BGP切換、SLA賠付 |
丟包治理是系統工程,**「可觀測性(全鏈路遙測) + 自動化關聯分析 + 標準化SOP + 彈性架構」**四位一體,才能將網絡可用性從「四個9」推向「五個9」。