網絡拓撲與故障現象
- 雙平面承載網:NE80E/NE40E 構建 Plane-A / Plane-B。
- VPN 接入 UMG (用戶面網關) 採用負載分擔。
- 故障:B 平面撤銷後,僅剩 A 平面。A 平面 PE 向 UMG-B 方向**出流量遠超入流量**,甚至超過 UMG-B 處理能力導致業務中斷。
根因分析:IP FRR 破壞了對稱路由預期
- 設計預期:IGP Cost 使流量進出同一平面 (A→A, B→B)。
- 實際:B 平面下線,IGP 計算所有流量下一跳均指向 A 平面 PE。
- 為提高可靠性,PE 配置 IP FRR (Fast Reroute):雙平面 PE 互相發布 VPN 路由 (via BGP VPNv4)。
- 結果:UMG-A → A平面 PE (正常);但 **UMG-B 回程流量全從 A平面 PE 進入** (因 BGP 最優路徑選擇 A 平面 PE),導致 A 平面 PE → UMG-B 方向單向大流量擁塞。
解決方案對比
| 方案 | 操作 | 優點 | 缺點 |
| 方案一:關閉 IP FRR | 撤銷 `ip frr` 配置,A平面僅發布 A平面路由 | 快速止血,回程強制同平面 | 失去 FRR 秒級保護,故障切換依賴 IGP 收斂 (秒~分鐘級) |
| 方案二:BGP Community 屬性控制 (推薦) | 配置 Route-Policy 匹配 Community 設置 Local-Preference | 保留 FRR 可靠性,精準控制入口選擇,業務無感 | 配置相對複雜,需規劃 Community 語義 |
方案二詳細配置 (華為 NE 設備)
# 1. 定義 Community 過濾器
ip community-filter 1 permit 65000:10 ! Plane-A 路由標記
ip community-filter 2 permit 65000:20 ! Plane-B 路由標記
# 2. 定義 Route-Policy (Plane-A 視角)
route-policy Plane-A-import permit node 0
if-match community-filter 1 ! 匹配本平面路由
apply local-preference 200 ! 高優先級
route-policy Plane-A-import permit node 1
if-match community-filter 2 ! 匹配對端平面路由
apply local-preference 100 ! 低優先級 (備選)
# 3. 定義 Route-Policy (Plane-B 視角,對稱相反)
route-policy Plane-B-import permit node 0
if-match community-filter 1
apply local-preference 100
route-policy Plane-B-import permit node 1
if-match community-filter 2
apply local-preference 200
# 4. 應用到 BGP VPNv4 鄰居 (RR 反射器場景)
bgp 65000
ipv4-family vpnv4
undo policy vpn-target
peer RR enable
peer RR route-policy Plane-A-import import ! Plane-A PE 引用 Plane-A 策略
peer RR advertise-community
peer 10.31.16.1 enable
peer 10.31.16.1 group RR
peer 10.31.18.2 enable
peer 10.31.18.2 group RR
原理機制
- 各平面 PE 發布 VPN 路由時攜帶自身平面 Community (65000:10 / 65000:20)。
- 對端 PE 收到路由,根據 Route-Policy 匹配 Community,設置 **Local-Preference**:本平面路由 200,對端平面路由 100。
- BGP 決策過程中 **Local-Pref 最高優先** (優於 AS-Path、MED、IGP Cost),強制選擇本平面路由作為最優路徑。
- 結果:流量進出嚴格對稱平面,IP FRR 僅在本平面故障時啟用對端路由 (Local-Pref 100) 作為備選,實現**毫秒級保護 + 平時對稱負載**。
案例總結與最佳實踐
- 網絡演進打破設計假設: 雙平面變單平面,原有 IP FRR 配置產生副作用,**變更時必須同步評估關聯配置影響**。
- 配置耦合風險: 簡化配置 (關閉 FRR) 可能導致其他特性失效,**首選功能正交的方案 (BGP Community 控制)**。
- 雙平面/多平面架構必須引入 BGP Community/Extended Community 作為路由標識,配合 Local-Pref/MED/AS-Path Prepend 實現確定性路徑控制。
- 驗證手段: `display bgp vpnv4 vpn-instance routing-table ` 觀察 Local-Pref、Next-Hop、Community;流量統計對比雙向接口利用率。