新聞資訊
了解故障案例及產品資訊
問題描述(故障現象)
ZXCTN 6500升級,涉及5個鎮區,16臺設備。5:30分升級結束時發現部分網元脫管,主要是中興6100設備。
組網環境
鎮區匯聚環都與橋接點ZXCTN 6500相連,鎮區監控通過移動DCN網連接服務器
原因分析
1、 升級后造成鎮區路由互通問題 ZXCTN 6500升級后,端口DCN默認OSPF是0域,升級前版本默認OSPF區域為2,而現網各鎮區是通過子網隔離,子網的OSPF 都是0域,因鎮區ZXCTN 6500都與橋接點6500互聯,端口的DCN功能沒有關閉,升級后的鎮區處于同一OSPF區域,造成鎮區間路由互通。
2、 部分網元脫管問題 升級后,鎮區路由互通,路由表有4000多條,而6100設備的路由表不建議超過500條,因處理能力比較弱,造成,OSPF進程吊死,不能更新路由表,造成脫管,重啟ospf進程監控正常。
解決方案
1、在網管ping脫管網元不通,通過TRACE 跟蹤只能到臨近網元。
2、登錄相鄰網元查看ospf鄰居正常,show ip ospf 網元地址,發現沒有學習到該網元的路由,通過show ip route發現6100設備上有4000多條路由,路由表明顯異常
3、通過clear ip ospf process 進行ospf進程,但由于路由表太大,造成無法刷新一直無法監控。
4、關閉鎮區6500與橋接點6500互聯10G端口的,DCN功能后,各鎮區的路由表正常。
5、脫管網元,通過重啟ip ospf process后,大部分網元恢復監控。
注意事項
1、全網進行排查,關閉不用作使用DCN監控網元端口的DCN功能,ZXCTN 6200/6300升級到2.1版本,都支持此功能。
2、避免類似本次故障的發生,保證全網監控的穩定,建議對各鎮區接入環進行劃分OSPF域。