MPLS　VPN 骨干网故障应急方案v20.doc

广东省MPLS VPN 骨干网故障应急方案 安全级别：普通 发布日期：07年8月９日 版本：2.0 广东省电信网管中心数据控制部 1. 文档编写目的 目前广东省MPLS VPN 业务发展很快，用户基本都是涉外的客户，更有海关网这样的大客户。但目前MPLS VPN 网络存在多个单点故障隐患及其他故障隐患，为了更好地预防和解决故障隐患，特制订该应急方案。 MPLS VPN 网络现状 广东省MPLS　VPN商用网在全省10个地市部署了MPLS　PE设备，广州、深圳、东莞、江门、顺德、汕头、珠海、湛江、中山、佛山。共有PE　20台，RR　2台，汇接GSR　1台。省内各PE设备通过单条155M或GE链路上联P设备，广州天河ASBR-PE4节点和广州较场西ASBR-PE1节点分别通过GE链路上联国家CN2网广州天河PE-S2和广州较场西PE-S1节点，作为省MPLS VPN网出口链路。 3. 单点故障隐患 经过C3整合后，MPLS VPN网从原来的163网剥离出来成为独立的一张网。由于MPLS VPN网剥离基本上只能用利旧的资源，剥离后各个地市的PE路由器均单臂汇接到一台核心路由器（GZ-B-R3），这样的网络结构存在很多的单点故障风险。下面将详细叙述单点故障隐患并在现有资源条件下如何提供解决方案。 （１） 各地市PE节点通过１５５M链路单臂上联到MPLS VPN汇聚节点GZ-B-R3，若这条上联链路出现故障会导致整个地市的MPLS VPN电路无法通信。 解决方案：针对目前这种网络现状，尽量要求各地市PE路由器直联汇聚节点GZ-B-R3的155M链路在传输保护环上，从物理层上保护MPLS VPN网中继链路的高可用性。同时整理好所有155M长途中继的电路资料（详见附录二），以便在万一发生故障的时候能够很快地联系传输找到正确的电路。同时对于海关网这样的重要客户，可以提供应急方案，具体参见《广东省MPLS VPN网络海关电路应急解决方案》 （２） VPN客户就近接入PE节点，PE节点故障会引起所接客户业务中断 解决方案：PE节点发生DOWN机无法登陆的故障，先让机房人员关电重启看机器能否正常启动，如果不行，则立即到备件库取备件进行抢修。同时如果当地局有空闲的同种型号的设备，先临时借来使用，把IOS和配置导上去抢通业务。对于海关网这样的重要客户，可以提供应急方案，具体参见《广东省MPLS VPN网络海关电路应急解决方案》。 （３） 所有PE路由器均汇接到单一汇聚节点（GZ-B-R3），汇聚节点故障会引起全省MPLS VPN业务中断 解决方案：GZ-B-R3是一台GSR 12012，有较强的冗余备份机制，为保证该设备的高可用性，要定期查看该路由器的冗余备份是否正常，包括：通过show redundancy检查RP板的备份状态，通过show controllers fia检查交换背板的冗余状态，通过show gsr、execute-on all show controllers fia检查设备各板卡运行状态。（命令示例见附录一） 如果发现整机出现异常，立刻联系管理员和厂家进行处理。 如果是硬件问题，立即到备件库取备件进行抢修。 （４） 汇聚节点分别通过一条ATM 155M上连天河的ASBR-PE4和较场西ASBR-PE1，ATM155M链路中断会引起全省MPLS VPN出省业务中断 解决方案：由于目前天河ASBR-PE4和较场西ASBR-PE1有互为主备的至CN2网PE设备的出口，所以其中一条155M中断会导致全省MPLS VPN出省业务短时的中断，很快会通过备份链路自动恢复业务，同时也可以通过更改BGP属性的方式强行让VPN流量改走备用线路。 （５） 天河的ASBR-PE4和较场西ASBR-PE1分别通过单GE上连到国家CN2网，GE链路中断会引起全省MPLS VPN出省业务中断。 解决方案：由于目前天河ASBR-PE4和较场西ASBR-PE1有互为主备的至CN2网PE设备的出口，所以其中一条GE中断会导致全省MPLS VPN出省业务短时的中断，很快会通过备份链路自动恢复业务，同时也可以通过更改BGP属性的方式强行让VPN流量改走备用线路。 4. 其他隐患 （1） BGP条目问题 目前MPLS VPN网RR SERVER上做了BGP路由条目的限制，在接收PE的BGP条目超过门限会引起BGP关系的中断，从而使得所连接PE节点上的所有客户业务中断。 解决方案：定时地在两台RR SERVER上通过show logging查看告警，当接收的条目超过门限条目的８０％时就会产生类似如下的“BGP-4-MAXPFX” LOG告警， Mar 15 10:52:46.882 GMT: %BGP-4-MAXPFX: No. of prefi