华为OSN3500以太网业务中断故障

问题描述

客户组网是异地灾备通道,OSN3500点对点组网,中间租用运营商通道,155M链路,使能LPT功能,配置Ge电口以太网专线,问题出现时,有3条链路业务异常,UP/DOWN交换机侧端口后业务恢复。

告警信息

网管上查询到没有通道类告警,只有ETH_LOS   LPT_RFI 告警。

处理过程

1、检查上海1:36的告警,发现对应的4槽4口、5槽4口、7槽3口同时上报ETH_LOS告警

2、检查大连1:36的告警,发现对应4槽4口、5槽4口、7槽3口同时上报LPT_RFI告警,根据LPT功能特性的原理,当上海检测到端口eth_los告警之后,就会触发对端大连站点的关闭端口,上报LPT_RFI告警,因此从传输侧的告警看,这些都属于LPT功能启动后的正常告警。

3、分析上海和大连网元线路侧告警,未发现任何链路异常告警。

4、分析上海/大连交换机侧日志:

反馈在1:36分,发现4槽4口、5槽4口、7槽3口对应的交换机,端口检查到有LOOP_BACK,故主动DOWN掉端口,从而导致上海OSN侧上报ETH_LOS告警。其他交换机端口有反馈有协议DOWN

大连交换机有对应的动作4槽4口、5槽4口、7槽3口对应的交换机端口DOWN掉,其余交换机有协议DOWN

  

5、继续分析OSN侧的组网配置,发现上海和张江之间均配置的是点到点的EPL专线业务,专线业务本身是不可能成环的。怀疑可能是中间运营商网络的SDH业务出现了环回,导致交换机关断端口。

根因

1、 思科交换机侧检测到LOOP_BACK状态,主动DOWN掉端口,传输侧上海对应端口上报ETH_LOS告警,LPT功能启动,触发对端大连对应EGS4端口DOWN掉,同时上报LPT_RFI告警;

2、 中间运营商网络割接造成SDH通道出现了环路,导致交换机检查到环路，出现端口和协议DOWN掉。

解决方案

 1、通知运营商检查链路是否存在环路；

 2、对于某些思科交换机，需要将DOWN掉的端口重新手动UP起来。

建议与总结

针对企业业务的异地灾备业务,客户需要提供LPT功能,在分析告警时需要确认是通道问题触发LPT功能,还是交换机/路由器侧原因触发的LPT功能。