问题描述

华为OSN3500设备组成的SNCP环,组网图如下所示:

E站至F站有一个E1,由于电力行业的特殊要求,该E1没有走短路径E-F,而是走最长路径E-D-C-B-A-F,并且没有配SNCP保护,运行在无保护链上,客户反映该E1会不定时的瞬断,F站端口报TU_AIS告警,E站端口报LP_RDI告警。

告警信息

TU_AIS

LP_RDI

处理过程

1. 因为业务只是瞬断,并且走长路径,经过的站点多,故障发生的频率低,有的时候一天一次,有的时候都没有发生,增加了故障排除的难度

2. 查询该E1所经过站点设备的15分钟SDH性能监视,发现A站的S11槽和B站的S8槽不定期有性能越限,查询A站的S11槽和B站的S8槽的收发光功率,均在正常的范围

3. A的时钟跟踪S11槽的线路时钟,业务发生瞬断时在异常事件中看到A站的时钟发生切换,由S11槽线路时钟切换到内部时钟,过段时间后又切回S11槽线路时钟,业务发生瞬断时A站有SCNP异常事件产生,初步判断是A站和B站之间有故障,但还是无法判断是那块板故障

4. 考虑到该故障出现的频率比较低,15分钟性能监视的数据很可能不完整,因为15分钟性能监视只有16个寄存器,开启24小时性能监视继续观察

5. 第二天去网管查看又发生了一次业务瞬断,24小时的性能数据显示:B站对A站的光放COA输出功率发生较大的波动,发光最大值为:19.3dBm,最小值为:9.3dBm,与该COA标准输出光功率17 dBm相差较大,相应的A站11槽光板的收光光功率也发生较大波动,最大接收功率为-14dBm,最小接收光功率为-25.9dBm,故障定位为外置COA输出功率异常,导致业务中断

根因

华为OSN3500设备外置光放COA发光异常,不定期在瞬间的发光功率波动较大,导致业务瞬断。

解决方案

更换华为外置光放COA解决

建议与总结

在故障处理时,对于部分业务中断的情况,首先应找出中断业务的共性,有利于对故障进行定位,其次应收集尽可能全面的信息,再进行综合分析,本次故障处理过程,开始就忽略了24小时性能监视在监控设备运行稳定性作用,导致定位困难。