問題描述

由7個OSN3500組成MSTP+網(wǎng)絡，有兩個核心站點，這兩個站點分別配置了到其他5個站點的ELINE業(yè)務，并配置了到各個節(jié)點的1：1APS保護。某日，其上所有PEX1單板上報MPLS_TUNNEL_LOCV告警，光纜中斷時，倒換不成功，業(yè)務中斷。

告警信息

MPLS_TUNNEL_LOCV

處理過程

1、MPLS_TUNNEL_LOCV為TUNNEL連通性失效，查詢各個節(jié)點的APS倒換狀態(tài)，發(fā)現(xiàn)2個核心點至其余連續(xù)的4個點保護通道和工作通道都失效，至第5節(jié)點工作通道壞，保護通道正常。

2、由于是斷纖纜導致工作通道壞，懷疑第5個節(jié)點2端單板故障。查詢其PEX1單板PW端口的RMON計數(shù)，發(fā)現(xiàn)該端口只存在接收沒有任何的發(fā)送計數(shù)，而對端的PEX1單板PW端口的RMON計數(shù)有收有發(fā)，我們可以判斷該問題的觸發(fā)因素是由于其PEX1單板導致。

3、查詢PEX1單板版本信息，發(fā)現(xiàn)PEX1單板的PL280邏輯版本為210，該邏輯版本存在在單板同步以太功能關閉的情況下，無規(guī)律發(fā)生端口發(fā)送方向FIFO堵塞的情況，導致業(yè)務中斷的問題。觸發(fā)APS倒換是因為APS保護承載在MPLSOAM協(xié)議上，所以發(fā)送方向FIFO堵塞會導致MPLSOAM報文無法正常轉發(fā)，產生MPLSLOCV告警，觸發(fā)APS倒換。

4、硬復位PEX1單板之后，業(yè)務恢復。

5、升級版本至V1R9C03SPC200（5.21.30.15P01）版本（PEX1單板PL280邏輯版本為220版本）徹底解決。

根因

PEX1單板的PL280邏輯版本為210，該邏輯版本存在在單板同步以太功能關閉的情況下，無規(guī)律發(fā)生端口發(fā)送方向FIFO堵塞的情況，導致業(yè)務中斷的BUG。觸發(fā)APS倒換是因為APS保護承載在MPLSOAM協(xié)議上，所以發(fā)送方向FIFO堵塞會導致MPLSOAM報文無法正常轉發(fā)，產生MPLSLOCV告警，觸發(fā)APS倒換。