新聞資訊
了解故障案例及產(chǎn)品資訊
新聞資訊News
相關(guān)產(chǎn)品Related Product
問題描述(故障現(xiàn)象)
某ZXMP S385設(shè)備13#SEE單板配置開通了一條動(dòng)環(huán)的etree以太網(wǎng)業(yè)務(wù),該以太網(wǎng)業(yè)務(wù)配置了48個(gè)葉子節(jié)點(diǎn),某天突然出現(xiàn)該SEE單板承載的以太網(wǎng)動(dòng)環(huán)業(yè)務(wù)不通。
原因分析
SEE單板以太網(wǎng)業(yè)務(wù)不通的主要原因一般如下:
1數(shù)據(jù)配置問題,尤其是UNI、NNI口的帶寬設(shè)置,是很多人配置容易忘記的地方。
2對(duì)接問題以及以太網(wǎng)內(nèi)部環(huán)回引發(fā)廣播風(fēng)暴導(dǎo)致異常。
由于本次故障是在設(shè)備以太網(wǎng)業(yè)務(wù)開通之后,一般可以排除數(shù)據(jù)配置問題,由于以太網(wǎng)業(yè)務(wù)異常,很多是對(duì)接問題或者是內(nèi)部環(huán)回引發(fā)廣播風(fēng)暴導(dǎo)致異常。
問題2是故障排查的關(guān)鍵。
解決方案
對(duì)于以太網(wǎng)不通的問題進(jìn)行了逐個(gè)排查:
1以太網(wǎng)業(yè)務(wù)相關(guān)告警性能排查,沒有發(fā)現(xiàn)異常的告警性能。
2檢查以太網(wǎng)數(shù)據(jù)配置,SEE單板以太網(wǎng)業(yè)務(wù)配置很簡(jiǎn)單,就是一個(gè)樹形業(yè)務(wù)配置。由于是整個(gè)樹形業(yè)務(wù)都異常,這和各葉子節(jié)點(diǎn)配置無關(guān)。SEE單板配置檢查沒有發(fā)現(xiàn)異常。
從以上的排查來看,SEE的數(shù)據(jù)配置沒有什么問題,初步判斷可能是對(duì)接問題或者是廣播風(fēng)暴導(dǎo)致業(yè)務(wù)異常。
需要到現(xiàn)場(chǎng)進(jìn)行排查。為了排查故障,首先找客戶要來動(dòng)環(huán)采集模塊的IP配置。
由于該站點(diǎn)動(dòng)環(huán)業(yè)務(wù)很多,分別掛在三塊以太網(wǎng)單板上,現(xiàn)場(chǎng)將13#SEE單板和14#SEE單板網(wǎng)線對(duì)調(diào),13#SEE單板的業(yè)務(wù)依舊不通,排除了對(duì)接的問題。因?yàn)閾Q了網(wǎng)線后,14#SEE單板的業(yè)務(wù)是正常的。
于是把在電腦上設(shè)置IP和采集模塊在同一個(gè)段內(nèi),ping采集模塊,發(fā)現(xiàn)異常,采集模塊可以ping通,但是有很大的丟包。連續(xù)ping了三個(gè)不同的采集模塊,均是同樣的現(xiàn)象。
從ping采集模塊可以ping同來看,說明以太網(wǎng)數(shù)據(jù)配置是正常的,從不時(shí)出現(xiàn)丟包,大致可以判斷可能是該以太網(wǎng)業(yè)務(wù)出現(xiàn)廣播風(fēng)暴導(dǎo)致。
出現(xiàn)光播風(fēng)暴一般是UNI、NNI口出現(xiàn)環(huán)回,但是樹形業(yè)務(wù)只有一個(gè)UNI口,基本上可以判斷是NNI口出現(xiàn)環(huán)回。于是在VCG組配置界面,逐個(gè)刪除VCG組配置,觀察電腦PING包情況,發(fā)現(xiàn)當(dāng)刪除VCG組40時(shí),電腦ping包恢復(fù)正常,不再出現(xiàn)丟包現(xiàn)象。于是將其他刪除的VCG組補(bǔ)齊,繼續(xù)觀察,沒有在出現(xiàn)丟包,于是將動(dòng)環(huán)業(yè)務(wù)網(wǎng)線恢復(fù),經(jīng)客戶確認(rèn)動(dòng)環(huán)業(yè)務(wù)恢復(fù)。
正常運(yùn)行的以太網(wǎng)業(yè)務(wù)怎么會(huì)突然內(nèi)部NNI口環(huán)回業(yè)務(wù)不通了呢,于是和客戶溝通近期做了什么操作,客戶反饋近期由于接入環(huán)中一個(gè)設(shè)備退網(wǎng),客戶將兩邊光路打通,之后動(dòng)環(huán)就出現(xiàn)異常了??蛻粼诓鸪撏司W(wǎng)設(shè)備時(shí),并沒有刪除對(duì)應(yīng)的時(shí)隙等數(shù)據(jù)。問題清楚了,由于客戶一個(gè)設(shè)備退網(wǎng),而這個(gè)退網(wǎng)設(shè)備是到13#SEE單板以太網(wǎng)業(yè)務(wù)的一個(gè)葉子節(jié)點(diǎn),設(shè)備退網(wǎng)后,本應(yīng)該刪除這個(gè)葉子節(jié)點(diǎn),但是客戶沒有刪除,導(dǎo)致這個(gè)葉子節(jié)點(diǎn)內(nèi)部環(huán)回,從而影響了業(yè)務(wù)。