故障現(xiàn)象

某地ZXR10 5960X MC-LAG組網(wǎng)，軟件版本V6.00.00.70B18，現(xiàn)場(chǎng)升級(jí)版本，先升級(jí)MC-LAG主設(shè)備。主設(shè)備重啟時(shí)，MC-LAG備設(shè)備業(yè)務(wù)中斷大約3分鐘。

MC-LAG雙機(jī)二層組網(wǎng)，smartgroup127作為peerlink端口，smartgroup128作為keepalive端口?，F(xiàn)場(chǎng)網(wǎng)絡(luò)配置如下：

故障分析

Keepalive 聯(lián)動(dòng)檢測(cè)配置缺失，聯(lián)動(dòng)檢測(cè)未生效導(dǎo)致備設(shè)備退避。

故障處理

1. 對(duì)業(yè)務(wù)中斷到業(yè)務(wù)恢復(fù)過(guò)程告警進(jìn)行分析。

MC-LAG主設(shè)備升級(jí)執(zhí)行reload重啟后，備設(shè)備11:25上報(bào)smartgroup127(peerlink)和smartgroup128(keepalive)物理端口及MC-LAG成員端口(業(yè)務(wù))口物理down告警，同時(shí)1144設(shè)備上報(bào)了退避告警。

1137備設(shè)備退避狀態(tài)發(fā)生變化，變?yōu)閙aster主設(shè)備。

1140開(kāi)始MC-LAG備設(shè)備成員口逐步up(注：主設(shè)備還未啟動(dòng)完成，peerlink和keepalive物理端口還未起來(lái))，此時(shí)業(yè)務(wù)恢復(fù)。

物理端口down 告警：

MC-LAG 退避告警：

退避狀態(tài)變化，備設(shè)備變?yōu)閙aster 主設(shè)備：

MC-LAG 成員端口up 告警：

2. 業(yè)務(wù)中斷分析：

從告警初步判斷主設(shè)備重啟導(dǎo)致備設(shè)備退避，MC-LAG成員端口down，業(yè)務(wù)中斷3分鐘，然后MC-LAG成員端口up，業(yè)務(wù)恢復(fù)。主設(shè)備升級(jí)后出現(xiàn)以上現(xiàn)象存在疑點(diǎn)：

MC-LAG 雙機(jī)，重啟一臺(tái)設(shè)備理論上不會(huì)影響另一臺(tái)設(shè)備業(yè)務(wù)，現(xiàn)場(chǎng)卻出現(xiàn)備設(shè)備業(yè)務(wù)中斷，檢查配置發(fā)現(xiàn)LACP全局下配置了keepalive聯(lián)動(dòng)檢測(cè)，但SAMGR下并未做track 關(guān)聯(lián)配置，相當(dāng)于keepalive和物理端口聯(lián)動(dòng)檢測(cè)未生效。當(dāng)主設(shè)備重啟時(shí)peerlink端口down，keepalive雖然物理端口down但keepalive協(xié)議檢測(cè)未關(guān)聯(lián)，認(rèn)為還是up的(keepalive報(bào)文發(fā)送周期5 s，超時(shí)時(shí)間180 s)，因此MC-LAG備設(shè)備才會(huì)出現(xiàn)退避及物理端口down的現(xiàn)象。

3. 補(bǔ)充增加SAMGR配置，驗(yàn)證再次重啟主設(shè)備則不會(huì)再出現(xiàn)備設(shè)備退避及業(yè)務(wù)中斷影響。

故障總結(jié)

1. MC-LAG升級(jí)前一定要檢查主備設(shè)備配置，參考開(kāi)局指導(dǎo)規(guī)范實(shí)施。

2. MC-LAG升級(jí)理論上先升級(jí)主或先升級(jí)備均不會(huì)影響另外一臺(tái)，但實(shí)施時(shí)建議升級(jí)備設(shè)備，備設(shè)備升級(jí)完成后再調(diào)整MC-LAG優(yōu)先級(jí)。主備角色重新選舉后再次升級(jí)備設(shè)備，升級(jí)完成后調(diào)整優(yōu)先級(jí)恢復(fù)配置，要求始終保持每次升級(jí)均為備設(shè)備，這樣會(huì)更安全。