Print

S6850-56HF-G vsi地址ping不通

2026-07-09 发表

问题描述

Border外的核心区业务平台ping测试leaf S6850-56HF-G的vsi-interface地址不通,通过dscp流统看leaf收到了ping包,但是debugging ip icmp没有回显,把ping包镜像到CPU打印报文看目的mac封装的不是evpn global mac,而是物理口mac。

过程分析

1、控制器先下发evpn global-mac,后创建L3VNI的虚接口时,当前下发的VSI接口为当前系统最小的编号的接口(此时下发第一个VSI接口,不论多大都认为是最小的),BGPVCBGPVC模块因软件问题,存储的MAC仍然为默认的接口MAC,不是evpn global-mac

2、由于现场控制器是按照VSI接口编号从大到小下发,因此之后的几个VSI对应的BGPVC控制器中的MAC均判定为最小的,所以BGPVC模块存储的MAC一直都为默认的接口MAC;在此阶段,BGPVC模块虽存储错误,但通知BGP协议刷新MAC发时用的一直是evpn global-mac,此时业务不会有问题。

3、当控制器通知设备删除编号最小的VSI接口时,BGPVC会重新选用当前编号最小的VSI接口BGPVC控制块中的MAC,通知BGP模块刷新MAC

4、由于如ab步骤的原因,BGPVC控制块中存储MAC为默认的接口MAC,导致BGP模块MAC刷新成了接口MAC。从而BGPborder发布的默认路由使用的mac为接口mac;导致border回的报文目的macevpn globle mac无法在leaf上正常解封装,无法转发和上送CPU

 

Leaf-E13上关键日志发现设备evpn global-mac配置下发过程如下:

 

1、先配置evpn global-mac 命令

 

%@2685%Jan  1 08:47:22:625 2011 HG-TS-EXDMZ-SLEAF-SW-S6850-202-2-6-E13-34U XMLAGENT/6/EDIT-CONFIG: User (steluser, 184.25.16.223, session ID 4), message ID=307, operation=merge EVPN/Base, result=Succeeded. Attributes: GlobalMacAddr=2C-4C-7D-BC-12-82, DrniGroupIpAddress="69.69.69.155", EVPN_DRNI.LocalIpAddress="69.69.69.11", EVPN_DRNI.RemoteIpAddress="69.69.69.10".

 

2、创建了50001L3VNI,此步骤BGPVC中的50001的节点的mac存储的是默认mac2c4c-7dbc-32c2),未被更新成evpn global-mac2c4c-7dbc-1282

 

%@3976%Jan  3 06:02:00:006 2011 HG-TS-EXDMZ-SLEAF-SW-S6850-202-2-6-E13-34U XMLAGENT/6/EDIT-CONFIG: User (steluser, 184.25.16.223, session ID 1), message ID=621, operation=merge L2VPN/VSIInterfaces (ID=50001), result=Succeeded. Attributes: L3VNI=50001.

 

3、创建了40001L3VNI,索引小于50001,因此此步骤BGPVC中的40001的节点的mac存储的也是默认mac2c4c-7dbc-32c2),未被更新成evpn global-mac2c4c-7dbc-1282

%@5949%Jan  5 12:18:41:962 2011 HG-TS-EXDMZ-SLEAF-SW-S6850-202-2-6-E13-34U XMLAGENT/6/EDIT-CONFIG: User (steluser, 184.25.16.223, session ID 2), message ID=403, operation=merge L2VPN/VSIInterfaces (ID=40001), result=Succeeded. Attributes: L3VNI=40001.

 

4、删除L3VNI最小的vsiif 40001,会重新选取vsiif ID最小的L3VNI 50001mac当做routemac,但是 50001mac存储的是默认MAC((2c4c-7dbc-32c2),),所以通告bgpmac变成默认mac了,触发了现场问题;

%@6114%Jan  5 13:02:55:454 2011 HG-TS-EXDMZ-SLEAF-SW-S6850-202-2-6-E13-34U XMLAGENT/6/EDIT-CONFIG: User (steluser, 184.25.16.223, session ID 2), message ID=423, operation=remove L2VPN/VSIInterfaces (ID=40001), result=Succeeded. No attributes.

 

   Leaf-E12L3VNI的默认MACevpn global-mac相同,所以E12在相同操作下无问题

问题结论:

 

控制器先下发evpn global-mac,之后按照vsi接口编号由大到小的顺序向设备下发配置,此时因为软件考虑不周,BGPVC模块一直存储了错误的MAC地址,但是并没有触发BGP MAC刷新事件;之后再删除编号最小的vsi接口触发BGP MAC刷新事件,触发了此问题。

 

 

解决方法

【临时规避方案】重启设备或者增删vsi接口下l3vnievpn global mac
【解决方案】R8336P11版本发布补丁解决,计划8月底发布

【排查方法】display evpn route arp local查看自己发布的router mac是不是evpn global-mac,如果不是,代表不符合预期,需要联系400确认。