记录一次局域网突发网络环路处理过程

问题症状：

1、网络内突然出现时断时续，丢包比较严重，无法操作业务

2、PING 网段虚地址比如62及两个实际地址60、61，时断时续

3、核心交换机S1上到其他网络影响不大，问题主要集中在区XX局及营业大厅。

4、夜间仍然有丢包问题出现

5、H3C 7503 CPU过高

Slot 1CPU usage:

98% in last 5 seconds

55% in last 1 minute

56% in last 5 minutes

6、R1联通线路不通(排查过程中发现)

原网络拓扑图：

网络结构相对简单，办公网内主要有vlan 3 vlan4vlan5 vlan6，营业厅主要vlan 3,过去整改XX单位的办公内网全部通过H3C 7503连接，核心S1和75之间通过trunk口进行互联配置；在核心交换机设置了vlan地址，考虑网络高可用性，使用了virtual-ip，S1的vlan3地址为60，s2的vlan3地址为61，他们的虚拟地址为62，因此vlan3下面的机器的网关都设置为62，其他的vlan也是同样；

interface Vlan-interface3

ip address x.x.x.60255.255.255.192

vrrp vrid 3 virtual-ip x.x.x.62

vrrp vrid 3 priority 120

vrrp vrid 3 track 1 reduced 30

S1 trunk接口配置如下：

interface GigabitEthernet1/0/48

port link-mode bridge

port link-type trunk

undo port trunk permit vlan 1

port trunk permit vlan 2 to 4094

其他接入交换机都是通过75上的access方式进行连接，配置如下：

interface GigabitEthernet2/0/41

port access vlan 4

interface GigabitEthernet2/0/43

port access vlan 5

interface GigabitEthernet2/0/46

port access vlan 6

初步怀疑可能的原因：

1、网络环路？

2、病毒攻击？

3、配置问题？

4、设备问题？

5、网线问题？

6、其他？

为解决问题调整下网络并加入主动威胁设备测试：

为了排除故障，首先做了分析，判断网络环路和病毒ARP可能性较高，在核心交换机上部署了主动威胁发现设备，并将做了端口镜像，就是将75和接入交换机的数据复制一份到S1的g1/0/30，g1/0/30接主动威胁发现设备数据口。

Mirroring-group 1 local（设置镜像组）

Mirroring-group 1 monitor-port Gigabitethernet 1/0/30(设置镜像的目的端口)

Mirroring-group 1 mirroring-port Gigabitethernet 1/0/48 both （设置镜像的源端口 both为双向）

抓包进行主动威胁分析，发现威胁比较少截止晚上就几条病毒攻击，还有部分ARP风暴，但是量不大。

排错过程意外发现：

刚开始我认为有时候ping 60通61不通，60不通，61通….是配置有问题，不断出现vrrp切换，我决定将核心交换S1和核心交换机S2之间的线路断掉，只保留一条主线路；但是断掉之后发现，到网关通，但是到上联上级单位不通，怀疑R1联通线路有问题，一看果然R1联通线路断掉了，这个发现是意外，后来联通公司协商上级单位处理解决问题，问题原因是端口协商。