中低端网络产品 常见故障排错

交换接入技术支持北京分部

目 录

课程介绍故障排错整体思路故障定位常用命令和工具故障相关信息查看及分析典型案例分析

哪些常见故障

课程介绍（一）

不是故障案例的穷举、

罗列

故障排错的总体思路和方法常见类型故障排错的方式和手段典型、常见案例分析

会有什么收获

课程介绍（二）

目 录

课程介绍故障排错整体思路故障定位常用命令和工具故障相关信息查看及分析典型案例分析

故障排错实施步骤

故障现象观察

故障点定位

故障信息搜集

理论分析经验

故障现象观察全面、仔细

故障信息搜集基本信息

display current-configurationdisplay version

相关信息display interface 、 display ip routing 等

信息的全面性单点无法构成网络双边或多边的互联互通全局思维

阶 段 要 点

能否对配置的正确性作出判断

查阅相关资料

寻求技术支持

查看相关的状态及信息

故障排错流程图

经验判断及理论分析

找到故障原因

OK ，问题解决

搜集故障信息

是

是

否

否

否

认为配置是正确的 排除各种配置错误

问题解决

否

是是

故障分类

物理硬件故障外部线路、传输故障数据配置故障

设备缺陷、软件故障设备兼容性故障

数据配置故障

绝大部分的情况

不知道配置是否正确感觉配置是正确的，其实不然

配置正确性分析

能否对配置的正确性作出判断整个排错的知识基础操作手册、命令手册协议、技术原理

书中自有黄金屋书中自有 ............

关键点分析查看相关的状态及信息

需要查看哪些信息相关的信息例如 display interface 、 display ip routing等

经验判断及理论分析对信息的深入分析

信息如何去看、去分析－了解隐藏在信息背后的含义

以往案例的比较FAQ 、技术案例－－从网站寻求支持 forum.huawei-3com.com

协议、原理的综合运用知识就是力量

故障排错总体方法

分层定位方法网络的逻辑层次物理连接、链路协商、网络路由

分段定位方法网络的空间结构A——B——C——DA——B ， B——A

两种方法有机结合、综合运用

目 录

课程介绍故障排错整体思路故障定位常用命令和工具故障相关信息查看及分析典型案例分析

常用命令和工具

display －望闻问切debug －检验分析ping －投石问路tracert －无悔追踪reset counters －云开雾散

display 命令

disp currdisp verdisp interfacedisp ip routingdisp ospf error

.

..

...

debug—— 命令种类

debug ppp packetdebug ppp eventdebug ip packetdebug ospf packet

.

..

...

debug—— 信息输出

info-center enable打开信息中心输出

[router]info-center console[router]info-center console debug

输出到 Console 终端[router]info-center monitor[router]info-center monitor debug

输出到 Telnet 终端[router]debugging ppp packet

此处以调试链路层协议 ppp 数据包为例

Debug 信息的输出

debug—— 使用分析

不要轻易使用绝大多数故障可以通过使用 display 命令定位不要把简单的事情搞复杂

帮助定位配置错在哪里顺藤摸瓜

加深对协议的了解自我学习

分析 Debug 信息，可以

ping 命令

从哪里开始 pingICMP Echo Request 包的源地址ICMP Echo Reply 包的目的地址

ping 到什么地方去ICMP Echo Request 包的目的地址ICMP Echo Reply 包的源地址

关注路由去的方向回来的方向

tracert 命令

大致定位网络故障点每一跳返回的地址

该跳设备的一个接口地址

reset counters 命令

quidway#reset counters interface清空所有（指定）端口的统计信息排除以前累积数据的干扰常用于定位链路协议故障

网络抓包工具

注：利用抓包工具进行抓包时，要注意用ＨＵＢ

netxray对报文进行“解剖”微观分析

目 录

课程介绍故障排错整体思路故障定位常用命令和工具故障相关信息查看及分析典型案例分析

相关信息查看及分析

广域网联调故障PPP 、 HDLC

路由协议故障OSPF 、 RIP

以太网故障VLAN

广域网组网模型

S0 S0PPP/HDLC/X25/FR

RTA RTB

接口信息查询

disp interface [ 端口号 ]数据包收发通过接口最基本、最常用的查询命令信息量丰富

disp controller E1 [ 端口号 ]E1 接口的相关参数配置

查看串口的相关信息3640#disp int s 0Serial0 is up, line protocol is up physical layer is synchronous interface is DTE, clock is DTECLK3, cable type is V35 Internet address is 10.98.143.137 255.255.255.252 Encapsulation is PPP LCP opened, IPCP opened, IPXCP initial, CCP initial Description: TO 2630 5 minutes input rate 2.69 bytes/sec, 0.20 packets/sec 5 minutes output rate 2.74 bytes/sec, 0.20 packets/sec Input queue :(size/max/drops) 0/50/0 Queueing strategy: FIFO Output Queue :(size/max/drops) 0/50/0 5201 packets input, 65656 bytes, 0 no buffers 5211 packets output, 67028 bytes, 0 no buffers 15 input errors, 12 CRC, 2 frame errors 0 overrunners, 1 aborted sequences, 0 input no buffers DCD=UP DTR=UP DSR=UP RTS=UP CTS=UP

端口的物理状态V35 、 V24 串口

串口到基带Modem之间的信号交互E1 接口

E1 接口到传输设备之间的信号交互端口的协议状态

与对端设备之间链路协议协商的结果

端口的两个状态

Serial0 is up, line protocol is up

两个状态的关系

端口的物理层 UP

端口的链路协议 UP

端口正常转发数据包

前者是后者的必要条件，不是充分条件！

为什么出现物理口 Up 、协议 Down 这种不一

致的现象

物理口 DOWN

指示灯状态LINK灯RLOS 灯

4001 路由器DCD=UP DTR=UP DSR=UP RTS=UP CTS=UP

路由器端口与基带 Modem之间的信号交互DTE 设备与 DCE 设备之间的信号交互

线缆问题基带 Modem问题

链路协议 DOWN （一）

双方协商不成功配置的正确性

相关参数是否一致不同厂商设备对接

双方收发包是否正常能否收到包是否是错误的包

配置问题物理传输问题

5201 packets input端口的收包数量

5211 packets output端口的发包数量

15 input errors, 12 CRC, 2 frame errors端口收到错误包的数量

端口统计信息——含义

利用统计信息分析问题

链路协议协商收、发包数量大致相等如果两个数字相差悬殊

首先检查外部因素

端口统计信息——分析

收到错误的包数量较多不断增长

检查物理线路、误码率光口是否干净

连续多次查看数字的动态变化

reset counters interface 命令排除干扰

全面地看两端设备接口信息结合起来分析

综合分析端口统计信息排除路由器自身的因素加快问题定位速度

线缆故障传输质量差

端口统计信息——作用

最常使用、最有效

适用于任何链路层协议

PPP 协议的两个状态——含义

LCP—— 链路层协商MRU 、验证、魔术字

IPCP—— 网络层协商协议类型、地址

LCP opened, IPCP opened

LCP OPEN IPCP OPEN

前者是后者的必要条件，不是充分条件！

PPP 协议的两个状态——常见现象

LCP 不 OPEN端口统计信息方法

外部因素验证通不过

检查配置出现自环

Loopback is setLCP OPEN ，但 IPCP 不 OPEN

地址配置问题

验证的配置PAP 验证、 CHAP 验证

双方 IP 地址的配置一端配置地址协商，另外一端没有分配 IP

配置正确性检查—— PPP

Keepalive 参数的配置一端打开、一端关闭

Quidway默认为打开关闭的一端协议始终为 UP

两边时间不一致Quidway默认为 10秒时间短的一侧有可能频繁UP 、 DOWN

配置正确性检查—— HDLC

HDLC 接口信息查询LAC(config-if-Serial0)#disp int s 0Serial0 is up, line protocol is up physical layer is synchronous interface is DTE, clock is DTECLK1, cable type is RS232 Encapsulation HDLC, keepalive set (10 sec) Input keepalive packages:0, Output keepalive packages:0 5 minutes input rate 0.00 bytes/sec, 0.00 packets/sec 5 minutes output rate 0.00 bytes/sec, 0.00 packets/sec Input queue :(size/max/drops) 0/75/0 Queueing strategy: FIFO Output Queue :(size/max/drops) 0/75/0 156 packets input, 12722 bytes, 0 no buffers 118 packets output, 7761 bytes, 0 no buffers 0 input errors, 0 CRC, 0 frame errors 0 overrunners, 0 aborted sequences, 0 input no buffers DCD=DOWN DTR=UP DSR=UP RTS=UP CTS=UP

地址映射的配置对端 IP 地址—对端 121 地址

其它参数的配置窗口大小、呼叫区间向运营商确认

配置正确性检查—— X25

X25 接口信息查询LAC(config-if-Serial0)#disp int s 0Serial0 is up, line protocol is down physical layer is synchronous interface is DTE, clock is DTECLK1, cable type is RS232 Encapsulation X.25 DTE ietf, address is , state Ready, modulo 8 input/output: window sizes 2/2, packet sizes 128/128 Channels: Incoming-only 0-0, Two-way 1-1024, Outgoing-only 0-0 Timers: T20 180, T21 200, T22 180, T23 180, T28 300, Idle_Timer 0 (seconds) New configuration(will be effective after restart): modulo 8 input/output: window sizes 2/2, packet sizes 128/128 Channels: Incoming-only 0-0, Two-way 1-1024, Outgoing-only 0-0 Statistic: Restarts 0 (Restart Collisions 0) Refused Incoming Call 0, Failing Outgoing Call 0 input/output: RESTART 0/0 CALL 0/0 DIAGNOSE 0/0 DATA 0/0 INTERRUPT 0/0 Bytes 0/0 RR 0/0 RNR 0/0 REJ 0/0 Invalid Pr: 0 Invalid Ps: 0 Unknown: 0

X25 接口信息查询（续）LAPB DTE, module 8, k 7, N1 12056, N2 10 timer: T1 2000, T2 1000, T3 0 (milliseconds) state SABMSENT, VS 0, VR 0, Remote VR 0 IFRAME 0/0, RR 0/0, RNR 0/0, REJ 0/0 FRMR 0/0, SABM 0/4, DM 0/0, UA 0/0 DISC 0/0, invalid ns 0, invalid nr 0, link resets 0 5 minutes input rate 0.00 bytes/sec, 0.00 packets/sec 5 minutes output rate 0.00 bytes/sec, 0.00 packets/sec Input queue :(size/max/drops) 0/75/0 Queueing strategy: FIFO Output Queue :(size/max/drops) 0/75/0 156 packets input, 12722 bytes, 0 no buffers 118 packets output, 7879 bytes, 0 no buffers 0 input errors, 0 CRC, 0 frame errors 0 overrunners, 0 aborted sequences, 0 input no buffers DCD=DOWN DTR=UP DSR=UP RTS=UP CTS=UP

帧中继封装格式的配置Quidway 默认为 IETF

LMI 类型的配置Quidway 默认为Q933a

地址映射的配置对端 IP—本端 DLCI 号

配置正确性检查——帧中继

帧中继接口信息查询LAC(config-if-Serial0)#disp int s 0Serial0 is up, line protocol is down physical layer is synchronous interface is DTE, clock is DTECLK1, cable type is RS232 Encapsulation is FRAME-RELAY IETF LMI DLCI 0 LMI type is q933a frame relay DTE LMI status enq sent 2, status received 0 LMI status sent 0, status enq received 0 LMI status discarded 0, status enq discarded 0, status timeouts 0 5 minutes input rate 0.00 bytes/sec, 0.00 packets/sec 5 minutes output rate 0.00 bytes/sec, 0.00 packets/sec Input queue :(size/max/drops) 0/75/0 Queueing strategy: FIFO Output Queue :(size/max/drops) 0/75/0 156 packets input, 12722 bytes, 0 no buffers 118 packets output, 7913 bytes, 0 no buffers 0 input errors, 0 CRC, 0 frame errors 0 overrunners, 0 aborted sequences, 0 input no buffers DCD=DOWN DTR=UP DSR=UP RTS=UP CTS=UP

配置正确性检查—— E1 接口

端口模式E1 、 CE1

帧校验方式（ CE1 ）Quidway 默认为不校验No-CRC4

时钟选择 CLOCK LINE ：默认CLOCK DCE 如果两端 E1

接口与传输设备连接，一端配置为 DCE

E1 物理端口信息查询

Quidway(config)#disp con e 0E1 0 is down. Applique type is E1 - 75 OHM unbalanced Framing is NO-CRC4, Line Code is HDB3, Source Clock is Line.

Quidway(config)#disp con e 0E1 0 is down. Applique type is Channelized E1 - 75 OHM unbalanced Framing is NO-CRC4, Line Code is HDB3, Source Clock is Line.

75 欧姆—— 120 欧姆转换器

E1 逻辑串口信息查询（ E1 ）Quidway(config-if-e0)#disp in ser 2:0Serial2:0 is down, line protocol is down physical layer is E1, baudrate is 2048000 bps Encapsulation is PPP LCP initial, IPCP initial, IPXCP initial, CCP initial 5 minutes input rate 0.00 bytes/sec, 0.00 packets/sec 5 minutes output rate 0.00 bytes/sec, 0.00 packets/sec Input queue :(size/max/drops) 0/75/0 Queueing strategy: FIFO Output Queue :(size/max/drops) 0/75/0 0 packets input, 0 bytes, 0 no buffers 0 packets output, 0 bytes, 0 no buffers 0 input errors, 0 CRC, 0 frame errors 0 overrunners, 0 aborted sequences, 0 input no buffers

E1逻辑串口信息查询（ CE1）Quidway(config)#disp in ser 2:28Serial2:28 is down, line protocol is down physical layer is E1, baudrate is 832000 bps Encapsulation is PPP LCP initial, IPCP initial, IPXCP initial, CCP initial 5 minutes input rate 0.00 bytes/sec, 0.00 packets/sec 5 minutes output rate 0.00 bytes/sec, 0.00 packets/sec Input queue :(size/max/drops) 0/75/0 Queueing strategy: FIFO Output Queue :(size/max/drops) 0/75/0 0 packets input, 0 bytes, 0 no buffers 0 packets output, 0 bytes, 0 no buffers 0 input errors, 0 CRC, 0 frame errors 0 overrunners, 0 aborted sequences, 0 input no buffers Timeslot(s) Used: 1-13

广域网联调故障PPP 、 HDLC

路由协议故障OSPF 、 RIP

以太网故障VLAN

相关信息查询及分析

路由故障（一）

链路协议都UP 了，为什么还 Ping 不通

目的地

路由故障（二）

有没有去的路由有没有回程的路由

网络是第三层概念

首先确保物理层和链路层是通畅的

静态路由和动态路由

静态路由缺少路由路由错误

动态路由相应端口没有启动配置错误，工作不正常

配置正确性检查——静态路由缺少路由

去的路由回程的路由什么样（目的网段）的路由

Ping 包的目的地址和源地址谁缺少路由

逐段排查路由的下一跳

邻居设备的接口 IP地址与本端在同一个子网

本路由器的接口点到点协议的接口

错误的静态路由

ip route 10.10.0.0 16 Ethernet 0

下一跳不能是多点访问接口

静态路由常见故障类型（一）

下一跳配置错误多点访问接口下一跳地址没有在路由表中体现

单向路由只有去的只有回来的

静态路由常见故障类型（二）

目的网段不正确去哪里、回到哪里不清楚与实际业务包、 Ping 包的 IP 地址不匹配

路由“接力”中断只关注起点、终点的路由配置中间某个点缺少相应的路由

动态路由故障—— OSPF

为什么没有学到OSPF 路由

相关接口上启动了 OSPFdisp curr

接口的区域号配置正确disp curr区域规划是否正确

配置了 Router IDdisp currID唯一

配置检查—— OSPF 全局属性

OSPF 邻居间的相关参数必须一致区域号网络类型Hello intervalDead interval验证类型

配置检查—— OSPF 接口参数

参数不一致，邻居关系无法建立，

学不到路由

相关信息查看—— OSPF

disp ospf peer邻居关系的状态

disp ospf interface [ 端口号 ]接口的相关参数两端是否一致

disp ospf errorOSPF 运行中出现的错误信息帮助定位问题

最常用的三条命令

OSPF 邻居状态信息查看

Quidway(config)#disp ospf peerInterface: 129.9.181.252 Area: 0.0.0.0 Neighbors: RouterID: 192.168.3.1 Address: 129.9.181.10 State: Full Mode: None Priority: 1 DR: 129.9.181.252 BDR: 129.9.181.11 Last Hello: 0 Last Exchange: 0

OSPF 接口信息查看

Quidway#disp ospf interface ethernet 0

Interface: 202.11.45.6(ethernet 0) --> 202.11.45.6 Cost: 1 State: DR Type: Broadcast Priority: 1 DoNotAge Lsa Allowed Timers: Hello 10, Dead 40, Poll 0, Retransmit 5, Transmit Delay 1

OSPF 错误信息查看Quidway(config)#disp ospf error OSPF packet error information statistics: 0: IP: bad destination 0: IP: bad protocol 0: IP: received my own packet 0: OSPF: bad packet type 0: OSPF: bad version 0: OSPF: bad checksum 0: OSPF: bad area id 0: OSPF: area mismatch 0: OSPF: bad virtual link 0: OSPF: bad authentication type 0: OSPF: bad authentication key 0: OSPF: packet too small 0: OSPF: packet size > ip length 0: OSPF: transmit error 0: OSPF: interface down 0: OSPF: unknown neighbor 0: HELLO: netmask mismatch 0: HELLO: hello timer mismatch 0: HELLO: dead timer mismatch 0: HELLO: extern option mismatch 0: HELLO: router id confusion 0: HELLO: virtual neighbor unknown 0: HELLO: NBMA neighbor unknown 0: DD: neighbor state low 0: DD: router id confusion 0: DD: extern option mismatch 0: DD: unknown LSA type 0: LS ACK: neighbor state low 0: LS ACK: bad ack 0: LS ACK: duplicate ack 0: LS ACK: Unknown LSA type 0: LS REQ: neighbor state low 0: LS REQ: empty request 0: LS REQ: bad request 0: LS UPD: neighbor state low 0: LS UPD: newer self-gen LSA 0: LS UPD: LSA checksum bad 0: LS UPD: received less recent LSA 0: LS UPD: unknown LSA type

OSPF 常见故障类型邻居间网络类型不一致

P2P 、 NBMA 、 Broadcast不同厂商互通

没有人为配置 OSPF NeighborNBMA 网络点到多点网络人工配置的点到点网络

区域规划不正确骨干区域被隔离，没有连通非骨干区域没有与骨干区域相连

为什么没有学到 RIP 路由

动态路由故障—— RIP

相关接口上启动了 RIPNetwork 命令所包含的范围

邻居之间的 RIP 版本一致默认为 RIP V1版本

是否人工配置了 Neighbor非广播网络

配置检查—— RIP （一）

没有学到子网路由是否为 RIP V2版本是否取消了自动聚合（ V2版本）Quidway 默认打开聚合功能

没有学到引入路由是否设定了路由权默认是 16 ，不可达

配置检查—— RIP （二）

RIP V1 不支持VLSM ， RIP V2 支持

RIP 信息查看

Quidway#disp ripRIP is turning on default-metric : 16 no neighbor network : 20.0.0.0 120.0.0.0 auto-summary is on preference : 100 redistribute static metric : 2

RIP 常见故障类型

没有关闭自动聚合功能学不到子网路由

没有人工配置 RIP V2缺省为 RIP V1 版本

没有人工配置 Neighbor非广播网络

没有人工配置引入路由权缺省为不可达

相关信息查询及分析

广域网联调故障PPP 、 HDLC

路由协议故障OSPF 、 RIP

以太网故障VLAN

以太网故障类型

物理线路问题网线不标准

工作模式不一致速率、双工

VLAN 配置802.1Q规则

以太网线问题

端口错误包数量多

Ping 包丢包严重

网线不标准非标准五类线线序错误

工作模式问题

工作速率自协商10M100M

双工方式自协商半双工全双工

与光电转换器连接

与 Hub 连接

以太网端口信息查看3640#disp int E0Ethernet0 is up, line protocol is up Hardware address is 00-e0-fc-04-f7-7b Auto-Negotiation is disabled, Full-duplex, 100Mb/s Internet address is 10.232.57.6 255.255.255.252 10.232.57.7 Description: Quidway Router, ethernet interface IP Sending Frames' Format is Ethernet_II the Maximum Transmission Unit is 1500 5 minutes input rate 12048.37 bytes/sec, 11.31 packets/sec 5 minutes output rate 948.22 bytes/sec, 7.48 packets/sec Input queue :(size/max/drops) 0/200/0 Queueing strategy: FIFO Output Queue :(size/max/drops) 0/50/0 1669121 packets input, 1323673072 bytes, 0 no buffers 1454621 packets output, 147158318 bytes, 0 no buffers 0 input errors, 0 CRC, 0 frame errors 0 overrunners, 0 aborted sequences, 0 input no buffers

VLAN互通问题

802.1Q规则数据包收、发VLAN ID 的变化

核心内容

若干重要概念（一）

VLAN ID对数据包而言，数据包自身的 VLAN属性全局意义

PVID对端口而言，端口自身的 VLAN属性局部意义

VLAN TRUNK PERMIT VLAN ID透传多个 VLAN 的数据包端口的能力、属性

若干重要概念（二）

TAG端口属性

UNTAG端口属性

两者的区别主要体现在数据包的发送处理上

需要注意，从 TAG端口发送出去的包，并不一定都带有 VLAN ID

VLAN问题小结

融会贯通得心应手

熟悉了前面的重要概念和区别

目 录

课程介绍故障排错整体思路故障定位常用命令和工具故障相关信息查看及分析典型案例分析

网络单通（一）

LAN/WANIntranet/InternetA B

A 和 B都是 PCA 可以 Ping 通 B ， B Ping 不通 A

报文过滤A或者B启动了防火墙中间的设备配置了防火墙

网络单通（二）

LAN/WANIntranet/InternetA B

A 和 B 中有一台是网络设备A 可以 Ping 通 B ， B Ping 不通 A

配置了防火墙缺少相应的路由

Ping 包的源地址、目的地址

链路协议起不来（一）

一端路由器 S0 口只有发送出去的包，没有收到的包

首先检查对端设备的情况其次检查中间的线缆、传输

S0 S0PPP/HDLC

RTA RTB

两边路由器的 S0 口都UP ，但是协议一直是 DOWN 的状态

链路协议起不来（二）

两边路由器的 S0 口都UP ，但是协议一直是 DOWN 的状态

一端路由器 S0 口收到大量错误的包检查中间的线缆和传输质量

S0 S0PPP/HDLC

RTA RTB

HDLC 协议UP 、 DOWN问题（一）

RTA 的 S0 口协议一开始 UP ，过一会儿自己 DOWN掉

RTA肯定打开了 Keepalive 功能Quidway 默认情况

可能 RTB将 Keepalive 功能关闭掉了可能中间的链路中断

S0 S0 HDLC

RTA RTB

HDLC 协议 UP 、 DOWN问题（二）

RTA 的 S0 口协议 UP ， RTB 的 S0 口协议 DOWN

RTA 关闭了 Keepalive 功能， RTB打开双方收发包有问题，检查中间的链路情况

S0 S0 HDLC

RTA RTB

HDLC 协议UP 、 DOWN问题（三）

RTA 的 S0 口协议为UP ，但是 Ping 不通对方

查看 RTB 的协议状态把 Keepalive 功能打开，查看收发包情况

S0 S0 HDLC

RTA RTB

E1 端口丢包问题

RTA 的 E1端口不断收到错误包， Ping 对方丢包

首先查看两边 E1 端口的时钟配置，确认有一边配置为 DCE再检查传输的误码率

E1 E1 SDH 传输

RTA RTB

防火墙失效

access-list 101 permit tcp 10.137.32.0 0.0.7.255 eq telnet anyaccess-list 101 deny tcp any eq telnet any

访问列表的配置错误应该禁止目的端口为 23 的 TCP 报文，而不是源端口

把 eq telnet 的位置挪后

LAN/WAN Intranet/InternetPCA

RTB

10.10.20.1

PCA竟然可以 Telnet 到 RTB

远程拨号配置路由器

PCA拨号到 RTB 的 AUX 口进行远程维护，已经拨通，但是出现乱码

AUX 口的异步模式配置错误配置的是 Async mode dedicated

正确的配置如下Async mode interactive

PSTN PCA

RTB

AUX

在低端路由器中， AUX 口体现为Serial 2 口