路由器崩溃故障的分析与排除

　　介绍

　　通常所说的“系统崩溃”是指系统检测到无法恢复的错误并重新启动的情况。

　　引起崩溃的错误通常是由处理器硬件检测的，处理器硬件在 ROM 监视器中自动派生出特殊的错误处理代码。ROM 监视器可以识别错误，打印消息，保存故障信息并重新启动系统。

　　开始之前

　　e=conv>规则

　　有关文件规则的更多信息，请参阅 Cisco Technical Tips Conventions.

　　前提条件

　　本文没有任何特定的前提条件。

　　所使用组件

　　本文不限于任何特定的软硬件版本。

　　获得有关崩溃的信息

　　在路由器崩溃的情况下，最重要的工作是在对路由器进行人工重载或重新加电启动之前尽可能多地收集有关崩溃的信息。人工重载或重新加电启动之后，除 crashinfo 文件中成功保存的信息外，有关崩溃的所有其他信息都将丢失。下面的输出内容显示了有关崩溃的一些信息。

　　若您可以通过Cisco设备获得show version、show stacks、show context或show tech support命令输出，则可通过这些输出来显示潜在的问题和修补方法。若要使用这些信息，登录并启用，但您必须是注册用户。

　　命令

　　说明

　　show version

　　最早在Cisco IOS（r）软件版本10.0中出现的命令。Show version EXEC命令显示系统硬件配置、软件版本、配置文件与软件镜像的名称和来源、路由器运行时间和有关系统重启过程的信息。

　　重要提示：若路由器在崩溃后重载（例如加电重启或使用reload命令），该信息将会丢失。因此，设法在重载前收集有关信息！！！

　　show stacks

　　最早在Cisco IOS软件版本10.0中出现的命令。show stacks EXEC命令用来监视程序和中断程序的堆栈使用情况。在路由器崩溃的情况下，show stacks命令输出是信息的最重要来源之一。

　　重要提示：若路由器在崩溃后重载（例如加电重启或使用reload命令），该信息将会丢失。因此，设法在重载前收集有关信息！

　　show context

　　最早在Cisco IOS软件版本10.3中出现的命令。show context EXEC命令用来在发生意外事件时显示非易失性RAM（NVRAM）中保存的信息。上下文信息是处理器和基础结构所特定的，而软件版本和运行时间信息则不是。不同路由器类型的上下文信息因此各不相同。show context命令的显示内容包括以下方面：

　　系统重启原因

　　堆栈记录

　　软件版本

　　信号编号、代码和路由运行时间信息

　　崩溃时的所有注册内容

　　show tech-support

　　最早出现在Cisco IOS软件版本11.2中。在报告问题时，此命令非常有助于收集有关路由器的基本信息。此命令包括：

　　show version

　　show running-config

　　show stacks

　　show interface

　　show controller

　　show process cpu

　　show process memory

　　show buffers

　　console log

　　若在崩溃时与路由器控制面板相连，您会在崩溃期间看到类似以下信息的显示内容：

　　*** System received a Software forced crash ***

　　signal= 0x17, code= 0x24, context= 0x619978a0

　　PC = 0x602e59dc, Cause = 0x4020, Status Reg = 0x34008002

[Ok3w_NextPage]

　　DCL Masked Interrupt Register = 0x000000f7

　　DCL Interrupt Value Register = 0x00000010

　　MEMD Int 6 Status Register = 0x00000000

　　保存这些信息以及此前的日志。路由器恢复运行时一定要获得show stacks命令输出。

　　syslog

　　若路由器设置为向syslog服务器发送日志，则可在syslog服务器上显示崩溃前所发生的事件。但是，在路由器崩溃的情况下，可能不会将最有用的信息发送到syslog服务器上。因此，通常情况下，syslog输出对于排除崩溃故障不是很有用。

　　crashinfo

　　crashinfo文件包含有关当前崩溃的许多有用信息，这些信息保存在bootflash或flash存储器中。当数据或堆栈损坏引起路由器崩溃时，除了常用的show stacks命令输出外，还需要更多的重载信息来排除这类崩溃故障。

　　在Cisco 12000千兆位路由器处理器（GRP）、Cisco 7000和7500路由交换处理器（RSP）以及Cisco 7200系列路由器上，缺省情况下crashinfo被写入到bootflash:crashinfo中。对于Cisco 7500通用接口处理器2（VIP2），缺省情况下此文件被保存到bootflash:vip2_slot_no_crashinfo中，其中，slot_no为VIP2插槽号码。对于Cisco 7000路由处理器（RP），缺省情况下此文件被保存到flash:crashinfo中。

　　有关更多信息，请参阅从Crashinfo文件中获取信息。

　　core dump

　　core dump是路由器内存镜像的全面拷贝。这种信息对于解决大多数类型的崩溃问题是不必要的，但在记录新的故障时，最好使用这些信息。若要将 debug sanity、scheduler heapcheck process和memory check-interval 1等更多信息添加到core dump 中，则可能需要启用某些调试工具。

　　有关详细信息请参阅创建Core Dumps。

　　rom monitor

　　若路由器的config-register设置以0为结尾，则崩溃后，路由器可能在ROM监视器中终止。若路由器为68k，则提示符为">"。您可通过k命令来获取堆栈记录。若处理器为精简指令集计算机构（RISC），则提示符将为"rommon 1>"。获取stack 50和show context的输出。

　　[page]

　　崩溃类型

　　show version和show stacks命令输出可显示所发生崩溃的类型，如：总线错误或软件强制崩溃。您还可以通过crashinfo和show context命令来获取有关崩溃类型的信息。对于某些较新的Cisco IOS软件版本，没有明确显示崩溃原因（例如，显示内容为"Signal = x"，其中x是一个数字）。若要了解这些数字所表示的意义，请参照通用接口处理器崩溃原因代码例如："Signal = 23"是指软件强制崩溃。根据下面的链接来解决路由器上所发生的特定类型的崩溃：

　　中断

　　地址错误

　　总线错误

　　缓存器异常错误

　　错误 - 级别

　　格式错误

　　非法指令

　　非法Opcode异常

　　跳到零错误

　　线路仿真器陷阱

　　加电

　　处理器内存奇偶校验错误

　　保留异常

　　错误重新启动

　　分段违例异常

　　共享存储器奇偶校验错误

　　SIGTRAP

　　软件强制崩溃

　　跟踪陷阱

　　未定义陷阱

[Ok3w_NextPage]

　　意外硬件运行中断

　　未知故障

　　未知重新装载原因

　　监视器超时

　　写总线错误中断

　　路由器模块崩溃

　　在某些情况下，只是特定的路由器模块崩溃，而不是整个路由器崩溃。下列文件对如何解决某些路由器模块上的崩溃进行了说明：

　　排除VIP崩溃

　　排除PA-A3上的SAR崩溃

　　排除Cisco GSR12000系列上的线路卡崩溃

　　显示崩溃情况的输出范例

　　Router#show version

　　Cisco Internetwork Operating System Software

　　IOS （tm） RSP Software （RSP-PV-M）， Version 12.0（10.6）ST, EARLY DEPLOYMENT

　　MAINTENANCE INTERIM SOFTWARE

　　Compiled Fri 23-Jun-00 16:02 by richv

　　Image text-base: 0x60010908, data-base: 0x60D96000

　　ROM: System Bootstrap, Version 12.0（19990806:174725）， DEVELOPMENT SOFTWARE

　　BOOTFLASH: RSP Software （RSP-BOOT-M）， Version 12.0（9）S, EARLY DEPLOYMENT

　　RELEASE SOFTWARE （fc1）

　　Router uptime is 20 hours, 56 minutes

　　System returned to ROM by error - a Software forced crash, PC 0x60287EE8

　　System image file is "slot0:rsp-pv-mz.120-10.6.ST"

　　cisco RSP8 （R7000） processor with 131072K/8216K bytes of memory.

　　R7000 CPU at 250Mhz, Implementation 39, Rev 1.0, 256KB L2, 2048KB L3 Cache

　　Last reset from power-on

　　G.703/E1 software, Version 1.0.

　　G.703/JT2 software, Version 1.0.

　　X.25 software, Version 3.0.0.

　　Chassis Interface.

　　1 EIP controller （6 Ethernet）。

　　1 VIP2 R5K controller （1 FastEthernet）（2 HSSI）。

　　6 Ethernet/IEEE 802.3 interface（s）

　　1 FastEthernet/IEEE 802.3 interface（s）

　　2 HSSI network interface（s）

　　2043K bytes of non-volatile configuration memory.

　　20480K bytes of Flash PCMCIA card at slot 0 （Sector size 128K）。

　　16384K bytes of Flash internal SIMM （Sector size 256K）。

　　No slave installed in slot 7.

[Ok3w_NextPage]

　　Configuration register is 0x2102

　　Router#show stacks

　　Minimum process stacks:

　　Free/Size Name

　　5188/6000 CEF Reloader

　　9620/12000 Init

　　5296/6000 RADIUS INITCONFIG

　　5724/6000 MDFS Reload

　　2460/3000 RSP memory size check

　　8176/9000 DHCP Client

　　Interrupt level stacks:

　　Level Called Unused/Size Name

　　1 163 8504/9000 Network Interrupt

　　2 14641 8172/9000 Network Status Interrupt

　　3 0 9000/9000 OIR interrupt

　　4 0 9000/9000 PCMCIA Interrupt

　　5 5849 8600/9000 Console Uart

　　6 0 9000/9000 Error Interrupt

　　7 396230 8604/9000 NMI Interrupt Handler

　　System was restarted by error - a Software forced crash, PC 0x602DE884 at 05:07:31

　　UTC Thu Sep 16 1999

　　RSP Software （RSP-JSV-M）， Version 12.0（7）T, RELEASE SOFTWARE （fc2）

　　Compiled Mon 06-Dec-99 19:40 by phanguye

　　Image text-base: 0x60010908, database: 0x61356000

　　Stack trace from system failure:

　　FP: 0x61F73C30, RA: 0x602DE884

　　FP: 0x61F73C30, RA: 0x6030D29C

　　FP: 0x61F73D88, RA: 0x6025E96C

　　FP: 0x61F73DD0, RA: 0x6026A954

　　FP: 0x61F73E30, RA: 0x602B94BC

　　FP: 0x61F73E48, RA: 0x602B94A8

　　若在 bootflash 中存在 crashinfo，则在 show stacks 命令执行结束时显示以下内容：

　　***************************************************

　　******* Information of Last System Crash **********

　　***************************************************

　　Using bootflash:crashinfo_20000323-061850. 2000

　　CMD: 'sh int fas' 03:23:41 UTC Thu Mar 2 2000

　　CMD: 'sh int fastEthernet 6/0/0' 03:23:44 UTC Thu Mar 2 2000

　　CMD: 'conf t' 03:23:56 UTC Thu Mar 2 2000

　　CMD: 'no ip cef di' 03:23:58 UTC Thu Mar 2 2000

[Ok3w_NextPage]

　　CMD: 'no ip cef distributed ' 03:23:58 UTC Thu Mar 2 2000

　　…

　　Router#show context

　　System was restarted by error - a Software forced crash, PC 0x602DE884 at

　　05:07:31 UTC Thu Sep 16 1999

　　RSP Software （RSP-JSV-M）， Version 12.0（7）T, RELEASE SOFTWARE （fc2）

　　Compiled Mon 06-DEC-99 19:40 by phanguye

　　Image text-base: 0x60010908, database: 0x61356000

　　Stack trace from system failure:

　　FP: 0x61F73C30, RA: 0x602DE884

　　FP: 0x61F73C30, RA: 0x6030D29C

　　FP: 0x61F73D88, RA: 0x6025E96C

　　FP: 0x61F73DD0, RA: 0x6026A954

　　FP: 0x61F73E30, RA: 0x602B94BC

　　FP: 0x61F73E48, RA: 0x602B94A8

　　Fault History Buffer:

　　RSP Software （RSP-JSV-M）， Version 12.0（7）T, RELEASE SOFTWARE （fc2）

　　Compiled Mon 06-DEC-99 19:40 by phanguye

　　Signal = 23, Code = 0x24, Uptime 3w0d

　　$0 : 00000000, AT : 619A0000, v0 : 61990000, v1 : 00000032

　　a0 : 6026A114, a1 : 61A309A4, a2 : 00000000, a3 : 00000000

　　t0 : 61F6CD80, t1 : 8000FD88, t2 : 34008700, t3 : FFFF00FF

　　t4 : 00000083, t5 : 3E840024, t6 : 00000000, t7 : 00000000

　　s0 : 0000003C, s1 : 00000036, s2 : 00000000, s3 : 61F73C48

　　s4 : 00000000, s5 : 61993A10, s6 : 61982D00, s7 : 61820000

　　t8 : 0000327A, t9 : 00000000, k0 : 61E48C4C, k1 : 602E7748

　　gp : 6186F3A0, sp : 61F73C30, s8 : 00000000, ra : 6030D29C

　　EPC : 602DE884, SREG : 3400E703, Cause : 00000024

　　Error EPC : BFC00000, BadVaddr : 40231FFE

tech首页更多tech