登录站点

用户名

密码

一次Cisco 4506的Troubleshooting经历(原创)

热60已有 2927 次阅读  2010-11-09 15:34   标签:  Cisco  Troubleshooting  经历  原创 

一次Cisco 4506 交换机的Troubleshooting经历

 

前一阵一家公司Cisco 的4506突然断电,断电后就无法启动。我立刻从公司出发到了客户现场,客户机房有几个老外在,一个是联系我们的集成商,另外几个是客户的IT人员。

用不是很流利的E文和他们沟通一下,得知这台cisco4506突然断电,重启后就一直无法启动。老外们说是电源烧了,还给我演示了一下,每次打开电源,只听砰的一下,小范围的爆炸声。。。呵呵~很是吓人,我自己亲自操作了下,果然很吓人,启动第一个电源,砰的一声,之后断电;在第一个电源通电状态下启动第二个电源,故障相同。接着分别启动电源,启动PS1,故障相同;关闭PS1,启动PS2,故障相同。每次声音都是砰的一声,只见一旁的老外躲得远远的,好像在等待爆炸一样,俺每次启动电源也是一身冷汗啊,哈哈~

这时候大家所有的注意力都集中在这两个电源上了,因为没有带备用电源,也无法测试,本以为是IOS丢了之类的问题,重新倒下OK了,直接起不来,这样要折腾了,呵呵~

一旁的老外倒是还很悠闲,居然有人掏出iphone把cisco4506每次启动砰的一声冒火花的场面拍摄了下来,说要传到网上看看,真是服了他们了。我也凑过去看了下,每次一开电源,先是砰的一声小范围爆炸,然后只见到机箱的个里面冒出火花,的确很神奇,感觉是放烟花。。。

连续看了几遍,突然有一个细节引起了我的注意。发现每次启动后,冒出火花的位置是固定了,每次都是相同部位起火,这一点提醒了我,我让老外在4506旁启动电源,我在机箱旁观察,果然看出些问题了,因为每次启动电源时,都是第四块槽位冒火花,然道是并不是电源烧了,而是第四块线卡烧了吗?一下子仿佛找到了希望。又开始推断,如果电源烧了,为什么每次都是第四块线卡的位置冒火花呢,位置很固定。我又凑近电源,闻了闻没有焦味,倒是第四块线卡位置的焦味很浓。到这里,我敢判断电源没有问题,是第四块线卡烧了。立马将第四块线卡拔出来,重新启动电源PS1,PS2,果然4506转起来了,一切OK。接下来要做的事是把其他线卡接在第四个槽位上,看能否正常启动,如愿以偿也可以正常启动,确认是第四块线卡自己烧了,呵呵!(这个操作是危险的,如果是机箱的第四个槽位接口有问题,可能会导致其他线卡接触后也烧了,呵呵,做这个操作之前犹豫了很久,因为手头没有其他线卡了,呵呵)

找出问题后,大家都开心了,4506终于活了,哈哈!看了下拔出来了线卡,上面有一块芯片已经烧焦了。待4506启动好后,立马带外管理进入command line interface,show environment发现电源和其他线卡一切OK

 

 

4506-Shanghai#show environment      

no alarm

 

Chassis Temperature                    = 39 degrees Celsius

Chassis Over Temperature Threshold     = 75 degrees Celsius

Chassis Critical Temperature Threshold = 95 degrees Celsius

 

 

Power                                             Fan      Inline

Supply  Model No          Type       Status       Sensor   Status

------  ----------------  ---------  -----------  -------  -------

PS1     PWR-C45-2800AC    AC 2800W   good         good     good  

PS2     PWR-C45-2800AC    AC 2800W   good         good     good  

 

Power supplies needed by system    : 1

Power supplies currently available : 2

 

Chassis Type : WS-C4506

 

Power consumed by backplane : 0 Watts

 

Supervisor Led Color : Green

 

Module  1 Status Led Color  : Green         

Module  2 Status Led Color  : Green           PoE Led Color : Green         

Module  3 Status Led Color  : Green           PoE Led Color : Green         

Module  5 Status Led Color  : Green           PoE Led Color : Green         

 

Fantray : Good

 

Power consumed by Fantray : 50 Watts

系统显示电源和其他的线卡都是OK的,show processes cpu history,show processes memory看了下,也没有什么问题。

接下来要做的工作就是把module 4上所有的配置移动到其他模块上,在slot 3上的空闲interface上开启新的trunk,划分好vlan,把slot 4上所有接口配置移动到slot 3上,一切OK,外网,专线和PoE供电的电话等都可以正常使用了。

总结了下,4506无法启动的可能原因是线卡板卡出问题烧了,每次电源启动后为了设备自我保护自动切断电源,所以每次启动后立刻断电,给换块线卡吧,呵呵~

还是比较佩服老外的工作风格,这断网的关头还能用iphone把4506的冒火情形拍下来,的确悠哉。这冒火的情形倒帮助了判断问题,有意思,哈哈!

 

好久没有写博客,因为这一阵自己的事情比较多,现在差不多忙完了,呵呵,继续支持Cisco-club !

 

 

分享 举报

发表评论 评论 (36 个评论)

 36 12
  • 无野小子 2010-11-09 15:40
    好文章,阅读中...受益中...期待中......
  • chenjian26841 2010-11-09 16:11
    嘭嘭的响了好几下居然插槽都没出问题 cisco很强大
  • Bati-gol 2010-11-09 16:13
    chenjian26841: 嘭嘭的响了好几下居然插槽都没出问题 cisco很强大
    呵呵,小范围爆炸,就是线卡上的芯片是糊了,基本上还是比较结实的,呵呵!
  • meiwen01 2010-11-09 21:07
    类是的情况到是在6509上见过  因机箱背板插槽的针弯了,导致短路,一开电源机箱有焦味,风扇转一会就不动了。
  • zdh1207 2010-11-09 21:33
    羡慕中~~~,N年没闻过思科设备的味道了。
  • Bati-gol 2010-11-09 23:08
    meiwen01: 类是的情况到是在6509上见过  因机箱背板插槽的针弯了,导致短路,一开电源机箱有焦味,风扇转一会就不动了。
    有些类似,这个是线卡烧了,呵呵~
  • Bati-gol 2010-11-09 23:09
    zdh1207: 羡慕中~~~,N年没闻过思科设备的味道了。
    有些香味。。。。
  • chenyidong 2010-11-10 09:55
    哈哈,强大哦!
  • Bati-gol 2010-11-10 10:01
    chenyidong: 哈哈,强大哦!
  • yuenjoy 2010-11-10 11:46
    嘿,想看下照片
  • TP3 2010-11-10 14:23
  • hflaq 2010-11-10 14:43
  • yinyanchao 2010-11-10 22:32
    不错哟,在录像中发现问题,楼主很善于观察呀。
  • Bati-gol 2010-11-11 09:46
    yinyanchao: 不错哟,在录像中发现问题,楼主很善于观察呀。
  • greatgu 2010-11-11 10:24
    有图像和视频就更生动了!!!
  • Bati-gol 2010-11-11 11:32
    greatgu: 有图像和视频就更生动了!!!
    恩,呵呵~
  • Bati-gol 2010-11-11 12:09
    greatgu: 有图像和视频就更生动了!!!
    有道理,以后拍上来看看,呵呵~
  • yaodn 2010-11-11 16:50
    强烈建议博主上图让大家学习下!
  • Bati-gol 2010-11-11 17:32
    yaodn: 强烈建议博主上图让大家学习下!
    呵呵,当时没拍,下次一定拍下来看看~
  • dxmood 2010-11-11 19:45
    很幸运,我也遇到了这样的问题,不过我的故障的确是电源问题,因为有火花爆炸声后,电源再也起不来了。
  • Bati-gol 2010-11-12 09:50
    dxmood: 很幸运,我也遇到了这样的问题,不过我的故障的确是电源问题,因为有火花爆炸声后,电源再也起不来了。
    呵呵,有爆炸的一般都比较危险,安全第一,哈哈~
  • jyliu 2010-11-12 15:51
    这冒火的情形倒帮助了判断问题,有意思,哈哈!

    有意思!!!
  • waterflow31 2010-11-12 17:13
    看完,同事都惊呼:太恐怖了。
  • Bati-gol 2010-11-12 22:59
    waterflow31: 看完,同事都惊呼:太恐怖了。
  • samxyh66 2010-11-13 12:50
    啊。。。我现在看到实验室里的3560都像看到宝贝一样不敢乱动
  • Bati-gol 2010-11-13 23:57
    samxyh66: 啊。。。我现在看到实验室里的3560都像看到宝贝一样不敢乱动
    多动动,哈哈~
  • fhefh 2010-11-14 16:36
    思科很强大 我都还没看过4506 ~~~~(>_<)~~~~
  • my2vip 2010-11-18 15:23
    哇,很强啊。!显卡也会烧?少见哦!
  • my2vip 2010-11-18 15:28
    Bati-gol: 多动动,哈哈~
    我几年前在客户那里驻厂,客户直接给我一个3550(那年刚好停产)在那玩,怕啥!只要不做更改OS或者和之相关的一些配置基本上其他的都是可以恢复的!
  • Bati-gol 2010-11-18 22:27
    my2vip: 哇,很强啊。!显卡也会烧?少见哦!
    线卡烧了还好电源没烧。。。
 36 12
涂鸦板