注册 登录  
 加关注
查看详情
   显示下一条  |  关闭
温馨提示!由于新浪微博认证机制调整,您的新浪微博帐号绑定已过期,请重新绑定!立即重新绑定新浪微博》  |  关闭

胡益兵的博客

新的岗位,新的方向,新的使命,stem教育进行中。

 
 
 

日志

 
 

【博文搬家】一个令人啼笑皆非的网络故障  

2011-12-29 10:57:46|  分类: 技术文锦 |  标签: |举报 |字号 订阅

  下载LOFTER 我的照片书  |
发表时间:2008-11-6 23:19:00

  5日上午一位友人来电,询问有没有软件能控制网络内bt、迅雷、电骡等下载软件占用网络大量带宽的问题。虽然我们在单位不做限制,手边没有这类软件,但出于友情就帮忙找了个软件p2pover,并在单位的6号网段内作了实验,每想到这个软件够强大,它不但能限上传下载流量,还能限制使用下载软件和聊天软件,传统认为要实现这一功能,这类软件应该装在网关计算机上才能实现,而这个软件却不需要,只要装在这个网段内的任何计算机上就能实现。这一点出乎我们的意外,当时我们就想到它是不是利用了arp欺骗的方法实现的,当我们开启了arp防火墙时印证了我们的判断。
  回到自己的办公室,我忍不住在自己笔记本上也装了一个,我所在的是4号网段,一监控,有一个老师在用电驴,不是下载而是上传,不用说是在给外网用户作贡献了,好几百k流量就这样浪费了,二话不说设置个上传下载50k流量限制的策略给他应用上,立刻他的流量就下来了,我十分得意。
  到了中午的时候,同事打电话说4号出了问题,原来上午4号网的老师说不能上网,他查了半天,交换机都重启了都没有解决。我说告诉他我用了限流软件,可是我只是给一个老师限制了流量,其他老师只是监控没干什么。我赶忙把监控关闭,并把软件卸载了,再让他测试,其他老师网络通了。原来一旦监控了但是如果不设置策略就表示拒绝上网。看来问题解决了,我ping了一下网关,基本有5%左右的丢包率。这一情况以前没有遇到,我当时也没有太在意。

  到了下午3-4点4号网中的计算机突然出现ip地址丢失的情况。这就奇怪了,控制软件都删除了,怎么会断网?重新获得ip地址,获取过程很慢很慢。然后就出现了更奇怪的现象:4网的计算机下载速度很快,峰值可以达到6M,但上传狂慢平均4-8K。所以浏览网页没有什么感觉,但用rtx发文件就把人的命急出来。我们依然怀疑是arp欺骗,可就是扫描不出来是哪台计算作怪。没有办法只好到负责4网弱电间将的所有计算全部和网络断开,只接一台笔记本测试,结果故障依然。晕倒!看来不是4网中的其他计算机的问题,我开始怀疑交换机的光电收发器或光纤出了问题。时间不早了,只好下班,准备明天找个光电转换器测试一下。
  6日上午光电转换器没有借到。再来到4网的弱电间,准备看看那台主交换机的配置文件是不是有问题,一检查很多端口的流量控制都是开着的,当时就蒙了,难道那个软件能启动我硬件交换机的流量控制?这可是闻所未闻的事,把流量控制关闭再试,故障依旧。后来一发狠,干脆把主交换机的配置文件全删除了,自己配一个。虽然自己很少配交换机参数,但我看看里面的配置比较简单,就是配2个vlan,给光纤端口打开tag而已。我把交换机的配置文件tftp到自己的笔记本上,然后把交换机初始化到出厂状态,接着就开始配vlan等参数,等配置好了后我发现我的笔记本无法获取dhcp网络地址了,我当时就傻眼了,这就意味着4网的所有计算机彻底断网了。越搞问题越大,我反反复复把所有的配置参数看了n遍,交换机启动了n遍依然没有解决问题。我几乎要彻底失望了,给交换机售后服务打电话请求技术支援,不巧技术支持不在让我等。我在等的过程中再检查配置参数,突然发现主交换机的光纤端口参数显示时linkdown,光纤端口没有工作,是不是就应证了我昨天下午的怀疑:主交换机的光纤收发器出了问题?或者还有一种可能性。。。。。,我立即前往光纤的另外一端,学校的中心机房去检查骨干交换机,当我一看到骨干交换机上与4号网相连的光纤指示灯不亮了,我的第一反应就是:我的骨干交换机被入侵了,4号光纤口被禁用了。但是再一想不可能,骨干交换机的前端有防火墙,外部用户很难入侵,内部老师目前还没有那个水平,说是昨天装的那个软件造成入侵我更不相信。我上前动了动光纤的插口,没想到灭了的4号光纤指示灯又亮起来了,而是欢快的跳动着,阿!原来故障的根源是接触不良。过赶紧把两个接口拧紧,再回到4网测试,rtx上传速率达到了6M,爽!故障真的排出了。再看看表,已经快中午了。
  回顾这个故障过程真的是太偶然。那个5%的丢包其实已经说明4号网络出现了不畅,我当时没有在意,再加上之前我装p2pover,对我们故障排除方向产生了误导。后来上传4k下载6M其实是告诉我们光纤上传那一路数据不畅,正因为不畅dhcp申请发不出去,所以获取地址很慢。而当我初始化4网的主交换机时两路光纤全都中断了(这也太凑巧了)。至于光纤为什么会松动,我认为是中心交换机机柜里设备较多,长期使用产生振动,将光纤配线端口给震松了,所以出现了接触不良甚至是断线的的状况。就这么小小一根线引发的故障花了我1天多的时间才排查出来。真是又开心又郁闷。

  评论这张
 
阅读(103)| 评论(0)
推荐 转载

历史上的今天

在LOFTER的更多文章

评论

<#--最新日志,群博日志--> <#--推荐日志--> <#--引用记录--> <#--博主推荐--> <#--随机阅读--> <#--首页推荐--> <#--历史上的今天--> <#--被推荐日志--> <#--上一篇,下一篇--> <#-- 热度 --> <#-- 网易新闻广告 --> <#--右边模块结构--> <#--评论模块结构--> <#--引用模块结构--> <#--博主发起的投票-->
 
 
 
 
 
 
 
 
 
 
 
 
 
 

页脚

网易公司版权所有 ©1997-2018