在客户现场的3天时间里都发生了什么?
前一段时间,我有一个客户是做外呼营销的,这个客户有七八十个座席要利用呼叫中心系统向外一直打电话去联系他们的客户。
所以让我们去现场安装,把数字网关、IP话机、服务器全部运到了客户现场,我们就开干了,非常顺利的完成,他们开始正常的使用,他们老板也非常满意。
然后我们就收款走人,客户老板也非常痛快(这个老板特别好,喜欢打感情牌,性格也豪爽,以前是当过兵的,他们是做字画生意的,全是真品不是骗人的那种,因为我见过有个名人去他那现场做画,好像是航天上带的第一幅画就是那个人画的。有收藏的朋友可以联系他,先找我,我再把他的联系方式告诉你,在这上不太方便,呵呵)。
为什么如此痛快,因为在他们装修,我们就去过多次了,给他们一些中肯的建议。
但是2-3天后,突然问题来了,所有的IP话机注册失败。我们就觉得很奇怪,怎么会所有的IP话机注册失败了,但数字网关就一直保持注册成功。
我们的工程师就开始远程找原因,找了半天没找出原因,我们就开始怀疑是不是我们的IP软交换平台出问题了,因为我们的IP软交换平台是完全自主研发的,是基于windows操作系统做的,没采用国外开源的Asterisk、freeswitch等平台。不是吹牛,真是自主研发,但搞的很累,以后和大家分享。
然后就开始查我们自己底层的日志,发现很正常啊,没发现异常,这下我们可着急了,怎么办???
直接去用户现场观察。迅速带人开车去现场,还好客户离我们不远,开车也就30分钟。
到达现场后,就开始看服务器,看IP话机,IP话机显示状态都不一样,因为是2个型号的IP话机,第一种功能简单的,另一部分是型号高级的,奇怪的是那个简单功能的IP话机还可以正常打电话,但就是反应速度慢了,高级功能的就完全瘫痪了。
这个。。。不太好解释了,功能简单的可能,功能高级的就瘫痪,没遇到过啊,真是难倒我们了,这就是丈二和尚摸不着头脑的状态,无从下手啊。
急啊,用户就在旁边看着你,等你解释。。做工程的人都知道,这个时候是最尴尬的时候,你不知道怎么和用户解释。
我们就开始猜,问用户网络是不是有问题。那老板非常配合,直接就把给他们做网络的公司的人找过来,开始排查,
结果网络公司的人一查:
问:能上网不?
答:能上。
问:无线能上网不?
答:能。
结果可想而知了,和人家没关系。哈哈,给我们整的,没着没着的。
我们疯了,人家走了,没人家什么事,当然走了。
我们还是怀疑网络的原因,就把路由器、网络交换机全部重启,OK,又注册成功了,又可以继续打电话了。然后我们就让客户先用着。但客户老板着急啊,因为没有解决彻底啊,他就开始分析了,
客户老板:你看,人家网没问题,上网啥的都能上,但你这个打不了电话。
答:这个这个。。。。我们再分析分析。肯定能找出原因,给点时间。
又开始慢无目的地分析,我们底层工程师也开始三方通话进行分析,微信有个小功能和大家分享下,建个群,然后可以和群里的人员进行多方通话。分析了半天,也没分析出来个毛了。就是2个结论;
1.网络原因
2.IP话机有问题,因为功能简单的还可以打电话,功能高级的就完蛋。
我就开始打电话,问卖我IP话机的小雷(人非常好,有IP话机需求的可以找他,价格也合适),把现象和他说一遍,这家伙有经验啊,因为卖的IP话机多啊,他想了想说,不太像IP话机的问题,有可能是【网络风暴】(不明白的人可以去百度,懂的人继续看),他遇到过一次。
他就推荐我一下载个网络抓包工具,看有没有哪台电脑中病毒了。
我急啊,哪有心思去整那东西,就想让人家跑一趟帮分析分析,其实这种要求是不合理的,这个现象说明,在你着急的时候,就会有不合理的想法产生,总想求助给你一点希望的人。人家以最合理的价格卖给你产品,不包括服务的,更何况人家在外地,呵呵。
但没法,就弄了个那个工具。然后开始分析,但没发现有狂发数据包的电脑,都很正常。
然后就问客户他们的电脑以前有没有种过病毒的电脑,然后他们说以前有过一台,我们像抓住了救命稻草一样。心想:总算有一个理由了。哈哈,这种完全是侥幸心理在作怪。
聊了一会,心又凉了,客户的电脑早就重装过了,现在没问题。。。。
在分析的过程中,又瘫痪了。晕。。。不期望什么就发生什么。没办法又是老办法,重启交换机,路由器。又OK了。
反反复复。搞的头都大了。
这时突然灵光一现。是不是某个手机中病毒了。因为手机是用的无线连网。把无线设备全部断电,手机全部断网。终于清静了。
这时就和客户分析说可能是某个手机中病毒了,先把无线断掉,再观察观察。
终于安静了。到晚上客户下班的时候再也没出现注册不了的情况。这时候我发现我是个天才,找到了原因。
下班后,又和客户老板解释了原因,客户老板来了句:“那手机上不了网也不是事啊。”
我听了这句话,简直就像发现一句至理名言、七言绝句一样,这个老板有才啊,人家说的非常非常有道理。
这不是解决问题的办法。
但今天没办法了,只能撤退。明天再说。
第二天,高高兴兴去上班,神清气爽,就连北京的雾霾都也阻挡了高兴的心情。
板凳还没坐招呼,电话响了,有句话叫“电话一响,黄金万两”,便这个电话不是,绝对不是。我想你们都猜到了,没错,是客户,但不是新客户,是昨天那个客户。
“喂,喂,电话又瘫痪了”,我也瘫痪了。明明知道原因,为啥又出现呢。
我:“你们是不是又把无线开启了”
“没有啊,啥都没动啊”
完了,又得出征。告诉他们重启一下,先用着,一会过去,处理好手头上的事,出发。
今天天气很好,但还不如昨天的雾霾呢。
一天又过去了。中午饭都是客户给叫的盒饭,还特意给我加了一个大肉丸子。
晚上下班时候也没分析出啥原因。人家老板着急了,就一直在旁边看着,一会过来就问怎么样了。都没法和人家解释了。
今天限行,没开车,下班后聊到了7点多,坐在客户老板车里,又聊了一会。
我想问下大家,遇到这样的问题,是否我们还有必要继续为客户分析原因,因为这种问题,在技术角度上已经不是我们的原因了,还是给客户一个承诺。
我:“老板,这样吧,如果这周内我给解决不了,我全额退款,设备我都带走,然后你找另外一家,不能因为这个事耽误您的业务”
客户老板:“你说哪去了,咱们得想法办法找到原因啊,要找别家我早找了。”
我:“我知道,您是个好的老板,也是好的朋友,这是我的承诺。”
客户老板:“你看看把你们底层工程师也叫来再找找原因。”
我:“行”
回家。在出租车里就开始和我们底层工程师打电话分析,到家后,还在分析,已经是11点多了,聊了半天分析可能是路由器和交换机哪个协议冲突,只能明天试,带我公司自己路由器去,我们的工程师还是有点水平的。
第二天一早,我给IP话机厂家打电话,说明了情况,有个小姑娘说的电话,又说可能是网络风暴,这时我发现我犯了一个很大的错误(最后说错误,高手可能已经发现我的错误了呵呵),,,这个小姑娘服务态度还不错,就是响应速度慢点。给方位打个广告,我们这次用的是方位的IP话机(哈哈),给我发了他们的资料。
我们又过去,这时候一上午也没发生瘫痪,全部正常。晕了,啥时候出现呢,别着急。
当你思路清晰时,想什么来什么,发生瘫痪了,打不电话了,这时我就问客户负责的小伙,他叫庆吉,人非常不错。
“庆吉,你动了什么了吗”
“啥也没动啊,就是开了几台电脑”
有戏了
“开了哪几台电脑”,他就告诉我开了电脑的位置,我就回到我的座位上。开始用网络分析软件抓包,哈哈,果然发现有2台电脑在不断的狂发包。
小样的,还往哪跑,
查找到看是哪2台的MAC地址,找到了电脑,发现那2台机器,果然拨掉网线,重启网络交换机,注册OK,再插上那2台电脑其中一台,又瘫痪,终于找到问题的发生位置。先撤掉这2台电脑的网线,然后再重启,注册OK,然后查这2台电脑是否中了病毒。
结果发现没有病毒,这下心又凉了一半。为啥凉一半,因为最起码找出问题的电脑了。证明我们不是我们的系统问题了。
但怎么找到这个原因呢,又麻烦了一下网络公司的人;
“我们只知道能让客户上网就行了,其它我们也不懂,你直接给华三打电话吧”
他们用的华三的交换机,也算是名牌了,
网络风暴:网上解释一般有2种原因造成的,
一、是交换机上的插口可能被一根网线的2端同时插上了,造成了回路,不断的发包,这种情况根据不可能,因为早查过了。
二、局域风内某台电脑中病毒了。但也查了啊,也不是啊。
又陷入了困境,
“夜空中最亮的星,能否听见,那仰望的人心里的孤独和叹息”
我们就又开始瞎分析,都了解情况了。
就当以为没结果时,我们的其中的底层工程师,无意间他把风线插到他的电脑上,也造成了瘫痪。
重启,再插,还瘫痪,为什么说这个客户非常好的呢,他会全力配合我们找原因。再次感谢,就是因为有你这样的客户才能让我们有了不断坚持的理由。
终于知道原因了,在这里给分分享一下,不瞎扯了,
是因为网络交换机和某些电脑的协议,需要验证,如果那个验证开启,他俩之间就要验证。如果验证不通过,就会狂发包。造成假象的网络风暴。
在电脑上网卡设置上把这个协议验证的勾,去掉就行了,如果电脑没有这项,具体详细的就不说了,可去问度娘。搜索关键词:802身份验证。有详细的解释。就到这吧,希望会对大家有帮助。
总结:
1、遇到问题一定要冷静,听有经验的人话,并执行。我上面犯的错误,就是当问题出现时没利用网络分析软件进行检测。所以浪费了时间成本。可能是我脑袋笨。
2、这次维护大概占用了我们3天的时间。希望对大家有用。
3、方位就不用给我广告费了,哈哈
4、最重要的:你怎么对待客户,客户就会怎么对待你。
---------------------------------------------
希望我的文章对大家有所帮助,哪怕是一小部分人。
我是郭伟东,我的微信号:43416766,我们可以互相交流、分享。
� Q�2V�1