“狂人,快來(lái)救救急!客戶的網(wǎng)絡(luò)老是斷,今天是車(chē)間突然斷網(wǎng),生產(chǎn)線都停了!”
一大早接到電信協(xié)同排查的電話,語(yǔ)氣里滿是焦灼。要知道車(chē)間網(wǎng)絡(luò)一旦中斷,掃碼入庫(kù)、設(shè)備聯(lián)網(wǎng)監(jiān)控全得停擺,每耽誤一分鐘都是真金白銀的損失。
掛了電話,我們立刻帶齊工具趕去現(xiàn)場(chǎng),路上還在復(fù)盤(pán)客戶之前提到的一個(gè)細(xì)節(jié):幾個(gè)月來(lái)辦公室經(jīng)常會(huì)斷網(wǎng),但刷新幾次又能恢復(fù),本以為是小毛病沒(méi)當(dāng)回事,沒(méi)想到今天車(chē)間直接“罷工”,而且怎么折騰都連不上。
第一重隱患:藏在IP里的“小錯(cuò)誤”
到了現(xiàn)場(chǎng)先從“老問(wèn)題”查起——既然偶爾斷網(wǎng)且刷新能恢復(fù),大概率是網(wǎng)絡(luò)配置問(wèn)題或者設(shè)備性能問(wèn)題。
交換機(jī)是傻瓜交換機(jī),那就沒(méi)什么好看的了,但是網(wǎng)絡(luò)接口的燈,怎么感覺(jué)那么怪呢?
不管了,先看路由器吧,剛登錄WEB界面,一眼就看到了問(wèn)題:子網(wǎng)掩碼255.255.255.0。
不可能,絕對(duì)不可能,電信絕不會(huì)這么大方,直接給一整段公網(wǎng)IP?那不是天方夜譚么?
抬頭看了一眼光貓,果然應(yīng)該是255.255.255.252,迅速修改后,這個(gè)垃圾路由還不立即生效,還非得重啟一下。
重啟后,上網(wǎng)正常,暫時(shí)也沒(méi)有出現(xiàn)需要刷新的故障現(xiàn)象,但是,由于時(shí)間還短,未必就不會(huì)再出現(xiàn)同樣的故障現(xiàn)象了,也許還有其他問(wèn)題,還沒(méi)排查到。
但這個(gè)時(shí)候,更急的顯然是車(chē)間的網(wǎng)絡(luò),那就繼續(xù)排查,看看究竟是什么問(wèn)題?
![]()
第二重奇葩:亮著燈的“壞零件”
到車(chē)間后,筆記本電腦接入交換機(jī),順利獲取到IP,ping網(wǎng)關(guān)能通,ping外網(wǎng)卻完全超時(shí)。
tracert -d 某網(wǎng)址。能解析出IP,也能走到外網(wǎng)去,看似正常,但是打開(kāi)瀏覽器,無(wú)法上網(wǎng)。
怪,真怪,全是傻瓜交換機(jī),既然有了IP,ping網(wǎng)關(guān)也能通,tracert 都出去了,憑什么不能上網(wǎng)?
跳過(guò)交換機(jī),筆記本電腦直插光纖收發(fā)器,故障還是一樣,但又不太一樣:IP正常獲取到,ping網(wǎng)關(guān)也能通,但是tracert出不去了。
觀察光纖收發(fā)器,這個(gè)燈的閃爍頻率,怎么看就怎么怪,那重啟光纖收發(fā)器吧。
tracert出去了幾跳,后面立即不行了,但是ping網(wǎng)關(guān)的窗口沒(méi)關(guān),除了重啟的時(shí)候斷了幾個(gè)包,后面沒(méi)掉過(guò),一直是通的狀態(tài)。
真是怪了,算了,不折騰了,換光纖收發(fā)器吧。
筆記本電腦瞬間恢復(fù)了網(wǎng)絡(luò),把交換機(jī)連上,車(chē)間的生產(chǎn)設(shè)備也陸續(xù)恢復(fù)了聯(lián)網(wǎng)!原來(lái)問(wèn)題真的出在光纖收發(fā)器上,沒(méi)想到啊,這玩意兒居然“裝死”都這么逼真。
復(fù)盤(pán):兩個(gè)故障給我們的警示
復(fù)盤(pán)這次的排查經(jīng)歷,兩個(gè)故障點(diǎn)其實(shí)都藏著小教訓(xùn):
固定IP配置別大意:很多人覺(jué)得填對(duì)IP就行,忽略了子網(wǎng)掩碼、網(wǎng)關(guān)這些“配套設(shè)置,一定要和網(wǎng)絡(luò)服務(wù)商確認(rèn)準(zhǔn)確的配置參數(shù),避免因小錯(cuò)誤導(dǎo)致間歇性斷網(wǎng)。
別被硬件指示燈“騙了”:指示燈亮不代表設(shè)備完全正常,像這次的光纖收發(fā)器,可能是內(nèi)部光電轉(zhuǎn)換模塊有故障,更換后,機(jī)房交換機(jī)的燈,看著也正常了。
最后想問(wèn)大家:你們?cè)诠ぷ髦杏龅竭^(guò)哪些“燈亮卻故障”的奇葩設(shè)備問(wèn)題?歡迎在評(píng)論區(qū)分享你的排查經(jīng)歷~ 覺(jué)得有用的話,別忘了點(diǎn)贊收藏,轉(zhuǎn)發(fā)給身邊搞IT運(yùn)維的朋友!
關(guān)注《IT狂人日志》,下次分享更多網(wǎng)絡(luò)排查的實(shí)用技巧!
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.