想定外の障害

本日、障害対応したんだけれども、原因が想定外のところにあったので書いとく。

朝出社すると、一本の電話が入った。
何やらネットワークが使えないとのこと。
単に島Hubが故障してるんじゃねーの？とか思いながら現場へ急いだ。

徒歩で。（隣の建物）

到着して早速フロアHubを計測したが、ちゃんとネットワークセグメントを検出している。
ネットワークがきてないなら大抵「none」と表示されるはず。

次に端末を借りてipconfig /allしてみる。
普通にDHCPサーバーからIPアドレスが取得できている。
それなのにゲートウェイにPingが届かない・・・。
/renewしても変わらない。

これは一体何なんだ･･･と思ったけど、
サーバーチームに確認すると、このフロアにDHCPサーバーが置いてあるためIPだけは取得できているという。

もう一度フロアハブを計測してみると、ゲートウェイのL3スイッチを検出していない。
これは元線が逝っちゃってるか？と思い計測。

･･･きてねええええ。

今までの経験から元線からネットワークセグメントが検出されない時は大抵面倒なことになる('A`)
元線の先にあるネットワーク盤を空けるとメディアコンバータが。

メディアコンバータとフロアHub間のLANケーブルが断線したのかと思って取り替えてみたけどダメ。
メディアコンバータの電源OFF/ONでも無理だった。

この時点で以下の原因が考えられる。
・この建物のメディアコンバータの故障
・対向のメディアコンバータの故障
・光ケーブルの断線

どれも業者呼ばないとダメだけど、光ケーブルの断線だったら致命的。
残業どころか終電乙になるかもしれないという('A`)

とりあえず今は対向のメディアコンバータを確認することが先だ。

メディアコンバータのあるラックを開けてみる。
・・・あれ？電源ついてねーぞｗｗｗ

どうやらラックの電源がきていない模様。
電源ケーブルはちゃんとコンセントにささってるのに・・・。

とりあえず施設管理部に電話。

俺「電源が入りません。」
施設「間違えてブレーカー落としちゃいましたサーセンｗｗｗ」
俺「･･･(^ω^#)ﾋﾞｷﾋﾞｷ」

犯人は施設管理部でした。

めでたしめでたし＾ｐ＾