情報システムに関することならどんなことでも、システムアナリストが適切にアドバイスをいたします。
ホーム > システムアナリストのひとこと > No.061
ホーム
業務内容
料金について
お問い合わせ
システムアナリストの
ひとこと
会社概要
リンク集
No.061 電源断!!
概要
・先日、コンピュータ室のブレーカが落ちて、全ての機器の電源が切れた。
・CVCFなどの無停電電源であっても、電源容量オーバーの場合は無意味。
・コンピュータ室内の機器が徐々に増加している場合は、電源容量に注意すること。
・突然の電源断の後は、原因不明の障害が併発することが多いので注意すること。
(2005/08/26)

あれ?またサーバダウンなのかな...
 ある日のお昼ちょっと前の出来事でした。「午前中の仕事も、もうすぐ終わりだな。昼飯だ。ファイルを保存してログオフするか。」...あれ?なかなかファイルの保存処理が終わらないぞ。またサーバがダウンしたのかな?まったく、しょーがないなと思いながら、コンピュータ室へ...これが不幸の始まりでした。

 突然、私の背後で鳴り響く多数の電話。複数の利用部門からかかってきているようです。こりゃ重要なサーバか基幹ルータがダウンしたんだろうなと考えながら、コンピュータ室へ入ると...様々な機器から警報音が鳴り響いています。

 ホストコンピュータもダウン!基幹ルータもダウン!!サーバも全て付属のUPSからの電源供給に切り替わっている!!!全ての機器について、電源が供給されていないことは明らかです。でも、確かコンピュータ室の電源はCVCFだから、東京電力から電気が来なくなっても、しばらくの間は大丈夫なはずなのに。どうなってるの?

電源断!!
 すぐにビルの設備管理の方々が駆けつけてくれました。調査してもらったところ、理由は簡単。容量オーバーのため、コンピュータ室の電源ブレーカが落ちていました。一般的な家庭で電気を使いすぎて、ブレーカが落ちるのと同じ事です。CVCF電源装置はビルの地下にあり、ブレーカを経由してコンピュータ室に電源を供給している形なのです。

 ブレーカを戻したら、すぐに復旧しました。突然、電源が切れた割には、ホストコンピュータもルータもサーバも動作しています。ハードディスクなどの機器が壊れたりしていないか不安でしたが、なんとか大丈夫だったようです。ああ、良かった。ラッキー。

 東京電力の「でんこちゃん」だけでなく、利用部門からも怒られないようにするためには、再発防止のために調査しなければなりません。でも、ここ数ヶ月間は、新しい機器をコンピュータ室に導入してません。何で突然ブレーカが落ちたのか、理由がよくわかりません。とりあえず、電源を切っても問題ない予備用のサーバなどを落として、少しでも電源に対する負荷を下げることにしました。

 落ちたのは、50アンペアのブレーカでした。これに対して電流量を計測してみると、40アンペアぐらい使っているようです。8割なら問題ないんじゃないの?と、設備管理の方々に聞いてみたところ、電流の変動や接続する機器の状態により2割ぐらいは変動するとのことでした。

 もう少し詳しく調べてみると、ホストコンピュータ用のプリンタの電流変動が激しく、10アンペアぐらい瞬間的に変動している事も判りました。仕方ないので、このプリンタを別回路に振り替える工事を実施してもらいました。ホスト用のプリンタなら再印刷とかの制御も可能なので、とりあえずの回避策になりました。

 さらに、ブレーカの容量をもう少し大きくしても、幹線の電源ケーブルやCVCF電源装置に問題ないとの事だったので、後日、交換してもらうことにしました。

 みなさんも、コンピュータ室に徐々に機器が増えてきているという場合は、電源容量に注意しましょう。

原因不明のルータ障害
 ほっとしたのも束の間、利用部門から電話がかかってきました。特定のネットワークから特定のサーバに接続できないとのことです。うげ、まだ障害対応しなきゃならんのか...。

 利用部門のパソコンを操作してみたところ、確かに特定のネットワークにだけ接続できていません。情報システム部門から利用部門、情報システム部門から特定のネットワークには接続できます。このような状態になった時はルータに問題があります。

 ルータにTELNETでログインして、ルーティングテーブルを確認したところ、ルータ間で正確に情報を交換できていないことが判りました。判ったところで、基幹ルータを再起動することはできません。もう、利用部門は完全に復旧したと思い、使い始めているからです。

 ルータの設定については、全てメーカにお願いしているので、メーカのサポート部隊に電話しました。障害の切り分けに時間がかかりましたが、ルータ間の通信が上手くいっていないポートだけをオフ、オンしたら復旧しました。

 サポートの方の話を聞いたところ、やはり電源が突然切れた場合、ルータが不思議な状態になることがあるという話でした。ポートをオフ、オンして復旧したのも、理由がよく判らないとのことでした。

 機械なのに、人間みたいですね。ま、直って良かったです。

 あーあ、もう夜の7時か。今日の午後は障害復旧で終わっちゃったな。...あ、昼飯、食い忘れた!!

ホーム > システムアナリストのひとこと > No.061
Copyright (c) sysana.com Co.,Ltd. All Rights Reserved.