データセンターで火災、スプリンクラーが稼働、スプリンクラーの水で変電機がショートと言うアクシデントが米国の木曜日の午後11時に発生しました。これによってデータセンターのビル全体が停電、外部からの電力、内部の発電機も使えない最悪の状況が発生しました。この時点でインターネットへの回線は遮断、インターネットへのアクセスがなくなりました。
エアコンがとまり、サーバーの温度が上がり始め、サーバーのシャットダウンを開始しましたが400台のサーバーのシャットダウンが終わる前にUPSからの電気供給がなくなり、全てのサーバーは電源を失い停止しました。
火災が原因であったこともあり、データセンタースタッフは全員ビルの外に出され、サーバーへのアクセスさえもなくなりました。停電はその後も継続、復旧の見込みすら無い状態に陥りました。
外部からの電源、発電機からの給電も不可能な状態の中、データセンターへの電気供給を行うため、300km離れたポートランドから大型の発電機を2台トラックで持ち込み、ビルへの電気供給を行うための突貫工事が開始されました。この時点で12時間が過ぎています。そして工事が終わって発電機から給電を開始したのが火災発生してから24時間が過ぎていました。そしてそこから6時間過ぎた今、やっとサーバーが動き始めています。
現在400台中6台のサーバーに障害が確認されています。2日間の徹夜を行ったスタッフですが、この6台の復旧まで現在努力を行っています。
大変大きな問題になってしまい申し訳ありませんでした。この間状況は twitter.com/uchikura でお伝えすることができました。ブログルに書き込めるのが本当に嬉しいです。
- ブログルメンバーの方は下記のページからログインをお願いいたします。
ログイン
- まだブログルのメンバーでない方は下記のページから登録をお願いいたします。
新規ユーザー登録へ
投稿日 2009-07-04 21:20
ワオ!と言っているユーザー
投稿日 2009-07-05 06:40
ワオ!と言っているユーザー
投稿日 2009-07-04 21:21
ワオ!と言っているユーザー
投稿日 2009-07-05 06:43
ワオ!と言っているユーザー
投稿日 2009-07-04 21:36
ワオ!と言っているユーザー
投稿日 2009-07-05 06:44
ワオ!と言っているユーザー
投稿日 2009-07-04 21:36
ワオ!と言っているユーザー
投稿日 2009-07-05 06:45
ワオ!と言っているユーザー
投稿日 2009-07-04 22:22
ワオ!と言っているユーザー
投稿日 2009-07-06 16:41
ワオ!と言っているユーザー
投稿日 2009-07-04 22:38
ワオ!と言っているユーザー
投稿日 2009-07-06 16:41
ワオ!と言っているユーザー
投稿日 2009-07-04 22:53
ワオ!と言っているユーザー
投稿日 2009-07-06 16:43
ワオ!と言っているユーザー
投稿日 2009-07-04 23:29
ワオ!と言っているユーザー
投稿日 2009-07-06 16:44
ワオ!と言っているユーザー
投稿日 2009-07-05 00:28
ワオ!と言っているユーザー
投稿日 2009-07-06 16:50
ワオ!と言っているユーザー
投稿日 2009-07-05 08:34
ワオ!と言っているユーザー
投稿日 2009-07-06 16:56
ワオ!と言っているユーザー
投稿日 2009-07-05 20:49
ワオ!と言っているユーザー
投稿日 2009-07-06 17:02
ワオ!と言っているユーザー