December 19 障害と復旧 Trouble and Recovery

December 19, 2008 (Friday)

ソネット内輪的記事です。・・・・・・ 

やっと復旧しましたね♪

日本時間19日12時半ごろからトラブルが発生して、ブログがまったく見られなくなっただけでなく、他でも、ソネくじファン広場など、つながらなくなりました。

個人的に気付いたのは日本時間13時過ぎで、横断ビンゴの「英語クイズでスキルアップなんたら・・・・・・」の答えの「英会話」のページが開けなくて、さらに自分のブログが開けなかった。このビンゴは問題変更という対応がとられて「ぴっかりのなぞなぞとけるかな？」になったのをさっき22時頃（カリフォルニア時間19日5時頃）起きて、知りました。

「So-net 障害・メンテナンス情報」 <http://www.so-net.ne.jp/emerge/tr/blog.html> の「障害・メンテナンス 現在の状況はこちら」のページだと、「現在調査中」から「データセンターのネットワーク障害」から「データセンターの設備障害」へと1時間くらいのあいだに変わったみたい。

さっき、永井美智子　「さくらインターネットのデータセンターに障害、GREEなどのサービスが停止中」　<http://japan.cnet.com/news/media/story/0,2000056023,20385634,00.htm>　CNET Japan ニュース 2008.12.19 17:02　という記事を読みました。

　　それによると、東京都新宿区にあるさくらインターネットの西新宿データセンターの電源設備から煙が出て障害が起き、データセンター収容ラック内への電源供給が一部で停止た影響を受け、ソーシャルネットワーキングサービス「GREE」やブログサービス「Seesaaブログ」「So-net blog」など、同社を利用したサービスが利用できない状態になっている、ということでした。 「復旧に向けて対応をしている状況で、19日中にすべての供給が回復する見通しとしている。」とのことで、see-saa ブログと、そこに導かれてさくらインターネットのお知らせページを見てみた。

Seesaa: 「メンテナンス中」
シーサー株式会社　「サーバメンテナンスのお知らせ」 <http://trouble.seesaa.net/>

Seesaaサービスをご利用いただき、ありがとうございます。現在弊社が利用しておりますデータセンターにてネットワーク障害が発生した影響をうけ、Seesaaブログ等弊社サービスがご利用頂けない状態となっております。

SAKURA Internet // 2008年12月19日 障害発生のお知らせ「西新宿データセンター」
http://www.sakura.ad.jp/news/archives/20081219-001.news 〔……〕

さくらインターネット: 「障害発生のお知らせ「西新宿データセンター」」

本日、弊社西新宿データセンター（所在地：東京都新宿区西新宿）におきまして、電源設備からの発煙によりデータセンター収容ラック内への一部電源供給が停止しております。

詳しい影響範囲と原因は現在調査中です。

　　　　　　　　　　　　　　　　　＜記＞

発生日時 : 2008年12月19日 12時35分頃
影響範囲 : 6F Aゾーンの配電盤3台、6F Bゾーンの配電盤2台の片系統の電源
　　　　　 供給停止（17時40分更新）

　　　　　 6F Aゾーンの配電盤3台、6F Bゾーンの配電盤2台の片系統もしくは
　　　　　 両系統の電源供給停止（14時05分更新）

障害内容 : 電源設備からの発煙による一部電源供給停止
　　　　　 現在復旧に向けて順次対応を行っており、本日中にはすべての供給が
　　　　　 回復する見通しです。（16時05分更新）

補足事項 : この障害は19時30分に復旧しております。詳細はこちらをご参照ください。
　　　　　 http://www.sakura.ad.jp/news/archives/20081219-

002.news
-------------------------

　　え、19時半に復旧しているの? で、参照した。――

　本日（12月19日）発生いたしました、弊社西新宿データセンター（所在地：
東京都新宿区西新宿）における電源設備からの発煙および電源供給障害につきま
して、お取引先様、お取引先様のサービスをご利用の皆様ならびに近隣の皆様に
おかれましては、改めて心より深くお詫び申し上げます。

　障害発生直後から、一部電源供給が停止しておりましたが、本日19時30分にて、
全ての電源供給が復旧し、現在は正常に供給されております。

　詳細な原因と今後の再発防止につきましては、あらためてご報告させていただく
所存です。ご迷惑をおかけいたしましたことを重ねてお詫び申し上げます。

■21時41分追記
　当初、一部のラックについて当初両系統の電源供給停止と記載しておりましたが、
両系統の電源供給停止ではなく、正しくは片系統の電源供給停止となります。

　12時30分：電源設備の発煙により火災警報鳴動　
　　　　 　 同時刻　当社スタッフ現場確認
　12時36分：119番通報
　12時42分：消防隊到着
　12時45分：お客様及び当社社員避難完了
　13時00分：対策本部を設置
　14時00分：消防隊撤退 ビル内立入制限解除
　14時05分：復旧作業の開始
　19時30分：復旧作業完了
　20時02分：最終点検後、全復旧の旨お知らせを掲載

　　え、全復旧でなおってるの? 　とソネットのお知らせページを見ても「障害・メンテナンス情報」は「現在、下記の障害が発生しております。」で「対応中」で「障害内容」は以下の表示のままですし（その後11時半すぎてもそう）・・・・・・

全てのページが閲覧できず、ログインもできない

内容：全てのページが閲覧できず、ログインもできない

対象サービス：So-net blogサービスすべて

影響範囲：So-net blogの全ブログ

原因：データセンターの設備障害

　・・・・・・ブログを試したけれど、つながらず・・・・・・でもいつのまにか23時前に自分のブログの閲覧と書き込みは可能になったみたいです。 まだ全復旧していないから表示が変わらないし、お知らせも変わらないのかしら。無事復旧を願います。

　　それにしても、So-net ではなくてGREE のほうが見出しにあがるのはそちらのほうが大きいのですか（無知）。それから、「障害」は「トラブル」としないのはなんか理由があるのかなあ。消防法とか警察関係とか?　

   23：50追記　　CNET Japan ニュース の永井美智子（編集部）さんの記事(17:02)内の「ソーシャルネットワーキングサービス「GREE」やブログサービス「Seesaaブログ」「So-net blog」など、同社を利用したサービスが利用できない状態になっている」のリンクをクリックして確認したところ、GREE はまだ復旧していないみたい。あと、あらためて検索したら、「さくらインターネットのデータセンターで発煙　GREEとSo-net blogが停止」という見出しで ITmedia News は報じていました <http://www.itmedia.co.jp/news/articles/0812/19/news113.html> 2008.12.19 19:21 更新――前文というかリードは「さくらインターネットのデータセンターで発煙があり、電源供給が停止する障害が発生している。この影響で、「GREE」や「So-net blog」が利用できない状態になっている。」　その下の本文にはsee-saa が出てきますけど、リードのセンテンスには三つ並べればいいのに。

　　それにしても（またそれにしても）、問題ですね。物理的炎上とはいえ。というか物理的炎上が起こるのは問題外と思われ。データセンターというのはサーバーのあるところですよね（cf. iDC）。サイバーテロならぬサーバーテロとかもこわい。

   カリフォルニア時間9時27分（日本時間02:27)追記　　その後わかったのですけれど、22：40に解決したようです。So-net のトップページにはなんの記事も見当たりませんが（なんででしょ）、ブログのトップの管理ページ <http://blog.so-net.ne.jp/MyPage/blog/home/> に「【サービス再開】So-net blogの全ページが表示できず、 ログインできないの記事も載ってます。<http://blog-wn.blog.so-net.ne.jp/2008-12-19>キャッシュの問題とかの説明もあります。GREE も何もなかったように再開しているみたい。

タグ：see-saa so-net GREE 障害 トラブル 「何もなかったように」