-n32016-01-26DC/クラウド/通信事業者サービスの障害事例よせあつめmemoはじめにデータセンタ障害の話題がちらほら流れておりますが、その中で見かけた「データセンタでそんな障害あったら意味ねえじゃん」みたいなコメントにちょっと引っかかるところがありまして。確かに電源の二重化云々とかいろいろ災害やトラブルに対する対策はしてますよ。してますけど、でもデータセンタ・オーダーの障害とかも実際あるんですよね。落ちるときは落ちるんですよデータセンタだろうと。信頼性は高いけど100%じゃない。いうことで、じゃあ過去どんな事例があったのか、ざっと事例を挙げてみようと思いました。基本的には過去の私のツイートとかはてブとかネットをざーっと検索して出てくるものを取り上げています。「データセンタ使ってるからオールオッケー」みたいな話ではなくて、その上で・さらにこういうこともあるんだ、という話を見るのに参考にしてもらえれば良いかと思います。ここで取り上げている事例は、特定の会社やサービスをdisる意図で挙げているのではありません。DC持ってるところだと、何らかの大規模障害の経験があるところはそれなりにあるんだと思うんですけど、それが特定ユーザ向けとかある程度影響範囲が「握れる」場合、外に情報が出てこなかったりするんですよね(特にエンタープライズ系だとね)。なると表に出ている範囲って、複数(多数)のユーザに影響があって、公開せざるを得なかった事例...ということになるかと思います。いうところでちゃんと障害原因や事後対応について突っ込んだ情報を開示していることは、その企業/サービスの誠実さの表れだと思うのです。トラブルに対して責任ある対応をしているかどうか。きっかけはデータセンタ(ファシリティ)障害についてですが、ファシリティ障害以外の話も含めて、データセンタ・その上に乗っているであろうクラウドサービスやキャリア(通信事業者)サービスなどの障害についての事例を取り上げています。スライドだけ見てもわわからないと思うけど、災害訓練の話聞けるととても参考になると思う。(ソフトウェア障害に対するパッチ宛てのため方肺運転中にハードウェア障害が発生)auのメール障害、KDDIが原因を正式発表。手順書の誤りによる人的ミス、障害への対策不足が明らかに。(pdf)当社サービスの不具合に関するお詫び|住信SBIネット銀行ハードウェア障害(電源設備故障)2012富士通の旗艦、館林データセンターが電源障害でダウンし、金融機関やニフティクラウドに影響。Publickey2012年のクリスマスイブ、Amazonクラウドから降ってきたシステム障害。PublickeyヒューマンエラーAmazonクラウド、ストレージ障害は潜在バグからメモリリーク発生が原因。Publickeyハードウェア障害(DC電源設故障→UPSに切り替わるも電池切れ)Amazonクラウド先週のシステム障害、原因は電源トラブル。国内でもクラウド障害、復旧見通し立たず。Wikipediaおわりにということで、まあいろいろありますね...。二重障害の発生や、切替・片寄せにともなう高負荷状態の発生と連鎖(将棋倒し)とか、もうこれどうしろって言うんですか的な事例とかもある。publickeyの記事タイトルにもあるみたいに、こうしたことを踏まえてそれでも動くシステムを考えようと思うと、サービス/DC/リージョンをまたいで冗長化するようなシステムを考えないといけなかったりするってことですね。パブリッククラウド上でのシステムを作る場合はもちろんそこらへんまで考えるよね、という話になってきてると思いますが...。予期しないことが起こりうるという心構えは持っておきたいものです。そのほかこういう事例もあるで、というのがあったら教えて下しあ。22:32DC/クラウド/通信事業者サービスの障害事例よせあつめTweet広告を非表示にする関連記事2019-12-302018-2019年のサービス障害を振り返るときどき思い出したように書いている障害事例まとめです。かいてなかったですな...。お仕事的に過去...2014-01-02ネットワーク系ニュースソースまとめ2014年になってしまいました。理解する(3)月別アーカイブはてなブログをはじめよう!stereocatさんは、はてなブログを使っています。ブログを報告するスターをつけました引用をストックしましたストック一覧を見る閉じる引用するにはまずログインしてくださいログイン閉じる引用をストックできませんでした。再度お試しください閉じる限定公開記事のため引用できません。