■過去記事
【データ消失】「ファーストサーバ」大規模障害、データ復旧は不可能。パックアップは契約者の義務なので責任無し。
大規模障害の概要と原因について(中間報告)
http://support.fsv.jp/info/nw20120625_01.html
6月20日に発生した大障害について、最新の状況を下記の通りご報告いたします。
なお、FAQを6月25日 9時ごろ公開予定です。あわせてご覧ください。
■ 障害の概要
6月20日(水)17時ごろ、脆弱性対策を特定のサーバー群に対して実施しました。
<中略>
■ 障害の原因
原因1:脆弱性対策のための更新プログラムの不具合
脆弱性対策のためのメンテナンスが必要となる都度、メンテナンスのための更新プログラムを作成しており、今回も更新プログラムを作成しています。
そのプログラムの記述において、ファイル削除コマンドを停止させるための記述漏れと、メンテナンスの対象となるサーバー群を指定するための記述漏れが発生していました。
原因2:メンテナンス時の検証手順
メンテナンスに際しては、検証環境でまず動作確認を行うという手順が定められていましたが、プログラム実行後の動作確認を行う対象は、あくまでも当該メンテナンス対象サーバー群を確認すれば足りるとされていたため、検証環境下で対象サーバー以外に影響が及んだことの確認がないまま、動作確認上は問題なしと判定され本番環境での実施が行われました。
原因3:メンテナンス仕様
システムを含むデータのバックアップは毎朝6時に取得しております。
しかしながら、脆弱性対策のためのメンテナンスはバックアップをしてあるシステムについても実施しておかないと、メンテナンス実施後にハードウェア障害が発生してバックアップに切り替えた途端に脆弱性対策が講じられていないシステムに戻ってしまうことが過去に発生し、脆弱性対策がなされていないシステムが動き続けていたという反省に立ち、脆弱性対策のメンテナンスに関しては対象サーバー群とそのサーバー群のバックアップ領域に対して同時に更新プログラムを適用するという構造に修正して実施しました。
そのため、今回のメンテナンス実施において、対象サーバー群のデータ消失と同時にバックアップ領域のデータも消失したという事象に至っています。
YARUO 良くも悪くも行動に素直です 当BlogではPS3&PSP担当です エロいゲームもやります |
YARANAIO バイオレンスなゲームが好きな 自称常識人です 当BlogではXbox360担当です |
KUTARAGIさん プレイステーションの父です 最近全く出番がありません |
まこ8さん ジャレコ新作『WiZmans World』に 登場する敵モンスターです |
グスタフ 必殺技のイグナイトファングです |
INAFUNEさん どんな判断だ、金をドブに捨てる気か!? |
コメントする