一部メールサーバにて重大な障害発生
以下の障害が発生いたしましたのでご報告させていただきます。
ご利用のお客様には大変ご迷惑をおかけいたしましたことを深くお詫び申し上げます。
| 発生日時 | 2010年2月5日 09:45頃 |
| 復旧日時 | 2010年2月5日 14:55頃 |
| 現象 | 一部メールサーバに接続できない |
| 現状 | 復旧作業により現在は正常稼働中。 |
復旧を最優先とさせるため、ハードウェア交換の上、バックアップデータよりサーバの再構築を実施しました。
障害発生原因は、当該サーバのハードディスクを後日調査とします。
障害発生時間帯に受信できなかったメールが確認されています。
お客様には大変ご迷惑をお掛けいたしまして申し訳ございませんでした。
2010.02.05 10:10
詳細は調査中ですが、通常のリカバリー作業で復旧しない模様です。
お客様には大変ご迷惑をお掛けいたしますが、今暫くお待ち頂きますようお願い申し上げます。
2010.02.05 10:30
サーバの一部ファイルが破損しているため、サーバ自体の起動が出来なくなっています。
2010.02.05 10:37
一部ファイル破損が原因で起動できなくなっていますが、破損原因がハードウェアである可能性も否めないので新品ハードウェアの準備を開始しました。この作業には20分程度掛かる見込みです。
2010.02.05 10:47
これよりメールサーバの復旧作業に入りますが、復旧までの見込みは180分以上となっております。お客様には大変ご迷惑をお掛けいたしております。
内訳
OSの再インストール作業 100分程度
バックアップデータのリカバリー 100分以上
2010.02.05 10:47
データ回復の見込みについて
障害発生前のバックアップデータは 2010.02.05 05:15 のフルバックアップが保存されていますので、これ以前のデータは完全復旧します。
障害発生時 2010.02.05 09:45 以降の受信メールは、スプールサーバ内に溜まっています。
現在も受信データはスプールサーバに溜まり続けていますので、こちらは復旧後に順次お受け取りいただけます。
損失データについて
2010.02.05 05:15 から 2010.02.05 09:45 に受信されたデータについてはバックアップが御座いません。
2010.02.05 05:15 以降にPOP接続(メール受信)を実施されたお客様につきましては、最後にメール受信されてから 2010.02.05 09:45 までにメールサーバに到着したメールが該当します。
2010.02.05 11:20
現在、OSの再インストールを実施しています。
2010.02.05 11:55
現在、OSの再インストールを実施しています。
2010.02.05 13:00
現在、OSの再インストールの途中ですが、今後の作業内容をご説明させていただきます。
OSの正常起動が確認できた後には以下の作業が実施されます。
1. バックアップサーバとの接続設定 10分程度
2. バックアップデータの復元 ??
3. システム稼働確認 10分程度
4. 復旧確認 10分程度
現在確認致しましたところ、復旧すべきバックアップデータの容量が約30GB程ございます。
このデータを順次処理にてサーバに書き戻しをするわけですが、大容量の為この作業にお時間が掛かることが予想されます。
随時進捗情報をお知らせいたしますので今暫くお待ち頂きますようお願い申し上げます。
2010.02.05 13:10
OSの再インストールがほぼ完了いたしました。
2010.02.05 13:18
お客様のメールボックスの整合性を保つため、バックアップされたデータ、障害時以降に受信したデータ、の順番にてデータの復旧をする必要がございます。
一時的にPOP接続ができてしまう場合がありますが、バックアップデータの復元が完了するまでメールサーバをお使いいただくことができません。
お忙しいところ大変恐縮ですが、復旧まで今暫くお待ちください。
2010.02.05 13:50
現在、OSインストールの最終調整を行っております。
2010.02.05 14:02
現在、OSインストールの最終調整を行っております。
2010.02.05 14:07
バックアップデータの復元を開始しました。
2010.02.05 14:27
バックアップデータの復元中です。進捗状況は20%です。
2010.02.05 14:38
バックアップデータの復元中です。進捗状況は50%です。
2010.02.05 14:40
バックアップデータの復元中です。
復旧完了エリアより、順次POP接続を開始しています。
2010.02.05 14:55
バックアップデータの復元が完了しました。
スプールサーバからのメール受信を開始しました。
2010.02.05 14:58
メールサーバは復旧しました。
稼働前テストを一部省略して、POP接続を開始しました。
スプールサーバからのメール受信が完了するのをお待ち下さい。
2010.02.05 16:55
迷惑メールフィルタを未契約のお客様のスプールデータの配信が完了いたしました。
障害発生時間中に到着したメールの一部を受信できなかったことが判明いたしました。
エラーメールにつきましては送信元に返送されているかと存じます。
ご迷惑をお掛けいたしまして誠に申し訳ございませんでした。
