質問
⚠️ この事例は公開されてから1年以上経過しています。 情報が古い可能性がありますので、ご注意ください。
🕓 事例公開日 : 2025-03-11
【背景】
定期バックアップ処理の実行中にシステムが停止し、エンドユーザーがサービスを利用できない状況が発生した。1. 事象
エラーメッセージ・スタックトレース：
定期バックアップ処理が異常終了したとメール通知「ただいまサービスをご利用いただけません。」の画面が表示
症状の説明：
2025年2月18日1:58頃に定期バックアップ処理の異常終了メールが届き、その後システムにアクセスするとサービス利用不可の画面が表示される状態となった。2. 発生条件
・定期バックアップ処理の実行中（2025年2月17日23時頃から）回答
1. 原因
技術的な原因：
AWS基盤の障害により、オフラインバックアップ処理中にApacheが意図せず停止したことが原因です。技術的要因の分析：
・AWS基盤障害の発生：2025年2月17日23時頃からEBS関連の障害が発生 → EC2インスタンスの動作に影響・バックアップ処理との重複：オフラインバックアップ実行中に基盤障害が発生 → システムリソースへの負荷が増大
・Apacheプロセスの異常停止：基盤障害の影響でApacheが予期せず停止 → Webサービスが応答不能状態に
・ヘルスチェック機能の検知：availability_checkが正常に動作せず → サービス停止状態が継続
根本的な要因：
AWS基盤側のEBS関連障害が、バックアップ処理実行中のシステムに影響を与え、Apacheプロセスの停止を引き起こしたことが根本原因です。2. 対応結果
実施した対応：
1. Apacheの再起動を実行2. availability_checkでレスポンスコード200の正常応答を確認
3. システムの正常稼働状態を確認 詳細なヘルスチェック方法については以下をご参照ください：
https://document.intra-mart.jp/library/iap/public/setup/iap_setup_guide/texts/appendix/health_check.html
現在の状況：
AWS基盤側の障害は復旧済みで、EC2インスタンスは正常に稼働しています。該当日時のバックアップデータも正常に取得完了しており、継続してご利用いただけます。3. 調査方法
1. サービス停止の確認（2025年2月18日1:58頃）2. 対象システムの状態確認とApache停止の特定
3. AWS基盤側への問い合わせと障害状況の確認
4. バックアップ処理との関連性調査
5. EBS関連障害の詳細確認と影響範囲の特定 AWS基盤障害の詳細については以下のドキュメントをご確認ください：
「アタッチ済みの EBS ステータスチェック」 - 「Amazon Elastic Compute Cloud」