質問
⚠️ この事例は公開されてから1年以上経過しています。 情報が古い可能性がありますので、ご注意ください。
🕓 事例公開日 : 2024-10-01
【背景】
監視システムから、APサーバ(resin)のプロセスダウンを示すアラートメールが届いた。システムに何らかの異常が発生したのではないかと懸念している。1. 事象
アラート内容：
監視システムで障害を検知◆監視対象
システムID：123456789000
システム名：システム環境◆時間
障害検知日時：2024-08-28 18:11:00◆監視項目
◆検出した値 1
プロセス監視 APサーバダウン検知
症状の説明：
2024年8月28日18時11分頃、監視システムからAPサーバのプロセスダウンを検知したというアラートが発報された。実際にサービスが停止したのか、何が原因でこのアラートが出たのかを知りたい。2. 発生条件
特定の操作や条件は不明。監視システムが自動的に検知してアラートを送信してきた状況。回答
1. 原因
技術的な原因：
AWS基盤側で一時的な問題が発生し、監視システムがAPサーバのプロセスダウンを誤検知したことが原因です。技術的要因の分析：
・AWS基盤側で一時的な異常が発生 → 監視システムの通信に影響・監視システムがプロセス状態を正常に取得できなかった → ダウン検知アラートが発報
・実際のEC2インスタンスやAPサーバプロセスには異常なし → サービスは正常稼働を継続
根本的な要因：
AWS基盤側の一時的な問題により、監視システムが正常なプロセス状態を取得できず、誤ってアラートを発報したことが根本原因です。実際のシステムには異常は発生していませんでした。2. 対応結果
AWS基盤側の問題は既に解消されており、EC2インスタンスおよびAPサーバは正常に稼働しています。お客様側での対応は不要です。※AWS基盤障害の詳細な原因については、AWSの回答方針により開示できないことをご了承ください。
3. 原因究明に至るまでの調査方法
1. アラート発報時刻（2024-08-28 18:11:00）前後のAPサーバログを確認2. EC2インスタンスの停止・再起動ログの有無を確認 → 該当ログなし
3. APサーバ（resin）のプロセス停止・再起動ログの有無を確認 → 該当ログなし
4. お客様環境側に異常が見られないため、AWS側へエスカレーション
5. AWSからの回答により、AWS基盤側の一時的な問題であったことを確認
6. EC2インスタンスに実際の異常は発生していないことをAWSから確認