2022-12-06 11:40~24:44頃,当ブログに正常にアクセスできない問題が発生しました.
概要
- 2022-12-06 11:40 障害発生
- 2022-12-06 24:00 障害検知,障害対応開始
- 症状: 当ブログを閲覧しようとすると”データベース接続確立エラー”のメッセージが表示され,記事が閲覧できない.
- 2022-12-06 24:44 障害対応終了
- ディスク容量の確保
- 不要なVMの停止・削除
原因
データベースサーバに割り当てている物理ストレージの圧迫により,データベースサーバの停止,Webサーバの動作不良を引き起こしました.
また,障害発生時,入院していたため,障害の検知に遅れが発生しました.
障害検知について
障害発生時,Discord経由でアラートを発報するよう設定していましたが,該当する障害の深刻度が”情報”だったため,障害の検知に遅れが発生しました.
再発防止に向けて
サーバのデータ整理を実施し,ディスクの空きを確保するよう努めます.
大変申し訳ございませんでした.
Related Posts:
Hardening 2022 Decade 参加記