引数ひとつで止まったクラウド — AWS S3 大規模障害
📰
実在した障害Amazon Web Services(2017-02-28):米東部リージョンのS3が数時間利用不能になり、S3に依存する無数のサービスが連鎖的に停止。AWS自身の障害ダッシュボードもS3依存のため更新できなかった。
状況
あなたは巨大なオブジェクトストレージを支える運用チームの一員だ。今朝の任務は、課金システムの動作が遅い件の調査。確立された手順書(playbook)に従い、サブシステムから少数のサーバを切り離して様子を見ることになった。使い慣れた社内ツールでの、いつもの作業のはずだった。
🔒
この続きは完全版で全3幕・10ステップの対話形式リプレイ。公開ポストモーテムを教材用に再構成した、実在障害の追体験です。
公開ポストモーテム・公式報告の事実のみ参照。文章・手順は教材用に簡略化したオリジナルの再構成です。