ストーリー Stories

開発者として過ごす日々の、忘れられない出来事、思いがけない困難、そこから得た教訓。

ストーリースライドあり

1つの間違ったコマンド、4時間:2017年のAmazon S3の話

2017年2月28日、入力を1つ打ち間違えたコマンドが、AmazonのS3ストレージサービスから意図より多くのサーバーを外し、多くのインターネットサービスを約4時間、遅くしたり止めたりしました。AWS自身の事後報告に沿って振り返り、削除の力を持つツールが備えるべき守りを引き出します。

9分で読めます
  • #障害
  • #Amazon S3
  • #AWS
  • #ポストモーテム
  • #運用ツール
  • #影響範囲
ストーリースライドあり

エンジニアが間違ったデータを消した日:GitLab 2017年の話

2017年1月31日、GitLabのエンジニアが削除コマンドを間違ったサーバーで実行し、約300GBを失いました。その後、5層のバックアップがすべて失敗。GitLab自身の事後分析に沿って振り返り、削除コマンドを打つ前の1分のチェックリストで締めます。

11分で読めます
  • #障害
  • #バックアップ
  • #誤削除
  • #GitLab
  • #ポストモーテム
  • #運用