プロジェクトマネジメント観点でポストモーテムを実施する

2023年ヒヤリハット大反省会@新宿 の登壇資料です。

Transcript

1. © 2023 Wantedly, Inc. プロジェクトマネジメント観点でポストモーテ ムを実施する 2023年ヒヤリハット大反省会@新宿 Dec. 7 2023 - Sora Ichigo
2. © 2023 Wantedly, Inc. 自己紹介 • 市古 空 / いちご そら • Wantedly, Inc. 所属 • DX (開発者体験) 改善チーム・基盤開発 • DevOps に関する Enabling 活動 X (Twitter): @igsr5_ GitHub: @igsr5
3. © 2023 Wantedly, Inc. 今日伝えたいこと 我々はポストモーテムをもっと活用できる！！
4. © 2023 Wantedly, Inc. 今日伝えたいこと どうやって？
5. © 2023 Wantedly, Inc. 今日伝えたいこと SRE観点だけでなく プロジェクトマネジメント観点 でポストモーテムを実施する
6. © 2023 Wantedly, Inc. 話さないこと • ポストモーテムとは • ポストモーテムのやり方 • SRE について
7. © 2023 Wantedly, Inc. 前提 ことはじめ 2023/07 社内では大規模リファクタリングが進行
8. © 2023 Wantedly, Inc. 前提 サービスを壊しやすい性質 • いわゆる基盤開発 • 10年前に書かれたコードを触ることもある • 改修対象は巨大 Rails モノレポ
9. © 2023 Wantedly, Inc. 起こっていたこと 表層的な問題 軽度なインシデントやヒヤリハットが継続的に発生 本質的な問題 プロジェクトの守るべき速度と品質の共通認識がない
10. © 2023 Wantedly, Inc. 解決に向けて何をしたか タスクを一時中断して臨時でポストモーテムを実施 • ① インシデント分析 • ② チーム内での認識合わせ • ③ 改善アクションの実施
11. © 2023 Wantedly, Inc. ① インシデント分析 • 社内のインシデント発生件数と要因を集計 • 壊れ方の種類ごとに分類して考える ◦ デグレ ◦ インシデント ◦ ユーザー問い合わせ
12. © 2023 Wantedly, Inc. ① インシデント分析
13. © 2023 Wantedly, Inc. ① インシデント分析 結論 今回のプロジェクトはインシデント発生への影響が大きい • デグレ・ユーザー問い合わせへの影響は小さい • 具体的な数字は割愛
14. © 2023 Wantedly, Inc. ② チーム内での認識合わせ 分析をもとにプロジェクト期待値の認識合わせを実施
15. © 2023 Wantedly, Inc. ② チーム内での認識合わせ
16. © 2023 Wantedly, Inc. ③ 改善アクションの実施 ① PR に「その変更による技術的な影響」を記述する ② リリース後の監視を徹底する
17. © 2023 Wantedly, Inc. ③ 改善アクションの実施 ↓これ
18. © 2023 Wantedly, Inc. ③ 改善アクションの実施 結果 • インシデント発生件数が減少 • 開発時の不確実性が減り、品質と開発スピードが増加
19. © 2023 Wantedly, Inc. まとめ ポストモーテムはSRE 観点だけでなく プロジェクトマネジメント観点でも活用できる
20. © 2023 Wantedly, Inc. 参考資料 • ポストモーテムの取り組み - Wantedly Engineering Handbook • 障害対応の心構え - Wantedly Engineering Handbook
21. © 2023 Wantedly, Inc.