Tweet
Tweet

Slide 1

Slide 1 text

© 2023 Wantedly, Inc. プロジェクトマネジメント観点でポストモーテ ムを実施する 2023年ヒヤリハット大反省会@新宿 Dec. 7 2023 - Sora Ichigo

Slide 2

Slide 2 text

© 2023 Wantedly, Inc. 自己紹介 ● 市古 空 / いちご そら ● Wantedly, Inc. 所属 ● DX (開発者体験) 改善チーム・基盤開発 ● DevOps に関する Enabling 活動 X (Twitter): @igsr5_ GitHub: @igsr5

Slide 3

Slide 3 text

© 2023 Wantedly, Inc. 今日伝えたいこと 我々はポストモーテムをもっと活用できる！！

Slide 4

Slide 4 text

© 2023 Wantedly, Inc. 今日伝えたいこと どうやって？

Slide 5

Slide 5 text

© 2023 Wantedly, Inc. 今日伝えたいこと SRE観点だけでなく プロジェクトマネジメント観点 でポストモーテムを実施する

Slide 6

Slide 6 text

© 2023 Wantedly, Inc. 話さないこと ● ポストモーテムとは ● ポストモーテムのやり方 ● SRE について

Slide 7

Slide 7 text

© 2023 Wantedly, Inc. 前提 ことはじめ 2023/07 社内では大規模リファクタリングが進行

Slide 8

Slide 8 text

© 2023 Wantedly, Inc. 前提 サービスを壊しやすい性質 ● いわゆる基盤開発 ● 10年前に書かれたコードを触ることもある ● 改修対象は巨大 Rails モノレポ

Slide 9

Slide 9 text

© 2023 Wantedly, Inc. 起こっていたこと 表層的な問題 軽度なインシデントやヒヤリハットが継続的に発生 本質的な問題 プロジェクトの守るべき速度と品質の共通認識がない

Slide 10

Slide 10 text

© 2023 Wantedly, Inc. 解決に向けて何をしたか タスクを一時中断して臨時でポストモーテムを実施 ● ① インシデント分析 ● ② チーム内での認識合わせ ● ③ 改善アクションの実施

Slide 11

Slide 11 text

© 2023 Wantedly, Inc. ① インシデント分析 ● 社内のインシデント発生件数と要因を集計 ● 壊れ方の種類ごとに分類して考える ○ デグレ ○ インシデント ○ ユーザー問い合わせ

Slide 12

Slide 12 text

© 2023 Wantedly, Inc. ① インシデント分析

Slide 13

Slide 13 text

© 2023 Wantedly, Inc. ① インシデント分析 結論 今回のプロジェクトはインシデント発生への影響が大きい ● デグレ・ユーザー問い合わせへの影響は小さい ● 具体的な数字は割愛

Slide 14

Slide 14 text

© 2023 Wantedly, Inc. ② チーム内での認識合わせ 分析をもとにプロジェクト期待値の認識合わせを実施

Slide 15

Slide 15 text

© 2023 Wantedly, Inc. ② チーム内での認識合わせ

Slide 16

Slide 16 text

© 2023 Wantedly, Inc. ③ 改善アクションの実施 ① PR に「その変更による技術的な影響」を記述する ② リリース後の監視を徹底する

Slide 17

Slide 17 text

© 2023 Wantedly, Inc. ③ 改善アクションの実施 ↓これ

Slide 18

Slide 18 text

© 2023 Wantedly, Inc. ③ 改善アクションの実施 結果 ● インシデント発生件数が減少 ● 開発時の不確実性が減り、品質と開発スピードが増加

Slide 19

Slide 19 text

© 2023 Wantedly, Inc. まとめ ポストモーテムはSRE 観点だけでなく プロジェクトマネジメント観点でも活用できる

Slide 20

Slide 20 text

© 2023 Wantedly, Inc. 参考資料 ● ポストモーテムの取り組み - Wantedly Engineering Handbook ● 障害対応の心構え - Wantedly Engineering Handbook

Slide 21

Slide 21 text

© 2023 Wantedly, Inc.