最速でサービス復旧をするための備え

by SansanTech

Slide 1

Slide 1 text

最速でサービス復旧をするための備え [ Incident Response Meetup vol.1 ] Sansan株式会社 Bill One Engineering Unit SREチーム上司陽平

Slide 2

Slide 2 text

⾃⼰紹介じょーし（上司） Sansan株式会社 @paper2parasol - Sansan株式会社でBill OneプロダクトのSREチームに2022年8⽉から所属 - 前職はSIer企業でコンテナ技術やSREの普及活動、 AWS・AzureでのKubernetesサービスの設計・構築に従事 - 現職ではオブザーバビリティの向上、負荷試験による性能改善、IaC化などを推進 - 好きなものはラーメンとCloud Run

Slide 3

Slide 3 text

事前準備の重要性 Bill Oneにおける役割と担当インシデント対応フローインシデントレベル、状況ダッシュボードまとめ

Slide 4

Slide 4 text

事前準備の重要性 Bill Oneにおける役割と担当インシデント対応フローインシデントレベル、状況ダッシュボードまとめ

Slide 5

Slide 5 text

最速でサービスを復旧するためには何が重要？？

Slide 6

Slide 6 text

事前準備が重要

Slide 7

Slide 7 text

- インシデント対応時の役割の定義 - インシデント対応フロー - インシデントレベルの定義 - オンコールシフト表 - 連絡先管理表...etc 事前準備の例

Slide 8

Slide 8 text

なんで事前準備が重要なの？？

Slide 9

Slide 9 text

誰が何をやるか毎回決める必要があって混乱したり... 対応時の役割定義がないと... いつの間にか皆んなで原因を分析していて暫定対策が疎かになっていたり... インシデント対応フローがないと...

Slide 10

Slide 10 text

関係者間でどのくらいやばいかの認識が合わず、対応の優先度が異なってしまったり... インシデントレベル定義がないと... 途中から加わったメンバが状況をすぐ把握できなかったり... インシデント状況ボードがないと...

Slide 11

Slide 11 text

事前準備により迅速で効率的な復旧が実現できる

Slide 12

Slide 12 text

対応時の役割定義によりインシデント発⽣時に誰が何をするかなどに悩むことなく迅速に⾏動を開始できるインシデント状況ボードにより重要な情報を的確に関係者間で共有可能になるインシデント対応フローにより問題の特定と解決に向けた⼿順をもれなく、円滑に進⾏できるインシデントレベル定義により関係者がレベルに合わせて同じ優先度で対応できる

Slide 13

Slide 13 text

Bill Oneのサービス復旧に向けた準備の⼀部をご紹介します - 役割定義 - インシデント対応フロー概要 - インシデントレベルの定義 - インシデント状況ボード

Slide 14

Slide 14 text

事前準備の重要性 Bill Oneにおける役割と担当インシデント対応フローインシデントレベル、状況ダッシュボードまとめ

Slide 15

Slide 15 text

Slide 16

Slide 16 text

双⽅のチームが協⼒しながらインシデントに対応する

Slide 17

Slide 17 text

Slide 18

Slide 18 text

Slide 19

Slide 19 text

Slide 20

Slide 20 text

Slide 21

Slide 21 text

Slide 22

Slide 22 text

Slide 23

Slide 23 text

事前準備の重要性 Bill Oneにおける役割と担当インシデント対応フローインシデントレベル、状況ダッシュボードまとめ

Slide 24

Slide 24 text

Slide 25

Slide 25 text

Slide 26

Slide 26 text

Slide 27

Slide 27 text

Slide 28

Slide 28 text

Slide 29

Slide 29 text

事前準備の重要性 Bill Oneにおける役割と担当インシデント対応フローインシデントレベル、状況ダッシュボードまとめ

Slide 30

Slide 30 text

Slide 31

Slide 31 text

Slide 32

Slide 32 text

事前準備の重要性 Bill Oneにおける役割と担当インシデント対応フローインシデントレベル、状況ダッシュボードまとめ

Slide 1

Slide 1 text

Slide 2

Slide 2 text

Slide 3

Slide 3 text

Slide 4

Slide 4 text

Slide 5

Slide 5 text

Slide 6

Slide 6 text

Slide 7

Slide 7 text

Slide 8

Slide 8 text

Slide 9

Slide 9 text

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Slide 12

Slide 12 text

Slide 13

Slide 13 text

Slide 14

Slide 14 text

Slide 15

Slide 15 text

Slide 16

Slide 16 text

Slide 17

Slide 17 text

Slide 18

Slide 18 text

Slide 19

Slide 19 text

Slide 20

Slide 20 text

Slide 21

Slide 21 text

Slide 22

Slide 22 text

Slide 23

Slide 23 text

Slide 24

Slide 24 text

Slide 25

Slide 25 text

Slide 26

Slide 26 text

Slide 27

Slide 27 text

Slide 28

Slide 28 text

Slide 29

Slide 29 text

Slide 30

Slide 30 text

Slide 31

Slide 31 text

Slide 32

Slide 32 text

Slide 33

Slide 33 text

Slide 34

Slide 34 text