SRE への第一歩 PagerDuty × DataDog を使用した品質管理

by kokekoke

Slide 1

Slide 1 text

Slide 2

Slide 2 text

Slide 3

Slide 3 text

Slide 4

Slide 4 text

Slide 5

Slide 5 text

Copyrights©3-shake Inc. All Rights Reserved. 5 SLI, SLO についてサービスの信頼度を表す値目には見えない信頼度を可視化できるようにする。 SLI, SLO とは？ Service Level Objective Service Level Indicator SLI の目標値信頼度を数値化したものを目標設定する。 Counter Histogram Gauge SLI Duration Target sum:httpservice.hits

Slide 6

Slide 6 text

Copyrights©3-shake Inc. All Rights Reserved. 6 SRE における SLO, SLI について Error Budget とは Error Budget 信頼度をさげることが許容される範囲 Error Budget = 100 % - SLO (%) Ex. １ヶ月間の SLO を 99% とした場合 Error Budget は 1% となり、時間に換算すると 7.2 h となる。

Slide 7

Slide 7 text

Slide 8

Slide 8 text

Copyrights©3-shake Inc. All Rights Reserved. 8 SRE における SLO, SLI について SLO, SLI, ErrorBudget の関係性正常時のメトリクスの合計（ SLI） sum:httpservice.hits{code:2xx} +sum:httpservice.hits{code:3xx} +sum:httpservice.hits{code:4xx} sum:httpservice.hits 異常時を含むすべてのメトリクスの合計（ SLI） × １００＝ XX % 正常時のメトリクスの合計（ SLI）異常時を含むすべてのメトリクスの合計（ SLI） OK NG 現時点での信頼度１００% - XX % Error Budget

Slide 9

Slide 9 text

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Slide 12

Slide 12 text

Slide 13

Slide 13 text

Copyrights©3-shake Inc. All Rights Reserved. 13 DataDog, PagerDuty を導入すると？ DataDog での SLO の作成　　　※ メトリクスを使用する場合 SLI に設定した正常なメトリクスを指定する。 Ex. HTTP のレスポンスコード　 2XX, 3XX, 4XX SLO に設定する目標値、期間を指定する。 SLI に設定したメトリクスの合計を指定する。 Ex. HTTP のレスポンスコードの合計