開発者と協働できるメトリクスダッシュボードを作ろう！/SRE Lounge 2023

Slide 1

Slide 1 text

Slide 2

Slide 2 text

Slide 3

Slide 3 text

3 © Link and Motivation Group 自己紹介川津雄介株式会社リンクアンドモチベーション SRE ● 前職は某複写機メーカーでエンジニアしてた ● OSレイヤーからWeb/モバイルまで何でもやる ● 中途の採用活動もします ● リンクアンドモチベーションではSREとして開発室全体の生産性向上に注力！ https://github.com/megmogmog1965 https://qiita.com/megmogmog1965

Slide 4

Slide 4 text

4 © Link and Motivation Group 自己紹介岸本直樹株式会社リンクアンドモチベーション SRE ● モチベーションクラウドの開発でバックエンドエンジニアとして1年間経験 ● その後、SRE チームの立ち上げメンバーとして開発組織の生産性向上と保守運用に従事 ● 最近では Four Keys の開発メトリクスの向上プロジェクトに参加しております

Slide 5

Slide 5 text

5 © Link and Motivation Group リンクアンドモチベーショングループについて個人から選ばれる組織（モチベーションカンパニー）創りを支援組織開発Division コンサル・クラウド事業 IR支援事業個人開発Division 組織から選ばれる個人（アイカンパニー）創りを支援キャリアスクール事業学習塾事業マッチングDivision 組織と個人をつなぐ機会を提供人材紹介事業 ALT配置事業創業 | 2000年4月7日上場市場 | 東京証券取引所プライム市場（証券コード：2170）売上高 | 326億円（2021年12月時点）社員数 | 約1,500名（2021年12月時点）グループ会社 | 全12社ミッション | モチベーションエンジニアリングによって組織と個人に変革の機会を提供し、意味のあふれる社会を実現する

Slide 6

Slide 6 text

6 © Link and Motivation Group プロダクト紹介働きがいあふれる社会へ

Slide 7

Slide 7 text

7 © Link and Motivation Group モチベーションクラウド診断変革 ※ 2021年度実績 8,740 社 237 万人

Slide 8

Slide 8 text

8 © Link and Motivation Group 導入企業様 ※2023年1月時点実績（https://www.motivation-cloud.com/）

Slide 9

Slide 9 text

9 © Link and Motivation Group 今日は主にメトリクス・ダッシュボード周りの話をします！

Slide 10

Slide 10 text

Slide 11

Slide 11 text

11 © Link and Motivation Group 弊社開発組織の歴史 2016 2018 2019 2022 2022 モチベーションクラウドのリリース開発組織内製化のスタート (Four Keys = Low レベル) コミュニケーションクラウドのリリースストレッチクラウドのリリース Four Keys メトリクス High レベルに到達 2020 SRE チームの誕生弊社の開発組織は誕生して５年目です！

Slide 12

Slide 12 text

12 © Link and Motivation Group SRE チームの遷移 (Team Topologies 風に言うと...) 4つのチームタイプ ※ 出典：「チームトポロジー価値あるソフトウェアをすばやく届ける適応型組織設計」より

Slide 13

Slide 13 text

13 © Link and Motivation Group SRE チームの遷移 (Team Topologies 風に言うと...) インタラクションモード (チーム間の関わり方を示す) ※ 出典：「チームトポロジー価値あるソフトウェアをすばやく届ける適応型組織設計」より

Slide 14

Slide 14 text

14 © Link and Motivation Group １年前 → Medium レベルインフラや CI/CD (仕組み) を一方的に提供していた。

Slide 15

Slide 15 text

15 © Link and Motivation Group 現在 → High レベル開発者と協働し、課題解決に取り組む。

Slide 16

Slide 16 text

Slide 17

Slide 17 text

17 © Link and Motivation Group SRE で課題解決し一方的に押し付けてきたデプロイの自動化コンテナ化 IaC (Terraform) Four Keys : Low 〜 Medium 時代

Slide 18

Slide 18 text

18 © Link and Motivation Group 遠い (苦手) 近い (得意) インフラの仕組みだけで解決できる限界 SRE アプリ開発者インフラ CI / CD ブランチングモデルテストコード E2E テストアプリコードメトリクス SRE (インフラエンジニア発) は、どうしてもインフラ側から改善しがち。

Slide 19

Slide 19 text

19 © Link and Motivation Group … 開発者間の「協働」

Slide 20

Slide 20 text

20 © Link and Motivation Group SRE と開発者が協働して進めるには？ 1 2 3 開発生産性・メトリクスの基準を統一する改善活動をみんなの目標にする数値を上げる意味・目的を共有する

Slide 21

Slide 21 text

21 © Link and Motivation Group SRE と開発者が協働して進めるには？ 1 2 3 開発生産性・メトリクスの基準を統一する改善活動をみんなの目標にする数値を上げる意味・目的を共有する今日のトピックはここ

Slide 22

Slide 22 text

22 © Link and Motivation Group SRE と開発者が協働して進めるには？ 1 2 3 開発生産性・メトリクスの基準を統一する改善活動をみんなの目標にする数値を上げる意味・目的を共有するデブサミで話します

Slide 23

Slide 23 text

Slide 24

Slide 24 text

24 © Link and Motivation Group 生産性の議論を始める為に SRE 開発者共通の指標コミュニケーション議論をする為の共通のネタ「指標」が必要。

Slide 25

Slide 25 text

25 © Link and Motivation Group SRE が手動でメトリクス集計をしてました長らく、SRE が手動でメトリクス集計&可視化をしていました。 SRE 週に１度だけ更新する！あ、先週更新するの忘れてた...

Slide 26

Slide 26 text

26 © Link and Motivation Group SRE が手動でメトリクス集計をしてました長らく、SRE が手動でメトリクス集計&可視化をしていました。 SRE 週に１度だけ更新する！あ、先週更新するの忘れてた... 改善に繋がらない！

Slide 27

Slide 27 text

27 © Link and Motivation Group 生産性課題を特定する為に必要な情報量・頻度・正確さの掛け算。量頻度正確さ課題の分析をする為に、様々な面の情報が取得できている事最新の情報が毎日更新・記録できている事情報が正確で信頼できる事

Slide 28

Slide 28 text

28 © Link and Motivation Group ① 情報の量今月の PR は 100 件でした 25 th% は「0〜3日」 XXX さんの PR は７日超えが多い今月のリードタイムは「７日」もっと細かく・視点を変えて見ると...

Slide 29

Slide 29 text

29 © Link and Motivation Group ② 情報の更新頻度振り返りの期間は多種多様。 (相対・絶対 / 日・週・月) 11月第2週 12月第3週第4週今日過去２週間 (相対) １週目２週目月で振り返りたい

Slide 30

Slide 30 text

30 © Link and Motivation Group ② 情報の更新頻度振り返りの期間は多種多様。 (相対・絶対 / 日・週・月) 11月第2週 12月第3週第4週今日過去２週間 (相対) １週目２週目月で振り返りたい毎日メトリクス集計できているとベスト

Slide 31

Slide 31 text

31 © Link and Motivation Group ③ 情報の正確さ情報 (ミス 0%) 機械人間情報 (ミス 20%) 開発者 (頻度低くても) ミスの可能性があると見る気を無くす自動手作業 ❌

Slide 32

Slide 32 text

32 © Link and Motivation Group 自動化が必要

Slide 33

Slide 33 text

33 © Link and Motivation Group メトリクス・ダッシュボード自動化に求められる要件全自動リアルタイム性変更容易性ダッシュボード要件見たい時に見たい情報が得られないと、開発者は見る気を無くすメトリクスを計測する事自体が SRE の負担 (トイル) になってはならないメトリクスの具体的な計測方法は、利用しているツールだけでなく、開発組織の状況によって常に変わる

Slide 34

Slide 34 text

34 © Link and Motivation Group 変更に強いメトリクス集計ツールだけでなく、開発組織や事業のフェーズによって、集計方法は都度変わる。ブランチングモデルが変わったり... インシデント対応プロセスが変わる等

Slide 35

Slide 35 text

Slide 36

Slide 36 text

36 © Link and Motivation Group 最近はメトリクス集計をする外部サービスもあるよね SRE 始めたての若い組織は、実績が足りないので外部サービス (※お金掛かる) をうまく活用できるか、判断がつかない。初めはタダで出来る範囲で経験値を積んでからかなぁ...

Slide 37

Slide 37 text

37 © Link and Motivation Group 使用するサービス

Slide 38

Slide 38 text

38 © Link and Motivation Group 全体アーキテクチャ

Slide 39

Slide 39 text

39 © Link and Motivation Group 全体アーキテクチャ直感的に作成可能変更が簡単無料の範囲で使用可能自動で集計可能

Slide 40

Slide 40 text

Slide 41

Slide 41 text

Slide 42

Slide 42 text

Slide 43

Slide 43 text

43 © Link and Motivation Group データの収集について変数値詳細 title PRのタイトル author PRの作成者 url PRのURL Base PRの向け先ブランチ名 created_at PR作成された日付 merged_at PRマージされた日付 first_commited_at ファーストコミットの日付 Github Actionsでリードタイム計測に必要なPR情報を抽出上記の情報をPRマージ時に自動でスプレッドシートに書き込むよう設定

Slide 44

Slide 44 text

Slide 45

Slide 45 text

Slide 46

Slide 46 text

Slide 47

Slide 47 text

Slide 48

Slide 48 text

48 © Link and Motivation Group データの整形についてディメンションスプレッドシートのカラム指標スプレッドシートから自動で計算される統計データ (SUM,AVE,MED,etc) 収集したSpread SheetとLooker Studioを接続する１行 (１レコード) グラフの縦軸

Slide 49

Slide 49 text

49 © Link and Motivation Group データの整形についてディメンションスプレッドシートのカラム指標スプレッドシートから自動で計算される統計データ (SUM,AVE,MED,etc) 収集したSpread SheetとLooker Studioを接続する閲覧したい情報のデータの整形ができる！！

Slide 50

Slide 50 text

50 © Link and Motivation Group データの整形について収集したデータからLooker関数を使ってリードタイムのカラムを作成するレコードタイプ内容リードタイム(日) ディメンションスプレッドシートのカラムの merged_atとfirst_commited_atの差分リードタイム中央値(日) 指標上記レコードの中央値

Slide 51

Slide 51 text

Slide 52

Slide 52 text

Slide 53

Slide 53 text

53 © Link and Motivation Group アウトカム信頼性の高いダッシュボードができたことで、開発者が生産性向上するための指標となった。 Before After 現状もわからないし、 SREからの依頼で週１、月１しか改善がされない現状がわかり、自分たちで日々PDCAを回して改善ができる開発者開発者

Slide 54

Slide 54 text

Slide 55

Slide 55 text

55 © Link and Motivation Group まとめ ➢ 開発者と生産性向上の活動を協働して、メトリクス目標の達成を成し遂げる為に、ダッシュボード化 (メトリクスを最新に保ち信頼できる状態に)する事が大事 ➢ ダッシュボード化、思ってるより簡単にできますよ！

Slide 56

Slide 56 text

THANKS 私達、株式会社 Link & Motivation は一緒に働く新しい仲間を募集しています！応募ページはこちら！