今すぐできる！ DORA metrics でカジュアルに始める CI/CD | DevOpsDays Tokyo 2024

◯セッション内容
今すぐできる！ DORA metrics でカジュアルに始める CI/CD | DevOpsDays Tokyo 2024
https://confengine.com/conferences/devopsdays-tokyo-2024/proposal/19720/dora-metrics-cicd
◯スライドで記載しているリンク
DORA
https://dora.dev/
State of DevOps Report
https://cloud.google.com/devops/state-of-devops
DORA クイックチェック
https://dora.dev/quickcheck/
DevOps の能力 | Google Cloud 公式ドキュメント
https://cloud.google.com/architecture/devops/capabilities?hl=ja
エリート DevOps チームであることを Four Keys プロジェクトで確認する | Google Cloud 公式ブログ
https://cloud.google.com/blog/ja/products/gcp/using-the-four-keys-to-measure-your-devops-performance?hl=ja
Google Cloud で実行されている DevOps 組織の有効性を評価する | Google Cloud 公式ブログ
https://cloud.google.com/blog/ja/products/gcp/another-way-to-gauge-your-devops-performance-according-to-dora?hl=ja
DORA 2023 度版 State of DevOps Report | Zenn (Google nak さん執筆)
https://zenn.dev/google_cloud_jp/articles/state-of-devops-report-2023
CI/CD 手軽改善！DORA metrics × Cloud Deploy 実践例 | Zenn (クラウドエース 水野執筆)
https://zenn.dev/cloud_ace/articles/cicd-clouddeploy

Transcript

1. ｜　© 2023 Cloud Ace, Inc DORA metrics で カジュアルに始める CI/CD 今すぐできる！ Takumi Mizuno Sr.Specialist Cloud Ace, lnc. Partner Enginner Google Cloud Japan Issei Hiraoka ©2024 Cloud Ace, Inc
2. スピーカー Takumi Mizuno
 Cloud Ace, lnc. / Sr.Specialist 
 Web アプリケーションエンジニアとして 3 年間で 15 案件に参画し、要件定義、設計、実装、テス トまで幅広く担当。
 現在は Application Modernization 領域に参画し、クラウドネイティブなシステムに移行するため の設計や開発の支援を行っている。 
 得意領域は、アプリケーション設計 (DDD, Microservices)。 

3. クラウドエース株式会社のご紹介 • 国内ベンダーとして初めて、最上位ラン ク”MSP”を取得 国内初 MSP(1) パートナー • ベンチャー企業から 東証一部上場企業まで 幅広い企業との取引実績 顧客数 1,400社 Google Cloud からの高い評価 (1) MSP (Managed Service Providersの略)：数千のGoogle Cloud Partner のうち、中でも特定条件をクリアしたパートナーにのみ与えられる (現在43社取得) (2) 2024年2月時点
4. 4. パート−製品、マーケットプレイス製品の取扱い Google Cloud を活用したサービスの利用拡大を目的として、 パートナー製品としての販 売、Google Cloud マーケットプレイスへの登録などを支援します。 3. トレーニングによるエンジニア育成 現役のトップエンジニア講師による Google Cloud 認定トレーニングを提供し、 毎年数千人のエンジニアを育成しています。 2. システムインテグレーション／マネージドサービス システムのクラウド移行やクラウドネイティブ開発など、お客様のニーズに合わせて コンサル ティングおよび受託開発や内製化技術支援 をご提供します。また 24時間365日の監視運用 サービスも提供しています。 1. 請求代行 と テクニカルサポート Google Cloud の請求代行と共に、特別な料金プランと テクニカルサポートを提供します。 また、個別の課題に対する相談窓口として、 カスタマーサクセス担当者もご支援します。 提供サービス
5. スピーカー Issei Hiraoka
 Google Cloud Japan / Partner Engineer 
 Google Cloud の導入を支援するパートナー企業と連携し、顧客への導入プロジェクトの成功と クラウドビジネスの拡大を支援しています。 

6. 1. はじめに
 2. DORA とは何か？
 3. なぜ DORA metrics はカジュアルに CI/CD を始められるのか
 4. 結局、何から始めたら良い？ ~ DORA metrics から始める first step ~ 
 5. 実際に CI/CD を導入してみる ~ Cloud Deploy & Skaffold での実践例 ~ 
 6. さいごに
 アジェンダ

7. 目指すこと
 • CI/CD 導入/改善にあたって「何から始めたら良いか」を知ってもらう 
 • DORA metrics の活用方法を理解してもらう 
 
 目指さないこと
 • The Accelerate State of DevOps Report 2023 の詳細を理解してもらう 
 • Cloud Deploy と Skaffold の詳細を理解してもらう 
 発表の位置づけ

8. DORA とは何か？
9. DORA (DevOps Research and Assessment) とは
 
 https://dora.dev/ 2014 年より、DevOps という軸で 
 • 学術的な統計解析手法を用いて 
 組織やチームを成功に導く 能力やプラクティスを研究
 • 能力やプラクティスから組織のパフォーマンスを予測 
 DevOps にまつわる 調査・研究をするチーム。

10. State of DevOps Report https://cloud.google.com/devops/state-of-devops/
11. State of DevOps Report の歩み
 2014:
 2015:
 2016:
 2017:
 2018:
 2019:
 2020:
 2021:
 2022:
 2023:
 
 ソフトウェア デリバリー、組織文化
 マネジメント、燃え尽き症候群 + 文化
 セキュリティ、製品 + 文化
 リーダーシップ、自動化 + 文化
 信頼性、クラウド + 文化
 チェンジ マネジメント、トランス フォーメーション + 文化
 DevOps の ROI
 ドキュメンテーション、信頼性 + 文化
 セキュリティ、信頼性 + 文化
 ユーザー中心主義、柔軟なインフラ + 文化
 

12. 2023 年度サマリー
 主に以下の 7 つが組織やチームのパフォーマンスにとって有益であるとの結果となった。 
 
 • 健全な組織文化の確立
 • ユーザのことを考えた開発
 • より早いコードレビューによるソフトウエア デリバリーのパフォーマンス向上 
 • 質の高いドキュメントによる技術的な能力の向上 
 • クラウドによる柔軟性の高いインフラ 
 • デリバリー速度、運用のパフォーマンス、ユーザ志向のバランス 
 • 業務の公平な分担

13. なぜ DORA metrics は カジュアルに CI/CD を 始められるのか
14. 以下の 3 つが明確になっていないことが原因に挙げられる。 
 1. 評価基準は何か（指標）
 2. 現状どれくらいできているのか（現在地） 
 3. 目指すべき目標はどこか（ゴール） 
 なぜ CI/CD をカジュアルに始められないのか

15. 2023 年版 Accelerate State of DevOps Report Nov 2023
16. 1. 評価基準は何か (指標)
 速度 安定性 デプロイ頻度 変更の リードタイム 変更による 失敗率 サービス復旧に かかる時間 エリート DevOps チームであることを Four Keys プロジェクトで確認する | Google Cloud 公式ブログ https://cloud.google.com/blog/ja/products/gcp/using-the-four-keys-to-measure-your-devops-performance?hl=ja DORA では “ 4 つのキー指標 ” を提案

17. 2023 年の各クラスタにおいて共通してみられる特徴 
 2. 現状どれくらいできているのか (現在地を知る)
 デプロイ頻度 変更の リードタイム 変更による 失敗率 サービス復旧に かかる時間 回答者比率 Elite オンデマンド 1 日未満 5%　 1 時間以内 18%　 High 1 日 ~ 1 週間 1 日 ~ 1 週間 10%　 1 日以内 31%　 Medium 1 週間 ~ 1 月 1 週間 ~ 1 月 15%　 1 日 ~ 1 週間 33%　 Low 1 週間 ~ 1 月 1 週間 ~ 1 月 64%　 1 月 ~ 半年 17%　
18. DORA Quick Check でお手軽に計測できる。業界ごとの水準と比較することも可能。 
 3. 目指すべき目標はどこか（ゴールを決める）
 https://dora.dev/quickcheck/
19. ビジネスの成果 • 市場シェア • 収益性 • 従業員定着率 • 運用効率性 • 顧客満足度 • … DevOps の能力 技術 • トランクベース開発 • クラウド インフラストラクチャ • セキュリティのシフトレフト • … プロセス • 小さいバッチ単位での作業 • 変更承認の合理化 • バリュー ストリームの可視化 • … 文化 • 強い信頼 & 積極的な情報共有 • 学習文化 • 変革型リーダーシップ • …
20. ソフトウェアの デリバリーと運用 パフォーマンス 以下の指標で計測 速度 • 変更のリードタイム • デプロイ頻度 安定性 • サービス復旧にかかる時間 • 変更による失敗率 信頼性 ビジネスの成果 • 市場シェア • 収益性 • 従業員定着率 • 運用効率性 • 顧客満足度 • … 予測 DevOps の能力 技術 • トランクベース開発 • クラウド インフラストラクチャ • セキュリティのシフトレフト • … プロセス • 小さいバッチ単位での作業 • 変更承認の合理化 • バリュー ストリームの可視化 • … 文化 • 強い信頼 & 積極的な情報共有 • 学習文化 • 変革型リーダーシップ • … 予測
21. 結局、何から始めたら良い？ ~ DORA metrics から始める first step ~
22. DORA Quick Check で現在地を知る

24. Google 翻訳 ver 

25. Google 翻訳 ver 

26. 1. 変更のリードタイム（結果：平均以下標準偏差内） 
 • 優先度中で平均値を目指す 
 • 1 w ~ 1 mo → 1 d ~ 1 w（現状→目標） 
 2. デプロイ頻度（結果：平均以下標準偏差外）
 • 優先度高で標準偏差内の数値を目指す 
 • 1 ~ 6 mo → 1 w ~ 1 mo（現状→目標） 
 3. 変更による失敗率（結果：平均以下標準偏差外）
 • 優先度高で標準偏差内の数値を目指す 
 • 50 % → 40 %（現状→目標） 
 4. サービス復旧にかかる時間（結果：平均以下標準偏差内） 
 • 優先度中で平均値を目指す 
 • 1 d ~ 1 w → 0 ~ 1d（現状→目標） 
 ゴールを設定する

27. 技術
 • クラウドインフラストラクチャ 
 • CI/CD
 • 疎結合アーキテクチャ 
 • オブザーバビリティ etc.
 プロセス
 • 小さいバッチ単位での作業 
 • 変更承認の合理化 etc.
 文化
 • 仕事の満足度
 • 学習文化
 • 変革型リーダーシップ etc.
 ゴール達成に必要な DevOps を決める
 DevOps の能力 | Google Cloud https://cloud.google.com/architecture/devops/capabilities?hl=ja
28. 実際に CI/CD を導入してみる ~ Cloud Deploy & Skaffold での実践例 ~
29. Cloud Deploy
 CD（継続的デリバリー）に特化した Google Cloud のフルマネージドサービス 
 デプロイフローの自動化を簡単に実現できる 
 Skaffold
 Cloud Deploy が内部で利用するコンテナ開発・ビルド・デプロイのための OSS CLI 
 デリバリーパイプラインをローカル環境で使用することも可能 
 Cloud Deploy, Skaffold とは

30. デリバリーパイプライン

31. デリバリーパイプラインの構成ファイル
 (パイプライン管理) clouddeploy.yaml 
 
 デリバリーパイプラインを定義 
 （実行順序、Rollback 条件、etc.） 
 (成果物管理) skaffold.yaml 
 
 上記のマニフェスト群をまとめて定義 
 デプロイ検証やデプロイフック等の処理もここで定義 
 (マニフェスト)
 service-staging.yaml, service-prod.yaml, etc. 
 
 デプロイするアプリケーションのマニフェストを定義 

32. 指標の自動測定

33. 速度 安定性 デプロイ頻度 変更の リードタイム 変更による 失敗率 サービス復旧に かかる時間
34. 速度 安定性 デプロイ頻度 変更の リードタイム 変更による 失敗率 サービス復旧に かかる時間 2つの指標は Cloud Deploy で測定可能

35. 速度 安定性 デプロイ頻度 変更の リードタイム 変更による 失敗率 サービス復旧に かかる時間 全ての指標を自動測定したい場合
 https://cloud.google.com/blog/ja/products/gcp/another-way-to-gauge-your-devops-performance-according-to-dora
36. 詳細はこちらから
 https://zenn.dev/cloud_ace/articles/cicd-clouddeploy
37. さいごに
38. まとめ
 以下の手順を踏むことで、カジュアルに CI/CD の導入が可能
 1. DORA Quick Check で現在地を知る
 2. ゴールを設定する
 3. ゴール達成に必要な DevOps を決める
 4. DevOps 導入
 5. 指標を測定し、継続的に改善

39. ソフトウェアの デリバリーと運用 パフォーマンス 以下の指標で計測 速度 • 変更のリードタイム • デプロイ頻度 安定性 • サービス復旧にかかる時間 • 変更による失敗率 信頼性 ビジネスの成果 • 市場シェア • 収益性 • 従業員定着率 • 運用効率性 • 顧客満足度 • … 予測 DevOps の能力 技術 • トランクベース開発 • クラウド インフラストラクチャ • セキュリティのシフトレフト • … プロセス • 小さいバッチ単位での作業 • 変更承認の合理化 • バリュー ストリームの可視化 • … 文化 • 強い信頼 & 積極的な情報共有 • 学習文化 • 変革型リーダーシップ • … 予測
40. 目指すこと
 • CI/CD 導入/改善にあたって「何から始めたら良いか」を知ってもらう 
 • DORA metrics の活用方法を理解してもらう 
 
 目指さないこと
 • The Accelerate State of DevOps Report 2023 の詳細を理解してもらう 
 • Cloud Deploy と Skaffold の詳細を理解してもらう 
 発表の位置づけ

41. より詳細を知りたい人向けのご紹介
 https://zenn.dev/google_cloud_jp/articles/state-of-devops-report-2023 https://zenn.dev/cloud_ace/articles/cicd-clouddeploy
42. 今すぐ実践したい人向けのご紹介

43. 4. パート−製品、マーケットプレイス製品の取扱い Google Cloud を活用したサービスの利用拡大を目的として、 パートナー製品としての販 売、Google Cloud マーケットプレイスへの登録などを支援します。 3. トレーニングによるエンジニア育成 現役のトップエンジニア講師による Google Cloud 認定トレーニングを提供し、 毎年数千人のエンジニアを育成しています。 2. システムインテグレーション／マネージドサービス システムのクラウド移行やクラウドネイティブ開発など、お客様のニーズに合わせて コンサル ティングおよび受託開発や内製化技術支援 をご提供します。また 24時間365日の監視運用 サービスも提供しています。 1. 請求代行 と テクニカルサポート Google Cloud の請求代行と共に、特別な料金プランと テクニカルサポートを提供します。 また、個別の課題に対する相談窓口として、 カスタマーサクセス担当者もご支援します。 本格的な支援を受けたい人向けのご紹介

44. Thank you.