Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
CI改善もDatadogとともに
Search
τ μ [taumu]
February 11, 2025
Programming
0
310
CI改善もDatadogとともに
τ μ [taumu]
February 11, 2025
Tweet
Share
More Decks by τ μ [taumu]
See All by τ μ [taumu]
自作AIアプリの品質を上げるためにプロンプトエンジニアリングに再入門する
taumu
0
9
AIによる商品説明文生成〜よい説明文をとは何かを考える
taumu
0
21
react-query-auth + gin-jwtでユーザ認証
taumu
0
810
総合トップグロースに向けた負債返済のお話
taumu
0
1.1k
Gatsby + React + Redux によるゼロリスク・ハイリターンな個人開発
taumu
2
1.4k
Other Decks in Programming
See All in Programming
contribution to astral-sh/uv
shunsock
0
450
Pythonに漸進的に型をつける
nealle
1
110
開発組織の戦略的な役割と 設計スキル向上の効果
masuda220
PRO
5
800
overlayPreferenceValue で実現する ピュア SwiftUI な AdMob ネイティブ広告
uhucream
0
200
XP, Testing and ninja testing ZOZ5
m_seki
3
790
Claude Agent SDK を使ってみよう
hyshu
0
1.3k
あなたとKaigi on Rails / Kaigi on Rails + You
shimoju
0
180
コード生成なしでモック処理を実現!ovechkin-dm/mockioで学ぶメタプログラミング
qualiarts
0
240
CSC305 Lecture 06
javiergs
PRO
0
270
The Past, Present, and Future of Enterprise Java
ivargrimstad
0
140
bootcamp2025_バックエンド研修_WebAPIサーバ作成.pdf
geniee_inc
0
120
チームの境界をブチ抜いていけ
tokai235
0
210
Featured
See All Featured
Building Applications with DynamoDB
mza
96
6.7k
Site-Speed That Sticks
csswizardry
13
920
VelocityConf: Rendering Performance Case Studies
addyosmani
332
24k
Optimizing for Happiness
mojombo
379
70k
Done Done
chrislema
185
16k
Chrome DevTools: State of the Union 2024 - Debugging React & Beyond
addyosmani
9
920
GraphQLとの向き合い方2022年版
quramy
49
14k
Rails Girls Zürich Keynote
gr2m
95
14k
Typedesign – Prime Four
hannesfritz
42
2.8k
CoffeeScript is Beautiful & I Never Want to Write Plain JavaScript Again
sstephenson
162
15k
Fireside Chat
paigeccino
40
3.7k
A Tale of Four Properties
chriscoyier
161
23k
Transcript
20250212 taumu CI改善もDatadogとともに
SODA Inc. Backend Engineer taumu
鑑定付き 利用者数 No.1 スニーカー・トレカ フリマアプリ
SRE SWE SODAの技術組織と Datadog 権限はほぼ全て解放されており誰でも利用できる Application
Securityで 不正アクセスの自動ブロッ クをしたい APMで分散トレーシングし たい
SODA Inc. Backend Engineer Datadogの好きなところ: なんでも監視できる (複数種類の監視ツール使ったり チームごとにサイロ化したりしない) taumu
なんでも?
CI/CDも!
20250212 taumu CI改善もDatadogとともに
本発表について 背景:GitHub Actionsで実行されているCI/CDが遅い(ともに30分オーバー) CI = コミット毎に実行される自動テスト。マージには全件合格必須 CD: dev環境/本番環境へのデプロイ アクション:CI/CD実行時間短縮プロジェクトを立ち上げ様々な施策を実施 プロジェクトの詳細は以下の記事を参照ください
エンジニアだけのスクラムチームでリファクタリングプロジェクトを回してみたらこうなった https://zenn.dev/team_soda/articles/65fe9ee39abb8b 結果:CI/CDともに15分前後にまで短縮できた 本発表は本プロジェクトへのDatadogによる貢献について話す
DatadogのCI Visibility機能 CI/CD実行状況の統計が見られる機能
DatadogのCI Visibility機能 CI/CD実行状況の統計が見られる機能
PDCAサイクル Plan: ボトルネックを見つける&施策を出す 1 Do: 施策を実行する 2 Check: 期待通り改善されたかをチェックする 3
Action: 採用する or 棄却する 4
Plan: ボトルネックを見つける&施策を出す 1
Plan: ボトルネックを見つける&施策を出す Toplistで ワークフローの ボトルネックを調べる ボトルネック (平均30分掛かっている) (1)ボトルネックのワークフローを見つける
Plan: ボトルネックを見つける&施策を出す ワークフローの詳細を開くとフ レームグラフが見られる クリティカルパスで 絞り込める (2)ボトルネックのジョブを見つける
Plan: ボトルネックを見つける&施策を出す クリティカルパスで 絞り込める ボトルネックになっているジョブに対して施策を考える (ジョブの実行順序の組み替えだけで10分以上短縮できた例もあり) (2)ボトルネックのジョブを見つける ワークフローの詳細を開くとフ レームグラフが見られる
PDCAサイクル Plan: ボトルネックを見つける&施策を出す 1 Do: 施策を実行する 2 Check: 期待通り改善されたかをチェックする 3
Action: 採用する or 棄却する 4
Do: 施策を実行する 2
Do: 施策を実行する GitHub Actionsのymlファイルを改修してリリースする
PDCAサイクル Plan: ボトルネックを見つける&施策を出す 1 Do: 施策を実行する 2 Check: 期待通り改善されたかをチェックする 3
Action: 採用する or 棄却する 4
Check: 期待通り改善されたかをチェックする 3
Check: 期待通り改善されたかをチェックする Timeseriesで時系列平均を表示 CI実行時間の削減を確認 リリース前後でCI実行時間が削減されているかチェック
PDCAサイクル Plan: ボトルネックを見つける&施策を出す 1 Do: 施策を実行する 2 Check: 期待通り改善されたかをチェックする 3
Action: 採用する or 棄却する 4
Action: 採用する or 棄却する 4
Action: 採用する or 棄却する 採用 棄却 実行時間削減を達成できたか Check Action 効果のあった施策だけを採用することは重要
(普段の機能開発もそうだが、特にCIワークフローファイルは表現力の限界から負債化しやすいため) →効果があるかないか正確に把握できることが重要 Datadogで施策に対する効果を正確に把握できるので ビジネス上の判断が正確に下せる
PDCAサイクル Plan: ボトルネックを見つける&施策を出す 1 Do: 施策を実行する 2 Check: 期待通り改善されたかをチェックする 3
Action: 採用する or 棄却する 4 1~4までやったら、また1に戻る→このループを繰り返す
結果 ボトルネックになっていた CIワークフロー(統合テスト) 2ヶ月掛けて26m→13.5m
• Runnerのスケールアップ • ジョブ実行順序の組み替え • ビルドをキャッシュさせる[1][2] • ファイルの依存ツリーを作って編集したファイルに依存するテストだけ行う[1][3] 最後に:行った施策について 施策の検討に集中できるので、高難度な施策を実現するに至った
[1] どうやるの?CICDの実行時間をグッと短縮した方法 https://zenn.dev/team_soda/articles/b10194a91dbd34 [2] Goのビルドキャッシュを使って CIを7分短縮した話 https://zenn.dev/team_soda/articles/b2ae7b683f3f15 [3] 部分的にGoのテスト速度向上 https://zenn.dev/team_soda/articles/3686c0162f27dc
まとめ DatadogのCI Visibilityを使うと • CI実行に関する正確な統計情報が一目瞭然になる それにより • CI実行時間のボトルネックを簡単に見つけることができる • PDCAサイクルを回す形で継続的なCI改修ができる
• CIの改修に対する変化が明確になり、採用・棄却の正確な判断ができる • それにより大胆なCI改修も入れやすくなる