Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
CI改善もDatadogとともに
Search
τ μ [taumu]
February 11, 2025
Programming
0
290
CI改善もDatadogとともに
τ μ [taumu]
February 11, 2025
Tweet
Share
More Decks by τ μ [taumu]
See All by τ μ [taumu]
react-query-auth + gin-jwtでユーザ認証
taumu
0
790
総合トップグロースに向けた負債返済のお話
taumu
0
1.1k
Gatsby + React + Redux によるゼロリスク・ハイリターンな個人開発
taumu
2
1.4k
Other Decks in Programming
See All in Programming
PHPでWebSocketサーバーを実装しよう2025
kubotak
0
290
なんとなくわかった気になるブロックテーマ入門/contents.nagoya 2025 6.28
chiilog
1
270
『自分のデータだけ見せたい!』を叶える──Laravel × Casbin で複雑権限をスッキリ解きほぐす 25 分
akitotsukahara
2
640
10 Costly Database Performance Mistakes (And How To Fix Them)
andyatkinson
0
400
Railsアプリケーションと パフォーマンスチューニング ー 秒間5万リクエストの モバイルオーダーシステムを支える事例 ー Rubyセミナー 大阪
falcon8823
5
1.1k
A full stack side project webapp all in Kotlin (KotlinConf 2025)
dankim
0
120
Systèmes distribués, pour le meilleur et pour le pire - BreizhCamp 2025 - Conférence
slecache
0
120
Python型ヒント完全ガイド 初心者でも分かる、現代的で実践的な使い方
mickey_kubo
1
130
Google Agent Development Kit でLINE Botを作ってみた
ymd65536
2
250
なぜ適用するか、移行して理解するClean Architecture 〜構造を超えて設計を継承する〜 / Why Apply, Migrate and Understand Clean Architecture - Inherit Design Beyond Structure
seike460
PRO
3
780
猫と暮らす Google Nest Cam生活🐈 / WebRTC with Google Nest Cam
yutailang0119
0
140
MDN Web Docs に日本語翻訳でコントリビュートしたくなる
ohmori_yusuke
1
130
Featured
See All Featured
The World Runs on Bad Software
bkeepers
PRO
69
11k
Optimizing for Happiness
mojombo
379
70k
YesSQL, Process and Tooling at Scale
rocio
173
14k
Evolution of real-time – Irina Nazarova, EuRuKo, 2024
irinanazarova
8
820
The Language of Interfaces
destraynor
158
25k
Intergalactic Javascript Robots from Outer Space
tanoku
271
27k
Designing Dashboards & Data Visualisations in Web Apps
destraynor
231
53k
RailsConf 2023
tenderlove
30
1.1k
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
26
2.9k
Code Reviewing Like a Champion
maltzj
524
40k
The Illustrated Children's Guide to Kubernetes
chrisshort
48
50k
Build The Right Thing And Hit Your Dates
maggiecrowley
36
2.8k
Transcript
20250212 taumu CI改善もDatadogとともに
SODA Inc. Backend Engineer taumu
鑑定付き 利用者数 No.1 スニーカー・トレカ フリマアプリ
SRE SWE SODAの技術組織と Datadog 権限はほぼ全て解放されており誰でも利用できる Application
Securityで 不正アクセスの自動ブロッ クをしたい APMで分散トレーシングし たい
SODA Inc. Backend Engineer Datadogの好きなところ: なんでも監視できる (複数種類の監視ツール使ったり チームごとにサイロ化したりしない) taumu
なんでも?
CI/CDも!
20250212 taumu CI改善もDatadogとともに
本発表について 背景:GitHub Actionsで実行されているCI/CDが遅い(ともに30分オーバー) CI = コミット毎に実行される自動テスト。マージには全件合格必須 CD: dev環境/本番環境へのデプロイ アクション:CI/CD実行時間短縮プロジェクトを立ち上げ様々な施策を実施 プロジェクトの詳細は以下の記事を参照ください
エンジニアだけのスクラムチームでリファクタリングプロジェクトを回してみたらこうなった https://zenn.dev/team_soda/articles/65fe9ee39abb8b 結果:CI/CDともに15分前後にまで短縮できた 本発表は本プロジェクトへのDatadogによる貢献について話す
DatadogのCI Visibility機能 CI/CD実行状況の統計が見られる機能
DatadogのCI Visibility機能 CI/CD実行状況の統計が見られる機能
PDCAサイクル Plan: ボトルネックを見つける&施策を出す 1 Do: 施策を実行する 2 Check: 期待通り改善されたかをチェックする 3
Action: 採用する or 棄却する 4
Plan: ボトルネックを見つける&施策を出す 1
Plan: ボトルネックを見つける&施策を出す Toplistで ワークフローの ボトルネックを調べる ボトルネック (平均30分掛かっている) (1)ボトルネックのワークフローを見つける
Plan: ボトルネックを見つける&施策を出す ワークフローの詳細を開くとフ レームグラフが見られる クリティカルパスで 絞り込める (2)ボトルネックのジョブを見つける
Plan: ボトルネックを見つける&施策を出す クリティカルパスで 絞り込める ボトルネックになっているジョブに対して施策を考える (ジョブの実行順序の組み替えだけで10分以上短縮できた例もあり) (2)ボトルネックのジョブを見つける ワークフローの詳細を開くとフ レームグラフが見られる
PDCAサイクル Plan: ボトルネックを見つける&施策を出す 1 Do: 施策を実行する 2 Check: 期待通り改善されたかをチェックする 3
Action: 採用する or 棄却する 4
Do: 施策を実行する 2
Do: 施策を実行する GitHub Actionsのymlファイルを改修してリリースする
PDCAサイクル Plan: ボトルネックを見つける&施策を出す 1 Do: 施策を実行する 2 Check: 期待通り改善されたかをチェックする 3
Action: 採用する or 棄却する 4
Check: 期待通り改善されたかをチェックする 3
Check: 期待通り改善されたかをチェックする Timeseriesで時系列平均を表示 CI実行時間の削減を確認 リリース前後でCI実行時間が削減されているかチェック
PDCAサイクル Plan: ボトルネックを見つける&施策を出す 1 Do: 施策を実行する 2 Check: 期待通り改善されたかをチェックする 3
Action: 採用する or 棄却する 4
Action: 採用する or 棄却する 4
Action: 採用する or 棄却する 採用 棄却 実行時間削減を達成できたか Check Action 効果のあった施策だけを採用することは重要
(普段の機能開発もそうだが、特にCIワークフローファイルは表現力の限界から負債化しやすいため) →効果があるかないか正確に把握できることが重要 Datadogで施策に対する効果を正確に把握できるので ビジネス上の判断が正確に下せる
PDCAサイクル Plan: ボトルネックを見つける&施策を出す 1 Do: 施策を実行する 2 Check: 期待通り改善されたかをチェックする 3
Action: 採用する or 棄却する 4 1~4までやったら、また1に戻る→このループを繰り返す
結果 ボトルネックになっていた CIワークフロー(統合テスト) 2ヶ月掛けて26m→13.5m
• Runnerのスケールアップ • ジョブ実行順序の組み替え • ビルドをキャッシュさせる[1][2] • ファイルの依存ツリーを作って編集したファイルに依存するテストだけ行う[1][3] 最後に:行った施策について 施策の検討に集中できるので、高難度な施策を実現するに至った
[1] どうやるの?CICDの実行時間をグッと短縮した方法 https://zenn.dev/team_soda/articles/b10194a91dbd34 [2] Goのビルドキャッシュを使って CIを7分短縮した話 https://zenn.dev/team_soda/articles/b2ae7b683f3f15 [3] 部分的にGoのテスト速度向上 https://zenn.dev/team_soda/articles/3686c0162f27dc
まとめ DatadogのCI Visibilityを使うと • CI実行に関する正確な統計情報が一目瞭然になる それにより • CI実行時間のボトルネックを簡単に見つけることができる • PDCAサイクルを回す形で継続的なCI改修ができる
• CIの改修に対する変化が明確になり、採用・棄却の正確な判断ができる • それにより大胆なCI改修も入れやすくなる