Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Kubeflow Pipelines on the Front Line
Search
Asei Sugiyama
February 16, 2022
Technology
0
850
Kubeflow Pipelines on the Front Line
第16回 MLOps 勉強会(Online) の登壇資料です
Asei Sugiyama
February 16, 2022
Tweet
Share
More Decks by Asei Sugiyama
See All by Asei Sugiyama
MLOps の現場から
asei
8
890
LLMOps: Eval-Centric を前提としたMLOps
asei
7
640
The Rise of LLMOps
asei
13
3k
生成AIの活用パターンと継続的評価
asei
15
2.6k
最近の Citadel AI の取り組みのご紹介 (Nov, 2024)
asei
2
120
仕事で取り組む 生成 AI 時代の対話の品質評価
asei
2
86
MLOps の処方箋ができるまで
asei
3
630
LLM を現場で評価する
asei
5
1k
生成 AI の評価方法
asei
8
2.4k
Other Decks in Technology
See All in Technology
データベースの負荷を紐解く/untangle-the-database-load
emiki
2
510
開発組織を進化させる!AWSで実践するチームトポロジー
iwamot
2
360
システム・ML活用を広げるdbtのデータモデリング / Expanding System & ML Use with dbt Modeling
i125
1
320
AI Agent時代なのでAWSのLLMs.txtが欲しい!
watany
2
220
生成AI×財務経理:PoCで挑むSlack AI Bot開発と現場巻き込みのリアル
pohdccoe
1
680
PHPで印刷所に入稿できる名札データを作る / Generating Print-Ready Name Tag Data with PHP
tomzoh
0
180
JavaにおけるNull非許容性
skrb
2
2.6k
【詳説】コンテンツ配信 システムの複数機能 基盤への拡張
hatena
0
230
急成長する企業で作った、エンジニアが輝ける制度/ 20250227 Rinto Ikenoue
shift_evolve
0
130
Oracle Database Technology Night #87-1 : Exadata Database Service on Exascale Infrastructure(ExaDB-XS)サービス詳細
oracle4engineer
PRO
1
170
Windows の新しい管理者保護モード
murachiakira
0
200
短縮URLをお手軽に導入しよう
nakasho
0
150
Featured
See All Featured
What’s in a name? Adding method to the madness
productmarketing
PRO
22
3.3k
Improving Core Web Vitals using Speculation Rules API
sergeychernyshev
10
510
How to train your dragon (web standard)
notwaldorf
91
5.9k
No one is an island. Learnings from fostering a developers community.
thoeni
21
3.1k
Done Done
chrislema
182
16k
The Power of CSS Pseudo Elements
geoffreycrofte
75
5.5k
Mobile First: as difficult as doing things right
swwweet
223
9.4k
Measuring & Analyzing Core Web Vitals
bluesmoon
6
250
How to Ace a Technical Interview
jacobian
276
23k
Writing Fast Ruby
sferik
628
61k
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
133
33k
Code Reviewing Like a Champion
maltzj
521
39k
Transcript
Kubeflow Pipelines on the Front Line Asei Sugiyama
主旨 Kubeflow Pipelines の最前線の様子をお届けします
TOC Source <- Pickup User Community
Source GitHub kubeflow/pipelines GitHub Releases PyPI GitHub Projects Google Group
Slack
GitHub kubeflow/pipelines SDK とバックエンドとフロ ントエンドの実装が含まれ るリポジトリ サンプルコードやコミュニ ティ提供のコンポーネント も含まれる でかい
GitHub Releases バックエンドのリリースが されると更新される
PyPI SDK の更新は PyPI を見る バックエンドとの更新とは 独立 ナンバリングも別
GitHub Projects 主要なProject KFP v2 KFP v2 compatible mode "KFP
Runtime Triage" がえらいこ とになっている
Google Group (1/2) 最重要 kubeflow- discuss@googlegroups.co m 誰でも加入可能
Google Group (2/2) 2週に1度打ち合わせが行わ れ、ここで意思決定がなさ れる 議事録が展開される (http://bit.ly/kfp-meeting- notes) 録画も展開される
Slack kubeflow.slack.com #kubeflow-pipelines #platform-aws #platform-gcp たまにアンケートをやって いる
TOC Source Pickup <- User Community
Pickup KFP SDK 2.0: API Experience & Breaking Changes (2021-09-15)
KFP SDK v2.0 Release Plan (2021-11-10) KFP v2 Component YAML design (2021-11-10) Introduction to Machine Learning Exchange and component catalog (2022-01-19) Kubeflow Pipelines support and new features in Cloud Pipelines Editor (2022-02-16)
KFP SDK 2.0: API Experience & Breaking Changes (1/2) 2021-09-15
時点で共有されたドキュメント 将来に備えるため、一度読んでおいたほうが良い
KFP SDK 2.0: API Experience & Breaking Changes (2/2) このあたりは知っておくと平穏が訪れそう
KFP SDK v2.0 Release Plan (1/2) 2021-11-10 時点で共有されたドキュメント 開発体制の性質上、時期を明言するものではない点に注意
KFP SDK v2.0 Release Plan (2/2) 内容はこれだけ (2021年11月とは一体…?)
KFP v2 Component YAML design (1/3) 2021-11-10 に共有されたドキュメント 個人的には驚愕した内容
KFP v2 Component YAML design (2/3) ComponentSpec: コンポー ネントの入出力を定義する YAMLファイル
SDK v2.0 で予定している破 壊的な変更を記述 KFP の黎明期 (v0.x) から用 いられていたのでやむなし か
KFP v2 Component YAML design (3/3) タイムラインを見て絶句しました (2021年11月時点)
Introduction to Machine Learning Exchange and component catalog (1/3) IBM
勢から 2022-01-19 時 点で共有された事項 リポジトリ machine- learning-exchange/mlx
Introduction to Machine Learning Exchange and component catalog (2/3) バックエンドは
Tekton リポジトリも別: kubeflow/kfp-tekton
Introduction to Machine Learning Exchange and component catalog (3/3) 機械学習パイプラ
インの実装が共有 されている Watson AI Pipelines で動作す る模様
Kubeflow Pipelines support and new features in Cloud Pipelines Editor
(1/3) 2022-02-16 に改めて何か が共有された模様 初出は 2021-08-04 なので 前からの取り組み Cloud-Pipelines/pipeline- editor
Kubeflow Pipelines support and new features in Cloud Pipelines Editor
(2/3) 開発者による Tutorial
Kubeflow Pipelines support and new features in Cloud Pipelines Editor
(3/3)
TOC Source Pickup User Community <-
GCPUG: GCP User Group https://gcpug.jp/ gcpug.slack.com #vertex- ai TFUG: TensorFlow
User Group https://tfug.jp/ tfug.slack.com #mlops