Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
MLCT #5 Pipeline Jungles とたたかう話
Search
soonraah
July 13, 2018
Technology
0
1.8k
MLCT #5 Pipeline Jungles とたたかう話
soonraah
July 13, 2018
Tweet
Share
More Decks by soonraah
See All by soonraah
Amazon EMR でのバッチ処理 Spark アプリケーション運用で気をつけたいこと
soonraah
1
610
Apache Spark による推薦システム案件例
soonraah
11
7.8k
Spark MLlib でやってみる協調フィルタリング
soonraah
8
7.3k
Other Decks in Technology
See All in Technology
エンタープライズ環境下での Active Directory の運用 TIPS
tamaiyutaro
1
1.6k
Databricks における 『MLOps』
databricksjapan
2
140
SIEMを用いて、セキュリティログ分析の可視化と分析を実現し、PDCAサイクルを回してみた
coconala_engineer
0
220
「共通基盤」を超えよ! 今、Platform Engineeringに取り組むべき理由
jacopen
25
5.9k
OpenTelemetry を使ったトレースエグザンプラーの活用 / otel-trace-exemplar
k6s4i53rx
2
640
テストプロセスで大事にしていること #jasstnano
makky_tyuyan
0
130
長期運用プロジェクトでのMySQLからTiDB移行の検証
colopl
2
690
長期間TiDBを使ってきた話 @ 私たちはなぜNewSQLを使うのかTiDB選定5社が語る選定理由と活用LT / Experiences with TiDB Over Time
chibiegg
2
730
Hands-on / Kaname Frusawa / Cloud Compare Users Meetup 2024 at University of Tokyo on April 17
paraworld
2
470
インシデントレスポンスのライフサイクルを廻すポイントってなに / Pinpoints of Incidentresponse Lifecycle for Operation
sakaitakeshi
1
300
Databricksを活用してDELISH KITCHENのレシピレコメンドを開発した話
furu8
0
250
LLM とプロンプトエンジニアリング/チューターをビルドする / LLM and Prompt Engineering and Building Tutors
ks91
PRO
0
220
Featured
See All Featured
Debugging Ruby Performance
tmm1
70
11k
Scaling GitHub
holman
457
140k
What the flash - Photography Introduction
edds
64
11k
jQuery: Nuts, Bolts and Bling
dougneiner
59
7.1k
Cheating the UX When There Is Nothing More to Optimize - PixelPioneers
stephaniewalter
273
13k
The Cost Of JavaScript in 2023
addyosmani
14
3.8k
Designing for humans not robots
tammielis
247
25k
A designer walks into a library…
pauljervisheath
199
23k
Building a Scalable Design System with Sketch
lauravandoore
455
32k
How to Ace a Technical Interview
jacobian
272
22k
Atom: Resistance is Futile
akmur
258
25k
RailsConf 2023
tenderlove
2
530
Transcript
1JQFMJOF+VOHMFTͱ ͔ͨͨ͏ .BDIJOF-FBSOJOH$BTVBM5BML 'SJ !TPPOSBBI
"(&/%" • ຊͷ͓ • 1JQFMJOF+VOHMFTͱ • ฐࣾͷػցֶश • ฐࣾͷ 1JQFMJOF+VOHMFT
• վળ • ·ͱΊ 2
ຊͷ͓ • ৽͍͠ϑϨʔϜϫʔΫͷ͠·ͤΜ • ΞϧΰϦζϜͷ͠·ͤΜ • ػցֶशʹ·ͭΘΔٕज़తෛ࠴ͱͷ͖߹͍ํͷ Ұྫͱͯ͠ฐࣾͷ 1JQFMJOF+VOHMFTͱͦͷରࡦ ʹ͍ͭͯ͝հ͠·͢
3
1JQFMJOF+VOHMFTͱ • ػցֶशγεςϜͷΞϯνύλʔϯͷͭ • ػցֶशͷͨΊͷσʔλநग़ॲཧ͕ෳࡶʹͳͬͯ͠·͏͜ͱ • ଟछͷಛྔɺσʔλιʔε • +0*/͍ͬͺ͍ •
தؒϑΝΠϧͷग़ྗ • FUD • ਫ਼ΛٻΊ͍ͯ͘աఔͰͩΜͩΜෳࡶʹਐԽ͍ͯ͘͠ • ࢀߟ • .BDIJOF-FBSOJOH5IF)JHI*OUFSFTU$SFEJU$BSEPG5FDIOJDBM%FCU • )JEEFO5FDIOJDBM%FCUJO.BDIJOF-FBSOJOH4ZTUFNT 4
ฐࣾͷػցֶश • Πϯλʔωοτࠂ • ΑΓΫϦοΫ͞Ε͍݅͢ͷࠂʹߴ͘ೖࡳ͍ͨ͠ • $53 $MJDL5ISPVHI3BUJP ༧ଌ •
ֶशσʔλ • αϯϓϧࠂ͕දࣔ͞Εͨͱ͍͏Πϕϯτ • ಛྔදࣔ͞Εͨࠂʹͻͮ͘ಛ • ϥϕϧDMJDL͞Εͨ PS͞Εͳ͔ͬͨ • ৄͪ͘͜͠Β • ωοτࠂ৴αʔϏεʹ͓͚Δ.-γεςϜͷ࣮ͱӡ༻ • ωοτࠂ࣮ͰػցֶशΛ׆༻͢Δ্Ͱͷۤ࿑ 5
ฐࣾͷػցֶश DPOU`E • ֶशσʔλͷݩͱͳΔϩάΦϯϓϨ )JWFʹอଘ • ಛఆͷαʔό্Ͱඇࢄʗόονֶश 6 ֶश༻αʔό σʔλநग़
)%'4
ฐࣾͷ 1JQFMJOF+VOHMFT • )JWF2-ʹΑΔֶशσʔλநग़ • ෳͷ +0*/ΛؚΉෳࡶͳ͍ΫΤϦ • ͩΜͩΜͱਐԽ͍ͯ͠Δ •
ࣅͨΑ͏ͳɺ͔͠͠গ͠ҟͳͬͨϞσϧ͝ͱͷ ෳͷΫΤϦ • ςετ͕ͳ͍ • தؒσʔλΛग़ྗ͢Δଟஈͷॲཧ 7
ฐࣾͷ 1JQFMJOF+VOHMFT DPOU`E • Կ͕ى͔ͬͨ͜ • ! நग़݅ͷޡΓͷൃݟͷΕ • !
ϦϑΝΫλϦϯάͰ͖ͳ͍ • ! ϨϏϡʔ͕͖͍ͭ 8
վળ 1IBTF4QBSLBQQԽ • )JWF2-ʹΑΔநग़͔Β "QBDIF4QBSL • ͜ͷ࣌ͰϞσϧ͝ͱͷ OBJWFͳ࣮ • !
QSPT • ୯ମςετ͕هड़Մೳʹ • ͘ͳΓதؒϑΝΠϧΛग़ྗ͢Δଟஈॲཧ͕ෆཁʹ • " DPOT • )JWF2-ΑΓ։ൃͷෑډ͕ߴ͍ 4DBMB4QBSL 9
վળ 1IBTF$POGJHVSBUJPOԽ • Ϟσϧ͝ͱʹඞཁͳઃఆΛ :".-ܗࣜͷίϯϑΟά ϑΝΠϧʹهࡌ͠ɺͦΕΛಡΜͩ 4QBSLBQQ͕நग़ • OBJWFͳ࣮Λͨͨ͠Ίʹڞ௨ԽͰ͖Δͱ͜Ζ͕ݟ͑ͨ •
ίϯϑΟάʹಛɺσʔλظؒɺϑΟϧλॲཧͳͲΛࢦఆ • ! QSPT • جຊతʹ 4DBMB4QBSLͷ։ൃ͕ෆཁʹ • " DPOT • ͜Ε·Ͱͱେ͖͘ҟͳΔΑ͏ͳநग़ॲཧͷ։ൃίετ • ʢͰͦ͏ͦ͏ͳ͍ΑͶʣ 10
վળͷ·ͱΊ 11 1IBTF 5FTUBCJMJUZ &GGJDJFODZ .BJOUBJOBCJMJUZ 1IBTF վળલ ! !
" 1IBTF 4QBSLBQQԽ " " ! 1IBTF $POGJHVSBUJPOԽ " " " كʹ!
ػցֶशͷෛ࠴Λ͚ͬͭΔͷʹ ຊʹඞཁͳ͜ͱ 1BZJOHEPXO.-SFMBUFEUFDIOJDBMEFCUSFRVJSFT BTQFDJGJDDPNNJUNFOU XIJDIDBOPGUFOPOMZCF BDIJFWFECZBTIJGUJOUFBNDVMUVSF3FDPHOJ[JOH QSJPSJUJ[JOH BOESFXBSEJOHUIJTFGGPSUJTJNQPSUBOU GPSUIFMPOHUFSNIFBMUIPGTVDDFTTGVM.-UFBNT
)JEEFO5FDIOJDBM%FCUJO.BDIJOF-FBSOJOH4ZTUFNT ΑΓ 12
͝ਗ਼ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠ 13