Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
推薦のためのdata pipelineのモニタリングとロギング
Search
Hazumi Ichijo
April 16, 2019
Programming
3
5.3k
推薦のためのdata pipelineのモニタリングとロギング
Hazumi Ichijo
April 16, 2019
Tweet
Share
More Decks by Hazumi Ichijo
See All by Hazumi Ichijo
Rubyのコード削除したい時 僕がやること
hazumirr
0
190
テーブル駆動テストと状態
hazumirr
4
2k
オンラインテストしようと思った その日に開始できる環境を目指して
hazumirr
0
950
推薦によるプロダクト改善とマイクロサービスが噛み合った話
hazumirr
2
4k
ChatGPTで僕が知っていることまとめ
hazumirr
3
3k
プロダクトチームとどう 協業し分析環境を改善するか
hazumirr
2
1.5k
bqv速習会
hazumirr
6
6.8k
Protobuf on Rails Tips
hazumirr
1
950
Before Chaos Engineering
hazumirr
1
810
Other Decks in Programming
See All in Programming
Duke on CRaC with Jakarta EE
ivargrimstad
0
160
読まないコードリーディング術
hisaju
0
120
ML.NETで始める機械学習
ymd65536
0
240
Your Architecture as a Crime Scene:Forensic Analysis @bastacon 2025 in Frankfurt
manfredsteyer
PRO
0
100
推しメソッドsource_locationのしくみを探る - はじめてRubyのコードを読んでみた
nobu09
2
360
GoとPHPのインターフェイスの違い
shimabox
2
220
未経験でSRE、はじめました! 組織を支える役割と軌跡
curekoshimizu
1
200
もう少しテストを書きたいんじゃ〜 #phpstudy
o0h
PRO
21
4.4k
仕様変更に耐えるための"今の"DRY原則を考える
mkmk884
9
3.3k
コードを読んで理解するko build
bells17
1
120
Learning Kotlin with detekt
inouehi
1
200
Rubyと自由とAIと
yotii23
6
1.9k
Featured
See All Featured
Designing on Purpose - Digital PM Summit 2013
jponch
117
7.1k
Why Our Code Smells
bkeepers
PRO
336
57k
Fantastic passwords and where to find them - at NoRuKo
philnash
51
3k
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
21
2.5k
Typedesign – Prime Four
hannesfritz
41
2.5k
No one is an island. Learnings from fostering a developers community.
thoeni
21
3.2k
Measuring & Analyzing Core Web Vitals
bluesmoon
6
260
GitHub's CSS Performance
jonrohan
1030
460k
Learning to Love Humans: Emotional Interface Design
aarron
273
40k
Designing for humans not robots
tammielis
250
25k
Building Your Own Lightsaber
phodgson
104
6.2k
KATA
mclloyd
29
14k
Transcript
©2019 Wantedly, Inc. ਪનͷͨΊͷdata pipelineͷ ϞχλϦϯάͱϩΪϯά Apr 16, 2019 -
Hazumi Ichijo Data Pipeline Casual Talk #2
©2018 Wantedly, Inc. ࣗݾհ Ұᑍ!IB[VNJSS!SFSPTU %BUB&OHJOFFSJO8BOUFEMZ (P 3BJMT 3FBDUʜ ւಓग़
©2019 Wantedly, Inc. ͳͥϞχλϦϯάɾϩΪϯά͢Δ͔ ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ͲΕ͘Β͍कΔ͖͔
ԿΛ͖͔͢
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC σʔλ σʔλ
σʔλ αʔϏε
©2019 Wantedly, Inc. ͕ൃੜͨ͠ͱ͖Ͳ͏͠·͢ʁ
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC +PC +PC
+PC σʔλ σʔλ σʔλ
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC +PC +PC
+PC σʔλ σʔλ σʔλ
©2019 Wantedly, Inc. +PC +PC +PC +PC +PC +PC +PC
+PC σʔλ σʔλ σʔλ ʁ ʁ ʁ
©2019 Wantedly, Inc. ͦͦͳ͍ ζϨΔʢྫݹ͍σʔλΛݩʹͨ͠ਪન͕ग़Δʣ ग़ͯ͘Δঢ় ਪનͷͨΊͷσʔλ͕
©2019 Wantedly, Inc. ͦͦͳ͍ ζϨΔʢྫݹ͍σʔλΛݩʹͨ͠ਪન͕ग़Δʣ ग़ͯ͘Δঢ় ਪનͷͨΊͷσʔλ͕ ؾ͖ͮʹ͍͘
©2019 Wantedly, Inc. ͕ൃੜͨ͠ࡍʹؾ͖ͮʹ͍͘ ͕ൃੜͨ࣌͠ͷௐࠪํ๏͕໘ ͳͥϞχλϦϯάɾϩΪϯάΛ͢Δ͔ ਪનͷͨΊͷσʔλ
©2019 Wantedly, Inc. ͕ൃੜͨ͠ࡍʹؾ͖ͮʹ͍͘ ͕ൃੜͨ࣌͠ͷௐࠪํ๏͕໘ ͳͥϞχλϦϯάɾϩΪϯάΛ͢Δ͔ ਪનͷͨΊͷσʔλ ϞχλϦϯάɾϩΪϯάΛͯ͠ൃੜ࣌ʹඋ͑Δ
©2019 Wantedly, Inc. ԿΛϞχλϦϯάɾϩΪϯά͢Δʁ
©2019 Wantedly, Inc. ຖճܾΊΒΕͨॴʹσʔλ͕ग़ྗ͞ΕΔ͖ ग़ྗ͞ΕΔσʔλ͕ਖ਼͍͠ඞཁ͕͋Δ w ґଘ͢Δσʔλ͕࠷৽ͷঢ়ଶ w
ܾΊΒΕͨ࣌ࠁʹ࣮ߦ͞Εͯ΄͍͠ w FUD ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ਪનͷͨΊͷσʔλ
©2019 Wantedly, Inc. ຖճܾΊΒΕͨॴʹσʔλ͕ग़ྗ͞ΕΔ͖ ग़ྗ͞ΕΔσʔλ͕ਖ਼͍͠ඞཁ͕͋Δ w ґଘ͢Δσʔλ͕࠷৽ͷঢ়ଶ w
ܾΊΒΕͨ࣌ࠁʹ࣮ߦ͞Εͯ΄͍͠ w FUD ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ਪનͷͨΊͷσʔλ ϞχλϦϯάɾϩΪϯάΛͯ͠कΕΔΑ͏ʹ͢Δ
©2019 Wantedly, Inc. ΞϓϦέʔγϣϯ w δϣϒ࣮ߦ࣌ͷ࣮ߦঢ়گͷʢྫֶशʣ w ΦϯϥΠϯධՁͷ w
ॻ͖ग़͠ઌʹσʔλ͕ॻ͖ࠐ·Ε͔ͨ w Τϥʔ௨ w Կʹ͕͔͔࣌ؒΔ͔ Πϯϑϥ w δϣϒ͕ޭ͔ͨ͠ɾࣦഊ͔ͨ͠ɾ࣮ߦ͞Ε͔ͨ w ઃఆ͍ͯ͠Δ࣌ؒʹ࣮ߦ͞Ε͔ͨ ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ϞχλϦϯά
©2019 Wantedly, Inc. w ॲཧͷ༰͕Θ͔Δͷʢྫ42-ʣ w δϣϒͷ։࢝ɾऴྃ w ॻ͖ग़ͨ͠σʔλ w
FUD ԿΛϞχλϦϯάɾϩΪϯά͖͔͢ ϩΪϯά
©2019 Wantedly, Inc. ͲΕ͘Β͍कΒΕΔ͖ͷʁ
©2019 Wantedly, Inc. αʔϏεશମ͕͑ͳ͘ͳΔ ,1*ʹ99Өڹ͕ͰΔ Ұ෦ͷػೳ͕͑ͳ͘ͳΔ ͲΕ͘Β͍कΔ͖͔
͋Δਪનʹ͕͋Δͱɾɾɾ
©2019 Wantedly, Inc. αʔϏεશମ͕͑ͳ͘ͳΔ ,1*ʹ99Өڹ͕ͰΔ Ұ෦ͷػೳ͕͑ͳ͘ͳΔ ͲΕ͘Β͍कΔ͖͔
͋Δਪનʹ͕͋Δͱɾɾɾ ͦͦͦͷσʔλͷॏཁ͕Θ͔Δඞཁ͕͋Δ
©2019 Wantedly, Inc. ԿΛ͖͔͢
©2019 Wantedly, Inc. ॏཁΛͰ͖Δ͚ͩ໌֬ʹ͓ͯ͘͠ ϞχλϦϯάɾϩΪϯάͷ߲ચ͍ग़͠ ΠϯϑϥνʔϜͱڠྗͯ͠ɺ༧Ί w
ॏཁΛ͑Δ w ϞχλϦϯάɾϩΪϯάͷλεΫͷׂΓৼΓΛߦ͏ w ͕ൃੜͨ࣌͠ɺͲ͏͍ͬͨϑϩʔͰ֬ೝ͢Δ͔ɺͲ͏ରॲ ͢Δ͔Λ͑ΔඞཁͰ͋Ε࣮ࡍʹϦϋʔαϧΛߦ͏ ԿΛ͖͔͢