Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Lakehouseプラットフォームを 採用するまでの話/Lakehouse Platform ...
Search
Masatoshi Shimada
May 26, 2021
Programming
1
990
Lakehouseプラットフォームを 採用するまでの話/Lakehouse Platform Adoption
Masatoshi Shimada
May 26, 2021
Tweet
Share
More Decks by Masatoshi Shimada
See All by Masatoshi Shimada
データプラットフォーム技術におけるメダリオンアーキテクチャという考え方/DataPlatformWithMedallionArchitecture
smdmts
6
2.2k
Delta Lakeを用いた LLM処理基盤 / Delta Lake with LLM on Dataplatform
smdmts
3
7.9k
Sparkから利用するAirframe/Spark-With-Airframe
smdmts
0
1.7k
Redashで何をみるのか/What Do You Wanna See Redash?
smdmts
1
1.6k
DatabricksとSparkではじめる [ビッグデータETL処理/データ可視化] 実践入門 / Databricks and Spark with ETL and Visualization
smdmts
0
1.7k
DatabricksとSparkではじめる [データ分析/機械学習] 実践入門 / Databrick and Spark with Data Analyze and ML for newbie.
smdmts
5
2.3k
作らない分析基板のススメ/DWH For Startup With YAGNI
smdmts
1
770
エンジニアのためのドメイン駆動設計実践入門 / DDD for Engineer newbie
smdmts
18
3.8k
How to growth the delish kitchen team to data-driven team
smdmts
1
1.1k
Other Decks in Programming
See All in Programming
TROCCO×dbtで実現する人にもAIにもやさしいデータ基盤
nealle
0
390
Microsoft Orleans, Daprのアクターモデルを使い効率的に開発、デプロイを行うためのSekibanの試行錯誤 / Sekiban: Exploring Efficient Development and Deployment with Microsoft Orleans and Dapr Actor Models
tomohisa
0
220
STUNMESH-go: Wireguard NAT穿隧工具的源起與介紹
tjjh89017
0
390
AHC051解法紹介
eijirou
0
640
MCPとデザインシステムに立脚したデザインと実装の融合
yukukotani
0
240
LLMOpsのパフォーマンスを支える技術と現場で実践した改善
po3rin
8
1k
🔨 小さなビルドシステムを作る
momeemt
2
620
AI OCR API on Lambdaを Datadogで可視化してみた
nealle
0
220
MCPで実現するAIエージェント駆動のNext.jsアプリデバッグ手法
nyatinte
7
990
AI時代のドメイン駆動設計-DDD実践におけるAI活用のあり方 / ddd-in-ai-era
minodriven
25
9.5k
Kiroの仕様駆動開発から見えてきたAIコーディングとの正しい付き合い方
clshinji
1
180
The Past, Present, and Future of Enterprise Java
ivargrimstad
0
260
Featured
See All Featured
RailsConf & Balkan Ruby 2019: The Past, Present, and Future of Rails at GitHub
eileencodes
139
34k
Large-scale JavaScript Application Architecture
addyosmani
512
110k
Fireside Chat
paigeccino
39
3.6k
Faster Mobile Websites
deanohume
309
31k
[RailsConf 2023] Rails as a piece of cake
palkan
56
5.8k
Facilitating Awesome Meetings
lara
55
6.5k
CoffeeScript is Beautiful & I Never Want to Write Plain JavaScript Again
sstephenson
161
15k
Unsuck your backbone
ammeep
671
58k
"I'm Feeling Lucky" - Building Great Search Experiences for Today's Users (#IAC19)
danielanewman
229
22k
Keith and Marios Guide to Fast Websites
keithpitt
411
22k
Optimising Largest Contentful Paint
csswizardry
37
3.4k
Sharpening the Axe: The Primacy of Toolmaking
bcantrill
44
2.5k
Transcript
σʔλΣΞϋεੈผ -BLFIPVTFϓϥοτϑΥʔϜΛ ࠾༻͢Δ·Ͱͷ ౡాխ JEDAI ୈೋճ: DeltaΛ͍͓ͨͨ͠ײ
ࣗݾհ w ౡాխ!TNENUT w %8)ΞʔΩςΫτσʔλΞφϦετ w 4DBMBc1ZUIPOc+BWBc(PMBOHc%%% w
גࣜձࣾΤϒϦʔॴଐ w ։ൃຊ෦%"5""*άϧʔϓ.(3
࣍ dͷؒͰσʔλϨΠΫσʔλΣΞϋεͷ &5-&-5ॲཧΛ߹ܭճϦϑΝΫλϦϯά͍ͯ͠·͢ɻ -BLFIPVTFϓϥοτϑΥʔϜ࠾༻·ͰͷಓͷΓΛ͓͠͠·͢ɻ
ୈҰੈd&5- w &NCVML&.3Λར༻ͯ͠&5-ॲཧ͢ΔΈ w 1SPTൺֱతγϯϓϧͳσʔλϑϩʔ ҰఆֹۚͰεΩϟϯՄೳͳܭࢉج൫ͷఏڙ w $POT&NCVML.BQ3FEVDF&YFDVUPSͷকདྷੑʹෆ҆
ୈҰੈd%BTICPBSE w ߏԽσʔλͷશΠϕϯτϩάͷ3"8ςʔϒϧΛࢀর͢Δํࣜ w 1SPTҰͭͷςʔϒϧΛࢀর͢Εྑ͍ w $POT3"8ςʔϒϧංେԽʹΑΔίετͷઢܗ૿Ճ
ୈೋੈ&5- w "QBDIF4QBSL%BUBCSJDLTʹΑΔ&5-ॲཧͷಋೖ w 1SPTΠϯϑϥ؍Ͱͷ&5-ॲཧͷεέʔϧԽ σʔλϑϩʔ/PUFCPPLԽʹΑΔσόοάͷίετԽ w $POT+40/-1BSRVFUͷυϝΠϯࣝͷൃࢄʢڽूʣ &5-ॲཧதͷ614&35ܥॲཧ࣮͕ߴίετ
ୈೋੈ%BTICPBSE w ΠϕϯτςʔϒϧͷϑϧεΩϟϯΛ༰ೝ͢Δํࣜ w 1SPTΠϕϯτςʔϒϧͷυϝΠϯׂʹΑΔॲཧߴԽ ୳ࡧతσʔλੳՄೳͳνʔϜͷεέʔϧԽʢ1E.ɺ&OHɺ4BMFTʣ w $POTΠϕϯτςʔϒϧ૿ՃʹΑΔίετͷઢܗ૿Ճ
ୈࡾੈ&5- w %BUBCSJDLT%FMUBʹΑΔϝμϦΦϯΞʔΩςΫνϟͷಋೖ w 1SPT%FMUBʹΑΔ&5-ॲཧͷ࣮ίετͷίετԽ ɹɹɹɹɹϝμϦΦϯΞʔΩςΫνϟʹΑΔυϝΠϯࣝͷߴڽूԽͱૄ݁߹Խ σʔλαΠΤϯεͳͲͷυϝΠϯࣝར༻ͷεέʔϧԽ w $POTσʔλύΠϓϥΠϯͷߏෳࡶԽͱσʔλஔॴͷൃࢄ
ୈࡾੈ%BTICPBSE w ΠϕϯτςʔϒϧͷϑϧεΩϟϯΛ༰ೝ͢Δํࣜ w 1SPTΠϕϯτςʔϒϧͷυϝΠϯׂʹΑΔॲཧߴԽ ୳ࡧతσʔλੳՄೳͳνʔϜͷεέʔϧԽʢ1E.ɺ&OHɺ4BMFTʣ w $POTΠϕϯτςʔϒϧ૿ՃʹΑΔίετͷઢܗ૿Ճ ୈೋੈͱมߋແ͠
ୈ࢛ੈ&5- w -BLFIPVTFϓϥοτϑΥʔϜͷಋೖ w 1SPTϝμϦΦϯΞʔΩςΫνϟʹΑΔυϝΠϯࣝͷߴڽूૄ݁߹ͷଅਐ w $POT΄΅ແ͠
ୈ࢛ੈ %BTICPBSE w -BLFIPVTFϓϥοτϑΥʔϜ 42-"OBMZUJDTͷ࠾༻ʢ10$தʣ w 1SPTσʔλιʔεͷ΄΅શͳ4405Խ w $POTݱߦͱಉ͡ॲཧੑೳͱ͢Δʹڧ͍ΠϯελϯελΠϓ͕ඞཁ
͝ਗ਼ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠