Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
最近やってる、サーバーレスでデータ分析基盤を構築している話 / 20230916-nds63
Search
kasacchiful
September 16, 2023
Programming
0
130
最近やってる、サーバーレスでデータ分析基盤を構築している話 / 20230916-nds63
第63回 長岡IT開発者勉強会 (NDS#63) で発表した資料。
https://sites.google.com/site/ndssite/no63
kasacchiful
September 16, 2023
Tweet
Share
More Decks by kasacchiful
See All by kasacchiful
Amazon S3 TablesとAmazon S3 Metadataを触ってみた / 20250201-jawsug-tochigi-s3tables-s3metadata
kasacchiful
0
180
Amazon S3 TablesとAmazon S3 Metadataを動かしてみた / 20250125-niigata-5min-tech-lt
kasacchiful
0
19
dbt coreとFargateでデータ変換 / 20240928-jawsug-toyama-hokuriku-shinkansen
kasacchiful
1
96
What we keep in mind when migrating from Serverless Framework to AWS CDK and AWS SAM
kasacchiful
1
350
AWSでIcebergを使ってデータウェアハウスを構築してみる / 20240810-jawsug-akita
kasacchiful
0
42
サーバーレスパターンを元にAWS CDKでデータ基盤を構築する / 20240731_classmethod_odyssey_online_build_a_data_infrastructures_using_aws_cdk_based_on_serverless_patterns
kasacchiful
0
500
AWS IoT 1-clickがサービス終了するので、SORACOMに移行した話 / 20240518-jawsug-niigata-iotlt-niigata
kasacchiful
0
270
AWS Application Composerで始める、 サーバーレスなデータ基盤構築 / 20240406-jawsug-hokuriku-shinkansen
kasacchiful
1
580
AWSの各種サービス紹介と活用方法 − AI・ML活用デモを交えて − / 20231208aws-aiml-seminar
kasacchiful
0
540
Other Decks in Programming
See All in Programming
Honoのおもしろいミドルウェアをみてみよう
yusukebe
1
220
React 19アップデートのために必要なこと
uhyo
5
880
Djangoにおける複数ユーザー種別認証の設計アプローチ@DjangoCongress JP 2025
delhi09
PRO
4
410
『GO』アプリ データ基盤のログ収集システムコスト削減
mot_techtalk
0
130
GAEログのコスト削減
mot_techtalk
0
120
How mixi2 Uses TiDB for SNS Scalability and Performance
kanmo
40
16k
Datadog DBMでなにができる? JDDUG Meetup#7
nealle
0
120
Generating OpenAPI schema from serializers throughout the Rails stack - Kyobashi.rb #5
envek
1
300
Writing documentation can be fun with plugin system
okuramasafumi
0
130
PHPカンファレンス名古屋2025 タスク分解の試行錯誤〜レビュー負荷を下げるために〜
soichi
1
630
Serverless Rust: Your Low-Risk Entry Point to Rust in Production (and the benefits are huge)
lmammino
1
140
『品質』という言葉が嫌いな理由
korimu
0
180
Featured
See All Featured
A Tale of Four Properties
chriscoyier
158
23k
The Art of Programming - Codeland 2020
erikaheidi
53
13k
Helping Users Find Their Own Way: Creating Modern Search Experiences
danielanewman
29
2.4k
Build your cross-platform service in a week with App Engine
jlugia
229
18k
Practical Tips for Bootstrapping Information Extraction Pipelines
honnibal
PRO
12
980
"I'm Feeling Lucky" - Building Great Search Experiences for Today's Users (#IAC19)
danielanewman
226
22k
Large-scale JavaScript Application Architecture
addyosmani
511
110k
Done Done
chrislema
182
16k
Documentation Writing (for coders)
carmenintech
67
4.6k
Become a Pro
speakerdeck
PRO
26
5.2k
Rebuilding a faster, lazier Slack
samanthasiow
80
8.8k
Easily Structure & Communicate Ideas using Wireframe
afnizarnur
193
16k
Transcript
࠷ۙͬͯΔɺαʔόʔϨεͰ σʔλੳج൫Λߏங͍ͯ͠Δ͓ ൛ ּݪ /%4
ࣗݾհ @kasacchiful @kasacchiful ּݪ wΫϥεϝιουגࣜձࣾσʔλΞφϦςΟΫεࣄۀຊ෦ w৽ׁݝ৽ׁࢢࡏॅ w͖ͳ"84αʔϏε4ɺ-BNCEBɺ4BHF.BLFS w+"846(৽ׁࢧ෦ʗ1ZUIPOػցֶशษڧձJO৽ׁʗ+B445৽ׁ ʗ48"/**ʗ$MPVE
fl BSF.FFUVQ/JJHBUBʗFUD w"84$PNNVOJUZ#VJMEFS+BQBO"84"MM $FSUJ fi DBUJPOT&OHJOFFS
࣍ wσʔλੳج൫ΛαʔόʔϨεͰ w࠷͓ۙؾʹೖΓͷαʔϏε w·ͱΊ
͢͜ͱ wσʔλΛੳ͢ΔͨΊͷલॲཧΛߦ͏ͨΊͷج൫࡞ͬͯ·͢ w΄ͱΜͲαʔόʔϨεߏͳͷͰɺͦΕΛ͝հʢྫ֎͋Γ w΄΅"84
σʔλੳج൫ΛαʔόʔϨεͰ
࠷ۙΑ͘͏αʔϏε 4 -BNCEB 4UFQ'VODUJPOT (MVF "UIFOB
*P5ηϯαʔσʔλϑΝΠϧΛ-BNCEBͰฒྻՃ
֤छ%#σʔλΛ(MVFͰऔಘͯ͠#JH2VFSZ
ػثใ%#͔ΒσʔλՃͯ͠ՄࢹԽ
ػثใ%#͔ΒσʔλՃͯ͠ՄࢹԽ
࿈ܞσʔλϑΝΠϧ͕དྷͨΒ(MVFˠ3FETIJGU
ߟ͍͑ͯΔ͜ͱɺ͍͍ͩͨҰॹ ͍ۙ༰͕"84#MPHʹࡌͬͨ IUUQTBXTBNB[PODPNKQCMPHTCJHEBUB CVJMEBOFUMQSPDFTTGPSBNB[POSFETIJGUVTJOHBNB[POTFWFOUOPUJ fi DBUJPOTBOEBXTTUFQGVODUJPOT
࠷͓ۙؾʹೖΓͷαʔϏε
(MVFGPS3BZʹظ IUUQTEFWDMBTTNFUIPEKQBSUJDMFTBXTHMVFGPSSBZHFOFSBMMZBWBJMBCMF
1BOEBTͱ΄ͱΜͲมΘΒͳ͍ײ͡Ͱฒྻࢄॲཧ
·ͩ71$ͷϓϥΠϕʔτଓͰ͖ͳ͍͚Ͳ IUUQTEFWDMBTTNFUIPEKQBSUJDMFTBXTHMVFGPSSBZHFOFSBMMZBWBJMBCMF
3FETIJGU"VSPSBͳΒɺ%BUB"1*͕͑Δ IUUQTEFWDMBTTNFUIPEKQBSUJDMFTUSZVTJOHSFETIJGUEBUBBQJPOHMVFGPSSBZ
"844%,GPS1BOEBT "848SBOHMFS ͏ͱ؆୯ IUUQTEFWDMBTTNFUIPEKQBSUJDMFTUSZVTJOHSFETIJGUEBUBBQJPOHMVFGPSSBZ
ެ։ࡁ %FWFMPQFST*0ϏσΦηογϣϯ Glue for Rayを使ってみよう 3435/7/5 データアナリティクス事業本部 笠原 宏
·ͱΊ
·ͱΊ w࠷ۙαʔόʔϨεͰσʔλੳج൫Λߏங͢Δػձ͕ଟ͍ Ͱ͢ w(MVFGPS3BZʹظͯ͠·͢
એ
+B445`/JJHBUB։࠵ w ۚ wਃࠐडऴྃ͠·ͨ͠
1ZUIPOػցֶशษڧձJO৽ׁۙ։࠵༧ఆ wळ w$IBU(15"1*Λͬͨੜ"*ϋϯζΦϯ