最近やってる、サーバーレスでデータ分析基盤を構築している話 / 20230916-nds63

第63回 長岡IT開発者勉強会 (NDS#63) で発表した資料。
https://sites.google.com/site/ndssite/no63

Transcript

1. ࠷ۙ΍ͬͯΔɺαʔόʔϨεͰ
   σʔλ෼ੳج൫Λߏங͍ͯ͠Δ͓࿩
   Š೥൛Š
   
   ּݪ޺
   /%4
   

   View Slide

2. ࣗݾ঺հ
   @kasacchiful
   @kasacchiful
   ּݪ޺
   wΫϥεϝιουגࣜձࣾσʔλΞφϦςΟΫεࣄۀຊ෦
   w৽ׁݝ৽ׁࢢࡏॅ
   w޷͖ͳ"84αʔϏε4ɺ-BNCEBɺ4BHF.BLFS
   w+"846(৽ׁࢧ෦ʗ1ZUIPOػցֶशษڧձJO৽ׁʗ+B445৽ׁ
   ʗ48"/**ʗ$MPVE
   fl
   BSF.FFUVQ/JJHBUBʗFUD
   w"84$PNNVOJUZ#VJMEFS+BQBO"84"MM
   $FSUJ
   fi
   DBUJPOT&OHJOFFS
   

   View Slide

3. ໨࣍
   wσʔλ෼ੳج൫ΛαʔόʔϨεͰ
   w࠷͓ۙؾʹೖΓͷαʔϏε
   w·ͱΊ
   

   View Slide

4. ࿩͢͜ͱ
   wσʔλΛ෼ੳ͢ΔͨΊͷલॲཧΛߦ͏ͨΊͷج൫࡞ͬͯ·͢
   w΄ͱΜͲαʔόʔϨεߏ੒ͳͷͰɺͦΕΛ͝঺հʢྫ֎͋Γ
   w΄΅"84
   

   View Slide

5. 
   σʔλ෼ੳج൫ΛαʔόʔϨεͰ
   

   View Slide

6. ࠷ۙΑ͘࢖͏αʔϏε
   4 -BNCEB 4UFQ'VODUJPOT (MVF "UIFOB
   

   View Slide

7. *P5ηϯαʔσʔλϑΝΠϧΛ-BNCEBͰฒྻՃ޻
   

   View Slide

8. ֤छ%#σʔλΛ(MVFͰऔಘͯ͠#JH2VFSZ΁
   

   View Slide

9. ػث৘ใ%#͔ΒσʔλՃ޻ͯ͠ՄࢹԽ
   

   View Slide

10. ػث৘ใ%#͔ΒσʔλՃ޻ͯ͠ՄࢹԽ
    

    View Slide

11. ࿈ܞσʔλϑΝΠϧ͕དྷͨΒ(MVFˠ3FETIJGU
    

    View Slide

12. ߟ͍͑ͯΔ͜ͱ͸ɺ͍͍ͩͨҰॹ
    ͍ۙ಺༰͕"84#MPHʹࡌͬͨ
    IUUQTBXTBNB[PODPNKQCMPHTCJHEBUB
    CVJMEBOFUMQSPDFTTGPSBNB[POSFETIJGUVTJOHBNB[POTFWFOUOPUJ
    fi
    DBUJPOTBOEBXTTUFQGVODUJPOT
    

    View Slide

13. 
    ࠷͓ۙؾʹೖΓͷαʔϏε
    

    View Slide

14. (MVFGPS3BZʹظ଴
    IUUQTEFWDMBTTNFUIPEKQBSUJDMFTBXTHMVFGPSSBZHFOFSBMMZBWBJMBCMF
    

    View Slide

15. 1BOEBTͱ΄ͱΜͲมΘΒͳ͍ײ͡Ͱฒྻ෼ࢄॲཧ
    

    View Slide

16. ·ͩ71$΁ͷϓϥΠϕʔτ઀ଓͰ͖ͳ͍͚Ͳ
    IUUQTEFWDMBTTNFUIPEKQBSUJDMFTBXTHMVFGPSSBZHFOFSBMMZBWBJMBCMF
    

    View Slide

17. 3FETIJGU΍"VSPSBͳΒɺ%BUB"1*͕࢖͑Δ
    IUUQTEFWDMBTTNFUIPEKQBSUJDMFTUSZVTJOHSFETIJGUEBUBBQJPOHMVFGPSSBZ
    

    View Slide

18. "844%,GPS1BOEBT "848SBOHMFS
    ࢖͏ͱ؆୯
    IUUQTEFWDMBTTNFUIPEKQBSUJDMFTUSZVTJOHSFETIJGUEBUBBQJPOHMVFGPSSBZ
    

    View Slide

19. ެ։ࡁ
    %FWFMPQFST*0ϏσΦηογϣϯ
    Glue for Rayを使ってみよう
    3435/7/5
    データアナリティクス事業本部 笠原 宏
    

    View Slide

20. 
    ·ͱΊ
    

    View Slide

21. ·ͱΊ
    w࠷ۙ͸αʔόʔϨεͰσʔλ෼ੳج൫Λߏங͢Δػձ͕ଟ͍
    Ͱ͢
    w(MVFGPS3BZʹظ଴ͯ͠·͢
    

    View Slide

22. 
    એ఻
    

    View Slide

23. +B445`/JJHBUB։࠵
    w ۚ
    
    wਃࠐड෇͸ऴྃ͠·ͨ͠
    

    View Slide

24. 1ZUIPOػցֶशษڧձJO৽ׁۙ೔։࠵༧ఆ
    w೥ळ
    w$IBU(15"1*Λ࢖ͬͨੜ੒"*ϋϯζΦϯ
    

    View Slide