Snowparkで扱う非構造化データ

Slide 1

Slide 1 text

4OPXQBSLͰѻ͏ඇߏ଄Խσʔλ 1MBZJOHXJUI6OTUSVDUVSFE%BUB6TJOH4OPXQBSL 4OPXGMBLF#6*-%MPDBM+BQBO $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 2

Slide 2 text

"(&/%" $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"- • จ໌ͷརث4OPXQBSL • ΋͏Կ΋ා͘ͳ͍ • ͦ͏͸ݴͬͯ΋/PUFCPPLͰ࡞ۀ͠·͢΍Μ • ΁͍΁ʔ͍ • ͑ɺඇߏ଄Խσʔλ΋ྑ͍ͷ͔ʁ • ͓͔ΘΓ΋͋Δͧ • ͦΕͰ͸͜ΕΑΓ܇࿅Λ࢝ΊΔ

Slide 3

Slide 3 text

ͬͦ͘͞Ͱ͕͢ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 4

Slide 4 text

จ໌ͷརثͱ͸ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 5

Slide 5 text

෺࣭తจԽͷൃୡʹΑΓ΋ͨΒ͞Εͨɺ ศརͳػցɾث۩ɻ d8FCMJPࣙॻΑΓd $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 6

Slide 6 text

ࠓ೔͸จ໌ͷརث 4OPXQBSLΛ ͝঺հ͠·͢ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 7

Slide 7 text

ҰݴͰ͍͏ͱ 4OPXQBSL ͱ͸ 4OPXGMBLF Λ 4QBSL ͷΑ͏ʹѻ͑Δ ͍͢͝΍ͭͰ͋Δ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 8

Slide 8 text

ҰݴͰ͍͏ͱ 4OPXQBSL ͱ͸ 4OPXGMBLF Λ 4QBSL ͷΑ͏ʹѻ͑Δ ͍͢͝΍ͭͰ͋Δ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 9

Slide 9 text

ҰݴͰ͍͏ͱ 4OPXQBSL ͱ͸ 4OPXGMBLF Λ 4QBSL ͷΑ͏ʹѻ͑Δ ͍͢͝΍ͭͰ͋Δ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"- ࠓ೔֮͑ͯؼΓ͍ͨ̏4

Slide 10

Slide 10 text

ເͷதͰѭͬͨɺΑ͏ͳɾɾɾɾɾ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"- ͍΍ʔ͏ͪɺ4QBSLͷࢿ࢈͕ଟͯ͘ɺ ϚΠάϨʔγϣϯߟ͑ΔͱίετϝϦοτ͕ʜ 4OPXGMBLF ࠷ۙɺྑ͍ͬͯฉ͘Μ͚ͩͲʜ &5-͸4QBSL࢖ͬͯΔ͔ΒͶ͐ʜ /PUFCPPL͔ΒΞυϗοΫʹ4QBSL࣮ߦͯ͠ΔΜͰɺ %8)͋Μ·Γඞཁͳ͍ΜͰ͢ΑͶʜ

Slide 11

Slide 11 text

ͦΕ͸ͱͬͯ΋خ͍͠ͳͬͯ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"- ͍΍ʔ͏ͪɺ4QBSLͷࢿ࢈͕ଟͯ͘ɺ ϚΠάϨʔγϣϯߟ͑ΔͱίετϝϦοτ͕ʜ 4OPXGMBLF ࠷ۙɺྑ͍ͬͯฉ͘Μ͚ͩͲʜ &5-͸4QBSL࢖ͬͯΔ͔ΒͶ͐ʜ /PUFCPPL͔ΒΞυϗοΫʹ4QBSL࣮ߦͯ͠ΔΜͰɺ %8)͋Μ·Γඞཁͳ͍ΜͰ͢ΑͶʜ ح੻΋ɺ4OPXQBSL΋ ͋ΔΜͩΑ

Slide 12

Slide 12 text

΋͏Կ΋ා͘ͳ͍ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"- 4QBSLͷࢿ࢈͕ʜ &5-͸4QBSLͰ΍ͬͯ ΔΜͰʜ ϚΠάϨʔγϣϯί ετߟ͑Δͱʜ /PUFCPPLͰ4QBSL࣮ ߦͯ͠ΔΜͰʜ 4OPXQBSL

Slide 13

Slide 13 text

/PUFCPPL Ͱಈ͔ͦ ಈ͔͢·Ͱ͸΄Μͱʹ؆୯ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"- ̍ ̎ ̏ 4OPXUJSF DMPOF ͯ͠ EPDLFS Ͱىಈ /PUFCPPL Ͱ 4OPXQBSL Πϯετʔϧ /PUFCPPL ͔Β 4OPXQBSL ࣮ߦʂʂʂ ࢀߟɿ4OPXQBSLΛγϡγϡͬͱ࢝ΊΔ 4OPXUJSFΛ࢖ͬͯ IUUQTRJJUBDPNGPVSTVFJUFNTDDCFDDECBF

Slide 14

Slide 14 text

࣮ࡍʹ΍ͬͯݟΑ͏ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 15

Slide 15 text

%&.0 $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 16

Slide 16 text

$IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 17

Slide 17 text

؆୯ͦ͏ͳͷ͸Θ͔͕ͬͨɺཪଆͲ͏ͳͬͯΜͷʁ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 18

Slide 18 text

ཪଆ͸Ͳ͏ͳͬͯΔͷʁ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"- 4OPXQBSL 42-จ 4&-&$5IPHF '30. GVHB /PUFCPPLʹ 4QBSLॻ͘ 4QBSL 42- ʹม׵͢Δ /PUFCPPL

Slide 19

Slide 19 text

͍͔͕Ͱͨ͠Ͱ͠ΐ͏͔ʁ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 20

Slide 20 text

ࠓ೔͸4OPXQBSLΛʂʂ ̏4Λʂʂ ͓΅͑ͯؼ͍ͬͯͩ͘͞ʂʂ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 21

Slide 21 text

ɾɾɾ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 22

Slide 22 text

͔ʔΒʔͷʔ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 23

Slide 23 text

ඇߏ଄Խσʔλʹ͍ͭͯ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 24

Slide 24 text

͓͞Β͍ɿߏ଄Խσʔλɺ൒ߏ଄Խσʔλ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"- ߏ଄Խσʔλ ൒ߏ଄Խσʔλ ͲΜͳ ϑΝΠϧʁ $47ʜ +40/ɺ03$ɺ"WSPɺ 1BSRVFUɺ9.-ʜ σʔλͷதʹσʔλ͕ೖΔΑ ͏ͳϑΝΠϧ 4OPXGMBLFͩͱ Ͳ͏࢖͏ʁ ςʔϒϧʹ ϩʔυͯ͠࢖͏ ςʔϒϧʹ ϩʔυͯ͠࢖͏

Slide 25

Slide 25 text

ߏ଄Խσʔλɺ൒ߏ଄Խσʔλɺඇߏ଄Խσʔλ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"- ߏ଄Խσʔλ ൒ߏ଄Խσʔλ ඇߏ଄Խσʔλ ͲΜͳ ϑΝΠϧʁ $47ʜ +40/ɺ03$ɺ"WSPɺ 1BSRVFUɺ9.-ʜ σʔλͷதʹσʔλ͕ೖΔΑ ͏ͳϑΝΠϧ ը૾ɺಈըɺ1%'ʜ 4OPXGMBLFͩͱ Ͳ͏࢖͏ʁ ςʔϒϧʹ ϩʔυͯ͠࢖͏ ςʔϒϧʹ ϩʔυͯ͠࢖͏ εςʔδʹ ϑΝΠϧΛஔ͍ͯ࢖͏ ೥݄ʹΞφ΢ϯε͞Ε ݄ʹύϒϦοΫϓϨϏϡʔʹͳΓ·ͨ͠

Slide 26

Slide 26 text

4OPXGMBLFͷඇߏ଄Խσʔλ༻ͷओͳػೳ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"- εςʔδ 63- 42- • ඇߏ଄Խσʔλ͸εςʔ δ΁ઃஔͰ͖Δ • ಺෦ɾ֎෦ͲͪΒͷε ςʔδ΋ඇߏ଄Խσʔλ Λઃஔͯ͠ར༻Մೳ • ֎෦εςʔδͳΒ "NB[PO4ɺ(PPHMF $MPVE4UPSBHFɺ .JDSPTPGU"[VSFͷͲ͜ʹ ઃஔ0, • ඇߏ଄Խσʔλʹ͸63- Λ࢖ͬͯΞΫηεՄೳ • 63-ͷछྨ͸࣍ͷ͕ͭ ͋Δ • είʔϓ63- • ϑΝΠϧ63- • ࣄલॺ໊ࡁΈ63- • ༻్ʹԠͯ͡63-Λ࢖͍ ෼͚Α͏ • εςʔδ΁ΫΤϦ͢Δͨ ΊͷσΟϨΫτϦςʔϒ ϧͱ͍͏ػೳ͕৽ొ৔ • σΟϨΫτϦςʔϒϧΛ ࢖͑͹ɺεςʔδʹઃஔ ͞Εͨඇߏ଄Խσʔλͷ ৘ใʹΫΤϦͰΞΫηε Ͱ͖Δ • ඇߏ଄Խσʔλ༻ʹ42- ؔ਺΋௥Ճ͞Εͨ

Slide 27

Slide 27 text

ࢲ͕ඇߏ଄ԽσʔλΛѻ͏ͱ͖ͷύλʔϯ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"- ඇߏ଄ԽσʔλΛε ςʔδʹ্͛Δ ֎෦'6/$5*0/࢖͏ 4OPXQBSL࢖͏ த਎͸಺෦'6/$5*0/ ಺෦'6/$5*0/࢖͏ '6/$5*0/ఆٛ࣌ʹґଘϑΝΠ ϧͱͯ͠ॲཧର৅ͷϑΝΠϧΛ هड़͢ΔͱϑΝΠϧΛ4OPXGMBLF ্ͰॲཧͰ͖Δ 63-Λؔ਺ͷҾ਺ʹ౉ͯ͠ɺ֎ ෦ؔ਺͔Β63-Λ࢖ͬͯඇߏ଄ ԽσʔλͷϑΝΠϧʹΞΫηε ͯ͠ॲཧ͢Δ " # $

Slide 28

Slide 28 text

ࢲ͕ඇߏ଄ԽσʔλΛѻ͏ͱ͖ͷύλʔϯ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"- ඇߏ଄ԽσʔλΛε ςʔδʹ্͛Δ ֎෦'6/$5*0/࢖͏ 4OPXQBSL࢖͏ த਎͸಺෦'6/$5*0/ ಺෦'6/$5*0/࢖͏ " # $ ͜ΕΛͪΐͬͱ͓ݟͤ͠·͢ '6/$5*0/ఆٛ࣌ʹґଘϑΝΠ ϧͱͯ͠ॲཧର৅ͷϑΝΠϧΛ هड़͢ΔͱϑΝΠϧΛ4OPXGMBLF ্ͰॲཧͰ͖Δ 63-Λؔ਺ͷҾ਺ʹ౉ͯ͠ɺ֎ ෦ؔ਺͔Β63-Λ࢖ͬͯඇߏ଄ ԽσʔλͷϑΝΠϧʹΞΫηε ͯ͠ॲཧ͢Δ

Slide 29

Slide 29 text

࣮ࡍ΍ͬͯݟΔ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 30

Slide 30 text

%&.0 $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 31

Slide 31 text

$IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 32

Slide 32 text

͓͠·͍ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 33

Slide 33 text

σϞཪ࿩ 4OPXQBSL͔Βεςʔδʹ͋Δ ඇߏ଄ԽσʔλͬͯΞΫηε Ͱ͖ͳ͍ΜͰ͔͢ʂʁ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 34

Slide 34 text

͋ͨͬͯ͠ɺ΄ΜͱόΧ KBSʹ͠ͳ͍ͱΞΫηεͰ͖ͳ͍ ʢKBSʹͳͬͯΕ͹Ͱ͖Δʣ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 35

Slide 35 text

͘΍͍͠ʂ͍͔ͭϦϕϯδ͠·͢ʂ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 36

Slide 36 text

·ͨͶʙ $IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-

Slide 37

Slide 37 text

$IVSB%"5"JOD13013*&5"3:$0/'*%&/5*"-