ハカルスにおける AWS を活用した 機械学習 API の構築と運用

Presentation slides at re:Union 2018 Osaka by JAWS-UG Kansai https://jawsugosaka.doorkeeper.jp/events/76584

Transcript

1. ハカルスにおける AWS を活用した 機械学習 API の構築と運用 2018年8月5日 JAWS-UG 関西 re:Union 2018 Osaka
2. ࡢ൩ؾ͍ͮͨিܸͷࣄ࣮
3. Գ୩͞ΜͱͷൃදͱͷҐஔ෇͚ 1MBUGPSN
   ͷ෦෼ ࠨଆͷ෦෼ IUUQTXXXTMJEFTIBSFOFUPLFFF SFVOJPOPTBLBBXT
4. Գ୩͞ΜͱͷൃදͱͷҐஔ෇͚ ཧ૝ ݱ࣮ IUUQTXXXTMJEFTIBSFOFUPLFFF SFVOJPOPTBLBBXT
5. ͓ಧ͚͍ͨ͜͠ͱ • ͜Ε͔ΒػցֶशʹऔΓ૊Ήํ • ͲΜͳ෩ʹϓϩηε΍νʔϜΛߟ͑Δ͔ • γεςϜߏ੒ͷجຊతͳ͜ͱ • "84
   ΛͲ͏૊ΈࠐΜͰ͍͔͘
6. છాوࢤ !ULTNE • גࣜձࣾϋΧϧε औక໾$50 • "84
   ྺ ໿ 
   ೥ • .BDIJOF
   -FBSOJOH
   .FFUVQ
   ,"/4"* ্ཱͪ͛ • IUUQTNMNLBOTBJDPOOQBTTDPN
7. εύʔεϞσϦϯά࿈ࡌ։࢝ IUUQTDPEF[JOFKQBSUJDMFEFUBJM
8. ϋΧϧεͱ͸ • ҩྍɾ࢈ۀ෼໺ Y
   "* • εύʔεϞσϦϯάΛ࣠ͱͨ͠σʔλղੳ • ౦๺େֶɾେؔਅ೭।ڭत͕ՊֶΞυόΠβʔ
9. ϋΧϧεͰ΍͍ͬͯΔ͜ͱ υϩʔϯۭࡱը૾ʹΑΔݐ෺น໘ͷิमՕॴͷݕ஌ ʢגࣜձࣾΞΠɾϩϘςΟΫεʣ IUUQTIBDBSVTDPNKBBJTPMVUJPOTDBTFTUVEZJSPCPUJDT DUYUTPMVUJPOT ΑΓൈਮ
10. ϋΧϧεͰ΍͍ͬͯΔ͜ͱ ମௐ؅ཧ༻ΞϓϦ޲͚৯ࣄਪનػೳͷఏڙ ʢגࣜձࣾςΟοϓωεʣ IUUQTQSUJNFTKQNBJOIUNMSEQIUNM ΑΓൈਮ
11. ϋΧϧεͰ΍͍ͬͯΔ͜ͱ ૊ΈࠐΈػث޲͚ը૾ղੳػೳͷఏڙ
12. ຊ೔ͷΰʔϧ • ػցֶशΛαʔϏεʹ૊ΈࠐΉߏ੒ͱϓϩηε • "NB[PO
    4BHF.BLFS ͷجຊ • "84
    ্Ͱػցֶश "1*
    Λߏங͢ΔΞϓϩʔν
13. ػցֶशΛγεςϜʹ૊ΈࠐΉ
14. γεςϜͷߏ੒ύλʔϯ • ϞσϧຒΊࠐΈܕ • "1*
    ܕ
    )551H31$ ౳ • %#
    ܦ༝ܕ
15. ϞσϧຒΊࠐΈܕ σʔλϕʔε ΞϓϦέʔγϣϯ ػցֶशϞσϧ 
    ಛ௃ྔͷऔΓग़͠ 
    ਪ࿦ͷ࣮ߦ 
    ݁Ռͷ੔ܗ ϦΫΤετ Ϩεϙϯε
16. ϞσϧຒΊࠐΈܕ • ϝϦοτ • γϯϓϧͰ։ൃ͠΍͍͢ • σϝϦοτ • ΞϓϦͱϞσϧ͕ີ݁߹ͯ͠͠·͏ • ։ൃݴޠ΁ͷ੍໿΍ɺߋ৽ϓϩηε͕੾Γ཭͠ʹ͍͘
17. "1*
    ܕ σʔλϕʔε ΞϓϦέʔγϣϯ ػցֶशϞσϧ 
    ಛ௃ྔͷऔΓग़͠ 
    ਪ࿦"1*
    ݺͼग़͠ 
    ݁Ռͷ੔ܗ ϦΫΤετ Ϩεϙϯε ਪ࿦ "1*
18. "1*
    ܕ • ϝϦοτ • ΞϓϦͱϞσϧͷڥք͕໌֬ • ໾ׂ෼୲͠΍͍͢ɺಠཱͨ͠ߋ৽ϓϩηε • σϝϦοτ • ։ൃ؀ڥͷߏங΍ӡ༻ʹҰखؒ૿͑Δ
19. %#
    ܦ༝ܕ σʔλϕʔε όονϓϩάϥϜ ػցֶशϞσϧ 
    ಛ௃ྔͷऔΓग़͠ 
    ਪ࿦ͷ࣮ߦ 
    ݁Ռͷอଘ ΞϓϦέʔγϣϯ 
    ݁ՌͷऔΓग़͠ ϦΫΤετ Ϩεϙϯε 
    ݁Ռͷ੔ܗ ΦϑϥΠϯͰ࣮ࢪ
20. %#
    ܦ༝ܕ • ϝϦοτ • ΞϓϦͱϞσϧͷڥք͕໌֬ • ΞϓϦ୯ମͰ։ൃ͕Մೳɺಠཱͨ͠ߋ৽ϓϩηε • σϝϦοτ • ϦΞϧλΠϜͳػೳఏڙ͕͠ʹ͍͘
21. ػցֶशϞσϧͷ 
    ͭͷϑΣʔζ • ΞϧΰϦζϜͷ։ൃ • ϞσϧΛੜ੒͢Δֶश • ϞσϧΛར༻ͯ͠λεΫΛ࣮ߦ͢Δਪ࿦
22. ։ൃϑΣʔζ • ୲౰ • σʔλαΠΤϯςΟετ • ϙΠϯτ • ։ൃ؀ڥͷ౷Ұ • σʔλͷ؅ཧ • ڞ௨ॲཧͷϥΠϒϥϦԽ
23. ֶशϑΣʔζ • ୲౰ • σʔλαΠΤϯςΟετͱιϑτ΢ΣΞΤϯδχΞ • ϙΠϯτ • ੜ੒͞ΕͨϞσϧͷ؅ཧ • ςετɾݕূ • ֶशͷλΠϛϯά
24. ਪ࿦ϑΣʔζ • ୲౰ • ιϑτ΢ΣΞΤϯδχΞ • ϙΠϯτ • ΞϓϦέʔγϣϯͱͷೖग़ྗΠϯλʔϑΣʔε • ਪ࿦݁ՌͷϞχλϦϯά
25. ໾ׂɾεΩϧηοτͷҧ͍ • σʔλαΠΤϯςΟετ • σʔλͷલॲཧɾϞσϧͷߏஙɾݕূ • ࢼߦࡨޡͱΞϧΰϦζϜͷߟ࡯ʹྗ఺ • ιϑτ΢ΣΞΤϯδχΞ • ಛ௃ྔͷநग़ɾਪ࿦ͷ࣮ߦɾ݁Ռͷ੔ܗ • ։ൃੜ࢈ੑɺαʔϏεͷ҆ఆੑʹྗ఺
26. ίϯ΢ΣΠͷ๏ଇ • ʮιϑτ΢ΣΞͷߏ଄͸ͦΕΛ࡞ͬͨ૊৫Λ൓ өͨ͠΋ͷͱͳΔʯ • ػցֶशγεςϜઃܭ࣌ʹߟྀ͢΂͖͜ͱ • ૊৫ߏ଄ͱγεςϜɾϓϩηεΛҰகͤ͞Δ • σʔλαΠΤϯςΟετͱιϑτ΢ΣΞΤϯδχΞ ͷ໾ׂ΍εΩϧηοτͷҧ͍Λೝࣝ͢Δ
27. "NB[PO
    4BHF.BLFS ͷجຊ
28. "NB[PO
    4BHF.BLFS ͱ͸ • ϑϧϚωʔδυͷ /PUFCPPL
    Πϯελϯε • ֶशϞσϧΛαʔόϨεͰ )551
    "1*
    Խ • όʔδϣϯ؅ཧ΍ "#
    ςετ
29. 4BHF.BLFS ͷخ͍͠ͱ͜Ζ • αʔό؅ཧͳ͠ʹϞσϧΛ "1*
    Խ • Ϟσϧͷ؅ཧɾσϓϩΠͷఆࣜԽ • εΩϧηοτͷڥքʹ͋Θͤͨϓϩηεઃܭ
30. Ϟσϧ࣮૷ͷࡾͭͷํ๏ • "84
    ఏڙͷΞϧΰϦζϜΛ࢖͏ • 5FOTPS'MPX
    ΍ "QBDIF
    .9/FUɺ$IBJOFS Λ ࢖͏ • ࣗ෼ͷ޷͖ͳΞϧΰϦζϜΛ࣋ͪࠐΜͰ࢖͏
31. 4BHF.BLFS ্ͰֶशΛ࣮ߦ • +PC
    ͷ࡞੒ • ֶश༻Πϝʔδͷ &$3
    ͷϦϙδτϦΛࢦఆ • σʔλͷ 4
    ࢦఆ • Ϟσϧͷग़ྗઌͷ 4
    ࢦఆ
32. 4BHF.BLFS ্Ͱਪ࿦Λ࣮ߦ • .PEFM
    ͷ࡞੒ • ਪ࿦༻Πϝʔδͷ &$3
    ͷϦϙδτϦΛࢦఆ • &OEQPJOU
    $POGJHVSBUJPO
    
    &OEQPJOU
    ͷ࡞੒ • /PUFCPPL
    Πϯελϯε΍ BXTDMJ Ͱݺͼग़͠ • )5514
    Λͦͷ··͸ୟ͚ͳ͍
33. ֎෦΁ͷ "1*
    ެ։ "NB[PO
    "1*
    (BUFXBZ "84 -BNCEB "NB[PO 4BHF.BLFS IUUQTBXTBNB[PODPNCMPHTNBDIJOFMFBSOJOHDBMMBO BNB[POTBHFNBLFSNPEFMFOEQPJOUVTJOHBNB[POBQJ HBUFXBZBOEBXTMBNCEB
34. "84
    ্Ͱͷػցֶश "1*
    ͷߏங
35. ελϯμʔυ "NB[PO
    &$ "NB[PO 3%4 "NB[PO 4 &MBTUJD
    -PBE
    #BMBODJOH
36. ελϯμʔυ • ϝϦοτ • ΍Γ͍ͨ͜ͱ͸େମͳΜͰ΋Ͱ͖Δ • "1*
    ܕҎ֎ʹ΋ద༻Մೳ • σϝϦοτ • αʔό &$
    ϝϯςφϯε͕ඞਢ • &MBTUJD
    #FBOTUBML
    ͳͲͰলྗԽ͸Մೳ
37. αʔόϨε -BNCEB "NB[PO
    "1*
    (BUFXBZ "84 -BNCEB "NB[PO %ZOBNP%# "NB[PO 4
38. αʔόϨε -BNCEB • ϝϦοτ • αʔόӡ༻͠ͳͯ͘Α͍ • σϝϦοτ • -BNCEB
    ؀ڥͷ੍໿Λड͚Δ • Ԡ౴࣌ؒɺσʔλετϨʔδɺར༻ՄೳͳϥΠϒϥϦ౳
39. ༨ஊ
    -BNCEB
    Ͱ TLMFBSO • -BNCEB
    ύοέʔδͷϏϧυ • "NB[PO
    -JOVY
    ͷ %PDLFS
    Λϕʔε • 1ZUIPO
    Λιʔε͔ΒϏϧυ • #-"4
    
    -"1"$,
    
    "5-"4
    ΛΠϯετʔϧ • ΞϓϦͷௐ੔ • Ϗϧυͨ͠ϥΠϒϥϦΛΞʔΧΠϒʹ௥Ճ • -BNCEB
    ؔ਺தͰωΠςΟϒϥΠϒϥϦ΁ͷύεΛ௥Ճ
40. αʔόϨε 4BHF.BLFS "NB[PO
    "1*
    (BUFXBZ "84 -BNCEB "NB[PO 4BHF.BLFS
41. αʔόϨε 4BHF.BLFS • ϝϦοτ • Ϟσϧͷߏ੒؅ཧ͕Ͱ͖Δ • αʔόͷӡ༻Λ͠ͳͯ͘Α͍ • σϝϦοτ • ΞϓϦ͔Βͷσʔλͷલॲཧ͸֎෦Ͱߦ͏ • ֎෦ "1*
    ʹ͢Δ৔߹͸લஈͷϓϩΩγ͕ඞཁ
42. ߏ੒ͷൺֱ ελϯμʔυ αʔόϨε 4BHF.BLFS σʔλͷલॲཧ ˓ ˚ º ΞϓϦͱͷͭͳ͗͜Έ ˓ ˓ ˚ αϙʔτ͢ΔϑΣʔζ ֶशɾਪ࿦ ਪ࿦ ֶशɾਪ࿦
43. ӡ༻Ͱߟ͑ΔϙΠϯτ Ұൠͷ "1* ػցֶश "1* Πϯϑϥ αʔόɾωοτϫʔΫ౳ αʔόɾωοτϫʔΫ౳ ϞχλϦϯά Ԡ౴ͷύϑΥʔϚϯε Ϟσϧͷਫ਼౓ ӡ༻ϓϩηε ػೳΛσϓϩΠ ϞσϧΛσϓϩΠ
44. ػցֶशϞσϧͷߏ੒؅ཧ • Ϟσϧ࡞੒ͷ࠶ݱੑͷ୲อ • ϞσϧΛ࡞੒ͨ͠σʔλ • Ϟσϧ࡞੒࣌ͷϋΠύʔύϥϝʔλ • ڭࢣσʔλ࡞੒ͷϧʔϧ • ΞϊςʔγϣϯͷϙϦγʔ
45. ػցֶशϞσϧͷߏ੒؅ཧ • ܧଓతσϦόϦͷ؍఺ • Ұఆͷ඼࣭Λ୲อͰ͖Δ͔ • ؆୯ʹσϦόϦͰ͖Δ͔ • ͍ͭͰ΋ݩʹ໭ͤΔ͔ 㱺 ػցֶशγεςϜͷӡ༻΋ %FW0QT
    ࢹ఺͕ॏཁʹ
46. ·ͱΊ
47. ػցֶशγεςϜͷߏங • ։ൃɾֶशɾਪ࿦ͷผʑͷϑΣʔζͱɺͦ͜ʹ ܞΘΔϩʔϧͷҧ͍ͷཧղ͕ॏཁ • ϩʔϧʹ͋Θͤͨϓϩηε͕ඞཁ • ϓϩηεʹ͋ΘͤͨΠϯϑϥɾ؀ڥઃܭΛߦ͏
48. "NB[PO
    4BHF.BLFS ͱ͸ • αʔό؅ཧͳ͠ʹϞσϧΛ "1*
    Խ • Ϟσϧͷ؅ཧɾσϓϩΠͷఆࣜԽ • εΩϧηοτͷڥքʹ͋Θͤͨϓϩηεઃܭ
49. ػցֶश "1*
    ͷ͜Ε͔Β • 4BHF.BLFS ͕ݱ࣮తͳબ୒ࢶʹ • ৽نγεςϜͰ͸ 4BHF.BLFS ͸ݕ౼ͷՁ஋େ • ਪ࿦෦෼͚ͩͰ΋ %PDLFS
    ՄͷϝϦοτ͸େ • %FW0QT
    ͷࢹ఺͕ࠓޙॏཁʹ .-0QT
50. ͝੩ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠ σʔλαΠΤϯςΟετɾ૊ΈࠐΈΤϯδχΞืूதʂ IUUQTXXXXBOUFEMZDPNDPNQBOJFTIBDBSVT