Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Kaggle Meetup Tokyo #2 colun's slide

A88c699362efb22b2e49be5bc71ad751?s=47 colun
February 04, 2017

Kaggle Meetup Tokyo #2 colun's slide

Machine Learning Beginner's Questions to Machine Learning Competition Community

A88c699362efb22b2e49be5bc71ad751?s=128

colun

February 04, 2017
Tweet

Transcript

  1. 4BOUBOEFSͰҐऔͬͨ ॳ৺ऀ͔Βͷ ػցֶशެ։࣭໰ঢ় ࠓଜ҆৳ˏγεςϜ޻๪ίϧϯ

  2. ಋೖ

  3. ͜Ε·Ͱͷ,BHHMF 'MJHIU2VFTU 4BOUB 4BOUBOEFS ҐʗνʔϜ ҐʗνʔϜ ҐʗνʔϜ ҐʗνʔϜ ҐʗνʔϜ

  4. ΄ͱΜͲ࠷దԽίϯςετ 'MJHIU2VFTU 4BOUB 4BOUBOEFS ҐʗνʔϜ ҐʗνʔϜ ҐʗνʔϜ ҐʗνʔϜ ҐʗνʔϜ

  5. ॳΊͯͷػցֶशίϯϖ 'MJHIU2VFTU 4BOUB 4BOUBOEFS ҐʗνʔϜ ҐʗνʔϜ ҐʗνʔϜ ҐʗνʔϜ ҐʗνʔϜ

  6. ๭೔๭ॴͷҿΈձʹͯʜ ΤΫηϧோΊͳ͕Β YHCPPTU࢖ͬͱ͚͹উͭΔ GVHVTVLJ͞Μ

  7. ๭೔๭ॴͷҿΈձʹͯʜ ΤΫηϧோΊͳ͕Β YHCPPTU࢖ͬͱ͚͹উͭΔ ͑ͬɹϚδʁ GVHVTVLJ͞Μ

  8. ๭೔๭ॴͷҿΈձʹͯʜ ΤΫηϧோΊͳ͕Β YHCPPTU࢖ͬͱ͚͹উͭΔ ͑ͬɹϚδʁ GVHVTVLJ͞Μ ຊ౰Ͱͨ͠

  9. ࢼߦࡨޡ TUBDLJOH %FFQ-FBSOJOH FUDʜ

  10. ࢼߦࡨޡ ?@? TUBDLJOH %FFQ-FBSOJOH FUDʜ GVHVTVLJ͞Μ ˞ίϯςετதͳͷͰ࿩͔͚͠ΒΕͳ͍ ΞΠίϯΛோΊͨΒ͍ͭ΋সإ͕ͦ͜ʹʜ

  11. ࢼߦࡨޡ ?@? TUBDLJOH %FFQ-FBSOJOH FUDʜ GVHVTVLJ͞Μ μϝͰͨ͠

  12. ཁ͢Δʹʜ ৗࣝʹਖ਼͍͠ ख़࿅ऀͷ͋Γ͕͍ͨڭ͑

  13. ཁ͢Δʹʜ ৗࣝʹਖ਼͍͠ ඇৗࣝʹؒҧͬͯΔ ख़࿅ऀͷ͋Γ͕͍ͨڭ͑ ॳ৺ऀ͕ࣗ෼Ͱߟ͑ͨ͜ͱ

  14. ཁ͢Δʹʜ ৗࣝʹਖ਼͍͠ ඇৗࣝʹؒҧͬͯΔ ख़࿅ऀͷ͋Γ͕͍ͨڭ͑ ॳ৺ऀ͕ࣗ෼Ͱߟ͑ͨ͜ͱ

  15. ཁ͢Δʹʜ ৗࣝʹਖ਼͍͠ ඇৗࣝʹؒҧͬͯΔ ख़࿅ऀͷ͋Γ͕͍ͨڭ͑ ॳ৺ऀ͕ࣗ෼Ͱߟ͑ͨ͜ͱ

  16. ཁ͢Δʹʜ ৗࣝʹਖ਼͍͠ ඇৗࣝʹؒҧͬͯΔ ख़࿅ऀͷ͋Γ͕͍ͨڭ͑ ॳ৺ऀ͕ࣗ෼Ͱߟ͑ͨ͜ͱ ڭ͍͑ͯͩ͘͞N @@ N

  17. ຊฤ w ࣌ؒ࣠ͷऔΓѻ͍ʹ͍ͭͯ w TUBDLJOH΍%FFQ-FBSOJOHʹ͍ͭͯ w طଘϥΠϒϥϦ͸ຬ଍͔ʁ

  18. ຊฤ w ࣌ؒ࣠ͷऔΓѻ͍ʹ͍ͭͯ w TUBDLJOH΍%FFQ-FBSOJOHʹ͍ͭͯ w طଘϥΠϒϥϦ͸ຬ଍͔ʁ

  19. ࠓճͷίϯϖλΠϓ Ҿ༻ݩ

  20. ࠓճͷίϯϖλΠϓ Ҿ༻ݩ

  21. 4BOUBOEFS1SPEVDU 3FDPNNFOEBUJPO ਓ෺ σʔλ݄ ೥ऩ ೥ྸ ୹ظ༬ۚ தظ༬ۚ ௕ظ༬ۚ "͞Μ

    ೥݄ ສ  OP ZFT OP "͞Μ ೥݄ ສ  ZFT OP OP "͞Μ ೥݄ ສ  ZFT OP OP "͞Μ ೥݄ ສ  ZFT OP OP "͞Μ ೥݄ ສ  #͞Μ ೥݄ ສ  OP OP OP #͞Μ ೥݄ ສ  OP OP OP 9 : ೥൒
  22. 4BOUBOEFS1SPEVDU 3FDPNNFOEBUJPO ਓ෺ σʔλ݄ ೥ऩ ೥ྸ ୹ظ༬ۚ தظ༬ۚ ௕ظ༬ۚ "͞Μ

    ೥݄ ສ  OP ZFT OP "͞Μ ೥݄ ສ  ZFT OP OP "͞Μ ೥݄ ສ  ZFT OP OP "͞Μ ೥݄ ສ  ZFT OP OP "͞Μ ೥݄ ສ  #͞Μ ೥݄ ສ  OP OP OP #͞Μ ೥݄ ສ  OP OP OP 9 : ೥൒ ࿈ଓྔʁɹFOVNʁ
  23. ࣌ؒ࣠͸࿈ଓྔ͔ʁ ݄ ݄ ݄ ݄ ݄ ݄ ݄

  24. ࣌ؒ࣠͸࿈ଓྔ͔ʁ ݄ ݄ ݄ ݄ ݄ ݄ ݄ ୺ͷ༧ଌ͸ۤखʁ

  25. ࣌ؒ࣠͸࿈ଓྔ͔ʁ ݄ ݄ ݄ ݄ ݄ ݄ ݄

  26. ࣌ؒ࣠͸࿈ଓྔ͔ʁ ݄ ݄ ݄ ݄ ݄ ݄ ݄ प෼͔͠ͳ͍ʜ

  27. ࣌ؒ࣠͸࿈ଓྔ͔ʁ ݄ ݄ ݄ ݄ ݄ ݄ ݄

  28. ࣌ؒ࣠͸࿈ଓྔ͔ʁ ݄ ݄ ݄ ݄ ݄ ݄ ݄ ༧ଌ݄͕աڈͷͲͷ݄ͱࣅ͍ͯΔ͔͸෼͔Βͳ͍ 1VCMJD-#͔Β

    ݄ΑΓ͸݄ʹࣅ͍ͯΔ ͳͲ͸෼͔Δ͕ʜʜ
  29. ࣌ؒ࣠͸FOVN͔ʁ ݄ ݄ ݄ ݄ ݄ ݄ ZFT OP ZFT

    ZFT ZFT ZFT OP ZFT ZFT ZFT ZFT OP OP OP ZFT OP OP OP OP OP ZFT ZFT OP ZFT OP ZFT ZFT ZFT ZFT OP ZFT ZFT ZFT ZFT OP OP OP ZFT OP OP OP OP OP ZFT ZFT OP ZFT OP ZFT ZFT ZFT ZFT OP ZFT ZFT ZFT ZFT OP OP OP ZFT OP OP OP OP OP ZFT ZFT OP ZFT OP ZFT ZFT ZFT ZFT OP ZFT ZFT ZFT ZFT OP OP OP ZFT OP OP OP OP OP ZFT ZFT OP ZFT OP ZFT ZFT ZFT ZFT OP ZFT ZFT ZFT ZFT OP OP OP ZFT OP OP OP OP OP ZFT ZFT OP OP OP ZFT ZFT OP ZFT OP
  30. ࣌ؒ࣠͸FOVN͔ʁ ݄ ݄ ݄ ݄ ݄ ݄ ݄ ZFT OP

    ZFT ZFT ZFT ZFT OP ZFT ZFT ZFT ZFT OP OP OP ZFT OP OP OP OP OP ZFT ZFT OP ZFT OP ZFT ZFT ZFT ZFT OP ZFT ZFT ZFT ZFT OP OP OP ZFT OP OP OP OP OP ZFT ZFT OP ZFT OP ZFT ZFT ZFT ZFT OP ZFT ZFT ZFT ZFT OP OP OP ZFT OP OP OP OP OP ZFT ZFT OP ZFT OP ZFT ZFT ZFT ZFT OP ZFT ZFT ZFT ZFT OP OP OP ZFT OP OP OP OP OP ZFT ZFT OP ZFT OP ZFT ZFT ZFT ZFT OP ZFT ZFT ZFT ZFT OP OP OP ZFT OP OP OP OP OP ZFT ZFT OP OP OP ZFT ZFT OP ZFT OP ֶशσʔλ͕ͭ΋ଘࡏ͠ͳ͍ ֶशෆՄೳʂʂ
  31. ͲͪΒ΋ಉ͡໰୊ʁ ݄ ݄ ݄ ݄ ݄ ݄ ݄ OP ZFT

    ZFT ZFT OP OP OP ZFT OP OP OP ZFT ZFT ZFT OP OP OP OP OP ZFT ZFT ZFT OP OP OP ZFT OP OP OP ZFT ZFT OP ZFT ZFT ZFT ZFT OP OP OP ZFT ZFT ZFT OP OP OP OP OP 1VCMJD-#͔Β࣍ݩ͸औΓग़ͤΔ͕ɺ࣍ݩҎ্͸ࠔ೉ʁ
  32. গ͠دΓಓ

  33. L//ͱ3BOEPN'PSFTU 2VFSZ Lݸ͡Όͳ͍͡ΌΜɺͱ͔͸ɺஔ͍͓ͯ͘ Lݸ໨ͷ൒ܘͩͱࢥ͍ͬͯͩ͘͞

  34. ੺ͬΆͦ͏ʁ

  35. ࣍ݩ͕࿪ΜͰ͍ͨΒͲ͏Αʁ

  36. ͭͷઢ͸ಉ͡ڑ཭ʜͳۭؒ Y`Yͩͱ͔ɺ ࣍ݩΛ࿪ΊΔํ๏͸ ͍͘ΒͰ΋͋Δ ࣍ݩͷ࿪Έͷৄࡉ Λ஌ͬͯΔલఏ ʹύϥϝτϦοΫ

  37. 3BOEPN'PSFTUͳΒʁ

  38. 3BOEPN'PSFTUͳΒʁ

  39. 3BOEPN'PSFTUͳΒʁ

  40. ϊϯύϥϝτϦοΫͳۙ๣ ͜Εͩͬͯ ཱ೿ͳٿ ࣮ࡍʹ͸ ڥք෇ۙ͸ʜ ࠓճ͸ׂѪ L//㲈3' 㲈#PPTUFE5SFFT  㲈(SBEJFOU#PPTUJOH

    㲈YHCPPTU
  41. ཁ͢ΔʹػցֶशͰ ΍ͬͯΔ͜ͱͬͯʜ

  42. Կ΋ߟ͑ͣʹ͘͡Ҿ͖ ੺ɿ੨ɿԫʹ ɿɿ

  43. ͱͯ΋େ͖ͳۙ๣൒ܘͱಉ͡ ੺ɿ੨ɿԫʹ ɿɿ

  44. ൣғΛڱΊͯ͘͡Ҿ͖ ੺ɿ੨ɿԫʹ ɿɿ ෼ղೳͱݴ͑Δ͔΋ʁ

  45. ͜͏͍͏ଆ໘΋ ͋ΔΘ͚Ͱ͢N @@ N

  46. ݄ʹΑͬͯ฼਺͕ҟͳΔͱ͖ ੺ ੨ ԫ ݄    ݄ 

      ݄    ݄ ݄Λ1VCMJD-#͔Βਪఆ͢Δ͜ͱ͸େ͖ͳҙٛ ݄ͷ੺͸͔͠ͳ͍͔΋͠Εͳ͍
  47. ๻ͷΞΠσΞ w ݄ʹΑͬͯҟͳΔ฼਺ʹԠͯ͡ഒ཰ิਖ਼Λߦ͏ w ෼ղೳ͕ۃݶ·Ͱྑ͍ͱ͖ɺഒ཰ิਖ਼͸ແ֐ w ෼ղೳ͕ۃݶ·Ͱѱ͍ͱ͖ɺഒ཰ิਖ਼͸༗ޮ w ͦͷதؒͰ΋ɺ଍Γͳ͍෼ղೳͷ෼͚ͩ༗ޮʢʁʣ w

    ਪఆ݄ͷ฼਺͸1VCMJD-#͔Βਪఆ ʜҐͷ࠷ޙͷܾΊखʹͳͬͨ
  48. ෼ղೳ͕ۃݶ·Ͱྑ͍ͱ͖ ੺ɿ੨ɿԫʹ ɿɿ

  49. ۃݶ·Ͱѱ͍ͱ͖ ੺ɿ੨ɿԫʹ ɿɿ

  50. ଞͷ্Ґऀͷํ਑ w Ґʜਪఆ݄ͷ฼਺ʹԠֶͨ͡शඪຊΛ࡞੒
 ɹɹʢͪ͜Βͷ΄͏͕εϚʔτʂʂʣ w Ґʜ֤ਓͷط஌݄ͷ:Λ
 ɹɹɹ࣌ܥྻσʔλͱͯ͠ཌ݄Λ༧ଌ
 ɹɹʢ֤ਓʹ͢Δ͜ͱͰɺ
 ɹɹɹࣅͨঢ়گ͕ແ਺ʹଘࡏʁ
 ɹɹɹະ஌݄ͷ؇࿨ʂʁʣ

  51. ຊฤ w ࣌ؒ࣠ͷऔΓѻ͍ʹ͍ͭͯ w TUBDLJOH΍%FFQ-FBSOJOHʹ͍ͭͯ w طଘϥΠϒϥϦ͸ຬ଍͔ʁ

  52. ຊฤ w ࣌ؒ࣠ͷऔΓѻ͍ʹ͍ͭͯ w TUBDLJOH΍%FFQ-FBSOJOHʹ͍ͭͯ w طଘϥΠϒϥϦ͸ຬ଍͔ʁ

  53. ಋೖΛৼΓฦΔ ?@? TUBDLJOH %FFQ-FBSOJOH FUDʜ GVHVTVLJ͞Μ μϝͰͨ͠

  54. ಋೖΛৼΓฦΔ ?@? TUBDLJOH %FFQ-FBSOJOH FUDʜ GVHVTVLJ͞Μ μϝͰͨ͠ ͳͥʁʁʁ

  55. TUBDLJOHͱ͸ USBJO 9 USBJO : UFTU 9 USBJO :`" USBJO

    : UFTU :`" USBJO :`# USBJO : UFTU :`# USBJO :`" UFTU :`" USBJO :`# UFTU :`# USBJO :`$ UFTU :`$ USBJO : USBJO:`͸ ΫϩεόϦσʔγϣϯͰ࡞Δ ࠓճ͸GPMEΛ࢖༻ ·ͱΊΔ ༧ଌ ༧ଌ ༧ଌ YHCPPTUͷΈ
  56. ෳ਺ֶशث͸ඞਢ͔ʁ ࠷ޙ͸-3ඞਢ͔ʁ Ҿ༻ݩ ଟ૚ʹͳΔ΄Ͳ -3ඞਢʁ

  57. ୯Ұֶशثͷྫ ૚໨ Ҿ༻ݩ ͜ΕΛࢀߟʹ ͙Β͍ ˠͩΊͰͨ͠

  58. TUBDLJOHʹΑͬͯ ΋ͨΒ͞ΕΔ΋ͷʁ ܾఆ໦ʹͱͬͯಘҙ ܾఆ໦ʹͱͬͯۤख ෳ਺࣍ݩʹ·͕ͨΔφφϝ੒෼ΛऔΓग़͢ͷ͕TUBDLJOHʁ

  59. ,"((-&&/4&.#-*/((6*%&ΑΓ ՄࢹԽ͢Δͱ ମײ͠΍͍͢ͷ͔ͳʁ Έͳ͞ΜɺTUBDLJOH࣌ʹ Ͳͷ͙Β͍ՄࢹԽͯ͠·͔͢ʁ

  60. "VUP&ODPEFSͱ %FFQ-FBSOJOH "࣍ݩ BVUPFOD "`࣍ݩ EFD ౷߹ "࣍ݩ BVUPFOD "`࣍ݩ

    EFD "࣍ݩ BVUPFOD "`࣍ݩ EFD #࣍ݩ BVUPFOD #`࣍ݩ EFD ʜ $//Λච಄ʹ৭ʑ͋Δ͚Ͳɺ "&Ͱ΍ͬͯΔͷ͸࣍ݩ࡟ݮ ॏཁͳ৘ใΛ࢒͢ࡍʹɺ ৘ใ͕੔ཧ͞ΕΔ
  61. ॏཁͳ৘ใͱ͸ USBJO9 USBJO: UFTU9 %FFQ-FBSOJOH͸ 9ͷ෮ݩ౓ TUBDLJOH͸ :ͷతத౓

  62. ͍ࠞͥͨʂ ࠞͥΔͳةݥʂʁ ੺ ੨ ԫ ݄    ݄

       ݄    ݄ ୯७ʹࠞͥͯଟ૚TUBDLJOH͢Δͱ ௿ස౓ͷԫ͕৯ΘΕΔՄೳੑʁ ͔͠͠૬ޓʹ৘ใʁ ΋Ζ΋Ζະݕূ
  63. TUBDLJOH͸ ෦෼తʹ͸੒ޭ΋͍ͯͨ͠ w ຊ൪ͷ݄̒༧૝Ͱ͸ࣦഊ͕ͨ͠ɺ
 ݄̑༧૝Ͱ͸TUBDLJOHͷํ͕ྑ͍݁Ռ w ࣌ؒ࣠Λ̎࣍ݩʢ࣌ܥྻͱɺقઅʣೖΕɺ
 TUBDLJOHΛ࢖ͬͨόʔδϣϯ͸ɺ
 ฼਺ͷഒ཰ิਖ਼ΛߦΘͳ͍΋ͷಉ࢜Ͱ͸
 1VCMJD-#Ͱࣗݾϕετ

  64. ίϯςετऴྃޙʹ ࢥͬͨ͜ͱ w ฼਺ͷഒ཰ิਖ਼͕ѱ͞Λ͍ͯ͠ΔՄೳੑʜʜʁ w Ґͷ༷ʹɺ
 ฼਺ʹԠֶͨ͡शඪຊͷ࡞੒ͳΒɺ
 ੒ޭ͍ͯͨ͠Մೳੑʜʜʁ ࣍ճɺຊ൪Ͱ͔֬ΊΔ

  65. ຊฤ w ࣌ؒ࣠ͷऔΓѻ͍ʹ͍ͭͯ w TUBDLJOH΍%FFQ-FBSOJOHʹ͍ͭͯ w طଘϥΠϒϥϦ͸ຬ଍͔ʁ

  66. ຊฤ w ࣌ؒ࣠ͷऔΓѻ͍ʹ͍ͭͯ w TUBDLJOH΍%FFQ-FBSOJOHʹ͍ͭͯ w طଘϥΠϒϥϦ͸ຬ଍͔ʁ

  67. طଘϥΠϒϥϦ w YHCPPTU w TDJLJUMFBSO w $IBJOFSɺ5FOTPS'MPX w 3 w

    ʁʁʁɹ͋·Γ஌Γ·ͤΜɹPS[
  68. ཁ͢Δʹɺ͜ͷลʜ w ੔વσʔλʢ5JEZ%BUBʣ w ͢΂ͯ੔વσʔλͱͯ͠ॲཧͰ͖ΔΘ͚Ͱ΋ͳ͍ w ࠓճ͸ɺಉҰਓ෺͕ಉ݄ʹ
 ෳ਺ͷΠϕϯτΛൃੜ͠͏Δͷʹ
 ʮΠϕϯτʹΫϥε:ʯͱͨͨ͠Ίʹ
 ผߦʹͤ͟ΔΛಘͳ͔ͬͨ

  69. ࠷ޙʹ w ·ֶͩशॳظஈ֊ʹ͋ΔͨΊɺແ஌ w Կ͕෼͔Βͳ͍ͷ͔ɺ෼͔Βͳ͍ w ࠙਌ձͳͲͰ৭ʑڭ͍͑ͯͩ͘͞ɹN @@ N

  70. ࠷ޙʹ w ·ֶͩशॳظஈ֊ʹ͋ΔͨΊɺແ஌ w Կ͕෼͔Βͳ͍ͷ͔ɺ෼͔Βͳ͍ w ࠙਌ձͳͲͰ৭ʑڭ͍͑ͯͩ͘͞ɹN @@ N "OZ2VFTUJPOT