lt1

test

Transcript

1. σʔλ෼ੳίϯϖೖ໳ @owatank
2. ࣗݾ঺հ • ໊લ : ଜࢁͻ͞Έ • ֶ෦3೥ɺஸ਺ֶݚॴଐ • ࠷ۙػցֶशएखͷձߦ͖ͬͯͨ • ϒϩά(http://owatank.hatenablog.com/)
3. Kaggleͱ͸ʁ
4. ҰݴͰݴ͏ͳΒ σʔλ෼ੳͷίϯϖςΟγϣϯ
5. KaggleͬͯͳΜͩΑ • اۀͳͲͷ૊৫͕σʔλΛఏڙͯ͘͠ΔͷͰͦͷσʔλΛ ෼ੳ͠ɺ޲͜͏͕ཁٻ͢ΔΑ͏ͳ෼ྨ΍ճؼϞσϧΛ࡞ͬ ͯͦͷϞσϧͷਫ਼౓Λڝ͍߹͏σʔλ༧ଌίϯϖςΟγϣ ϯ • είΞ͸ఏग़༻ͷςετσʔλʹର͢Δ༧ଌͷ݁ՌΛCSV ϑΝΠϧͳͲʹอଘͯ͠޲͜͏Ͱطʹ༻ҙͯ͋͠Δ౴͑ͱ ͲΕ͚ͩҰக͍ͯ͠Δ͔ͷ఺਺(Log LossͳͲ͕ଟ͍) • ίϯϖʹΑͬͯ͸৆ۚ(1000~50ສɺن໛ʹΑΔ)͕ग़Δ
6. ॳ৺ऀͩͱਏͦ͏ʁ
7. Kaggle͸σʔλ෼ੳͷษڧͱ ͯ͠΋ར༻Ͱ͖Δ
8. ษڧͬͯʁ • Kaggleʹ͸ Kernel ͱݺ͹ΕΔࢀՃऀ͕ͲͷΑ͏ͳख๏Λ ࢖ͬͯείΞΛग़͔ͨ͠ͱ͔͕Θ͔Δهࣄ͕༻ҙ͞Ε͍ͯ ΔɻӳޠͳͷͰؾ߹ͰಡΉ • ਓʹΑͬͯ͸ஸೡͳจষͩͬͨΓιʔείʔυ·Ͱ৐͚ͬ ͯ͘Ε͍ͯͨΓͯ͠σʔλ෼ੳ༻ͷϑϨʔϜϫʔΫͷ࢖͍ ํͷ࿅शʹ΋ͳΔ • ίϯϖͰ͸ͳ͘ϑϦʔͷσʔληοτΛ༻ҙͯ͋͠ΔͷͰɺ ͦΕΛ࢖ͬͯ༡ΜͩΓɺKernelͰಘͨ஌ࣝΛࢼ͢͜ͱ΋Ͱ ͖Δɻ
9. νϡʔτϦΞϧ΋༻ҙ͞Ε͍ͯΔͷͰ ͬ͞͞ͱ࢝Ίͨํ͕͓ಘ
10. ͱݴ͏Θ͚Ͱ νϡʔτϦΞϧΛ΍ͬͯΈΔ
12. νϡʔτϦΞϧ • ૣ͍࿩͕ʮ༗໊ͳλΠλχοΫ߸ͷ৐٬σʔλΛ͋͛Δ͔Β͋Δ ৐٬͕σʔλ͔Βੜଘऀ͔ࢮ๢ऀ͔Ͳ͔ͬͪ෼ྨͯ͠Ͷʯͱ͍͏ ͜ͱ • ༩͑ΒΕͨσʔλͷཁૉͱͯ͠ɺ৐٬ऀͷ໊લɺ೥ྸɺੑผɺધ ͷνέοτ൪߸ɺνέοτͷΫϥε(ඈߦػͰݴ͏ΤίϊϛʔΫϥ εͱ͔)ͦͯ͠ੜଘorࢮ๢͔Ͳ͏͔ͳͲ͕ೖ͍ͬͯΔ
13. σʔλ෼ੳͷϑϨʔϜϫʔΫͱͯ͠ pandasΛ࢖༻͢Δ
14. σʔλͷத਎ͱͯ͠ ઌ಄ͷ̑ͭ΄Ͳ֬ೝͯ͠ΈΔ
16. ಛʹԿ΋ݟ͑ͯ͜Ͷ͑ɾɾɾ ·ͣ͸ੜଘऀͱࢮ๢ऀͷׂ߹Ͱ΋ݟΔ
17. ̌ʹࢮ๢ऀͳͷͰ ࢮ๢ऀͷ͕ଟ͍͜ͱ͕Θ͔Δ
18. Fare(ӡ௞)͕ߴ͍ਓ΄Ͳ ͓ۚ࣋ͪʹ༏۰͞Εͦ͏ ʹੜଘ཰ߴͦ͏ʂʂʂ ͱݴ͏ԾઆΛཱͯͯݟ͍ͯ͘
19. ̔̌̌ʙ̌̌̕ʢۚͷ୯Ґ͸஌ΒΜʣ ͜ͷ୅ͷਓͨͪ͸݁ߏੜ͖࢒ͬͯͦ͏
20. ద౰ʹ̍̌Ͱ۠੾ͬͯͦͷ࣌ͷ ੜଘऀͷׂ߹Λ͔֬ΊΔ
22. ׂ߹͔ΒݟΔʹFareͷ஋͕ େ͖͍ਓ͸ੜଘ཰͕ߴ͍ ͭ·ΓFare͸෼ྨʹ࢖͑ͦ͏ʂʂʂ
23. ࣍͸ঁੑͷํ͕ٹॿ͞Εͦ͏ ࢠڙ΍೥ྸ͕ए͍ਓ΋༏ઌతʹٹॿ͞ Εͦ͏ͱ͍͏ԾઆΛཱͯͯௐ΂ͯΈΔ
24. ੑผ
25. ೥ྸʢ10ࡀͰ۠੾ͬͨʣ
26. ঁੑͷ͕ੜଘऀͷׂ߹ଟ͍͠ ೥ྸ΋ए͍ਓ΄Ͳੜଘऀ͕ଟ͍ ͭ·Γੑผͱ೥ྸ΋෼ྨʹ࢖͑ͦ͏
27. ͜Μͳײ͡ͰԾઆΛཱͯͯ ੜଘऀͷׂ߹ΛݟͨΓͯͦ͠ͷಛ௃͕ ࢖͑ͦ͏͕ݟ͍ͯ͘
28. ࠷ऴతʹ෼ྨʹ࢖͏ͨΊͷ ಛ௃Λߜ͍ͬͯ͘
29. XGBoostͱ͔ͷܾఆ໦ʁ SVM? DeepLearning?
30. ਖ਼ղ͸ͳ͍ͷͰύϥϝʔλΛ ͍ͬͯ͡࠷దͳ΋ͷΛબͿ
31. DeepLearning
32. XGBoost
33. ෼ྨϞσϧΛ࡞ͬͯ܇࿅σʔλͷ ̒ʙׂ̔΄Ͳ࢖ֶͬͯशΛ͢Δ ࢒Γͷ̐ʙׂ̎Ͱ֤Ϟσϧͷ ਫ਼౓ൺֱΛͯ͠ΈΔ
35. ϞσϧͷධՁ͸ ଛࣦؔ਺ͷ஋͚ͩͰ͸ͳ͍͜ͱʹ ஫ҙ
36. Ϟσϧ࡞ͬͨ͠ ૣ଎ఏग़༻ͷςετσʔλʹରͯ͠ ద༻ͯ͠ఏग़͢Δ ͜Ε
37. ίϯϖͷϖʔδʹ͋Δ Submit PredictionʹඈΜͰ ఏग़༻ͷcsvϑΝΠϧΛ౤͛Δ
38. Make Submission Λ ԡ͢ͱ޲͜͏ͰείΞΛܭࢉͯ͠ ݁ՌΛฦͯ͠དྷΔ
39. ͜ͷσʔλ෼ੳίϯϖͩͱ 0.76~0.78͋ͨΓ͕ฏۉ 0.8Λ௒͑ΔͱΊͬͪΌϥϯΫ্͕͕Δ
40. είΞΛ্͛ΔͨΊʹ ৽͍͠ಛ௃͕͍Δ͔ɺͦΕͱ΋ ࢖ͬͨಛ௃ͷߜΓࠐΈ͕ඞཁ͔ ૬ؔ͸͋Δ͔ ΤϯτϩϐʔΛ࢖ͬͨಛ௃ͷߜΓࠐΈ ॏճؼ෼ੳͳͲͳͲ
41. վྑͷ༨஍͸ͨ͘͞Μ͋Δ
42. ύϥϝʔλ͍ͬͯͨ͡Β࠷ߴείΞ͸ ͜ΜͳΜʹͳͬͨ(ࠓ์ஔ͗ͨ͢͠ͷ͔ ίϯϖ͔Βଘࡏࣗମফ͑ͨ)
43. ߦ͖٧·ͬͨΒ Kernel ಡΜͰ஌ݟΛಘΔͷ͕Ұ൪
44. ਓʹΑͬͯ͸ ೔෇σʔλ͔Β༵೔σʔλɺఱؾ৘ใ ΛͲ͔͔ͬΒҾͬ͜ൈ͍ͯ ৽͍͠ಛ௃ͱͯ͠σʔλʹ͚ͬͭͨ͘ Γ͢Δख๏Λ͢Δਓ΋͍Δ
45. ίϯϖࣗମ͸λΠλχοΫͷΑ͏ͳ ਺஋σʔλ͚ͩͰ༧ଌΛ͢Δ΋ͷ͚ͩ Ͱ͸ͳ͘ը૾෼ྨ΍Ի੠ೝࣝɺϊΠζ আڈͳͲ৭ʑ͋Δ
46. ձ௡େͰKaggle΍Γͯʈʙ
47. ͜ΜͳΜ
48. य़ٳΈ·Ͱʹ͸࡞Δʢ༧ఆʣ
49. σʔλ෼ੳΤϯδχΞ ૿͑ͯ஌ݟΛत͚ͯ΄͍͠
50. ࢀߟจݙ • https://www.codexa.net/what-is-kaggle/