相談LT #PyNyumon / 20170710

"Python入門者の集い" のLT資料となります。
http://yuzutas0.hatenablog.com/entry/2017/07/11/110000 に補足を掲載しています。

Transcript

1. ૬ஊLT
 Pythonॳ৺ऀ͕Jupyter+BigQueryͰσʔλ෼ੳج൫Λ࡞Γ࢝Ί͕ͨ
 ͦΖͦΖݶքͳͷͰॿ͚͍ͯͩ͘͞
 
 
 2017-07-10
 Pythonೖ໳ऀͷू͍#5 presented by @yuzutas0
 https://www.pexels.com/photo/reptile-snake-snape-36448/ 
2.  
 Pythonॳ৺ऀ͕ 
 ͦΖͦΖݶքͳͷͰ 
 ॿ͚͍ͯͩ͘͞ 
 Jupyter+BigQueryͰσʔλ෼ੳج൫Λ࡞Γ࢝Ί͕ͨ
3.  
 Pythonॳ৺ऀ͕ 
 ͦΖͦΖݶքͳͷͰ 
 ॿ͚͍ͯͩ͘͞ 
 Jupyter+BigQueryͰσʔλ෼ੳج൫Λ࡞Γ࢝Ί͕ͨ
4. 
 ɹ@yuzutas0  ɹPythonॳ৺ऀ ɹ- ࢓ࣄ͸SREͱ͔ 
 ɹ- ୲౰γεςϜͷར༻ݴޠ
 ɹɹJava, Node.js, Ruby, Golang, Objective-C
5.  ɹ؀ڥߏங͸ແ೉ʹΫϦΞ
6.  ɹ“Hello World” Ͱ·͔͞ͷΤϥʔʂ
7. ɹɹɹɹɹɹɹɹɹɹɹɹɹɹɹɹɹ͜Ε  ɹίϩϯ͕͍ΔΒ͍͠
8. ͱ͍͏ঢ়ଶ͔Βελʔτ 
9.  
 Pythonॳ৺ऀ͕ 
 ͦΖͦΖݶքͳͷͰ 
 ॿ͚͍ͯͩ͘͞ 
 Jupyter+BigQueryͰσʔλ෼ੳج൫Λ࡞Γ࢝Ί͕ͨ
10. ɹɹ1. ࢪࡦ෼ੳ → Build/Measure/Learn ɹɹ2. ఆৗతͳKPIϞχλϦϯά ɹɹ3. ػցֶशͷσʔληοτ४උ  ɹΈΜͳσʔλ࢖͍͍ͨΑͶ
11.  ɹΈΜͳ͕σʔλΛಠࣗʹ࢖ͬͨ 
 ݩσʔλ 
 ऩू/Ճ޻ 
 දࣔ/෼ੳ 
 ɹɹɹɹɹɹɹɹɹɹɹɹɹ෦ॺA 
 ɹɹɹɹɹɹɹɹɹɹɹɹɹ෦ॺB 
 ɹɹɹɹɹɹɹɹɹɹɹɹɹ෦ॺC ϩάA DB ϩάB Excel Redash Tableau
12.  ɹτϥϒϧଟൃ - πʔϧ͝ͱʹച্ͷ਺஋͕ҧ͏ʂ 
 ݩσʔλ 
 ऩू/Ճ޻ 
 දࣔ/෼ੳ 
 ɹɹɹɹɹɹɹɹɹɹɹɹɹ෦ॺA 
 ɹɹɹɹɹɹɹɹɹɹɹɹɹ෦ॺB 
 ɹɹɹɹɹɹɹɹɹɹɹɹɹ෦ॺC ϩάA DB ϩάB Excel Redash Tableau
13.  ɹՃ޻ϩδοΫͷผ؅ཧ͕໰୊ 
 ݩσʔλ 
 ऩू/Ճ޻ 
 දࣔ/෼ੳ 
 ɹɹɹɹɹɹɹɹɹɹɹɹɹ෦ॺA 
 ɹɹɹɹɹɹɹɹɹɹɹɹɹ෦ॺB 
 ɹɹɹɹɹɹɹɹɹɹɹɹɹ෦ॺC ϩάA DB ϩάB Excel Redash Tableau
14.  ɹͳͷͰBigQueryʹҰݩԽ 
 ݩσʔλ 
 ऩू/Ճ޻ 
 දࣔ/෼ੳ 
 ɹɹɹɹɹɹɹ෦ॺA 
 ɹɹɹɹɹɹɹ෦ॺB 
 ɹɹɹɹɹɹɹ෦ॺC ϩάA DB ϩάB Excel Redash Tableau BigQuery
15.  ɹ֤෦ॺͷಘҙͳ΍Γํɾπʔϧ͸ม͑ͳ͍ 
 ݩσʔλ 
 ऩू/Ճ޻ 
 දࣔ/෼ੳ 
 ɹɹɹɹɹɹɹ෦ॺA 
 ɹɹɹɹɹɹɹ෦ॺB 
 ɹɹɹɹɹɹɹ෦ॺC ϩάA DB ϩάB Excel Redash Tableau BigQuery
16.  ɹॲཧεΫϦϓτͱͯ͠PythonΛ࠾୒ 
 Jupyter Notebook ಈ࡞֬ೝ͠΍͍͢
 ه࿥/࠶ݱ͠΍͍͢ 
 Pandas σʔλՃ޻͠΍͍͢
 JupyterͰ֬ೝ͠΍͍͢
17.  
 Pythonॳ৺ऀ͕ 
 ͦΖͦΖݶքͳͷͰ 
 ॿ͚͍ͯͩ͘͞ 
 Jupyter+BigQueryͰσʔλ෼ੳج൫Λ࡞Γ࢝Ί͕ͨ
18. Ϟϊ͸ಈ͍͍ͯΔ  ɹ౒ྗͷ݁থ
19. 
 
 .envʹΑΔ؀ڥม਺ͷಡΈࠐΈ → ςετ؀ڥΛ෼཭  ɹ౒ྗͷ݁থ
20. unittest ͰطଘExcelγʔτͷܭࢉ݁Ռͱಉ͡ʹͳΔ͜ͱΛࣗಈݕূ  ɹ౒ྗͷ݁থ
21. Python3.4ʙͷEnumΛ׆༻
 ˠ DictionaryܕͰ஋Λ؅ཧ  ɹ౒ྗͷ݁থ
22. 
 EnumͷࣙॻσʔλΛ
 ࢖͍΍͘͢͢ΔϝιουΛ
 جఈΫϥεʹू໿  ɹ౒ྗͷ݁থ
23. දࣔΫϥεͱModelΫϥεͷI/FΛ҆ఆͤ͞ΔͨΊʹ
 Python3.5ʙͷTypeHintsΛ׆༻  ɹ౒ྗͷ݁থ
24. ച্ͳͲͷࢦඪ͸
 BQ࿈ܞʹΑΔ
 Immutableͳ
 Ϟσϧ૚ʹఆٛ  ɹ౒ྗͷ݁থ
25. BQ༻ΫΤϦ͸Python3.6ʙͷf-stringsΛ׆༻
 ϝιου੾Γग़͠ → Ҿ͖౉͠Ͱม਺είʔϓ੍ޚ  ɹ౒ྗͷ݁থ
26. ɹ͜ͷ΁Μʢʹฉ͘ͷ͕ૣͦ͏ʣ 
 ಺෦࢓༷Λ೺Ѳɺ
 ύϑΥʔϚϯεΛ࠷దԽͰ͖Δ
 ʢDocsɾॻ੶ɾίʔυΛಡΉϑΣʔζʣ 
 ֎෦࢓༷Λ೺ѲɺอकੑΛ޲্Ͱ͖Δ
 ʢଞਓͷίʔυΛಡΉˍॻ͖௚͢ϑΣʔζʣ  ɹݴޠͷֶशεςʔδͱͯ͠͸ 
 ػೳཁ݅ΛຬͨͤΔ
 ʢͻͨ͢Βॻ͘ˍάάΔϑΣʔζʣ ؀ڥߏங Hello World ͬ͘͟Γ
 σόοά ෼཭ɾ݁߹ ϕλʔͳॻ͖ํ ศརͳϥΠϒϥϦ ϕϯνϚʔΫˍ
 νϡʔχϯά ಺෦मਖ਼ ͖ͪΜͱ
 σόοά
27. εϥεϥΘ͔Βͳ͍Python  ɹཁ͢Δʹ
28. 
 1. ͨͿΜ໊લۭؒܥ 2. JavaͩͱͰ͖ΔͷͰPython΋Ͱ͖ͯ΄͍͠ܥ 3. IntelliJʢPythonϓϥάΠϯಋೖࡁΈʣܥ 4. ςετίʔυܥ
  ɹಈ࡞͸͢Δ͚Ͳ௚͍ͨ͠Ϧετ
29. ϥΠτχϯάྻڍ͍ͯ͘͠ͷͰ ʮ͜͏͢Ε͹ղܾ͢ΔͷͰ͸ʁʯ
 ʮ͜͏͍͏࣭໰ͷ࢓ํΛͯ͘͠Εʯ
 ͳͲͳͲɺޙͰڭ͍͑ͯͩ͘͞ 
30. 
 __init__.py Ͱ import ͠·͘Δ࢓༷͕͏͍͟ɻ
 ͳͯ͘΋ಈ͘ՕॴͱɺඞਢͷՕॴ͕͋Δʁ
  ɹ1. ͨͿΜ໊લۭؒܥ
31. 
 ผϞδϡʔϧͷఆ਺Λ࢖͏ͱ͖ʹɺ
 Πϯϙʔτจ্͕ख͍͘͘έʔεͱ
 ͦ͏Ͱͳ͍έʔε͕͋Δ  ɹ1. ͨͿΜ໊લۭؒܥ
32. Ϋϥεͷ getter/setter Λলུ͍ͨ͠
 ʢ@Lombok.DataతͳϥΠϒϥϦ͕ཉ͍͠ʣ  ɹ2. JavaͩͱͰ͖ΔͷͰPython΋Ͱ͖ͯ΄͍͠ܥ
33. __init__() ʹશϑΟʔϧυΛ٧ΊΔॲཧΛॻ͘ͷ͕खؒ
 ʢ@AllArgsConstructerతͳϥΠϒϥϦ͕ཉ͍͠ʣ  ɹ2. JavaͩͱͰ͖ΔͷͰPython΋Ͱ͖ͯ΄͍͠ܥ
34. pandasͷdataframe['column']Λ
 PythonΦϒδΣΫτͷ column ϓϩύςΟʹίϐʔ͍ͨ͠
 ʢModelMapper͕ཉ͍͠ʣ  ɹ2. JavaͩͱͰ͖ΔͷͰPython΋Ͱ͖ͯ΄͍͠ܥ
35. EnumͷvalueΛdictionaryܕͰ͍࣋ͬͯΔ͕ɺ
 ΋ͬͱָʹ஋Λऔಘ͠΍͍ͨ͘͢͠
 ʢશEnumΛϧʔϓͤͯ֘͞౰͢Δ஋Λऔಘ͢ΔϝιουΛॻ͍͍ͯΔ͕ʣ  ɹ2. JavaͩͱͰ͖ΔͷͰPython΋Ͱ͖ͯ΄͍͠ܥ
36. IntelliJͰͷΠϯϙʔτ͕ઈରύεʹͳΔ͚Ͳɺ
 ࣮ߦ࣌ʹղܾͰ͖ͳ͍ͷͰɺ૬ରύεʹ͍ͨ͠  ɹ3. IntelliJʢPythonϓϥάΠϯಋೖࡁΈʣܥ
37. τοϓϨϕϧϞδϡʔϧͷΠϯϙʔτจΛ
 import .xxx.yyy.zzz Ͱ͸ͳ͘ import xxx.yyy.zzz ͱهड़ɻ
 IDEͩͱSyntaxErrorʹͳΔ͕࣮ߦ͸௨Δɻ
 ٯʹIDEʹ߹Θͤͯʮ.ʯͰ࢝ΊΔͱ͚͜Δɻ͜Ε΋໊લۭؒʁ  ɹ3. IntelliJʢPythonϓϥάΠϯಋೖࡁΈʣܥ
38. IntelliJͷRefactoringͰΫϥε໊Λม͑ͨͱ͖ʹ
 ϑΝΠϧ໊͕ࣗಈͰ࿈ಈͯ͠มΘͬͯ͘Εͳ͍໰୊ɻ
 ٯ΋વΓɻ஍ຯʹ1൪ਏ͍ɻ  ɹ3. IntelliJʢPythonϓϥάΠϯಋೖࡁΈʣܥ
39. testσΟϨΫτϦҎԼͷશεΫϦϓτΛҰׅͰ࣮ߦ͍ͨ͠ɻ
 ΦϓγϣϯΛ͚ͭͯ΋σΟϨΫτϦ͕ωετ͢Δͱࣦഊͯ͠͠·͏
 ͳͷͰݱࡏ͸֤σΟϨΫτϦΛݸผͰࢦఆ͍ͯ͠Δɻ
 ʢ֦ுੑ͕ͳ͍ʣ  ɹ4. ςετίʔυܥ
40. ʢ΋͸΍͜ΕPythonͷ࣭໰Ͱ͸ͳ͍͚Ͳʣ
 Excelͷग़ྗ಺༰Λςετ͢Δͱ͖ɺϑΝΠϧ͕ग़Δͱअຐɻ
 ϞοΫΛ࢖͏ʁ or ࣮ߦޙʹϑΝΠϧΛຖճ࡟আ͢Δʁ
 Ͳ͕͍͍ͬͪͰ͔͢Ͷʔʁ  ɹ4. ςετίʔυܥ
41.  
 Pythonॳ৺ऀ͕ 
 ͦΖͦΖݶքͳͷͰ 
 ॿ͚͍ͯͩ͘͞ 
 Jupyter+BigQueryͰσʔλ෼ੳج൫Λ࡞Γ࢝Ί͕ͨ
42. ॿ͚͍ͯͩ͘͞ 
43. Q&AαʔϏεͰ
 ฉ͚͹ྑ͔ͬͨʢʁʣ  ɹ௥هɿձ৔ʹདྷͯؾ෇͍ͨ͜ͱ
44. ͨͱ͑͹  ɹ௥هɿձ৔ʹདྷͯؾ෇͍ͨ͜ͱ
45. teratail  ɹ௥هɿձ৔ʹདྷͯؾ෇͍ͨ͜ͱ
46. ͝ਗ਼ௌ ͋Γ͕ͱ͏͍͟͝·ͨ͠
 presented by @yuzutas0
 https://www.pexels.com/photo/reptile-snake-snape-36448/