複数の列の一気に集計できる summarize関数の紹介

このスライドは、2019/10/8のExploratory Hourで使用したものです。

今回は、複数の列を一気に集計するときに使用するsummarize関数について紹介しました。
・全ての列を集計する summarize_all
・列名を指定して集計する summarize_at
・データタイプを指定して集計する summarize_if

下記にExploratory Hourの詳細がありますので、ご興味のある方はご覧ください。

https://exploratory.io/note/GMq1Qom5tS/Exploratory-hour-hGL8PDW9pu

Transcript

1. Exploratory Hour #25 ෳ਺ͷྻΛҰؾʹूܭ͢Δ
2. 2 εϐʔΧʔ ੢ా צҰ࿠ CEO EXPLORATORY ུྺ 2016೥ɺσʔλαΠΤϯεͷຽओԽͷͨΊɺExploratory, Inc Λ ্ཱͪ͛Δɻ Exploratory, Inc.ͰCEOΛ຿ΊΔ͔ͨΘΒɺσʔλαΠΤϯεɾ ϒʔτΩϟϯϓɾτϨʔχϯάͳͲΛ௨ͯ͠γϦίϯόϨʔͰ ߦΘΕ͍ͯΔ࠷ઌ୺ͷσʔλαΠΤϯεͷීٴͱڭҭʹऔΓ૊ Ήɻ ถΦϥΫϧຊࣾͰɺ16೥ʹΘͨΓσʔλαΠΤϯεͷ։ൃνʔ ϜΛ཰͍ɺػցֶशɺϏοάɾσʔλɺϏδωεɾΠϯςϦδΣ ϯεɺσʔλϕʔεʹؔ͢Δ਺ଟ͘ͷ੡඼ΛੈʹૹΓग़ͨ͠ɻ @KanAugust
3. ෳ਺ͷྻΛ͍ͬ΃Μʹ ·ͱΊͯूܭͯ͠͠·͍͍ͨɻ ࣭໰
4. ूܭ
5. σʔλϥϯάϦϯάͷจ๏
6. Filter Group By Summarizeʢूܭʣ Rename Mutate Arrange Join Select 6 ಈࢺ
7. ؔ਺ ఠཁ sum άϧʔϓͷதͷ஋ͷ߹ܭ n άϧʔϓͷதͷߦ਺ n_distinct άϧʔϓͷதͷҰҙͷ஋ͷ਺ mean άϧʔϓͷฏۉ஋ median άϧʔϓͷதԝ஋ min άϧʔϓ಺ͷ࠷খ஋ max άϧʔϓ಺ͷ࠷େ஋ ूܭ ؔ਺ 7
8. ؔ਺ ఠཁ first άϧʔϓͷ࠷ॳͷ஋ last άϧʔϓͷ࠷ޙͷ஋ nth άϧʔϓͷN൪໨ͷ஋ sd άϧʔϓͷඪ४ภࠩ var άϧʔϓͷ෼ࢄ IQR άϧʔϓͷ̐෼Ґൣғ(75%఺͔Β25%఺·Ͱ) mad άϧʔϓͷฏۉઈରภࠩ ूܭ ؔ਺ 8
9. ؔ਺ ఠཁ any ྫ: 
 any(sales > 500) ͕TRUE,
 গͳ͘ͱ΋salesͷ஋͕500Ҏ্ͷߦ͕1ͭҎ্͋Δ all ྫ: 
 all(sales > 500) ͕TRUE,
 άϧʔϓ಺શͯͷsalesͷ஋͕500Ҏ্ na_count άϧʔϓ಺ͷܽଛ஋ͷ਺ na_percent άϧʔϓ಺ͷܽଛ஋ͷׂ߹ ूܭ ؔ਺ 9
10. ߦͷ਺ ฏۉ 3 32 Customer_Segment Profit Consumer 34 Consumer 26 Consumer 36 Corporate 38 Corporate 22 Corporate 27 10 summarizeίϚϯυ + ूܭؔ਺ n: ߦͷ਺ͱmean: ฏۉΛܭࢉ ूܭ
11. άϧʔϓ͝ͱʹूܭ
12. Filter Group By Summarize Rename Mutate Arrange Join Select Merge 12 ಈࢺ
13. Customer_Segment counts avg Consumer 3 32 Corporate 3 29 group_by(Customer_Segment) Customer_Segment Profit Consumer 34 Consumer 26 Consumer 36 Corporate 38 Corporate 22 Corporate 27 13 summarizeίϚϯυΛ࢖ͬͯ άϧʔϓ͝ͱͷߦͷ਺ͱฏۉΛܭࢉ άϧʔϓ͝ͱʹूܭ
14. ूܭ
15. ूܭ
16. άϧʔϓ͝ͱʹूܭ
17. ෳ਺ͷྻΛ͍ͬ΃Μʹ ूܭͯ͠͠·͍͍ͨɻ
18. ΧελϜɾRίϚϯυ
21. • શͯͷྻ - summarize_all • ྻ໊Λࢦఆ͢Δ - summarize_at • σʔλλΠϓΛࢦఆ͢Δ - summarize_if
22. • શͯͷྻ - summarize_all • ྻ໊Λࢦఆ͢Δ - summarize_at • σʔλλΠϓΛࢦఆ͢Δ - summarize_if
23. શͯͷྻ - summarize_all
24. Loooooooooooks Gooooooooood!!!!
25. ͳͥNAʁ
26. summarize_all(funs(mean(., na.rm=TRUE))
27. શͯͷྻ - summarize_all
28. શͯͷྻΛूܭ
29. άϧʔϓ͝ͱʹશͯͷྻΛूܭ͍ͨ͠
30. σʔλͷάϧʔϓԽ
31. 31 σʔλͷάϧʔϓԽ
32. άϧʔϓ͝ͱʹશͯͷྻΛूܭ
33. • શͯͷྻ - summarize_all • ྻ໊Λࢦఆ͢Δ - summarize_at • σʔλλΠϓΛࢦఆ͢Δ - summarize_if
34. ྻ໊Λࢦఆ͢Δ - summarize_at
36. ؔ਺Λ࢖ͬͯྻ໊Λબ୒͢Δ - summarize_at
38. • શͯͷྻ - summarize_all • ྻ໊Λࢦఆ͢Δ - summarize_at • σʔλλΠϓΛࢦఆ͢Δ - summarize_if
39. σʔλλΠϓΛࢦఆ - summarize_if
41. ࢀߟهࣄ https://exploratory.io/note/kanaugust/ySa5vOu3BA
42. Q&A
43. EXPLORATORY 43