Exploratory Hour #97 - 同じ文章の中で使われる単語の組み合わせを「グループごと」に集計したい

2020/12/22(火)に開催したExploratory Hourのスライドです。

文章が単語化されたデータから、単語の組み合わせをグループごとに集計する方法を紹介しています。

1. EXPLORATORY 1
2. 2 εϐʔΧʔ നށ ܟొ Customer Succes EXPLORATORY ུྺ େֶࡏֶதʹϑʔυϩεΛݮΒͨ͢ΊʹɺֶੜஂମΛ্ཱͪ͛୅දΛ ຿ΊΔɻͦͷޙɺϏδωεΛ஌ΔͨΊʹԽֶϝʔΧʔͷσϡϙϯͱ ϑʔυςοΫܥελʔτΞοϓͰӦۀͱϚʔέςΟϯάΛܦݧɻ ΞϓϦͷ੒௕ͷͨΊʹ͸σʔλαΠΤϯε͕ඞཁͩͱײ͡ɺΞϓϦʹ ಛԽͨ͠Ϣʔβʔͷߦಈ෼ੳπʔϧΛ։ൃ͢ΔاۀʹͯɺΞϓϦۀք ͷKPI෼ੳͳͲΛ୲౰͢Δɻ ݱࡏ͸Exploratory, Inc. ͰΧελϚʔαΫηεΛ୲౰͢Δ๣Βɺσʔ λͷՄࢹԽͱ୳ࡧతσʔλ෼ੳΛઐ໳ͱͯ͠σʔλαΠΤϯεͷීٴ ʹऔΓ૊Ήɻ @ShirotoTakato
3. 3 • ࣭͝໰͸zoomͷνϟοτʹ͝౤ߘ͍ͩ͘͞ɻ • ηϛφʔͷײ૝΍໾ʹཱͭ৘ใΛTwitterͰϋογϡλάΛ ͚ͭͯπΠʔτΛ͓ئ͍͠·͢ɻ #Exploratoryηϛφʔ Exploratory Hour
4. Exploratory Hour
5. • ಉ͡จষͷதͰ࢖ΘΕΔ୯ޠͷ૊Έ߹ΘͤΛʮάϧʔϓ͝ͱʯʹू ܭ͍ͨ͠ • όʔͱϥΠϯΛ૊Έ߹ΘͤͨνϟʔτΛ࡞Γ͍ͨ ࠓिͷ࣭໰
6. • ಉ͡จষͷதͰ࢖ΘΕΔ୯ޠͷ૊Έ߹ΘͤΛʮάϧʔϓ͝ͱʯʹ ूܭ͍ͨ͠ • όʔͱϥΠϯΛ૊Έ߹ΘͤͨνϟʔτΛ࡞Γ͍ͨ ࠓिͷ࣭໰
7. 7 Twitter search͔ΒʮσʔλαΠΤϯεʯͷΩʔϫʔυͰऔಘͨ͠πΠʔτ(จ ষ)Λ୯ޠԽͨ͠σʔλ
8. 8 จষΛ୯ޠԽ͢Δ
9. 9 ୯ޠԽͨ͠σʔλΛϫʔυΫϥ΢υͰՄࢹԽ͢Δ
10. 10 ͜ͷํ๏Ͱ͸ɺΑ͘࢖ΘΕΔ୯ޠ͸ՄࢹԽͰ͖Δ͕ɺҰॹʹ࢖ΘΕ͍ͯΔ୯ޠ ͸Θ͔Βͳ͍ɻ
11. ಉ͡จষͷதͰҰॹʹ࢖ΘΕΔ୯ޠͷ૊Έ߹ ΘͤΛ஌Γ͍ͨɻ 11
12. 12 ྫ͑͹ɺAIͱػցֶश͸Α͘Ұॹʹ࢖ΘΕΔͷͰ͸ͳ͍͔ʁ
13. 13 ୯ޠͷ૊Έ߹ΘͤΛ਺͑Δɻ document_id token count 1 σʔλ 1 1 αΠΤϯε 1 1 ֶश 1 document_id token_x token_y value 1 σʔλ αΠΤϯε 1 1 αΠΤϯε ֶश 1 1 ֶश σʔλ 1
14. 14 ςΩετσʔλͷՃ޻ʹ͋Δʮ୯ޠͷ૊Έ߹ΘͤΛΧ΢ϯτʯ͔Β࣮ߦͰ͖Δɻ
15. 15 ୯ޠͷ૊Έ߹ΘͤΛ਺͑ͨσʔλ
16. 16 ୯ޠͷ૊Έ߹ΘͤΛόʔνϟʔτͰՄࢹԽ
18. 18 ʮ୯ޠʯͰݕࡧ
19. σόΠεʹΑͬͯҰॹʹ࢖ΘΕΔ୯ޠͷ૊ Έ߹Θͤͷ܏޲ʹ͸ҧ͍͸͋Δͷ͔ʁ 19
20. 20 άϧʔϓʢσόΠεʣ͝ͱʹ୯ޠͷ૊Έ߹Θͤͷ஋Λूܭ͢Δɻ device token_x token_y value mobile σʔλ αΠΤϯε 10 mobile σʔλ ߴߍੜ 6 mobile ߴߍੜ ߨٛ 5 mobile ڭҭ σʔλ 5 pc σʔλ αΠΤϯε 8 pc σʔλ ࣾձਓ 6 pc ࣾձਓ ߨ࠲ 5 pc େֶ ࣾձਓ 4
21. 21 ݩʑͷσʔλʹ͸deviceͷྻ͕͋Δɻ
22. 22 ͔͠͠ɺ୯ޠԽͨ͠ࡍʹଞͷྻ͕ফ͑ͯ͠·͍ͬͯΔΑ͏ͩɻ
23. 23 จষΛ୯ޠԽͨ͠εςοϓͷτʔΫϯΛΫϦοΫ͢Δɻ
24. 24 ଞͷྻΛอ࣋͢Δʹʮ͸͍ʯΛબ୒࣮ͯ͠ߦ͢Δɻ
25. 25 ୯ޠԽ͢ΔࡍʹଞͷྻΛ࢒͢͜ͱ͕Ͱ͖ͨɻ
26. 26 ςΩετϖΞΛΧ΢ϯτͷεςοϓͷτʔΫϯΛΫϦοΫ͢Δɻ
27. 27 άϧʔϓԽ͢ΔྻʹʮdeviceʯΛબ୒࣮ͯ͠ߦ͢Δɻ
28. 28 device͝ͱʹ୯ޠͷ૊Έ߹ΘͤΛٻΊΔ͜ͱ͕Ͱ͖ͨɻ
29. 29 όʔνϟʔτͷ܁Γฦ͠ʹʮdeviceʯΛબ୒͢Δɻ
30. 30 mobileͷϢʔβʔ͸ঁࢠɺ౦ژɺதߴɺڭ͑Δͱ͍ͬͨ୯ޠ͕࢖ΘΕ͓ͯΓɺ pcϢʔβʔͰ͸ɺAIɺେࡕɺ޻ۀɺߨ࠲ͱ͍ͬͨ୯ޠ͕࢖ΘΕ͍ͯΔɻ
31. 31 TwitterΛݟͯΈΔͱɺ౦ژঁࢠֶԂͱ͍͏ֶߍͰதߴੜʹσʔλαΠΤϯεΛڭ͍͑ͯΔͷ ͱɺେࡕ޻ۀେֶͰࣾձਓ޲͚ͷσʔλαΠΤϯεߨ࠲͕։ߨ͞ΕͨΑ͏ͩɻ
32. ࣍ճηϛφʔ
33. EXPLORATORY ΦϯϥΠϯɾηϛφʔ #41 ͳͥExcelϢʔβʔ͸ ExploratoryΛ࢖͏΂͖ͳͷ͔
37. 2݄ΦϯϥΠϯ։࠵ʂ ฏ೔൛: 2݄2೔(Ր), 3೔(ਫ), 4೔(໦)
39. • ϏδωεͰ࢖͑Δࢥߟྗͷҭ੒ σʔλαΠΤϯεͷεΩϧशಘ͚ͩͰͳ͘ɺσʔλΛ࢖ͬͨΑΓΑ͍ҙࢥܾఆΛߦ͏ͨ Ίʹඞཁͳ౷ܭతɾ֬཰తࢥߟྗ΋शಘͰ͖Δɻ • ݱ৔Ͱ࢖͑ΔεΩϧͷशಘ ڭࣨͷத͚ͩͰ௨༻͢Δཧ࿦ΑΓ΋ɺ࣮ࡍͷϏδωεͷݱ৔Ͱͷ໰୊Λղܾ͢ΔͨΊʹ ࢖͑ΔεΩϧͷशಘʹॏ৺Λ͓͍ͨτϨʔχϯάɻ • ϓϩάϥϛϯάͳ͠ RݴޠͷUIͰ͋ΔExploratoryΛ෼ੳπʔϧͱͯ͠࢖༻͢ΔͨΊɺࢥߟྗͱσʔλαΠΤϯ εͷख๏ͷशಘʹ100ˋूதͰ͖Δɻ ಛ௃
40. σʔλϥϯάϦϯάɾτϨʔχϯά 2݄։࠵ʂ EXPLORATORY
41. 2݄ΦϯϥΠϯ։࠵ʂ ฏ೔൛: 2݄18೔(໦),19೔(ۚ)
43. Q & A
44. Contact Email takato@exploratory.io Twitter Hashtag #ExploratoryHour ͰπΠʔτʂ Twitter @ExploratoryJp Exploratory Hour https://bit.ly/30odd9q
45. EXPLORATORY