How To Use Gensim - Speaker Deck

Slide 1

Slide 1 text

HFOTJNךאְַַ׋ )PXUPVTFHFOTJN ٽփٽׯƕ ӥڧӥ !DBGFEPNBODFS

Slide 2

Slide 2 text

HFOTJNָדֹ׷ֿהכ  UPQJDNPEFMMJOH  XPSEWFD  זוזו˘

Slide 3

Slide 3 text

HFOTJNָדֹ׷ֿהכ  UPQJDNPEFMMJOH  XPSEWFD  זוזו˘ $ pip install gensim

Slide 4

Slide 4 text

UPQJDNPEFMMJOH 8JLJQFEJBך鎸✲כ  ו׿זزؾحؙחאְג  剅ַ׸גְ׷ד׃׳ֲַ

Slide 5

Slide 5 text

番組ム監督作曲ゲ収録ドラマ制作選手アニメ小学校 isbn tbs 優勝ラジオ明治鉄道フジテレビ高等劇場 nhk 攻撃試合グ市立リ選挙チ km cm バス神社シ px 野球国道 ret 江戸 fc 丁目 jr 京都ダム大正廃止設置設定ホ cd リリス企業文学必要対応店舗ガン採用状態自分法人 th love 事件楽曲医療施設製造バンド機関改称メンバ空港文化専攻学部テマ工場業務管理現代書房 dvd live 小説問題共著のち講談社公開人口作詞政府路線記録道路議員販売教会会社獲得搭載戦闘方面装備専門病院ライブ追加経済大会ドイツ出場製作企画中学校原作アルバム漫画教育海軍フランスイギリス主義選手権戦争株式会社政治世紀編曲都市ズン部隊シングル教授営業ロシア事業大統領運行プロ委員列車サッカ回戦車両クラブ出版合併文庫科学指定大阪女子成績センタ決勝エンジン区間学科システムモデル元年キャラクタ交通運転公園機能県立社会能力地区交差点郵便地方編入設立航空課程

Slide 6

Slide 6 text

׋ֻׁ׿ך俑剅ָ֮׷הֹח  ׉ך⚥חו׿זزؾحָؙろת׸גְ׷ַ׾  ؝ٝؾُ٦ةח鋅אֽג׮׵ֲךָ  زؾحٌؙرؚٔٝדׅ

Slide 7

Slide 7 text

Ɏ ɔ ɔ ɔ ? زؾحؙ 俑剅俑剅醡鸡堣

Slide 8

Slide 8 text

Ɏ ɔ ɔ ɔ 俑剅 زؾحؙ 俑剅醡鸡堣

Slide 9

Slide 9 text

鳤剅׾אֻ׷ ؝٦ػأ׾אֻ׷ ٌرٕ׾אֻ׷ زؾحؙ׾⳿⸂ׅ׷

Slide 10

Slide 10 text

鳤剅׾אֻ׷ from gensim import corpora, models

Slide 11

Slide 11 text

鳤剅׾אֻ׷ from gensim import corpora, models    documents = ['ޗഐ͸ೣͰ͋Δɻ',  '໊લ͸·ͩແ͍ɻ',  'Ͳ͜ͰੜΕ͔ͨͱΜͱݟ౰͕͔ͭ͵ɻ']

Slide 12

Slide 12 text

鳤剅׾אֻ׷ from gensim import corpora, models    documents = ['ޗഐ͸ೣͰ͋Δɻ',  '໊લ͸·ͩແ͍ɻ',  'Ͳ͜ͰੜΕ͔ͨͱΜͱݟ౰͕͔ͭ͵ɻ']    texts = [['ޗഐ', '͸', 'ೣ', 'Ͱ', '͋Δ', 'ɻ'],  ['໊લ', '͸', '·ͩ', 'ແ͍', 'ɻ'],  ['Ͳ͜', 'Ͱ', 'ੜΕ', 'ͨ', '͔', 'ͱΜͱ', 'ݟ౰', '͕', '͔ͭ', '͵', 'ɻ']]

Slide 13

Slide 13 text

鳤剅׾אֻ׷ from gensim import corpora, models    ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~    texts = [['ޗഐ', '͸', 'ೣ', 'Ͱ', '͋Δ', 'ɻ'],  ['໊લ', '͸', '·ͩ', 'ແ͍', 'ɻ'],  ['Ͳ͜', 'Ͱ', 'ੜΕ', 'ͨ', '͔', 'ͱΜͱ', 'ݟ౰', '͕', '͔ͭ', '͵', 'ɻ']]    texts = [['ޗഐ', 'ೣ'],  ['໊લ'],  ['Ͳ͜', 'ݟ౰']]

Slide 14

Slide 14 text

鳤剅׾אֻ׷ from gensim import corpora, models    ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~    texts = [['ޗഐ', ‘ೣ’], ...]    dictionary = corpora.Dictionary(texts) 

Slide 15

Slide 15 text

؝٦ػأ׾אֻ׷ from gensim import corpora, models    ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~    texts = [['ޗഐ', ‘ೣ’], ...]    dictionary = corpora.Dictionary(texts)    corpus = [dictionary.doc2bow(t) for t in texts]

Slide 16

Slide 16 text

ٌرٕ׾אֻ׷ from gensim import corpora, models    ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~    texts = [['ޗഐ', ‘ೣ’], ...]    dictionary = corpora.Dictionary(texts)    corpus = [dictionary.doc2bow(t) for t in texts]    model = models.HdpModel(corpus, dictionary)

Slide 17

Slide 17 text

زؾحؙ׾⳿⸂ׅ׷ from gensim import corpora, models    ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~    texts = [['ޗഐ', ‘ೣ’], ...]    dictionary = corpora.Dictionary(texts)    corpus = [dictionary.doc2bow(t) for t in texts]    model = models.HdpModel(corpus, dictionary)    print(model.show_topics())

Slide 18

Slide 18 text

EFNP

Slide 19

Slide 19 text

XPSEWFD ⽃铂וֲ׃ך䠐㄂׾  鎘皾ד罋ִ׷ֿהָדֹ׋׵  ו׿ז䠬ׄחז׷ד׃׳ֲ

Slide 20

Slide 20 text

ؿٓٝأה⡂גְ׷⽃铂כ

Slide 21

Slide 21 text

ؿٓٝأ

Slide 22

Slide 22 text

ؿٓٝأ س؎خ كؘٕ٦ ؎ؘٔأ ؎ةٔ، أل؎ٝ

Slide 23

Slide 23 text

ؿٓٝأ ؝ٗٝؽ، ؒآفز ؚٕؐ،؎ كزشي ًٕؕ٦ٝ س؎خ كؘٕ٦ ؎ؘٔأ ؎ةٔ، أل؎ٝ

Slide 24

Slide 24 text

傈劤הٗٝسٝ׾駈׃ג  ׉ַֿ׵؎ؘٔأ׾䒷ֻה

Slide 25

Slide 25 text

ٗٝسٝ ؎ؘٔأ 傈劤

Slide 26

Slide 26 text

ٗٝسٝ ؎ؘٔأ 傈劤

Slide 27

Slide 27 text

ٗٝسٝ ؎ؘٔأ 傈劤

Slide 28

Slide 28 text

ٗٝسٝ ؎ؘٔأ 傈劤匌❨

Slide 29

Slide 29 text

ٗٝسٝ ؎ؘٔأ 傈劤匌❨ 껷鿪

Slide 30

Slide 30 text

⽃铂וֲ׃ך䠐㄂ח㛇בְג  ⽃铂׾侧⦼ד邌植ׅ׷倯岀׾  ؝ٝؾُ٦ةח罋ִג׮׵ֲךָ  XPSEWFDדׅ

Slide 31

Slide 31 text

؝٦ػأ׾אֻ׷ ٌرٕ׾אֻ׷ ⡂גְ׷⽃铂׾⳿⸂ׅ׷

Slide 32

Slide 32 text

؝٦ػأ׾אֻ׷ from gensim import models

Slide 33

Slide 33 text

؝٦ػأ׾אֻ׷ from gensim import models    sentences = ['ޗഐ͸ೣͰ͋Δɻ',  '໊લ͸·ͩແ͍ɻ',  'Ͳ͜ͰੜΕ͔ͨͱΜͱݟ౰͕͔ͭ͵ɻ']

Slide 34

Slide 34 text

؝٦ػأ׾אֻ׷ from gensim import models    sentences = ['ޗഐ͸ೣͰ͋Δɻ',  '໊લ͸·ͩແ͍ɻ',  'Ͳ͜ͰੜΕ͔ͨͱΜͱݟ౰͕͔ͭ͵ɻ']    sentences = [[‘ޗഐ ͸ ೣ Ͱ ͋Δ ɻ'],  [‘໊લ ͸ ·ͩ ແ͍ ɻ'],  [‘Ͳ͜ Ͱ ੜΕ ͨ ͔ ͱΜͱ ݟ౰ ͕ ͔ͭ ͵ ɻ']]

Slide 35

Slide 35 text

ٌرٕ׾אֻ׷ from gensim import models    ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~    sentences = [[‘ޗഐ ͸ ೣ Ͱ ͋Δ ɻ’], ...]    model = models.Word2Vec(sentences)

Slide 36

Slide 36 text

⡂גְ׷⽃铂׾⳿⸂ׅ׷ from gensim import models    ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~    sentences = [[‘ޗഐ ͸ ೣ Ͱ ͋Δ ɻ’], ...]    model = models.Word2Vec(sentences)    print(model.most_similar(positive=[’ೣ’]))

Slide 37

Slide 37 text

Slide 38

Slide 38 text

EFNP

Slide 39

Slide 39 text

⿫罋俑柃  HFOTJN5PQJDNPEFMMJOHGPSIVNBOT   IUUQTSBEJNSFIVSFLDPNHFOTJN 03FJMMZ+BQBOⰅꟌ荈搫鎉铂Ⳣ椚  IUUQXXXPSFJMMZDPKQCPPLT 03FJMMZ+BQBO㹋騧堣唒㷕统ءأذي  IUUQXXXPSFJMMZDPKQCPPLT 03FJMMZ+BQBOXPSEWFDח״׷荈搫鎉铂Ⳣ椚  IUUQXXXPSFJMMZDPKQCPPLT