第4回ソーイAI勉強会：自然言語処理

Transcript

1. ୈճɿࣗવݴޠॲཧ
2. ࣗવݴޠॲཧͱ͸
3. ࣗવݴޠɿ
   ೔ຊޠ΍ӳޠͳͲɺਓ͕ੜ·Εͳ͕Βʹ࢖͏ݴ༿ͷ͜ͱ ࣗવݴޠॲཧɿ
   ᐆດ͞ΛؚΉࣗવݴޠΛίϯϐϡʔλʹཧղͤ͞ΔͨΊ ͷٕज़
4. ࣗવݴޠॲཧͷྲྀΕ ਂ૚ֶशҎલ FOEUPFOEֶश ج൫Ϟσϧ େن໛ݴޠϞσϧ
5. ࣗવݴޠॲཧͷྲྀΕ ਂ૚ֶशҎલ FOEUPFOEֶश ج൫Ϟσϧ େن໛ݴޠϞσϧ ਂ૚ֶशϒʔϜ͕࢝·Δ
6. ݚڀ͕ຊ֨తʹ࢝·ͬͨͷ͸೥୅ ೥ʹϩγΞޠ͔Βӳޠ΁ͷίϯϐϡʔλʹΑΔػց຋༁࣮ݧ ͕ެ։͞Ε͍ͯΔɻ ˞຋༁ͱ͍ͬͯ΋ɺݶΒΕͨ୯ޠͷஔ͖׵͑ͱฒͼସ͑ϧʔϧͰߏ੒͞Εͨ΋ͷ
7. ࣗવݴޠॲཧ͸೉ͦ͠͏
   
   ˠ
   ໨త΍༻్ʹΑͬͯλεΫʹ෼ׂʂʂ λεΫ આ໌ ػց຋༁ ςΩετΛଞͷݴޠʹ຋༁͢Δɻ ײ৘෼ੳ ςΩετͷײ৘ʢωΨϙδʣΛ൑ఆ͢Δɻ ςΩετཁ໿ ςΩετͷཁ఺Λநग़ͯ͠୹͍ཁ໿Λ࡞੒͢Δɻ ࣭໰Ԡ౴ ࣭໰ʹର͢Δ౴͑Λݟ͚ͭΔɻ จষੜ੒ ৽͍͠จষΛੜ੒͢Δɻ ςΩετ෼ྨ ςΩετΛಛఆͷΧςΰϦʹ෼ྨ͢Δɻ ಛ௃நग़ ςΩετ͔Βಛఆͷ৘ใΛநग़͢Δɻ ҙຯղੳ ୯ޠ΍จͷҙຯΛཧղ͢Δɻ ςΩετϚΠχϯά େྔͷςΩετσʔλ͔Βύλʔϯ΍τϨϯυΛநग़͢Δɻ ର࿩γεςϜ ਓؒͱίϯϐϡʔλͷձ࿩Λߦ͏ɻ
8. λεΫΛ͞Βʹ
   αϒλεΫʹ෼ׂ ਂ૚ֶशҎલ จষΛ୯ޠʹ෼͚Δʢܗଶૉղੳʣ ୯ޠͷରԠؔ܎Λݟ͚ͭΔ ௚༁తͳ༁จީิ ༁ͷࣗવ͞ΛධՁ ࠷ऴతͳ༁จΛ࡞Δ ػց຋༁λεΫ
9. ೥୅ɿਂ૚ֶश͕ϒʔϜ
   
   ˠ
   ֤λεΫͷධՁࢦඪ΋ਓؒʹ௥͍͖ͭ࢝Ίͨ
10. XPSE7FDֵ໋͕Λى͜͢ʂʂ
11. ୯ޠΛϕΫτϧʹม׵͢Δ΋ͷ
    ˠ
    ୯ޠͷҙຯΛ਺஋Խ XPSE7FDͱ͸ʁ ҙຯ͕ࣅ͍ͯΔʂʂ
12. XPSEWFDʹΑΔ୯ޠͷྨࣅੑΛՄࢹԽ
13. ਂ૚ֶशͷར༻͕ਐΉ
    ˠ
    
    
    FOEUPFOE
    ֶश͕Մೳʹʂʂ
14. ਂ૚ֶशҎલ αϒλεΫ αϒλεΫ αϒλεΫ σʔλ ग़ྗ ਂ૚
    χϡʔϥϧ
    ωοτϫʔΫ σʔλ ग़ྗ FOEUPFOE
    ֶश
15. ج൫ϞσϧʹΑͬͯ͞Βʹ੒௕ʂʂ
16. ج൫Ϟσϧɿ
    ʮ൚༻తͳݴޠೳྗʯΛ֫ಘͨ͠
    χϡʔϥϧݴޠϞσϧ
    λεΫ͝ͱʹඍௐ੔͢Δ͜ͱʹΑ Γ࢖༻͢Δ େن໛ Ϟσϧ େن໛ σʔλ ࣗݾڭࢣ ͋Γ ඍௐ੔ σʔλ ग़ྗ
17. ˠ
    ܶతͳਫ਼౓ͷ޲্
    ˠ
    λεΫ΍ݴޠΛԣஅͯ͠ɺ໰୊Λղ͘͜ͱ ج൫ϞσϧͰՄೳʹͳͬͨ͜ͱ
18. ج൫Ϟσϧ͔Βେن໛ݴޠϞσϧ΁
19. େن໛ݴޠϞσϧ
    ˠ
    ෳ਺ͷλεΫ͕ඍௐ੔ͳ͠Ͱ
    ରԠՄೳʹ େن໛ ݴޠ
    Ϟσϧ େن໛ σʔλ ࣗݾڭࢣ ͋Γ ϓϩϯϓτ
    ʴ
    σʔλ ग़ྗ
20. ࣗવݴޠॲཧͷྲྀΕ
    ·ͱΊ ਂ૚ֶशҎલ FOEUPFOEֶश ج൫Ϟσϧ େن໛ݴޠϞσϧ
21. ͲͷΑ͏ʹࣗવݴޠΛཧղͤ͞Δ͔ʁ
22. ਓ͕ؒจষΛཧղ͢Δ࣌ɺແҙࣝʹจઅ΍୯ޠʹ෼ղ͢Δ ίϯϐϡʔλ͕จΛѻ͏৔߹΋
    ·ͣѻ͑Δ෦඼ͷ෼ղ͔Β࢝ΊΔ
23. ͲͷΑ͏ʹจষΛ෼ղ͢Δͷ͔ʁ
24. ݱࡏ͸αϒϫʔυʢจࣈͱ୯ޠͷதؒͷ୯ҐʣͰ෼ׂ͍ͯ͠Δ JOUFSOBUJPOBM *
    
    O
    
    U
    
    F
    
    S
    
    O
    
    ʜ JOUFSOBUJPOBM JOUFS
    
    OBUJPO
    
    BM จࣈ ୯ޠ αϒϫʔυ
25. จࣈ ୯ޠ αϒϫʔυ τʔΫϯɿ෼ׂ୯Ґͷ͜ͱ ˞
    τʔΫφΠβʔɿτʔΫϯʹ෼ׂ͢Δπʔϧ
26. ͳͥ୯ޠ΍จࣈͰ෼ׂ͢Δͱμϝͳͷ͔ʁ
27. ΋ͱ΋ͱ͸୯ޠʹΑΔ෼ׂ͕Ұൠతͩͬͨ *
    IBWF
    B
    QFO ࢲ͸ϖϯΛ͍࣋ͬͯΔ *
    
    IBWF
    
    B
    
    QFO ࢲ
    ͸
    ϖϯ
    Λ
    ͍࣋ͬͯΔ ۭന ܗଶૉղੳث
28. ܗଶૉղੳثɿ
    ࣙॻʹج͍ͮͯ୯ޠ෼ׂ Λߦ͏πʔϧ .F$BC΍+VNBO ͕͋Δ ࢲ͸ϖϯΛ͍࣋ͬͯΔ ࢲ
    ͸
    ϖϯ
    Λ
    ͍࣋ͬͯΔ ࣙॻ ܗଶૉղੳث
29. ୯ޠʹΑΔ෼ׂͷ໰୊఺ ҙຯ΁ͷґଘ  ๲େͳޠኮ਺  ະ஌ޠ΁ͷରԠ 
30. ҙຯ΁ͷґଘ  ໺ٿ ໺ ٿ
31. ໺ٿ ໺ ٿ ෼ղ͢Δͱ
    ݩͷҙຯ͕յΕͯ͠·͏ʂʂ
32. ߴߍ໺ٿ ߴߍ ໺ٿ ߴߍ໺ٿͩͱ෼ׂͰ͖ͦ͏
33. ߴߍ໺ٿͷΠϝʔδ͕ࣦΘΕͯ͠·͏ͷͰ͸ͳ͍͔ʁ ՆͷԌఱԼ ߕࢠԂ ஍ݩ͔ΒͷԠԉ టष͞ ੨य़
34. ҙຯΛ࣋ͬͨ୯ޠͰ෼͚Δͱ
    ͲΕΛ̍ޠͱѻ͏͔͕ᐆດ
35. ࣙॻʹࡌ͍ͬͯͳ͍୯ޠ͸
    ਖ਼͘͠෼ׂͰ͖ͳ͍ ະ஌ޠ΁ͷରԠ  ࢲ͸ϖϯΛ͍࣋ͬͯΔ ࢲ
    ͸
    ϖϯ
    Λ
    ͍࣋ͬͯΔ ࣙॻ ܗଶૉղੳث
36. *1"%*$ɿ
    .F$BCʹඪ४Ͱ෇ଐ͍ͯ͠Δجຊతͳࣙॻɻʢສޠʣ NFDBCJQBEJD/&PMPHEɿ
    *1"%*$Λϕʔεʹɺ৽ޠ΍ݻ༗໊ࢺʢܳೳਓɾ঎඼໊ɾωοτε ϥϯάͳͲʣΛେྔʹ௥Ճ֦ͨ͠ுࣙॻɻʢ*1"%*$ ສޠʣ ˞೥࣌఺ ๲େͳޠኮ਺ 
37. *1"%*$ɿ
    .F$BCʹඪ४Ͱ෇ଐ͍ͯ͠Δجຊతͳࣙॻɻʢສޠʣ NFDBCJQBEJD/&PMPHEɿ
    *1"%*$Λϕʔεʹɺ৽ޠ΍ݻ༗໊ࢺʢܳೳਓɾ঎඼໊ɾωοτε ϥϯάͳͲʣΛେྔʹ௥Ճ֦ͨ͠ுࣙॻɻʢ*1"%*$ ສޠʣ ˞೥࣌఺ ๲େͳޠኮ਺  ίϯϐϡʔλॲཧͷେ͖ͳো֐ʹͳͬͯ͠·͏ʂʂ
38. ୯ޠʹΑΔ෼ׂͷ໰୊఺ ҙຯ΁ͷґଘ  ๲େͳޠኮ਺  ະ஌ޠ΁ͷରԠ 
39. ୯ޠʹΑΔ෼ׂͷ໰୊఺ ҙຯ΁ͷґଘ  ๲େͳޠኮ਺  ະ஌ޠ΁ͷରԠ  จࣈͰͷ෼ׂ͸Ͳ͏͔ʁ
40. จࣈͷछྨ͕ଟ͗͢Δ
    ৽͘͠௥Ճ͞ΕΔจࣈ΁ͷରԠ͕ࠔ೉ 6OJDPEF ೥࣌఺ ໿ສࣈʂʂ จࣈͰͷ෼ׂ͸Ͳ͏͔ʁ
41. ͳͥαϒϫʔυΛ࢖͏ͷ͔ʁ
42. αϒϫʔυɿจࣈͱ୯ޠͷதؒͷ୯Ґ
43. େྔͷςΩετσʔλ͔Β౷ܭతʹʮසൟʹొ৔͠ɺ͔ͭҙຯ ͷ͋Δ·ͱ·ΓʯΛֶश *OUFSOFU
    ࠃࡍతͳωοτϫʔΫ JOUFSBDUJPO
    ૬ޓ࡞༻ JOUFSTUFMMBS
    ߃੕ؒͷ JOUFS
    ˠʮԿ͔ͱԿ͔ͷؒʯʮ૬ޓʯ
44. ˠ
    ະ஌ޠʹ΋ରԠͰ͖Δʂʂ Ϟσϧ͕Ұ౓΋ݟͨ͜ͱͷͳ͍
    JOUFSGBDF
    ͱ͍͏ະ஌ޠ͕ग़ ͖ͯͯ΋<JOUFS
    GBDF>
    ͱ෼ׂ͠ҙຯΛղऍ ˠ
    ෼ׂ͕ҙຯʹґଘ͠ͳ͍
45. ੈքΛ୅ද͢Δ"*ϞσϧͰ΋ɺ͓Αͦສʙສఔ౓ͷαϒϫ ʔυͷ૊Έ߹ΘͤͰɺਓ͕ؒ࢖͏ແ਺ͷݴ༿ΛදݱͰ͖Δ ˠ
    ܭࢉෛՙͷ࡟ݮʂʂ ଟݴޠରԠϞσϧͩͱສʙສҎ্
46. ୯ޠʹΑΔ෼ׂͷ໰୊఺ ҙຯ΁ͷґଘ  ๲େͳޠኮ਺  ະ஌ޠ΁ͷରԠ  αϒϫʔυͰ͢΂ͯղܾʂʂ
47. ͜ͷαϒϫʔυͷҙຯΛ
    ͲͷΑ͏ʹίϯϐϡʔλʹཧղͤ͞Δͷʁ ࣍ճ
48. ࣍ճͷ༧ఆ
49. XPSEWFD ຒΊࠐΈϕΫτϧ