Upgrade to Pro — share decks privately, control downloads, hide ads and more …

ストックマークでの自然言語処理の取り組み

 ストックマークでの自然言語処理の取り組み

Avatar for Takahiro Omi

Takahiro Omi

May 10, 2022
Tweet

More Decks by Takahiro Omi

Other Decks in Technology

Transcript

  1. ˜4UPDLNBSL *OD ձ໊ࣾ ετοΫϚʔΫגࣜձࣾ 4UPDLNBSL *OD ΦϑΟε ౦ژ౎ߓ۠ೆ੨ࢁஸ໨ -*'03,.*/".*"0:"."4 ઃ

    ཱ ೥݄೔ ૑ۀऀ ୅දऔక໾$&0 ྛ ୡ औక໾$50 ༗അ ޾հ ࣄۀ಺༰ ࣗવݴޠॲཧٕज़Λ׆༻ͨ͠ "*4BB4ϓϩμΫτͷఏڙ ैۀһ਺ ໊ ೥݄ ݱࡏ 63- IUUQTTUPDLNBSLDPKQ ձࣾ঺հ
  2. ςΩετσʔλͷߏ଄Խ 16 ü ੜͷςΩετσʔλ͸ͦͷ··Ͱ͸ίϯϐϡʔλͰॲཧ͠ʹ͍͘ɻ ü ʮߏ଄Խʯͱ͸ɺςΩετσʔλ͔Βݻ༗໊ࢺ΍ΩʔϫʔυΛநग़ͨ͠ Γɺهࣄͷ෼ྨΛߦ͍ɺίϯϐϡʔλͰѻ͍΍͍͢Α͏ʹ৘ใΛ੔ཧ͢ Δ͜ͱɻ χϡʔεهࣄ ετοΫϚʔΫגࣜձࣾͷۙ

    ߐਸ޺ࢯ͕ʹ౦ژͰߦΘ ΕΔ'PSLXFMM.-4UVEZʹొ ஃ͠ɺࣗવݴޠॲཧʹ͍ͭͯ ߨԋ͢Δɻ ΧςΰϦʔ ୯ޠ اۀ໊ ετοΫϚʔΫגࣜձࣾ ਓ໊ ۙߐਸ޺ Ωʔϫʔυ ࣗવݴޠॲཧ நग़ ෼ྨ ΧςΰϦʔ Ϋϥε هࣄ෼ྨ ࣾձɺܦࡁɺ੓࣏ɺࠃࡍɺ *5ɺՊֶɺͦͷଞ
  3. ςΩετΛτʔΫϯʹ෼ׂͨ͠΋ͷΛೖྗ͢ΔͱɺͦΕͧΕͷτʔΫϯΛҙຯΛ ൓өͨ͠ϕΫτϧʹͯ͘͠ΕΔɻ <$-4> ετοΫ ϚʔΫ Ͱ ͸ ·͢ #&35 #&35

    ೖྗ τʔΫϯ ग़ྗ ʢϕΫτϧʣ ɻ <4&1> ɾɾɾ ɾɾɾ 𝒗𝟎 𝒗𝟏 𝒗𝟐 𝒗𝟑 𝒗𝟒 𝒗𝟕 𝒗𝟖 𝒗𝟗 ετοΫϚʔΫͰ͸ɾɾɾ·͢ɻ
  4. ετοΫϚʔΫͰ͸ɾɾɾ·͢ɻ <$-4> ετοΫ ϚʔΫ Ͱ ͸ ·͢ #&35 #&35ʹΑΔςΩετ෼ྨ ೖྗ

    τʔΫϯ ग़ྗ ʢϕΫτϧʣ ɻ <4&1> ɾɾɾ ɾɾɾ 𝒗𝟎 𝒗𝟏 𝒗𝟐 𝒗𝟑 𝒗𝟒 𝒗𝟕 𝒗𝟖 𝒗𝟗 *5 ෼ྨϥϕϧ ෼ྨث
  5. ετοΫϚʔΫͰ͸ɾɾɾ·͢ɻ <$-4> ετοΫ ϚʔΫ Ͱ ͸ ·͢ #&35 #&35ʹΑΔݻ༗දݱநग़ɿاۀ໊நग़ ೖྗ

    τʔΫϯ ग़ྗ ʢϕΫτϧʣ ɻ <4&1> ɾɾɾ ɾɾɾ 𝒗𝟎 𝒗𝟏 𝒗𝟐 𝒗𝟑 𝒗𝟒 𝒗𝟕 𝒗𝟖 𝒗𝟗 0 ϥϕϧ اۀ໊ 0 0 0 0 0 اۀ໊ اۀ໊ͱͯ͠நग़ ෼ྨث
  6. ໨తʹԠͨ͡ॏཁͳจͷநग़ ü ߏ଄ԽͷҰ؀ͱͯ͠ɺχϡʔεهࣄ͔ΒಛఆͷҙຯΛ࣋ͭจͷநग़΋ߦ ͍ͬͯΔɻ 25 χϡʔεهࣄ ਓࡐෆ଍ʹରԠ͢ΔͨΊ ʹۀ຿ޮ཰Խ͕ਐΜͰ͍ Δɻ"ࣾ͸ࠓ೥͔Βࣗવ ݴޠॲཧ"*Λ༻͍ͨۀ

    ຿ޮ཰Խͷ࣮ূ࣮ݧΛߦ ͍ͬͯΔɻ೥ʹ঎ ༻ԽΛ໨ࢦ͍ͯ͠Δɻ ΧςΰϦʔ จ ࣄྫจ ʢاۀͷऔΓ૊ΈΛද͢จʣ "ࣾ͸ࣗવݴޠॲཧ"*Λ༻͍ͨۀ຿ ޮ཰Խͷ࣮ূ࣮ݧΛߦ͍ͬͯΔɻ എܠจ ʢऔΓ૊ΈͷഎܠΛද͢จʣ ਓࡐෆ଍ʹରԠ͢ΔͨΊʹۀ຿ޮ཰ Խ͕ਐΜͰ͍Δɻ কདྷจ ʢকདྷಈ޲Λද͢จʣ ೥ʹ঎༻ԽΛ໨ࢦ͍ͯ͠Δɻ ⋮ நग़
  7. ݚڀػؔͱͷڞಉݚڀ 28 ü ೥݄͔Β౦๺େֶͷס ݚڀࣨͱͷɺ೔ຊޠςΩετσ ʔλ͔Βͷ஌ࣝάϥϑߏஙʹؔ ͢ΔڞಉݚڀΛ։࢝ͨ͠ɻ ü ݴޠʹؔ͢Δຊ࣭తͳٞ࿦΍ɺ ࠷ۙͷख๏ʹ͍ͭͯͷٞ࿦΋͋

    Γɺ୯७ʹָ͍͠ɻ ü ڞಉݚڀͷ੒Ռͷࣄۀߩݙ΋ݟ ͖͑ͯͨ ü ͜ͷ݄͔Βסݚͷֶੜ͕ਖ਼ࣾһ ͱͯ͠ೖࣾͨ͠ʂ ૝૾Ҏ্ʹɺػցֶशྖҬʹ͓͚ΔΞΧσ ϛΞͱ࢈ۀքͷڑ཭ͷۙ͞Λײ͍ͯ͡Δɻ
  8. ػցֶशγεςϜͳΒͰ͸ͷۤ࿑ɿֶशσʔλ࡞੒ 29 ü ػցֶशϞσϧΛ࠾༻͢Δͱɺ৽͍͠ػೳΛ։ൃ͍ͨ͠ͱ͖ʹ͸ɺ৽͠ ֶ͍शσʔλΛҰ͔Β࡞Δඞཁ͕͋Δʢ͜ͱ͕ଟ͍ʣɻ ü యܕతʹ͸਺ඦʙهࣄ΄ͲʹΞϊςʔγϣϯΛߦ͑͹ɺ#&35Ͱͦ ͦ͜͜ಈ͘Ϟσϧ͸࡞ΕΔ͜ͱ͕ଟ͍ͷͰɺ୲౰ऀ͕Ξϊςʔγϣϯ͠ ͯ͠·͏৔߹΋͋ΔɻඞཁʹԠͯ͡Ξϊςʔγϣϯͷ֎஫΋ߦ͍ͬͯΔɻ ü

    λεΫʹΑͬͯ͸ɺΞϊςʔγϣϯͷΨΠυϥΠϯΛ࡞Δͷʹ͕͔͔࣌ؒΔ৔߹΋͋Γɺ ՝୊ʹର͢Δղ૾౓ͷߴ͍୲౰ऀ͕খن໛ͳֶशσʔληοτΛ࡞Δํ͕ޮ཰తͳ͜ͱ΋ ͋Δɻ ü σʔλͱ޲͖߹͏͜ͱͰɺࣗ෼ͨͪͷऔΓ૊ΜͰ͍Δ՝୊ʹର͢Δղ૾౓্͕͕Δɻ
  9. ετοΫϚʔΫʹڵຯΛ͍͍࣋ͬͯͨͩͨํ΁ ü ετοΫϚʔΫ Ͱͷϙδγϣϯʹڵຯͷ͋Δํɿ IUUQTIFSQDBSFFSTWTUPDLNBSL ü ؾܰʹ࿩Λฉ͍ͯΈ͍ͨํɿ .FFUZ IUUQTNFFUZOFU ͰʮετοΫϚʔΫʯͰݕࡧʂ

    ü ΠϕϯτʹࢀՃͯ͠Έ͍ͨํɿ 4UPDLNBSL 5FDI.FFUVQ IUUQTTUPDLNBSLDPOOQBTTDPNFWFOU ü ٕज़తͳ࿩୊ʹڵຯͷ͋Δํɿ 4UPDLNBSL 5FDICMPH IUUQTUFDITUPDLNBSLDPKQ