Leveraging Crowdsourcing for Paraphrase Recognition

長岡技術科学大学
自然言語処理研究室
角張竜晴

Transcript

1.          
   ௕ Ԭ ٕ ज़ Պ ֶ େ ֶ
   ࣗ વ ݴ ޠ ॲ ཧ ݚ ڀ ࣨ
   ֶ ෦ ̐ ೥
   ֯ ு ཽ ੖
   Leveraging Crowdsourcing for Parapharase Recognition Martin Tschirsich, Gerold Hintz Proceedings of the 7th Linguistic Annotation Workshop & Interoperability with Discourse, pages 205–213, Sofia, Bulgaria, August 8-9, 2013. ਤ΍ද͸࿦จΑΓҾ༻
   1
2. 概要 2 ʲௐࠪɾఏҊʳ
   —  ύϥϑϨʔζೝࣝͷͨΊͷΫϥ΢υιʔγϯάํ๏ ὎ଟஈ֊ͷΫϥ΢υιʔγϯάख๏Λఏࣔɻ
   ʲ݁Ռʳ
   —  จ຺తͳݴ͍׵͑ͷੜ੒ΛͰ͖Δɻ
   —  ݴ͍׵͑ίʔύεͷίετΛେ෯ʹ࡟ݮͰ͖Δɻ
   
3. はじめに 3 ʲύϥϑϨʔζೝࣝʳ %SBT
   
   ަ׵͕ՄೳͳςΩετͷϖΞΛ෼ੳ͢Δ͜ͱ
   
   ˔ྫ͑͹ɾɾɾ৘ใݕࡧͷ෼໺
   ʮୈ୅ถࠃେ౦ྗͷࡴਓʯ
   ɹʹʮδϣϯ'ɾέωσΟͷ҉ࡴʯ
   
   
   
4. はじめに 4 ʲύϥϑϨʔζೝࣝͷݚڀʳ
   —  Φʔϓϯͳݚڀ՝୊
   ὎ۙ೥ɺٸܹʹਐา͍ͯ͠Δ 4PDIFS
   FU
   BM
   
   
   ὎͔͠͠ɺਫ਼౓͸ະͩʹ޲্͍ͯ͠ͳ͍ɻ
   
   
5. パラフレーズの定義 5 ʲύϥϑϨʔζͷ֓೦ʳ %PMBO
   BOE
   #SPDLFUU
   
   —  ҙຯత࿦ྨࣅੑͱ୯ޠΦϯτϩδʔͷ֓೦ʹີ઀ʹ ؔ࿈͍ͯ͠Δɻ
   —  ਖ਼֬ͳఆٛ͸ͳ͘ɺෳࡶͳΨΠυϥΠϯͰܾఆɻ
   
   Ϋϥ΢υιʔγϯάΛߦ͏ࡍʹ͸ɾɾɾ
   ࡞ۀऀͷ௚ײʹཔ͍ͬͯΔ͜ͱʹ஫ҙ͢Δඞཁ͕͋Δɻ
   ὎ྫจ͕ॏཁͰ͋Δ
   
6. パラフレーズの認識 6 ʲύϥϑϨʔζͷೝࣝʳ 4PDIFS
   FU
   BM
   
   —  ʮ೚ҙͷ௕͞ͱܗͰ͋ΔͭͷϑϨʔζ͕ಉ͡ҙຯͰ͋ Δ͔Ͳ͏͔ʯΛܾఆ͢Δ
   ʲઌߦݚڀʳ
   —  /άϥϜͷॏͳΓ
   —  ґଘؔ܎πϦʔͷॏͳΓ΍ฤूڑ཭
   Ͱܾఆ͍ͯ͠Δɻ
   
   ὎ಉٛޠ΍ҙຯʹ౳͍͔͠ΛࣝผͰ͖ͳ͍ɻ
   
   ὎ݴ͍׵͑ΒΕͨจষΛֶशͯࣗ͠ಈࣝผ͢Δඞཁ͕͋Δɻ
   
7. 先行研究 7 ;IPV
   FU
   BM
   
   ὎ύϥϨϧίʔύεΛ༻͍ͨ຋༁ϕʔεͷख๏
   
   .BEOBOJ
   FU
   BM
   
   ὎ҙຯྨࣅੑͷධՁ
   —  ୯७ͳ̎஋Ͱ͸ͳ͘ɺ࿈ଓతͳ஋ͰϖΞͷྨࣅͯ͠ ͍Δఔ౓Λࣔ͢ɻ
   —  ςΩετͷྨࣅੑ͸ɺଟ਺ͷΫϥ΢υϫʔΧʔͷ൑ அΛฏۉԽ͢Δɻ
   
8. クラウドソーシング 8 ʲ$SPXE'MPXFSʳ
   —  Ϋϥ΢υιʔγϯάΛߦ͏8FCαʔϏε
   —  ࡞ۀऀͷλεΫ਺΍ډॅ஍Λ੍ݶͰ͖Δ
   —  ऩू͞Εͨσʔλͷਖ਼౰ੑΛݕূ͢ΔγεςϜ
   ¡  ࣮ࡍͷσʔλΛॲཧ͢Δલʹɺ࡞ۀऀ͕ਖ਼͘͠ճ౴͢ΔΑ͏ ʹνΣοΫΛ͢Δɻ
   ¡  ࡞ۀதʹ΋ɺਖ਼͘͠ճ౴͍ͯ͠Δ͔νΣοΫ͢Δɻ
   ὎ਖ਼ղσʔλͱ࡞ۀ݁ՌΛൺֱ͠ɺ৴པੑΛ୲อ͢Δɻ
   
   
9. クラウドソーシング 9 ʲ࢓ࣄ಺༰ͷσβΠϯʳ
   —  ࢓ࣄ಺༰ͷσβΠϯ͸ɺऩू͞Εͨσʔλͷ඼࣭ʹ ࠷΋େ͖ͳӨڹΛ༩͑Δɻ
   ὎ਖ਼͍͠ࢦࣔͱΘ͔Γ΍͍͢ྫ͕ॏཁ
   
   —  $SPXE'MPXFSʹ͸ɺ$.-ݕূػೳ͕͋Δɻ
   ὎ෆਖ਼ͳϢʔβͷೖྗΛऩू͠ͳ͍
   
10. フレーズ−パラフレーズ生成 10 —  ݴ͍׵͑ͷϕʔεϥΠϯ
    —  ूஂ࡞ۀऀʹɺϑϨʔζQ  Λఏࣔ͠ɺॻ͖׵͑Q  Λ ಘΔ
    
    
    
11. ２段階の言い換えの生成 11   ࡞ۀऀʹϑϨʔζQ  Λఏࣔ͠ɺݴ͍׵͑Q  ΛಘΔɻ
      ̎ɺ̏ਓͷ࡞ۀऀ͕ͦΕͧΕͷੜ੒͞Εͨݴ͍׵ ͑ͷϖΞΛݕূ͢Δɻ
    ὎ઐ໳ՈͷධՁऀͱ܈ऺͷ൑அͷ߹ҙ͸
    
    
    
    /FHSJ
    FU
    BM
    
    
    
12. 多段階の言い換えの生成 12   ࡞ۀऀʹϑϨʔζQ  Λఏࣔ͠ɺݴ͍׵͑Q  ΛಘΔɻ
      ଞͷ࡞ۀऀʹϑϨʔζQ  Λఏࣔ͠ɺQ  Λݕূ͠ɺ ݴ͍׵͑Q  ΛಘΔɻ
    ὎ޡͬͨݴ͍׵͑ΛݮΒ͠ɺ
    ɹΑΓଟ͘ͷݴ͍׵͕͑ಘΒΕΔɻ
    
    
13. 多段階の言い換えの生成 13 ஈ֊ͷݴ͍׵͑ɿऩूͨ͠ϖΞͷΛݕূ
    ଟஈ֊ͷݴ͍׵͑ ஈ ɿऩूͨ͠ϖΞͷΛݕূ
    
    
    
14. まとめ 14 —  Ϋϥ΢υιʔγϯάͷํ๏ͱͯ͠ɺ
    ɹଟஈ֊ͷݴ͍׵͑ΛఏҊɻ
    —  ଟஈతʹύϥϑϨʔζΛߦ͏͜ͱ͕༗ޮ
    ¡  ݕূͱݴ͍׵͑Λߦ͏͜ͱͰɺҙຯͷ͹Β͖͕ͭগͳ͘ͳΔ