文献紹介2015年5月

Transcript

1. 文献紹介 2015年5月 自然言語処理研究室 修士２年 宮西 由貴
2. 文献情報  タイトル: The Penn Parsed Corpus of Modern British English: First Parsing Result and Analysis  著者: Seth Kulick et. al.  ACL short Papers 2014, Pages 662-667
3. 概要  Penn Parsed Corpus of Modern British English(PPCMBE)を利用  Penn Tree Bank(PTB)と比較  PPCMBEを改良  実験でその成果を提示  今回は構文解析に着目して改良  PTBに寄せることで精度向上(PTBと同等)
4. Penn Parsed Corpus of Modern British English(PPCMBE)  100万語を超えるツリーバンク (今回は101ファイル中94ファイル使用)  英語の構文の変化を研究するための資源  歴史的調査用のツリーバンクの中では 最も現代的(1700-1914年)  Penn Tree Bank(PTB)内のWSJくらいの規模
5. PPCMBEとPTB  PPCMBEとPTBにはタグが付与されている  品詞タグ  文法タグ  良く似ているが違う部分もある  違いを調査している論文が1つしかない
6. 今回目指すこと  PPCMBEとPTBのアノテーションを比較  アノテーションをPTBに寄せて実験  構文解析を行っての比較  エラー分析  構文解析器の問題
7. PPCMBEとPTBの比較 (品詞タグの数)  PPCMBE:248種類(全時代に対応するため)  PTB:45種類  PPCMBEは複合タグ(Complex)が多い  (例)gentlemen -> ADJ+NS(形容詞＋複数形名詞)  特殊なタグが多い 表1 PPCMBEに付与されているタグの種類数と割合
8. PPCMBEとPTBの比較 (対等関係の記述)  ANDやORなどが文に入った場合  PPCMBE:AND(OR)以降をCONJPとしてまとめる  ¥¥  PTB:PPCMBEに比べて平らな木になる
9. PPCMBEとPTBの比較 (名詞句の構造：PP)  PPの場合はどちらも補足と修飾を区別しない  PPCMBE:補足(修飾)部が名詞部の弟となる  PTB:補足部と名詞部が隣接する
10. PPCMBEとPTBの比較 (名詞句の構造：CP)  PPCMBE:修飾と補足を区別する  PTB:修飾節は隣接，補足節は隣接しない
11. PPCMBEとPTBの比較 (節構造)  PPCMBE：VPのレベルがない(平らな木になる)  PTB：VPのレベルがある
12. コーパスの変換  Reduce  Reduce＋NPs  Reduce＋NPs＋VPs
13. コーパスの変換  Reduce  複合タグを単一タグへ変換 (例)gentleman:ADJ+N -> N  タグ数: 248個 -> 71個  Reduce＋NPs  Reduce＋NPs＋VPs
14. コーパスの変換  Reduce  Reduce＋NPs  PTBのように名詞部と修飾(補足)部は隣接させる  Reduce＋NPs＋VPs
15. コーパスの変換  Reduce  Reduce＋NPs  Reduce＋NPs＋VPs  IP以下の時にVPレベルを追加する
16. PPCMBEデータの切り分け  以下の様にデータを分割  基本的に年代で分割  文長が40語以下が8割以上(PTBは9割以上)
17. 実験設定  構文解析器:Berkeley parser  スコアリング:evalb program  Train & Val section: fine-tuning parameters  POS tagging:  正解タグを使用(Gold Tags)  Berkeley parserを使用(Parser Tags)
18. 実験結果(Gold Tags) Rl ：そのまま Rd：Reduce RdNPs：Reduce+NPs RdNPsVPs：Reduce+NPs+VPs
19. 実験結果(Parser Tags) Rl ：そのまま Rd：Reduce RdNPs：Reduce+NPs RdNPsVPs：Reduce+NPs+VPs
20. 標準的な格構造に違反する出力 (a)正解 (b)出力  RRC関係ができない  非文法的構造を作る
21. 概要  Penn Parsed Corpus of Modern British English(PPCMBE)を利用  Penn Tree Bank(PTB)と比較  PPCMBEを改良  実験でその成果を提示  今回は構文解析に着目して改良  PTBに寄せることで精度向上(PTBと同等)