Webページ検索結果の絞込みのための記述要素の提示

久保木 武承, 山本 和英. Webページ検索結果の絞込みのための記述要素の提示. 言語処理学会第16回年次大会, pp.278-281 (2010.3)

Transcript

1. 長岡技術科学大学 久保木武承　山本和英 １ Webページ検索結果の絞り込みの ための記述要素の提示
2. 背景と目的 既存の検索： 　検索者が要求する説明があるとは限 らない 本研究の目的： 　テキスト本文の記述要素を提示する ⇒検索者の要求する説明文を含む ページを検索し易くする 2
3. コーパス　使い方 クエリ コーパスの使い方を教えてください （質問） コーパス・用例辞典の使い方 （コーパスの使用法） コーパスとはこういう物です （用語の説明） コーパスの使い方を説明をする 辞典の紹介 （本の通販） 検索結果 キーワードを抽出 「コーパスとはどんな 使い方をする物ですか？」 質問 ３ 既存手法 欲しいページは どれ？
4. 「コーパス　使い方」 クエリ コーパスの使い方を教えてください （質問） コーパスとはこういう物です （用語の説明） コーパスの使い方を説明をする 辞典の紹介 （本の通販） 検索先ページ コーパスの「関連質問」 コーパスの「使い方」 用例辞典の「使い方」 コーパスの「説明」 コーパスの「関連図書」 記述要素 生成 コーパス・用例辞典の使い方 （コーパスの使用法） 生成された記述要素 検索結果 ４ －利点－ ページの内容にあわせて 検索ができる 提案手法
5. 従来の検索 ・キーワードを含むページの提示 ⇒キーワードさえ含まれていれば、本 文の内容にかかわらず提示する 提案手法 ・ページ本文の内容を表す記述要素を 提示 ⇒文章の内容を考慮した検索結果を 提示 ５ 理論／まとめ
6. ・記述要素の目的 　本文が何を伝えたくて書かれたかを 提示する ・本稿における記述要素の定義 ［命題］の＜記述要素＞は？ 例） 　［コーパス］の＜使い方＞は？ 　［りんご］の＜産地＞は？ 　［ローパスフィルタ］の＜機能＞は？ ６ 定義／記述要素
7. Wikipediaの「サブセクション－本文テ キスト」の関係からを利用 本文抽出 形態素解析 本文中の 形態素／上位概念の tfidfを取得 ７ 手法／記述要素の特徴 記述要素の特徴 として保存
8. 特徴が一致する記述要素を 正解候補として提示 本文中の 形態素／上位概念を取得 ８ 手法／記述要素の選択 本文抽出 コーパス・用例辞典の 使い方 （コーパスの使用法） 検索結果 ・ ・ ・ 記述要素A 特徴データ 記述要素B 特徴データ 要素の一致数の高い物 を選択
9. １．Closed test Wikipediaのテキストで記述要素の正解候 補を提示 ２．Open test Webから人手で作製した正解セットに対し て記述要素の正解候補を提示 正解セット＝（記述要素，本文テキスト）ペア 要素のマッチ数の多い物を ９ 実験
10. 問題点 　Open testの性能が低すぎる 再現率 適合率 F値 形態素 Closed test 0.96 0.83 0.89 上位概念 Closed test 0.94 0.69 0.80 形態素 Open test 0.02 0.02 0.02 上位概念 Open test 0.03 0.03 0.03 １０ 結果
11. 課題： Open testにも通用する選択手法が必要 対策： 記述要素の特徴データが不的確？ ⇒文の内容を表すより的確な特徴の検討 １１ 考察