Upgrade to Pro — share decks privately, control downloads, hide ads and more …

Intrinsic Evaluation of Word Vectors Fails to Predict Extrinsic Performance

katsutan
October 15, 2018

Intrinsic Evaluation of Word Vectors Fails to Predict Extrinsic Performance

文献紹介
勝田 哲弘

katsutan

October 15, 2018
Tweet

More Decks by katsutan

Other Decks in Technology

Transcript

  1. Proceedings of the 1st Workshop on Evaluating Vector Space Representations

    for NLP, pages 1–6, Berlin, Germany, August 12, 2016. 2016 Association for Computational Linguistics Intrinsic Evaluation of Word Vectors Fails to Predict Extrinsic Performance 長岡技術科学大学 自然言語処理研究室 勝田 哲弘 Billy Chiu, Anna Korhonen, Sampo Pyysalo
  2. Introduction ベクトル表現の評価は大きく、内部評価と外部評価に分けられ る。 • 内部評価 ◦ 類似度の相関 ◦ 速く、容易に評価ができる •

    外部評価 ◦ POSタグ付け、NER等のタスクの精度 内部と外部の評価に相関があることが前提 → 矛盾する 3
  3. 7