Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
文献紹介:Bidirectional Inter-dependencies of Subjective Expressions and Targets and their Value for Joint Model
Search
Shohei Okada
May 01, 2014
Research
0
130
文献紹介:Bidirectional Inter-dependencies of Subjective Expressions and Targets and their Value for Joint Model
動画
http://youtu.be/TgoJsgT2CsA?list=UUhwtfJp9l_thFbFDWXoGWEQ
Shohei Okada
May 01, 2014
Tweet
Share
More Decks by Shohei Okada
See All by Shohei Okada
"config" ってなんだ? / What is "config"?
okashoi
0
240
ファイル先頭の use の意味、説明できますか? 〜PHP の namespace と autoloading の関係を正しく理解しよう〜 / namespace and autoloading in php
okashoi
2
580
MySQL のインデックスの種類をおさらいしよう! / overviewing indexes in MySQL
okashoi
0
280
PHP における静的解析(あるいはそもそも静的解析とは) / #phpcondo_yasai static analysis for PHP
okashoi
1
190
【PHPカンファレンス沖縄 2023】素朴で考慮漏れのある PHP コードをテストコードとともに補強していく(ライブコーディング補足資料) / #phpcon_okinawa 2023 livecoding supplementary material
okashoi
3
1.6k
その説明、コードコメントに書く?コミットメッセージに書く? プルリクエストに書く? - #phpconfuk 2023
okashoi
3
1.2k
いろいろなフレームワークの仕組みを index.php から読み解こう / index.php of each framework
okashoi
1
2k
「登壇しているひとは偉い」という話
okashoi
0
36
ISUCON 11 参考実装 PHP 移植の苦労?話
okashoi
0
30
Other Decks in Research
See All in Research
「歴史的農業環境閲覧システム」と「迅速測図」について
wata909
1
600
リサーチに組織を巻き込むための「準備8割」の話
terasho
0
470
Generative Spoken Dialogue Language Modeling [対話論文読み会@電通大]
yuta0306
1
130
Equivalence of Geodesics and Importance Weighting from the Perspective of Information Geometry
mkimura
0
140
VAR モデルによる OSS プロジェクト同士が生存性に与える 影響の分析
noppoman
0
130
音声処理ツールキットESPnetの現在と未来
kanbayashi1125
2
540
Embodied AIについて / About Embodied AI
nttcom
1
550
Rの機械学習フレームワークの紹介〜tidymodelsを中心に〜 / machine_learning_with_r2024
s_uryu
0
220
Deep State Space Models 101 / Mamba
kurita
9
3.5k
Breaking Tradeoffs: Extremely Scalable Multi-Agent Pathfinding Algorithms
kei18
0
140
Scaling Rectified Flow Transformers for High-Resolution Image Synthesis / Stable Diffusion 3
shunk031
0
460
ゼロからわかるリザバーコンピューティング
kurotaky
1
290
Featured
See All Featured
Optimising Largest Contentful Paint
csswizardry
8
2.4k
How GitHub Uses GitHub to Build GitHub
holman
468
290k
Fireside Chat
paigeccino
21
2.6k
Building Your Own Lightsaber
phodgson
99
5.7k
A Tale of Four Properties
chriscoyier
151
22k
A Modern Web Designer's Workflow
chriscoyier
689
190k
A Philosophy of Restraint
colly
197
16k
How To Stay Up To Date on Web Technology
chriscoyier
782
250k
Six Lessons from altMBA
skipperchong
21
3k
Testing 201, or: Great Expectations
jmmastey
28
6.4k
No one is an island. Learnings from fostering a developers community.
thoeni
16
2.1k
Web Components: a chance to create the future
zenorocha
305
41k
Transcript
文献紹介 2014/05/01 長岡技術科学大学 自然言語処理研究室 岡田 正平
紹介する文献 2
文献情報 Roman Klinger and Philipp Cimiano. Bidirectional Inter-dependencies of Subjective
Expressions and Targets and their Value for Joint Model. Proceedings of the 51st Annual Meeting of the ACL, pp. 848-854. 2013 3
概要 • Opinion mining における subjective expression と target の相互依存性を扱う
– 既存研究は1方向しか扱っていない • 双方向の関係を扱うsubjective expression お よび target を抽出するモデルの提案 4
背景 5
背景 sentiment analysis や opinion mining subjective term, polarity,
targetの同定 e.g.) I like the low weight of the camera. subjective: “like” target: “low weight” polarity: positive • これらは相互依存関係にあるのでは? 6
扱う問題 • subject termについての知識が完全な場合と 不完全な場合の比較 • targetについての知識が完全な場合のsubject termの予測への影響 • targetについての知識が不完全な場合はどう
か(学習したモデルからの予測) 7
IMPERATIVELY DEFINED FACTOR GRAPH 8
Factor Graph • factor と variable からなる2部グラフ • 多変数関数の factorize
に対応 9 wikipedia “factor graph” より転載 1 , 2 , 3 = 1 1 2 1 , 2 3 1 , 2 4 (2 , 3 )
Factor Graph • ベイズ推定の応用(誤り訂正など)に用い られるらしい • NLPではn-gram言語モデルとか? 10
Imperatively Defined Factor Graph • variable に 入力変数集合 x と出力変数集合
y がある • 入出力変数の部分集合 x , y を引数とする関 数 x , y が factor Ψ • 言い換えれば,(x , y )から得られる特徴量が factor? 11
Imperatively Defined Factor Graph A factor template consists of parameters
{ }, sufficient statistic functions { }, and a description of an arbitrary relationship between variables, yielding a set of tuples x , y (元の文献より引用) • ここ(特に description が何か)の理解が不十分 12
Imperatively Defined Factor Graph • 確率分布が次式で表現される • y x =
1 (x) ∏ ∏ exp(∑ (x , y )) 𝑘=1 x,y ∈ ∈T • 全 factor とパラメータの線形結合 13
抽出モデル 14
Model | variable • variable は subjective term と target
• 複数トークンからなる表現に対応すべく span として表現 • = , , , はトークン列中の span の左端・右端の位置 ∈ {target, subjective} 15
Model | factor template • factor template は大きく分けて2種類 – single
span template – inter-span template 16
Model | single span template • トークンのPOSタグ (POS) • トークンの文字列(小文字)
(W) • トークンのPOSタグ&文字列の組み合わせ (POS-W) • span内のPOSタグ列 (POS-SEQ) 17
Model | inter-span template • 以下の3つと,single span template の組合わせ –
target の span が subjective term に隣接する名詞を 含むか ([NO-]CLOSE-NOUN-x) – 他クラスの span が同じ文中に存在するか ([NO- ]BOTH-x) – target と subject 間に単一の係り受け関係があるか ([NO-]ONE-EDGE-x) 18
例(元の文献より転載) 19
Model | サンプリング • MCMC法により推定を行う • 1回のサンプルごとに各 span は class
を変え られるか,1トークン分伸ばすか縮められる 20
実験 21
対象データ • J.D. Power and Associates Sentiment Corpora – 車とカメラについてのblog
– subjective term と target についてアノテート済 • Twitter data set – Stanford parser を用いないため,ONE-EDGEの 特徴量は使えない 22
実験項目 1. subjective term の推定→ target の推定 2. target の推定→
subjective term の推定 3. 完全な subjective term の知識を利用した target の推定 4. 完全な target の知識を利用した subjective term の推定 23
実験結果 | camera data set 24
実験結果 | car data set 25
実験結果 | Twitter data set 26
まとめ • subjective term と target は相互に依存して いることが認められた • その影響の仕方は非対称的だった
• パイプライン的に処理する場合には,先に subjective term を推定した方がいい 27