Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
文献紹介:Bidirectional Inter-dependencies of Subjec...
Search
Shohei Okada
May 01, 2014
Research
0
140
文献紹介:Bidirectional Inter-dependencies of Subjective Expressions and Targets and their Value for Joint Model
動画
http://youtu.be/TgoJsgT2CsA?list=UUhwtfJp9l_thFbFDWXoGWEQ
Shohei Okada
May 01, 2014
Tweet
Share
More Decks by Shohei Okada
See All by Shohei Okada
たった 1 枚の PHP ファイルで実装する MCP サーバ / MCP Server with Vanilla PHP
okashoi
1
410
どうして手を動かすよりもチーム内のコードレビューを優先するべきなのか
okashoi
2
1.5k
パスワードのハッシュ、ソルトってなに? - What is hash and salt for password?
okashoi
3
250
設計の考え方 - インターフェースと腐敗防止層編 #phpconfuk / Interface and Anti Corruption Layer
okashoi
11
4.3k
"config" ってなんだ? / What is "config"?
okashoi
0
1.4k
ファイル先頭の use の意味、説明できますか? 〜PHP の namespace と autoloading の関係を正しく理解しよう〜 / namespace and autoloading in php
okashoi
4
1.7k
MySQL のインデックスの種類をおさらいしよう! / overviewing indexes in MySQL
okashoi
0
980
PHP における静的解析(あるいはそもそも静的解析とは) / #phpcondo_yasai static analysis for PHP
okashoi
1
670
【PHPカンファレンス沖縄 2023】素朴で考慮漏れのある PHP コードをテストコードとともに補強していく(ライブコーディング補足資料) / #phpcon_okinawa 2023 livecoding supplementary material
okashoi
3
2k
Other Decks in Research
See All in Research
SSII2025 [SS2] 横浜DeNAベイスターズの躍進を支えたAIプロダクト
ssii
PRO
7
4k
EOGS: Gaussian Splatting for Efficient Satellite Image Photogrammetry
satai
4
520
snlp2025_prevent_llm_spikes
takase
0
170
心理言語学の視点から再考する言語モデルの学習過程
chemical_tree
2
590
2021年度-基盤研究B-研究計画調書
trycycle
PRO
0
300
問いを起点に、社会と共鳴する知を育む場へ
matsumoto_r
PRO
0
610
2025年度人工知能学会全国大会チュートリアル講演「深層基盤モデルの数理」
taiji_suzuki
25
18k
論文紹介:Not All Tokens Are What You Need for Pretraining
kosuken
0
170
診断前の病歴テキストを対象としたLLMによるエンティティリンキング精度検証
hagino3000
1
130
2025/7/5 応用音響研究会招待講演@北海道大学
takuma_okamoto
1
190
AWSで実現した大規模日本語VLM学習用データセット "MOMIJI" 構築パイプライン/buiding-momiji
studio_graph
2
520
Minimax and Bayes Optimal Best-arm Identification: Adaptive Experimental Design for Treatment Choice
masakat0
0
170
Featured
See All Featured
Code Reviewing Like a Champion
maltzj
525
40k
Making the Leap to Tech Lead
cromwellryan
135
9.5k
A designer walks into a library…
pauljervisheath
207
24k
What's in a price? How to price your products and services
michaelherold
246
12k
10 Git Anti Patterns You Should be Aware of
lemiorhan
PRO
656
61k
Making Projects Easy
brettharned
117
6.4k
Building Adaptive Systems
keathley
43
2.7k
Intergalactic Javascript Robots from Outer Space
tanoku
272
27k
Building Better People: How to give real-time feedback that sticks.
wjessup
368
19k
Let's Do A Bunch of Simple Stuff to Make Websites Faster
chriscoyier
507
140k
[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails
eileencodes
36
2.5k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
49
3k
Transcript
文献紹介 2014/05/01 長岡技術科学大学 自然言語処理研究室 岡田 正平
紹介する文献 2
文献情報 Roman Klinger and Philipp Cimiano. Bidirectional Inter-dependencies of Subjective
Expressions and Targets and their Value for Joint Model. Proceedings of the 51st Annual Meeting of the ACL, pp. 848-854. 2013 3
概要 • Opinion mining における subjective expression と target の相互依存性を扱う
– 既存研究は1方向しか扱っていない • 双方向の関係を扱うsubjective expression お よび target を抽出するモデルの提案 4
背景 5
背景 sentiment analysis や opinion mining subjective term, polarity,
targetの同定 e.g.) I like the low weight of the camera. subjective: “like” target: “low weight” polarity: positive • これらは相互依存関係にあるのでは? 6
扱う問題 • subject termについての知識が完全な場合と 不完全な場合の比較 • targetについての知識が完全な場合のsubject termの予測への影響 • targetについての知識が不完全な場合はどう
か(学習したモデルからの予測) 7
IMPERATIVELY DEFINED FACTOR GRAPH 8
Factor Graph • factor と variable からなる2部グラフ • 多変数関数の factorize
に対応 9 wikipedia “factor graph” より転載 1 , 2 , 3 = 1 1 2 1 , 2 3 1 , 2 4 (2 , 3 )
Factor Graph • ベイズ推定の応用(誤り訂正など)に用い られるらしい • NLPではn-gram言語モデルとか? 10
Imperatively Defined Factor Graph • variable に 入力変数集合 x と出力変数集合
y がある • 入出力変数の部分集合 x , y を引数とする関 数 x , y が factor Ψ • 言い換えれば,(x , y )から得られる特徴量が factor? 11
Imperatively Defined Factor Graph A factor template consists of parameters
{ }, sufficient statistic functions { }, and a description of an arbitrary relationship between variables, yielding a set of tuples x , y (元の文献より引用) • ここ(特に description が何か)の理解が不十分 12
Imperatively Defined Factor Graph • 確率分布が次式で表現される • y x =
1 (x) ∏ ∏ exp(∑ (x , y )) 𝑘=1 x,y ∈ ∈T • 全 factor とパラメータの線形結合 13
抽出モデル 14
Model | variable • variable は subjective term と target
• 複数トークンからなる表現に対応すべく span として表現 • = , , , はトークン列中の span の左端・右端の位置 ∈ {target, subjective} 15
Model | factor template • factor template は大きく分けて2種類 – single
span template – inter-span template 16
Model | single span template • トークンのPOSタグ (POS) • トークンの文字列(小文字)
(W) • トークンのPOSタグ&文字列の組み合わせ (POS-W) • span内のPOSタグ列 (POS-SEQ) 17
Model | inter-span template • 以下の3つと,single span template の組合わせ –
target の span が subjective term に隣接する名詞を 含むか ([NO-]CLOSE-NOUN-x) – 他クラスの span が同じ文中に存在するか ([NO- ]BOTH-x) – target と subject 間に単一の係り受け関係があるか ([NO-]ONE-EDGE-x) 18
例(元の文献より転載) 19
Model | サンプリング • MCMC法により推定を行う • 1回のサンプルごとに各 span は class
を変え られるか,1トークン分伸ばすか縮められる 20
実験 21
対象データ • J.D. Power and Associates Sentiment Corpora – 車とカメラについてのblog
– subjective term と target についてアノテート済 • Twitter data set – Stanford parser を用いないため,ONE-EDGEの 特徴量は使えない 22
実験項目 1. subjective term の推定→ target の推定 2. target の推定→
subjective term の推定 3. 完全な subjective term の知識を利用した target の推定 4. 完全な target の知識を利用した subjective term の推定 23
実験結果 | camera data set 24
実験結果 | car data set 25
実験結果 | Twitter data set 26
まとめ • subjective term と target は相互に依存して いることが認められた • その影響の仕方は非対称的だった
• パイプライン的に処理する場合には,先に subjective term を推定した方がいい 27