Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
文献紹介: Natural Language Generation enhances huma...
Search
Yumeto Inaoka
September 21, 2017
Research
0
230
文献紹介: Natural Language Generation enhances human decision-making with uncertain information
2017/09/21の文献紹介で発表
Yumeto Inaoka
September 21, 2017
Tweet
Share
More Decks by Yumeto Inaoka
See All by Yumeto Inaoka
文献紹介: Quantity doesn’t buy quality syntax with neural language models
yumeto
1
190
文献紹介: Open Domain Web Keyphrase Extraction Beyond Language Modeling
yumeto
0
240
文献紹介: Self-Supervised_Neural_Machine_Translation
yumeto
0
160
文献紹介: Comparing and Developing Tools to Measure the Readability of Domain-Specific Texts
yumeto
0
170
文献紹介: PAWS: Paraphrase Adversaries from Word Scrambling
yumeto
0
160
文献紹介: Beyond BLEU: Training Neural Machine Translation with Semantic Similarity
yumeto
0
280
文献紹介: EditNTS: An Neural Programmer-Interpreter Model for Sentence Simplification through Explicit Editing
yumeto
0
340
文献紹介: Decomposable Neural Paraphrase Generation
yumeto
0
230
文献紹介: Analyzing the Limitations of Cross-lingual Word Embedding Mappings
yumeto
0
230
Other Decks in Research
See All in Research
EcoWikiRS: Learning Ecological Representation of Satellite Images from Weak Supervision with Species Observation and Wikipedia
satai
3
110
Agentic AIとMCPを利用したサービス作成入門
mickey_kubo
0
480
GPUを利用したStein Particle Filterによる点群6自由度モンテカルロSLAM
takuminakao
0
180
AIグラフィックデザインの進化:断片から統合(One Piece)へ / From Fragment to One Piece: A Survey on AI-Driven Graphic Design
shunk031
0
390
Hiding What from Whom? A Critical Review of the History of Programming languages for Music
tomoyanonymous
0
150
多言語カスタマーインタビューの“壁”を越える~PMと生成AIの共創~ 株式会社ジグザグ 松野 亘
watarumatsuno
0
120
CVPR2025論文紹介:Unboxed
murakawatakuya
0
150
データxデジタルマップで拓く ミラノ発・地域共創最前線
mapconcierge4agu
0
210
Language Models Are Implicitly Continuous
eumesy
PRO
0
190
cvpaper.challenge 10年の軌跡 / cvpaper.challenge a decade-long journey
gatheluck
3
300
Creation and environmental applications of 15-year daily inundation and vegetation maps for Siberia by integrating satellite and meteorological datasets
satai
3
250
20250624_熊本経済同友会6月例会講演
trafficbrain
1
590
Featured
See All Featured
Learning to Love Humans: Emotional Interface Design
aarron
273
40k
Building Better People: How to give real-time feedback that sticks.
wjessup
368
19k
Practical Orchestrator
shlominoach
190
11k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
49
3k
Helping Users Find Their Own Way: Creating Modern Search Experiences
danielanewman
29
2.8k
Fashionably flexible responsive web design (full day workshop)
malarkey
407
66k
ピンチをチャンスに:未来をつくるプロダクトロードマップ #pmconf2020
aki_iinuma
126
53k
No one is an island. Learnings from fostering a developers community.
thoeni
21
3.4k
Typedesign – Prime Four
hannesfritz
42
2.8k
The MySQL Ecosystem @ GitHub 2015
samlambert
251
13k
Intergalactic Javascript Robots from Outer Space
tanoku
272
27k
Sharpening the Axe: The Primacy of Toolmaking
bcantrill
44
2.5k
Transcript
Natural Language Generation enhances human decision-making with uncertain information Dimitra
Gkatzia, Oliver Lemon, Verena Rieser. Proceedings of the 54th Annual Meeting of the Association for Computational Linguistics, pages 264–268, 2016. 1 文献紹介(2017/09/21) 自然言語処理研究室 稲岡 夢人
概要 • 人間の意思決定は不確実なデータに依存 することが多い • 不確実なデータの提示方法の違いによる 意思決定への影響を測定 • 不確実なデータにおいて自然言語生成(NLG) はグラフによる提示を改善
2
導入 • NLGはグラフィカルなデータ可視化技術と同等 の結果を達成できるとされている • 現在のdata-to-textシステムは元データが正 確な事実であることが前提 →医学や天気予報において適用できない • 実際にはリスクや不確実性を単に数値で
提示するのは不十分とされている 3
天気予報の生成 • 本論文では天気予報の生成が対象 • 不確実な情報の提示手段、気象現象の 発生確率への言及に焦点を当てる • 従来のNLGシステムの評価に用いられる 文法, 正確性,
流暢性, 一貫性, 後編集評価 ではなく、不確実性の理解や意思決定に 及ぼす影響を測定する 4
データ収集環境 • Met OfficeのWeather Gameを拡張した ゲームベースによるデータ収集 • プレーヤーは天気予報に基づいて 売上を最大化するアイスクリーム売りの 送り先を決定
5
天気予報の提示 • 天気予報はグラフィカルな提示とテキストの提 示、マルチモーダルな提示を使用 6
天気予報文の生成 • SimpleNLGを使用 • WMO-based, NATURALのシステムを開発 • WMO-based : 世界気象機関(WMO)のガイドラインに従う
• NATURAL : 気象予報士が天気を報告する自然な方法を 模倣するシステム 7
実験設定 • 女性197人, 男性241人, その他4人の 合計442人をプレーヤーとして募集 • 450のそれぞれ異なるゲーム事例を使用 • ゲームのスコアはプレーヤーの決定と
自信の度合いで計算 • 自信の度合いは10点満点でプレーヤーによっ て宣言される 8
実験結果(スコア) • マルチモーダルな提示はグラフのみに 比べて有意に高いスコア • マルチモーダルな提示とNLGに大差はない • グラフのみよりNLGの方が高い • WMO-basedとNATURALに大差はない
9
実験結果(自信の度合い) • 自信の度合いはグラフの方が有意に効果的 • NLGとグラフの提示を比較すると、 スコアと自信の度合いの大小関係が逆転 10
実験結果(性差) • 女性のみの結果ではNLGの出力がスコアをよ り高くしている • 男性はあらゆる提示方法で似たような スコアとなっている →NLGの効果は主に女性によって現れて いることを示唆 11
結論 • 不確実なデータのテキストの提示に関して ゲームベースの調査結果を示した • NLG, グラフ, マルチモーダルなタスクの間には かなりの性差がある →これまでの研究は性別間で区別されて
いなかったため重要な知見 12