Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
B3_Seminar_05
Search
kakubari
February 24, 2017
Technology
0
85
B3_Seminar_05
ビックデータ解析入門3
kakubari
February 24, 2017
Tweet
Share
More Decks by kakubari
See All by kakubari
動詞クエリの語間の関係性に基づくクエリマイニング
kakubari
0
110
Neural Modeling of Multi-Predicate Interactions for Japanese Predicate Argument Structure Analysis
kakubari
1
150
Leveraging Crowdsourcing for Paraphrase Recognition
kakubari
0
73
Automatically Acquired Lexical Knowledge Improves Japanese Joint Morphological and Dependency Analysis
kakubari
0
99
Labeling the Semantic Roles of Commas
kakubari
0
66
Integrating Case Frame into Japanese to Chinese Hierarchical Phrase-based Translation Model
kakubari
0
110
Improving Chinese Semantic Role Labelingusing High-quality Surface and Deep Case Frames
kakubari
0
86
Exploring Verb Frames for Sentence Simplification in Hindi
kakubari
0
120
述語項構造と照応関係のアノテーション
kakubari
0
220
Other Decks in Technology
See All in Technology
Contract One Engineering Unit 紹介資料
sansan33
PRO
0
6.4k
2025/6/21 日本学術会議公開シンポジウム発表資料
keisuke198619
0
150
IAMのマニアックな話 2025を執筆して、 見えてきたAWSアカウント管理の現在
nrinetcom
PRO
4
540
Nonaka Sensei
kawaguti
PRO
3
620
新卒3年目の後悔〜機械学習モデルジョブの運用を頑張った話〜
kameitomohiro
0
210
Bill One 開発エンジニア 紹介資料
sansan33
PRO
4
12k
データ戦略部門 紹介資料
sansan33
PRO
1
3.2k
In Praise of "Normal" Engineers (LDX3)
charity
1
780
Copilot Agentを普段使いしてわかった、バックエンド開発で使えるTips
ykagano
1
500
型システムを知りたい人のための型検査器作成入門
mame
14
3.7k
DB 醬,嗨!哪泥嘎斯基?
line_developers_tw
PRO
0
150
今からでも間に合う! 生成AI「RAG」再入門 / Re-introduction to RAG in Generative AI
hideakiaoyagi
1
160
Featured
See All Featured
A Modern Web Designer's Workflow
chriscoyier
693
190k
Building an army of robots
kneath
306
45k
Building a Modern Day E-commerce SEO Strategy
aleyda
41
7.3k
Designing for Performance
lara
609
69k
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
26
2.8k
The Art of Delivering Value - GDevCon NA Keynote
reverentgeek
14
1.5k
Visualization
eitanlees
146
16k
Into the Great Unknown - MozCon
thekraken
39
1.8k
Music & Morning Musume
bryan
46
6.6k
Raft: Consensus for Rubyists
vanstee
139
7k
The Web Performance Landscape in 2024 [PerfNow 2024]
tammyeverts
8
650
Bash Introduction
62gerente
614
210k
Transcript
Ԭٕज़Պֶେֶ ిؾిࢠใֶ՝ఔ ֶ෦ɹ֯ுཽ ࣗવݴޠݚڀࣨ ɹ#̏θϛ ʙୈճʙ ϏοΫσʔλղੳೖᶅ
目次 ˔ͱϞʔϝϯτ ˔͖ͱϞʔϝϯτ ˔͍ҙຯͰͷ͖ ˔ཁ౷ܭྔ ˔౷ܭྔͷਪఆ
分布と統計量 ˔ूஂͷதͷͲͷཁૉબΕΔ֬Λಉ͡ʹ͢Δ ɹແ࡞ҝநग़๏ɺϥϯμϜαϯϓϦϯά ˔ಘΒΕͨඪຊ ɹແ࡞ҝඪຊɺϥϯμϜαϯϓϧ நग़ͨ͠ඪຊͷ࣮ଌʹج͍ͮͯɺ ूஂɺฏۉɺࢄΛਪఆ͢Δɻ
શମ͔ΒภΓͳ͘औΓग़ͨ͠Ұ෦͔ΒશମͷಛੑΛΔ
分布とモーメント ˔Ϟʔϝϯτͱ ɹฏۉࢄͷΑ͏ʹΛಛ͚Δྔ ྫ͑ʜ ਖ਼نฏۉͱࢄ͕༩͑ΒΕΕɺ࠶ݱ͕Մೳ ฏۉࢄͦΕͧΕ̍࣍ɺ̎࣍ͷϞʔϝϯτ ɹฏۉɿ ɹࢄɿ
µ = E[x]= x ⋅ f (x)dx ∫ σ 2 = E[(x −µ)2 ]= (x −µ)2 ⋅ f (x)dx ∫
分布とモーメント ˔Ұൠతͳʹରͯ͠ ɹฏۉࢄΑΓߴ࣍ͷϞʔϝϯτ·Ͱߟ͑Δ͜ͱͰ Λಛ͚Δ ˔֬ʹ͓͍ͯ ɹЋΛத৺ͱͨ͠ҰൠԽ͞ΕͨϞʔϝϯτͷఆٛ
E[(x −α)n ]= (x −α)n ⋅ f (x)dx ∫
べき分布とモーメント ˔ϞʔϝϯτʹΑΔͷಛ͚ͮ ཧ্औΓѻ͍͍͢ ࣮ࡍʹଟ͘ͷ౷ܭख๏ͰҊʹԾఆ͞Ε͍ͯΔ ଟ͘ͷ߹ɺਖ਼نࢦͰ͋Δɻ
Ὃ ݱ࣮ͰɺҟͳΔʹै͏֬ม͕͋Δɻ ͦͷΑ͏ͳ֬มʹै͍ͬͯΔσʔλͰɺ ؍ଌ͞Εͨʹରͯ͠౷ܭख๏͕దͰ͋Δ͔ҙ ͖తͳΛ࣋ͭ
べき分布とモーメント ˔͖ͱʜ ɹɾҝସՁ֨ࠩͷ ɹɾॴಘ͕େ͖͍ྖҬͰͷݸਓॴಘͷ ɹɾจষதͷ୯ޠͷස ࣾձݱɺࣗવݱ
べき分布とモーメント P(≥ x) = Ax−α Լهͷྦྷੵؔʹै͏Λ͖ͱ͍͏ɻ
"ن֨Խఆ ͖͕ͦ͢ް͍͜ͱΛಛͱ͢Δ ʢۃʹେ͖ͳΛ࣋ͭݱ͕ਖ਼نΑΓى͜Γ͍͢ʣ (x ≥ A 1 α ) (1)
べき分布とモーメント ˔͖ͷੑ࣭ ଟ͘ͷখ͞ͳͱগͳ͍ܻҧ͍ʹେ͖ͳΛͱΔ ͷΛؚΉ ਖ਼نΑΓߴ͍֬Ͱܻҧ͍ʹେ͖ͳΛͱΔ ྦྷੵؔΛ྆ରͰϓϩοτ͢ΔͱઢʹͳΔɻ ઢͷ͖͖ࢦЋͰ͋Δɻ
Ћ㱡̎ͰࢄɺЋ㱡̍Ͱฏۉ͕ଘࡏ͠ͳ͍ɻʢЋ࣍ Ҏ্ͷϞʔϝϯτ͕ଘࡏ͠ͳ͍ʣ Ћ̍Ͱɺ࠷େͷγΣΞ͕αϯϓϧ/ˠ㱣Ͱ̌ ʹͳΒͳ͍ɻ ɹ S max = max(x 1 , x 2 ,!, x N ) x i k=1 N ∑
べき分布とモーメント ಛʹࡾͭͷੑ࣭ɺσʔλͷ͕͖ʹै͍ͬͯΔ ͔͔֬ΊΔͨΊʹσʔλղੳʹ͏ɻ σʔλͷྦྷੵΛॻ͘ɻ ྆ରϓϩοτ͠ɺઢͰ͋Δ͜ͱΛ͔֬ΊΔɻ ۙࣅઢΛٻΊɺࢦЋΛٻΊΔɻ
広い意味でのべき分布 ͕ࣜݫີʹΓཱͭ͜ͱݱ࣮ʹͳ͍ɻ Ὃ ͷઈର͕େ͖͍ྖҬͰɺ ͖ؔͰۙࣅͰ͖ΔΑ͏ͳ
͖ͷΛ࣋ͭͱ͍͍ɺ૯͖ͯ͡ͱݺͿɻ ྫʣɾٯΨϯϚ ɹɹɾθʔλ ɹɹଞʹଟ͋Δɻ
要約統計量 ˔ཁ౷ܭྔͱ ɹඪຊͷ࣋ͭੑ࣭Λఆྔతʹಛ͚Δྔ ɾҐஔʹؔ͢Δཁ౷ܭྔ ඪຊฏۉɺதԝ ɾईʹؔ͢Δཁ౷ܭྔ ࢄɺඪ४ภࠩ
統計量の推定 ˔ϏοΫσʔλͷॲཧ ؍ଌ͞Εͨσʔλ͔Βཁ౷ܭྔΛ༻͍ͯɺ ɾͦͷ֬ີؔͷύϥϝʔλΛٻΊΔ ɾσʔλ͕ै͏ํఔࣜͷύϥϝʔλΛٻΊΔ ੳʹΑΓɺूஂ͕࣋ͭະͷύϥϝʔλΛಘΔ ඪຊ͔Βਪఆ͢Δ ਪఆํ๏ʹɺ࠷ਪఆ࠷খೋਪఆ͕͋Δɻ
参考文献 ˔ߴ҆ඒࠤࢠฤஶɺాଜޫଠɾࡾӜߤஶɺ ɹʮֶੜɾٕज़ऀͷͨΊͷϏοΫσʔλղੳೖʯ ʢୈ̏ষʣɺ ɹגࣜձࣾຊධࣾɺ݄