Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Sign up for free
Menu
Search
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Pricing
Search
Sign in
Sign up for free
予測モデル with ベイズの定理 #TechLunch
Search
Sponsored
·
SiteGround - Reliable hosting with speed, security, and support you can count on.
→
Livesense Inc.
PRO
April 23, 2014
Technology
83
0
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
予測モデル with ベイズの定理 #TechLunch
2012/03/21(水) @ Livesense TechLunch
発表者:福田 絵里
Livesense Inc.
PRO
April 23, 2014
Transcript
11 slides
予測モデル with ベイズの定理
•スパムメールか?否か? •携帯電話の買い替えが起こるか? •クレジットカードがどれくらい不正利用されるだろうか? •異性は次にどんな行動を取るか? 未来を予測する 予測モデルの 構築・適用
•会話 予測モデルの構築・適用例 付き合いが長いと、 相手の求めているも のが分かってくる 思った通りの行動を しなかった場合は、再学習 蓄積された データ
参照 登録 相手の表情・ 態度・言葉 発言 予測 モデル 「最近◦◦さんのことがよく分かっ てきた」 = 「最近◦◦さんについて予測モデ ルが出来上がってきた」
•Paul Grahamのスパム対策 → ベイジアンフィルタを考案 予測モデルの構築・適用例 学習量が増えると フィルタの分類精 度が上昇 個々の判定を間違えた
場合には、ユーザが正 しい内容に判定しなお し、再学習 数学モデル 数学モデル ( (ベイズ理論 ベイズ理論) ) スパムメール スパムではない メール トレーニング 用データ 参照 登録 元メール 再学習
未来を予測するための確率論 客観的確率論 主観的確率論 対 ・古典的、頻度主義 ・「このサイコロを無限回ふった ときに1の目が出る頻度」 ・(起こって欲しい事柄の数)/(全 ての可能性の事柄の数) =
確率 ・誰が計算しても同じ確率になる ・1980年代、コンピュータの分野 で盛んに ・ベイズ主義、ベイズの定理利用 ・「次にこのサイコロをふったと きに、1の目が出る確率」 ・確信が持てる度合い=確率 ・1990年代に広まり始める ex) モンティ・ホール問題 http://ishi.blog2.fc2.com/blog-entry-182.html 直感で正しいと思える解答 実際の解答 トーマス・ベイズ (1702年 - 1761年)
•もっとも簡単なベイズの技術 ベイズの定理をそのまま素直に適用したアルゴリズム (ナイーブ←「純粋でありのまま」) ベイズの定理の基本 『ナイーブベイズ』 データ アルゴリズム
モデル 出力 (有益な情報) 信頼度 •データの各属性を独立したものとして扱う データ「顧客」の属性の例:年齢、性別、地域、年収
•膨大なデータを実際的な洞察に変える手段を提供 ナイーブベイズの適用例 ネット関連 クリックストリーム分析、コンテンツの自動分類 自然言語処理 文字解析、文法解析 コールセンター 声の抑揚をマネージャへアラート 資源 石油・ガス・鉱物資源の発見、早期採掘
警察・消防 犯罪・火災の原因分析、予測と阻止 流通 最適な棚割りの発見、需要予測 医薬、医療 新薬開発のコストダウン、疾病の早期発見 宇宙工学 金属材料特性の改良、化学燃料の品質管理
•教師付きモデル (Supervised Model) 既に結果の分かっているデータを「教師」として、構築されるモデル •目的指向型モデル 予測することを目的に作られているモデル ナイーブベイズのモデル モデル 出力 (有益な情報)
信頼度 知見の可視化 知見の信頼度や 価値の評価
•予備法 (精度劣るが高速) ・全データのうち一定の割合を、モデル構築に利用 ・残りのデータを、モデル精度のテストに利用 →誤差率を算出 •相互検証法 (予備法よりも精度良い) ・モデル構築用データ、モデル精度テスト用データをすり替えて、 予備法をn回繰り返す →n個の誤差率が得られ、それらを平均した推定誤差を算出
•ブートストラップ (さらに精度良い) ・モデル構築までは、相互検証法と同じ ・ただしモデルテスト時、誤った予測が行われたデータの重みを調整 →予測精度の向上 ナイーブベイズモデルの精度測定
•クリックストリーム Webサイトの訪問者がページを渡り歩いた「軌跡」 •以下の問題の調査・改善に役立つ 使い勝手(ユーザビリティ)が悪いのはどの要素か? Webサイト全体の構成やナビゲーションに問題はないか? サイト運営者の意図通りに訪問者がサイトを使いこなしているか? など •ソリューション Apache Mahout
(Hadoopを利用し並列演算) HadoopディストリビューションのCDH3 (分析の高速化に貢献) TeradataベースのSingularityプロジェクト (ex. eBay) Coremetrics Analytics (トランスコスモス社販売のアクセス解析ツール) SAS, SPSS Extra : クリックストリーム分析
→次回 ナイーブベイズ実践
More Decks by Livesense Inc.
See All by Livesense Inc.
新規商品の開発におけるAIの活用 〜挑戦は人間にしかできない〜
livesense
PRO
0
32
味覇で作るパスタが美味い - 20261001_yabaubuki.dev
livesense
PRO
0
200
Rubyはただの⾔語に⾮ず
livesense
PRO
0
610
28新卒_Webエンジニア職採用_会社説明資料
livesense
PRO
0
180
27新卒_総合職採用_会社説明資料
livesense
PRO
0
7.8k
27新卒_Webエンジニア職採用_会社説明資料
livesense
PRO
0
13k
株式会社リブセンス・転職会議 採用候補者様向け資料
livesense
PRO
0
620
株式会社リブセンス 会社説明資料(報道関係者様向け)
livesense
PRO
1
1.8k
データ基盤の負債解消のためのリプレイス
livesense
PRO
0
750
Other Decks in Technology
See All in Technology
AWS Emulator を評価する: 手元で動く AWS の API の仕組み、始め方、確かめ方
inariku
PRO
1
490
AIが会計業務の伴走者に。 マネーフォワード クラウド会計MCPサーバーで実現するAI前提の新しい業務プロセス
nobitabashi
0
130
速くなった開発の効果をどう推し量るのか
bulbulpaul
0
110
田んぼの見回りをIoTで減らしたい!水位監視から電池駆動カメラまでの試行錯誤
itosoft
1
190
マネージャーをエスパーにしない マネジメントされる側から始める、働きやすい現場づくり
comi190327
0
370
Go初心者のクラウドエンジニアが、デプロイを通して旨味を知っていく話
ryudai
1
210
うちなーぐちが認識できるなら、秋田弁もいけるはず!? Amazon Transcribe方言チューニング検証
ryouto715
1
170
顧客合意を取りながら進めるAWSコスト削減の実践
optim
0
170
Intro to Kiro (One agent, every surface) | Kiro: Zero to Hero 01
inariku
PRO
2
120
20261113_JAWS_Osaka
takuyay0ne
0
450
変更差分を読むために環境を整備しよう
pipepasta
1
180
会社説明資料_最新版
demaecan
0
32k
Featured
See All Featured
The Cost Of JavaScript in 2023
addyosmani
56
10k
AI: The stuff that nobody shows you
jnunemaker
PRO
12
1.3k
Code Reviewing Like a Champion
maltzj
529
40k
Java REST API Framework Comparison - PWX 2021
mraible
34
9.8k
Producing Creativity
orderedlist
PRO
348
41k
Measuring & Analyzing Core Web Vitals
bluesmoon
9
1.1k
Typedesign – Prime Four
hannesfritz
42
3.2k
End of SEO as We Know It (SMX Advanced Version)
ipullrank
3
4.5k
DevOps and Value Stream Thinking: Enabling flow, efficiency and business value
helenjbeal
2
450
Breaking role norms: Why Content Design is so much more than writing copy - Taylor Woolridge
uxyall
2
520
Believing is Seeing
oripsolob
1
280
SEO in 2025: How to Prepare for the Future of Search
ipullrank
3
3.9k