Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Sign up for free
Menu
Search
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Pricing
Search
Sign in
Sign up for free
対応分析
Search
Sponsored
·
Your Podcast. Everywhere. Effortlessly.
Share. Educate. Inspire. Entertain. You do you. We'll handle the rest.
→
Ringa_hyj
November 20, 2020
Science
190
0
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
対応分析
対応分析
Ringa_hyj
November 20, 2020
More Decks by Ringa_hyj
See All by Ringa_hyj
DVCによるデータバージョン管理
ringa_hyj
0
490
deeplakeによる大規模データのバージョン管理と深層学習フレームワークとの接続
ringa_hyj
0
130
Hydraを使った設定ファイル管理とoptunaプラグインでのパラメータ探索
ringa_hyj
0
260
ClearMLで行うAIプロジェクトの管理(レポート,最適化,再現,デプロイ,オーケストレーション)
ringa_hyj
0
310
Catching up with the tidymodels.[Japan.R 2021 LT]
ringa_hyj
3
900
多次元尺度法MDS
ringa_hyj
0
510
因子分析(仮)
ringa_hyj
0
260
階層、非階層クラスタリング
ringa_hyj
0
180
tidymodels紹介「モデリング過程料理で表現できる説」
ringa_hyj
0
700
Other Decks in Science
See All in Science
Conwayの法則を"ちゃんと"使うために — 原典でConwayは何を言っていたのか
bonotake
10
7.8k
チュートリアル:世界モデル
hf149
0
2.5k
「AIエージェントを作る」とは、何を設計することか
salt2
0
260
サンプル対応のない複数遺伝子発現プロファイルに対するテンソル分解型統合解析の要約
tagtag
PRO
0
280
人工知能のための哲学塾 ニューロフィロソフィ篇 第一夜 「無著、世親と唯識のはじまり、ニューラルネットワークのはじまり」
miyayou
0
150
Cognitive Debt - What AI will do to us
martinlippert
1
130
J-STAGE全文XML登載必須化について
xspa2012
0
1.7k
ゲームと人工知能
miyayou
0
290
バランスって大事だね
akasan
1
170
コーヒー豆様核 (Coffee-bean nuclei) における形態学的サブタイピングと精選・焙煎特性の同定
jagupath
PRO
0
260
白金鉱業Meetup Vol.25 【初学者向け発表枠】「で、この施策って効いてるの」に答える効果検証の基礎 ~ATE / ATT / CATE / LATEを現場の問いに翻訳する~
brainpadpr
1
410
Biohub - Cell Tracking During Development - 3rd Place Solution
yu4u
2
260
Featured
See All Featured
Designing Experiences People Love
moore
143
24k
Rebuilding a faster, lazier Slack
samanthasiow
85
9.7k
Color Theory Basics | Prateek | Gurzu
gurzu
1
510
Into the Great Unknown - MozCon
thekraken
41
2.8k
Why You Should Never Use an ORM
jnunemaker
PRO
61
10k
Thoughts on Productivity
jonyablonski
76
5.4k
The World Runs on Bad Software
bkeepers
PRO
72
12k
Measuring & Analyzing Core Web Vitals
bluesmoon
9
1k
DevOps and Value Stream Thinking: Enabling flow, efficiency and business value
helenjbeal
2
420
Code Review Best Practice
trishagee
74
20k
Navigating the Design Leadership Dip - Product Design Week Design Leaders+ Conference 2024
apolaine
2
500
svc-hook: hooking system calls on ARM64 by binary rewriting
retrage
2
660
Transcript
対応分析 カテゴリカルな主成分分析 数量化三類 correspondence analysis 双対尺度法
商品に関するアンケートを実施した 数項目あり、はい、いいえでの回答をone-hot表現に変形しておく 全100人の回答のうち、はいの回数をカウントしてクロス集計の形式にした 商品と項目の共起性(相関)を議論するのが対応分析(双対尺度法、数量化三類はほとんど同じもの) (回答が二択でないとき質問1と質問2のクロス集計もつくることができる) 行和と列和を計算する。これは周辺確率として考えられる。 項目1 項目2 商品1 13
31 商品2 15 33 商品3 21 5 項目1 項目2 行和 商品1 13 31 44 商品2 15 33 48 商品3 21 5 26 列和 49 69 総和=118
一点当たりの重さは、集計表の総和で割る。 総和 N = 118 で各セルの値を割る。 項目1∧商品1であるときの確率(同時確率)として解釈することができる。 項目1 項目2 行和
商品1 13 31 44 商品2 15 33 48 商品3 21 5 26 列和 49 69 総和=118 項目1 項目2 商品1 0.11 0.26 商品2 0.13 0.28 商品3 0.18 0.04 同時確率となったクロス集計表を行和して、行和でその行を規格化する。(プロフィル) この値の解釈は、行に関する条件付き確率となる。 列方向にもプロフィルする。 比率になおしている 項目1 項目2 行和 商品1 0.11 0.26 0.37 商品2 0.13 0.28 0.41 商品3 0.18 0.04 0.22 項目1 項目2 商品1 0.3 0.7 商品2 0.31 0.69 商品3 0.81 0.19
項目1 項目2 行和 商品1 0.11 0.26 0.37 商品2 0.13 0.28
0.41 商品3 0.18 0.04 0.22 0.42 0.58 項目1 項目2 商品1 0.3 0.7 商品2 0.31 0.69 商品3 0.81 0.19 項目1 項目2 商品1 0.26 0.45 商品2 0.31 0.48 商品3 0.43 0.07 規格化:行 規格化:列 この値は図として理解すると、 変数1,2、もしくは行1,2,3が合計1となる 平面上(超平面・直線)に存在するようになる
項目1 項目2 商品1 0.3 0.7 商品2 0.31 0.69 商品3 0.81
0.19 項目1 項目2 商品1 0.26 0.45 商品2 0.31 0.48 商品3 0.43 0.07 1 項目1 1 商品1 商品2 商品3 項目2 1 1 1 三次元空間上の2点 二次元空間上の3点
項目1 項目2 商品1 f11 f21 商品2 f12 f22 商品3 f13
f23 同時確率 項目1 項目2 商品1 p11 p21 商品2 p12 p22 商品3 p13 p23 項目1 項目2 商品1 q11 q21 商品2 q12 q22 商品3 q13 q23 規格化:行
項目1 項目2 商品1 f11 f21 商品2 f12 f22 商品3 f13
f23 = + + √(j列目の列和) (i行目の行和) 行和を外に出す方法も見られた = + + = + + これはp_ij に対して行っても同じ
= + + 質的データはそのままでは件数が多いか少ないか、 という情報しかもっていない 数値の関係性を表すための計算方法が研究者達がいくつか考案した 数値的な距離関係を表すためにBenzecriはカイ二乗距離を考えた =1 1
+ + − + 2 = カイ二乗統計量を使った場合には − + + 2 + + 平方根を計算して √n ∗ − ++ ++ √nを取り除くと = + + ා =1 + + − + + 2
= + + 項目1 項目2 商品1 x11 x21 商品2 x12
x22 商品3 x13 x23 = + + Xの行列を主成分分析(固有値・固有ベクトル)する 主成分得点(カテゴリスコア,数量化得点)は、主成分軸上の座標であり、 クロス集計表によって得られた質的変数を 低次元にマッピングすることが可能となる 行に対するXだけでなく、列に対するXも求めて主成分分析する。 (項目に対する主成分分析と、商品に対する主成分分析を行う。)
得られたクロス集計表の行と列に対する主成分得点の寄与率を確認して 第2主成分までの寄与率がたかければbiplotによって二次元表現すること で、 クロス集計表の行列の関係を視覚的に確認できる。
項目1 項目2 商品1 f11 f21 商品2 f12 f22 商品3 f13
f23 同時確率 項目1 項目2 商品1 p11 p21 商品2 p12 p22 商品3 p13 p23 行列π_PQとする 周辺確率(行和p_i+,列和p_+j)を対角成 分にもつものを π_p = diag(p_i+) π_q = diag(p_+j) とする。
= + + = −1 − 1 2 = −
ҧ − ҧ − ҧ ҧ ℎ = ℎ = =1 ℎ = =1 ℎ + + = −1 − 1 2 固有ベクトルHとデータから数量化得点をもとめる これをPに関してだけでなく、Qに関しても求める。 単純にX(π)を転置して求めていく