Slide 1

Slide 1 text

LET65 @ 北海学園大学 2026. 8.18. 学習者データを「見る」 ―外国語教師のためのデータの入力、分析、解釈方法― 浦野 研(北海学園大学) email: [email protected] https://www.urano-ken.com/research/let2026

Slide 2

Slide 2 text

本日の資料

Slide 3

Slide 3 text

はじめに 今日のお話は、以下のワークショップの内容を 組み合わせてアップデートしたものです • 2013/08/07. 有意性と効果量についてしっかり考えてみよう. 外国語教育メディ ア学会第53回全国研究大会@中京学院大学 • 2014/10/26. 英語授業を見つめ直す方法:テストデータの見方を知ろう. 全国英 語教育学会・小学校英語教育学会第2回英語教育セミナー@関西大学 • 2016/08/07. 量的データを扱うときに知っておきたいこと:データの分布、有意 性、効果量、信頼区間. 外国語教育メディア学会第56回全国研究大会@早稲田大 学 • • 2019/08/06. 外国語教育(研究)における量的データの視覚化と解釈. FLEAT VII / LET2019 @ Waseda University 2023/08/07. 学習者データを「見る」:外国語教師のためのデータの入力、分 析、解釈方法. 外国語教育メディア学会第62回全国研究大会@早稲田大学

Slide 4

Slide 4 text

要旨 私たち外国語教師は、研究だけでなく教育実践の場にお いても、学習者の知識・能力を数量化したデータを扱っ ています。本ワークショップでは、様々なグラフを用い てデータを可視化する意義やデータの分布に関する基本 的な指標について学び、研究・教育の両面で学習者デー タをより深く理解することを目指します。

Slide 5

Slide 5 text

要旨 私たち外国語教師は、研究だけでなく教育実践の場にお いても、学習者の知識・能力を数量化したデータを扱っ ています。本ワークショップでは、様々なグラフを用い てデータを可視化する意義やデータの分布に関する基本 的な指標について学び、研究・教育の両面で学習者デー タをより深く理解することを目指します。

Slide 6

Slide 6 text

架空のデータを 用意しました

Slide 7

Slide 7 text

Group A 青山 蓮 池上 湊 石田 陽翔 伊藤 颯 上田 悠真 大橋 蒼 岡田 結翔 川村 柊 木下 暖 小林 凜 坂口 陽菜 佐藤 莉子 島田 葵 杉本 ひなた 鈴木 澪 田村 咲 中川 心春 西山 結菜 橋口 楓 林凪 藤田 朱里 松田 ゆい 村上 さくら 山口 紬 吉田 日向 Test A 60 49 71 46 34 34 51 38 49 58 50 52 56 56 46 41 47 36 59 57 30 59 52 46 49

Slide 8

Slide 8 text

Group A 青山 蓮 池上 湊 石田 陽翔 伊藤 颯 上田 悠真 大橋 蒼 岡田 結翔 川村 柊 木下 暖 小林 凜 坂口 陽菜 佐藤 莉子 島田 葵 杉本 ひなた 鈴木 澪 田村 咲 中川 心春 西山 結菜 橋口 楓 林凪 藤田 朱里 松田 ゆい 村上 さくら 山口 紬 吉田 日向 Test A 60 49 71 46 34 34 51 38 49 58 50 52 56 56 46 41 47 36 59 57 30 59 52 46 49 Group B 浅田 律 安藤 碧 石井 凌 井上 奏 上野 陽 江田 渚 岡本 朔 加藤 澄 川口 唯 木村 蒼空 近藤 花 斉藤 温 坂田 芽依 清水 悠 関 柚希 高木 彩葉 田中 凛 千葉 遥 中島 つむぎ 長田 翼 西田 彩 橋本 琉 原 柚月 福田 奏汰 松本 陽花 Test A 45 64 47 31 60 54 61 47 48 47 52 63 58 43 54 70 44 22 42 35 58 37 58 66 67

Slide 9

Slide 9 text

比べてみよう Group A 青山 蓮 池上 湊 石田 陽翔 伊藤 颯 上田 悠真 大橋 蒼 岡田 結翔 川村 柊 木下 暖 小林 凜 坂口 陽菜 佐藤 莉子 島田 葵 杉本 ひなた 鈴木 澪 田村 咲 中川 心春 西山 結菜 橋口 楓 林凪 藤田 朱里 松田 ゆい 村上 さくら 山口 紬 吉田 日向 Test A 60 49 71 46 34 34 51 38 49 58 50 52 56 56 46 41 47 36 59 57 30 59 52 46 49 Group B 浅田 律 安藤 碧 石井 凌 井上 奏 上野 陽 江田 渚 岡本 朔 加藤 澄 川口 唯 木村 蒼空 近藤 花 斉藤 温 坂田 芽依 清水 悠 関 柚希 高木 彩葉 田中 凛 千葉 遥 中島 つむぎ 長田 翼 西田 彩 橋本 琉 原 柚月 福田 奏汰 松本 陽花 Test A 45 64 47 31 60 54 61 47 48 47 52 63 58 43 54 70 44 22 42 35 58 37 58 66 67

Slide 10

Slide 10 text

比べてみよう Group A 青山 蓮 池上 湊 石田 陽翔 伊藤 颯 上田 悠真 大橋 蒼 岡田 結翔 川村 柊 木下 暖 小林 凜 坂口 陽菜 佐藤 莉子 島田 葵 杉本 ひなた 鈴木 澪 田村 咲 中川 心春 西山 結菜 橋口 楓 林凪 藤田 朱里 松田 ゆい 村上 さくら 山口 紬 吉田 日向 Test A 60 49 71 46 34 34 51 38 49 58 50 52 56 56 46 41 47 36 59 57 30 59 52 46 49 Group B 浅田 律 安藤 碧 石井 凌 井上 奏 上野 陽 江田 渚 岡本 朔 加藤 澄 川口 唯 木村 蒼空 近藤 花 斉藤 温 坂田 芽依 清水 悠 関 柚希 高木 彩葉 田中 凛 千葉 遥 中島 つむぎ 長田 翼 西田 彩 橋本 琉 原 柚月 福田 奏汰 松本 陽花 ? w o H Test A 45 64 47 31 60 54 61 47 48 47 52 63 58 43 54 70 44 22 42 35 58 37 58 66 67

Slide 11

Slide 11 text

個々の数値を見ても 数量データの理解は難しい

Slide 12

Slide 12 text

数量データを理解する方法 • データを要約する • データを図で表す

Slide 13

Slide 13 text

数量データを理解する方法 • データを要約する • データを図で表す

Slide 14

Slide 14 text

データを要約する データの中心と ばらつき

Slide 15

Slide 15 text

データの中心 平均値 (mean) すべてのデータの合計をデータの個数で 中央値 (median) すべてのデータを小さい順(または大きい順)に 並べたとき、真ん中に来る値 最頻値 (mode) すべてのデータの中で出現回数が最も多い値 割ったもの

Slide 16

Slide 16 text

データの中心 Group A Group B 平均値 49.0 50.9 中央値 49.0 52.0 最頻値 46, 49 47, 58

Slide 17

Slide 17 text

データのばらつき 範囲 (range) 最大値と最小値の幅 データの上位25%と下位25%の幅 四分位範囲 (IQR) (interquartile range) 分散 (variance) 個々の数値と平均値(mean)の距離を表した 標準偏差 (SD) 分散の平方根(standard deviation) データの分布度合いを示す数値

Slide 18

Slide 18 text

データのばらつき Group A Group B 範囲 41.0 48.0 四分位範囲 10.0 16.0 分散 91.0 139.0 標準偏差 9.5 11.8

Slide 19

Slide 19 text

標準偏差 • 個々の数値と平均値との差を2乗し、 合計を人数で割ったものの平方根 Group A 青山 蓮 池上 湊 石田 陽翔 伊藤 颯 上田 悠真 大橋 蒼 岡田 結翔 川村 柊 木下 暖 小林 凜 坂口 陽菜 Test A 60 49 71 46 34 34 51 38 49 58 50 (60–49.0)2 = 120.1 (49–49.0)2 = 0.0 (71–49.0)2 = 482.2 . . . Group A 平均値 49.0 標準偏差 9.5 合計 2267.0 / 25 = 90.7 ←(分散) √ 90.7 = 9.5

Slide 20

Slide 20 text

標準偏差 平均値 = 50 の場合 34.1% 13.6% 34.1% 13.6% 34.1% 34.1% 13.6% 標準偏差 = 10 13.6% 標準偏差 = 20

Slide 21

Slide 21 text

標準偏差 平均値 = 50 の場合 標準偏差 = 10 標準偏差 = 20

Slide 22

Slide 22 text

標準偏差 (吉田, 1998, p. 173)

Slide 23

Slide 23 text

標準偏差 差は同じ (吉田, 1998, p. 173)

Slide 24

Slide 24 text

標準偏差 重なりの量が違う

Slide 25

Slide 25 text

Group A Group B 平均値 49.0 50.9 標準偏差 9.5 11.8

Slide 26

Slide 26 text

Group A Group B 平均値 49.0 50.9 標準偏差 9.5 11.8 Group A Group B

Slide 27

Slide 27 text

Group A Group B 平均値 49.0 50.9 標準偏差 9.5 11.8 Group A Group B

Slide 28

Slide 28 text

Group A Group B 平均値 49.0 50.9 標準偏差 9.5 11.8 分布の違い Group A 平均値の差 Group B

Slide 29

Slide 29 text

言えそうなこと • 平均値の比較だけでは不十分 • データの分布(ばらつき)も合わせて検討 • 分布の重なりが少ない方が差が大きい

Slide 30

Slide 30 text

注意事項 • 平均値と標準偏差を利用した要約は データの正規分布が前提(2つ前のスライド参照) • 正規分布でない場合、要約が実態と異なる 可能性がある

Slide 31

Slide 31 text

数量データを理解する方法 • データを要約する • データを図で表す

Slide 32

Slide 32 text

データを図で表す • ヒストグラム(histogram) • 密度曲線(density) • データ点/蜂群図(beeswarm) • 箱ひげ図(boxplot) • ヴァイオリン図(violin plot)

Slide 33

Slide 33 text

ヒストグラム (Histogram)

Slide 34

Slide 34 text

密度曲線 (Density)

Slide 35

Slide 35 text

密度曲線 (Density)

Slide 36

Slide 36 text

データ点/蜂群図 (Beeswarm)

Slide 37

Slide 37 text

箱ひげ図 (Box Plot)

Slide 38

Slide 38 text

箱ひげ図 (Box Plot) 中央値

Slide 39

Slide 39 text

箱ひげ図 (Box Plot) 四分位範囲

Slide 40

Slide 40 text

箱ひげ図 (Box Plot) 四分位範囲の1.5倍の最大値 同最小値

Slide 41

Slide 41 text

箱ひげ図 (Box Plot) 外れ値

Slide 42

Slide 42 text

箱ひげ図 (Box Plot) 密度曲線を縦にして左右対称にしたもの

Slide 43

Slide 43 text

データを図で表す • 収集したデータにどのような特徴があるか、 ざっくり把握することができる • 平均値と標準偏差だけでは見えないものが 見える • 厳密な比較や分析には適さない

Slide 44

Slide 44 text

実際に やってみましょう

Slide 45

Slide 45 text

学習者データ可視化ツール https://www.urano-ken.com/data-visualizer/

Slide 46

Slide 46 text

学習者データ可視化ツール https://www.urano-ken.com/data-visualizer/

Slide 47

Slide 47 text

ハンズオン① • ここまでに出てきたすべての数値とグラフを 再現しましょう • 平均値、中央値、最頻値 • 範囲、四分位範囲、分散、標準偏差 • ヒストグラム、密度曲線、データ点、 箱ひげ図、ヴァイオリン図

Slide 48

Slide 48 text

より複雑な分析なら

Slide 49

Slide 49 text

No content

Slide 50

Slide 50 text

• オープンソースの統計プログラミング言語 を使いやすい形にしたソフトウェア • GUIのため直感的に使える • オープンソースで無料で使える • ブラウザで使えるクラウド版(ベータ)も

Slide 51

Slide 51 text

https://www.jamovi.org

Slide 52

Slide 52 text

• Must-read (1) • 芝田征司. (2021/2022). jamovi完全攻略ガイド. https://bookdown.org/sbtseiji/ jamovi_complete_guide/

Slide 53

Slide 53 text

• Must-read (2) • Navarro, D. J., & Foxcroft, D. R. (2019). Learning statistics with jamovi: A tutorial for psychology students and other beginners. (Version 0.70). DOI: 10.24384/hgc3-7p15 • 日本語訳もあります: • 芝田征司訳. jamoviで学ぶ心理統計. https://bookdown.org/sbtseiji/lswjamoviJ/

Slide 54

Slide 54 text

注意点①

Slide 55

Slide 55 text

注意点①

Slide 56

Slide 56 text

注意点① • ファイル読み込み時に自動的 に判断される変数の種類が間 違っていることがある。 • Continuous 連続変数 • Ordinal 順序変数 • Nominal 名義変数

Slide 57

Slide 57 text

ハンズオン② • ここまでに出てきたすべての数値とグラフを 再現しましょう • 平均値、中央値、最頻値 • 範囲、四分位範囲、分散、標準偏差 • ヒストグラム、密度曲線、データ点、 箱ひげ図、ヴァイオリン図

Slide 58

Slide 58 text

ハンズオン① • データはData Visualizerでダウンロード してください

Slide 59

Slide 59 text

データを図で表す(追加) • 散布図

Slide 60

Slide 60 text

Group A 青山 蓮 池上 湊 石田 陽翔 伊藤 颯 上田 悠真 大橋 蒼 岡田 結翔 川村 柊 木下 暖 小林 凜 坂口 陽菜 佐藤 莉子 島田 葵 杉本 ひなた 鈴木 澪 田村 咲 中川 心春 西山 結菜 橋口 楓 林凪 藤田 朱里 松田 ゆい 村上 さくら 山口 紬 吉田 日向 Test A 60 49 71 46 34 34 51 38 49 58 50 52 56 56 46 41 47 36 59 57 30 59 52 46 49 Test B 62 40 74 50 37 43 55 40 41 59 52 54 61 46 48 42 53 37 62 50 38 68 56 48 50

Slide 61

Slide 61 text

Group A 青山 蓮 池上 湊 石田 陽翔 伊藤 颯 上田 悠真 大橋 蒼 岡田 結翔 川村 柊 木下 暖 小林 凜 坂口 陽菜 佐藤 莉子 島田 葵 杉本 ひなた 鈴木 澪 田村 咲 中川 心春 西山 結菜 橋口 楓 林凪 藤田 朱里 松田 ゆい 村上 さくら 山口 紬 吉田 日向 Test A 60 49 71 46 34 34 51 38 49 58 50 52 56 56 46 41 47 36 59 57 30 59 52 46 49 Test B 62 40 74 50 37 43 55 40 41 59 52 54 61 46 48 42 53 37 62 50 38 68 56 48 50 Test A Test B 平均値 49.0 50.6 標準偏差 9.5 9.7

Slide 62

Slide 62 text

散布図 (Scatter Plot)

Slide 63

Slide 63 text

Group A 青山 蓮 池上 湊 石田 陽翔 伊藤 颯 上田 悠真 大橋 蒼 岡田 結翔 川村 柊 木下 暖 小林 凜 坂口 陽菜 佐藤 莉子 島田 葵 杉本 ひなた 鈴木 澪 田村 咲 中川 心春 西山 結菜 橋口 楓 林凪 藤田 朱里 松田 ゆい 村上 さくら 山口 紬 吉田 日向 Test A 60 49 71 46 34 34 51 38 49 58 50 52 56 56 46 41 47 36 59 57 30 59 52 46 49 Test B 62 40 74 50 37 43 55 40 41 59 52 54 61 46 48 42 53 37 62 50 38 68 56 48 50 Test A Test B 平均値 49.0 50.6 標準偏差 9.5 9.7

Slide 64

Slide 64 text

散布図 (Scatter Plot) Test B 青山さん 62 60 Test A

Slide 65

Slide 65 text

Test A = 事前テスト Test B = 事後テスト と仮定すると

Slide 66

Slide 66 text

散布図 (Scatter Plot) 得点上昇

Slide 67

Slide 67 text

散布図 (Scatter Plot) 島田さん 56↗61

Slide 68

Slide 68 text

散布図 (Scatter Plot) 大橋さん 34↗43

Slide 69

Slide 69 text

散布図 (Scatter Plot) 得点下降

Slide 70

Slide 70 text

散布図 (Scatter Plot) 杉本さん 56↘︎46

Slide 71

Slide 71 text

データを図で表す(追加) • 散布図は2つの変数(テスト)の関係の強さ (=相関)を見るために使われますが • 個々のデータ(学習者)が2つの変数 (テスト)でどのように振る舞っているかを 見るためにも使えます

Slide 72

Slide 72 text

ハンズオン③ • 散布図を描いてみましょう • Group B の Test A と Test B のスコア • 学習者データ可視化ツール https://www.urano-ken.com/data-visualizer/

Slide 73

Slide 73 text

ハンズオン③

Slide 74

Slide 74 text

ハンズオン④ • 同じことをjamoviでやってみましょう

Slide 75

Slide 75 text

注意点② 80 Post 60 40 20 30 40 50 Pre jamovi で出力 60 70

Slide 76

Slide 76 text

注意点② • jamovi は統計処理やグラフの作成をGUIで 行ってくれる便利なアプリケーションです • 便利さのトレードオフとして、グラフでの 細かい調整はできません

Slide 77

Slide 77 text

おまけ

Slide 78

Slide 78 text

データの入力方法 • 入力方法を変えてみよう • セクションごとの得点 • 1問ずつの得点 • 解答そのもの

Slide 79

Slide 79 text

◯◯中学校 第2学期中間試験 学 年 3 クラス 1 リスニング問題 2 氏 名 Ken Urano 放送を聴き、次の質問に番号で答えなさい。 80 1. What does Tora-san do? ① He is a salesman. ③ He is an entertainer. ② He is a fisherman. ④ He is a traveler. 2. Where does he live? ① In Tokyo. ③ In Osaka. ② In Sapporo. ④ He doesn’t have a home. 【解答欄】 2 1 3 次の文の ( 2 4 ) 内から適切な語を選び、番号で答えなさい。 1. Atsushi has already ( ① eat ② eating ③ eaten ) all the chocolate. 2. We call ( ① he ② his ③ him ) a chocolate monster. 【解答欄】 3 1 3 2 3 次の文を読んで、下の問いに答えなさい。 10 20 Today we live in the age of beer. In addition to major beer manufacturers, there are hundreds of small breweries all over Japan. They are called microbreweries and the beer they produce is becoming more and more popular because of its high quality. 1. Do you like beer? 2. What is your favorite brand? 【解答欄】 4 1 Yes, of course! 2 Sapporo Classic. 次の日本文を英語に直しなさい。 1. わたしはこのあと高田馬場でたくさんお酒を飲みたい。 2. 仕事が待っているので札幌に帰りたくない。 【解答欄】 1 I am so ready to go to Takadanobaba and get drunk. 2 I don’t want to go back to Sapporo because there are so many things to do there. 20 30

Slide 80

Slide 80 text

◯◯中学校 第2学期中間試験 学 年 3 クラス 1 リスニング問題 2 氏 名 Ken Urano 放送を聴き、次の質問に番号で答えなさい。 80 1. What does Tora-san do? ① He is a salesman. ③ He is an entertainer. ② He is a fisherman. ④ He is a traveler. 2. Where does he live? ① In Tokyo. ③ In Osaka. ② In Sapporo. ④ He doesn’t have a home. 【解答欄】 2 1 3 次の文の ( 2 4 ) 内から適切な語を選び、番号で答えなさい。 1. Atsushi has already ( ① eat ② eating ③ eaten ) all the chocolate. 2. We call ( ① he ② his ③ him ) a chocolate monster. 【解答欄】 3 1 3 2 3 次の文を読んで、下の問いに答えなさい。 10 20 Today we live in the age of beer. In addition to major beer manufacturers, there are hundreds of small breweries all over Japan. They are called microbreweries and the beer they produce is becoming more and more popular because of its high quality. 1. Do you like beer? 2. What is your favorite brand? 【解答欄】 4 1 Yes, of course! 2 Sapporo Classic. 次の日本文を英語に直しなさい。 1. わたしはこのあと高田馬場でたくさんお酒を飲みたい。 2. 仕事が待っているので札幌に帰りたくない。 【解答欄】 1 I am so ready to go to Takadanobaba and get drunk. 2 I don’t want to go back to Sapporo because there are so many things to do there. 合計点 セクション ごとの得点 20 30

Slide 81

Slide 81 text

合計点 • 今日の話はこれまですべて合計点のこと • セクションごとの得点という情報をすで に失っている • つまり合計点はすでに要約されている • 可能であれば要約前の情報も記録してお きたい

Slide 82

Slide 82 text

セクションごとの得点 • 合計点を計算する手間を省ける • 合計点の計算ミスを防げる • 学習者についてより詳しく理解できる • セクション間の得点比較 • 平均と標準偏差で要約 • 散布図で可視化して個々の学習者の 確認

Slide 83

Slide 83 text

セクションごとの得点 • 平均と標準偏差で要約 • 「このクラスはリスニングと比べてリー ディングが苦手なようだ」 • 「文法セクションはデータのばらつきが 大きいな」 • 散布図で視覚化 • 「村井さんはリスニングが苦手なのかな」 • 「江川さんは単語がんばってるな」

Slide 84

Slide 84 text

セクションごとの得点 • セクション間を比較することで振り返る • テスト問題(の良し悪し) • 学習内容 • 指導方法、学習方法 • 学習者の個性(学習スタイル)

Slide 85

Slide 85 text

◯◯中学校 第2学期中間試験 学 年 3 クラス 1 リスニング問題 2 氏 名 Ken Urano 放送を聴き、次の質問に番号で答えなさい。 80 1. What does Tora-san do? ① He is a salesman. ③ He is an entertainer. ② He is a fisherman. ④ He is a traveler. 2. Where does he live? ① In Tokyo. ③ In Osaka. ② In Sapporo. ④ He doesn’t have a home. 【解答欄】 2 1 0 3 次の文の ( 2 4 ) 内から適切な語を選び、番号で答えなさい。 10 10 1. Atsushi has already ( ① eat ② eating ③ eaten ) all the chocolate. 2. We call ( ① he ② his ③ him ) a chocolate monster. 【解答欄】 3 1 10 3 2 3 次の文を読んで、下の問いに答えなさい。 10 20 Today we live in the age of beer. In addition to major beer manufacturers, there are hundreds of small breweries all over Japan. They are called microbreweries and the beer they produce is becoming more and more popular because of its high quality. 1. Do you like beer? 2. What is your favorite brand? 【解答欄】 4 1 Yes, of course! 10 2 Sapporo Classic. 次の日本文を英語に直しなさい。 1. わたしはこのあと高田馬場でたくさんお酒を飲みたい。 2. 仕事が待っているので札幌に帰りたくない。 【解答欄】 1 I am so ready to go to Takadanobaba and get drunk. 2 I don’t want to go back to Sapporo because there are so many things to do there. 10 得点 10 20 20 1問ずつの 30

Slide 86

Slide 86 text

い 1問ずつの得点 • 学習者についてさらに詳しく理解できる • テスト問題の評価ができる • 難易度(Item Facility) • 弁別力(Item Discrimination) • 学習者の能力を判別する精度

Slide 87

Slide 87 text

解答そのものの記録 • 誤答分析ができる • 選択肢の良し悪しを評価できる (Distractor Analysis) • マークシートの利用

Slide 88

Slide 88 text

整理すると 情報が少ない 合計点 データの要約 セクションごとの得点 1問ずつの得点 解答そのもの 情報が多い

Slide 89

Slide 89 text

http://www.langtest.jp

Slide 90

Slide 90 text

• データ分析がなんでも できちゃうものすごい ウェブアプリ • テストの項目分析も できます • 水本篤さん(関西大学) が開発し、無料で公開 • お礼はビールか白ワイン (樽ドネ)で

Slide 91

Slide 91 text

• データ分析がなんでも できちゃうものすごい ウェブアプリ • テストの項目分析も できます • 水本篤さん(関西大学) が開発し、無料で公開 • お礼はビールか白ワイン (樽ドネ)で

Slide 92

Slide 92 text

No content

Slide 93

Slide 93 text

No content

Slide 94

Slide 94 text

実際の解答と正解 (answer keys) を入力するだけで、 基本的な項目分析を自動で 行ってくれます

Slide 95

Slide 95 text

学習者データを「見る」 ―外国語教師のためのデータの入力、分析、解釈方法― • 数量データを理解する • データを要約する • データを図で表す • ハンズオン (Data Visualizer) • ハンズオン (jamovi) • データの入力方法を再考する • テストの項目分析 (langtest.jp) Ken Urano [email protected] https://www.urano-ken.com/research/let2026