データハンドリング/data_handling

Slide 1

Slide 1 text

1 2024.07.13 Tokyo.R #114 データハンドリング

Slide 2

Slide 2 text

2 応募者の選考データ雑然データ.csv 整然データ.csv

Slide 3

Slide 3 text

3 整然データは扱いやすい(1)

Slide 4

Slide 4 text

4 整然データは扱いやすい(2)

Slide 5

Slide 5 text

5 整然データは扱いやすい(3)

Slide 6

Slide 6 text

6 整然データは扱いやすい(4)

Slide 7

Slide 7 text

7 整然データは扱いやすい(5) いいところ：選考段階が三次、四次と増えてもコード変更なしで通過率を求めることができる

Slide 8

Slide 8 text

8 雑然データは扱いにくい(1)

Slide 9

Slide 9 text

9 雑然データは扱いにくい(2)

Slide 10

Slide 10 text

10 雑然データは扱いにくい(3) つらいところ：選考段階が増えるごとにコード変更が必要

Slide 11

Slide 11 text

11 雑然データを整然データに変換整然データ.csv 雑然データ.csv pivot_longer

Slide 12

Slide 12 text

12 変換できたら後は同じ

Slide 13

Slide 13 text

13 整然データの定義(1) 1.個々の変数が1つの列をなす。 2.個々の観測が1つの行をなす。 3.個々の観測の構成単位の類型が1つの表をなす。 4.個々の値が1つのセルをなす。

Slide 14

Slide 14 text

14 整然データの定義(2) 1.個々の変数が1つの列をなす。 2.個々の観測が1つの行をなす。 3.個々の観測の構成単位の類型が1つの表をなす。 4.個々の値が1つのセルをなす。定義を満たしていない変数が1つの列をなしていない

Slide 15

Slide 15 text

15 整然データの定義(3) 1.個々の変数が1つの列をなす。 2.個々の観測が1つの行をなす。 3.個々の観測の構成単位の類型が1つの表をなす。 4.個々の値が1つのセルをなす。定義を満たしていない応募者NO.1、選考段階「一次」の観測で1行応募者NO.1、選考段階「二次」の観測で1行となってほしい

Slide 16

Slide 16 text

16 整然データの定義(4) 1.個々の変数が1つの列をなす。 2.個々の観測が1つの行をなす。 3.個々の観測の構成単位の類型が1つの表をなす。 4.個々の値が1つのセルをなす。定義を満たしている

Slide 17

Slide 17 text

17 整然データの定義(5) 1.個々の変数が1つの列をなす。 2.個々の観測が1つの行をなす。 3.個々の観測の構成単位の類型が1つの表をなす。 4.個々の値が1つのセルをなす。分ける・一つの事実は一つの場所へ・矛盾した登録を防げる

Slide 18

Slide 18 text

18 整然データの定義(6) 1.個々の変数が1つの列をなす。 2.個々の観測が1つの行をなす。 3.個々の観測の構成単位の類型が1つの表をなす。 4.個々の値が1つのセルをなす。 1月応募.csv 2月応募.csv 3月応募.csv つなげる

Slide 19

Slide 19 text

19 整然データの定義(7) 1.個々の変数が1つの列をなす。 2.個々の観測が1つの行をなす。 3.個々の観測の構成単位の類型が1つの表をなす。 4.個々の値が1つのセルをなす。定義を満たしていない 1つのセルに複数の値が入っている

Slide 20

Slide 20 text

20 整然データの定義(8) 1.個々の変数が1つの列をなす。 2.個々の観測が1つの行をなす。 3.個々の観測の構成単位の類型が1つの表をなす。 4.個々の値が1つのセルをなす。分ける

Slide 21

Slide 21 text

雑然データに気を付けてデータハンドリングが難しいなあと感じたら、それは雑然データかもしれません。雑然データのままがんばるのではなく整然データに変換できないか検討してみましょう。