どうやって「データを整備すると良いことがある」を周りに伝えるか / maemuki-data-seibinin04

by ShinU

Embed

Start on current slide

Slide 1

Slide 1 text

どうやって「データを整備すると良いことがある」を周りに伝えるかしんゆう＠データ分析とインテリジェンス 2020/06/09 第4回データアーキテクト（データ整備人）を”前向きに”考える会

Slide 2

Slide 2 text

• 本日の資料は https://speakerdeck.com/shinu/maemuki-data-seibinin04 に公開済み。ブログ・Twitterからもリンクあり • 〇 SNSで話題にすること • × 録画・録音 • アーカイブの公開はありません資料・SNS・写真撮影などについて

Slide 3

Slide 3 text

• いくら「データ整備をやらないとダメだ」と言ってもデータ整備を自分でやったことがない大半の人にはなかなか伝わりづらい • なので「整備するとこんな良いことがありますよ」というアプローチを試みて、その中でもこのあたりがうまくささった（らしい）話をする前置き

Slide 4

Slide 4 text

• 自己紹介 • もしもデータ整備をやったらどうなるか • 欲しいデータが欲しい時に手に入る • データは常に正確であることが保証される • まとめ目次

Slide 5

Slide 5 text

自己紹介

Slide 6

Slide 6 text

• しんゆう（ Twitter : @data_analyst_ ） • ブログ「データ分析とインテリジェンス」を書いてる人 https://analytics-and-intelligence.net/ • フリーランスでデータに関する仕事をあれこれ • 仕事でやりたいこと：意思決定のための情報分析をする人 • 仕事でやってること：データをうまく使えるようにする人自己紹介

Slide 7

Slide 7 text

もしもデータ整備をやったらどうなるか

Slide 8

Slide 8 text

• 「もしもデータ整備をやったらどうなるか」を伝えるために「データ整備をやらない状態とやった状態では何が違って何が良いのか」を伝えるのがよいと実感している • そこで「まったく整備していない状態」と「整備をして理想的な状態」をざっくり比べてみるともしもデータ整備をやったらどうなるか

Slide 9

Slide 9 text

データをまったく整備していない状態データレイク先週の売上を見たいだけなのに依頼したら3日かかる • 収集したデータはそのままでは使えないことが大多数 • ＳＱＬが得意な人でもすぐに書けないことも多いし、そうでない人は頻繁に間違えるリスク • どこにどんなデータがどう入っているのか • おかしなデータがいつからいつまで入っているのか • 集計するための定義はどうするのかなどなど

Slide 10

Slide 10 text

データを整備した理想的な状態データレイク先週の売上を見たいと思ったらすぐ手に入る • 整備しておくと簡単な方法でデータが手に入るし • カスタマイズも非常にやりやすい • 簡単なSQL • ダッシュボード • ＣＳＶデータマートここで整備

Slide 11

Slide 11 text

• データを使う人にとって重要なことは、整備するとデータが簡単に手に入ったり使いやすくなることもしもデータ整備が行われたら

Slide 12

Slide 12 text

• データを使う人にとって重要なことは、整備するとデータが簡単に手に入ったり使いやすくなることだと思っていたが違うのでは、とこの資料を作っていてふと考え直すもしもデータ整備が行われたら

Slide 13

Slide 13 text

• データを使う人にとって重要なことは、整備するとデータが簡単に手に入ったり使いやすくなることだと思っていたが違うのでは、とこの資料を作っていてふと考え直す • 必要なのは意思決定の正確さと速さの向上に繋がることもしもデータ整備が行われたら

Slide 14

Slide 14 text

• データを使う人にとって重要なことは、整備するとデータが簡単に手に入ったり使いやすくなることだと思っていたが違うのでは、とこの資料を作っていてふと考え直す • 必要なのは意思決定の正確さと速さの向上に繋がること • なので、この点を強く押し出した方がよい気がしている。今後はその方向でやってみて結果はいずれどこかの回で報告してみようかなもしもデータ整備が行われたら

Slide 15

Slide 15 text

• それはともかく、どこをアピールするにしてもより具体的な話もあった方がいい • 今まで話していてこれが伝わったと思われるのは 1.欲しいデータが欲しい時に手に入る 2.データは常に正確であることが保証される • 他にもあるけど今回はこの２つについての話をするもしもデータ整備が行われたら

Slide 16

Slide 16 text

データを整備すると良いこと１．欲しいデータが欲しい時に手に入る

Slide 17

Slide 17 text

• 整備されていない状態からのデータ取得は定義を調べたりデータを補間したりといろいろと大変。クエリが複雑で長くなり、できる人も限られてくる • 簡単な依頼でも数日待ちはあたりまえ、先週の売上を知りたくても週の後半にならないとわからないなどが起きる • だからといって整備されていない状態のデータをＳＱＬをちょっとかじっただけで手を出すのも危ない欲しいデータが欲しい時に手に入る

Slide 18

Slide 18 text

• 整備されていれば、かなり簡単なクエリで取れるようになるのでエンジニアの空き時間を待たずに（全部ではないにしても）データが欲しいと思った時にすぐ手に入るようになる欲しいデータが欲しい時に手に入る

Slide 19

Slide 19 text

データを整備すると良いこと２．データは常に正確であることが保証される

Slide 20

Slide 20 text

• 整備しておかないと重要な指標でも最初はともかくちょっとした変更を行っている間に集計がおかしくなって大惨事 • 整備することは簡単に取れるようになることと同時に、正確なことを保証することでもある • 整備されたデータを使えば、使う人は正確であることが保証されている上に細かい定義の違いなども気にすることなく使うことに集中できるデータは常に正確であることが保証される

Slide 21

Slide 21 text

まとめ

Slide 22

Slide 22 text

• やはり、話が伝わりやすいのは実際に困っている人 • データを使いたいと思っているがうまく行かないという問題意識がある人に１つの方法として、データを整備する→ データが使いやすくなる→意思決定の正確さと速さの向上に繋がるという流れを伝えるのがよさそうなので、やってみるまとめ

Slide 23

Slide 23 text

ご清聴ありがとうございましたしんゆう＠データ分析とインテリジェンス https://analytics-and-intelligence.net/ Twitter：@data_analyst_