Slide 1

Slide 1 text

Concept of Data Management @hase-ryo Data Manager

Slide 2

Slide 2 text

What is Data Management ? Data を どうにかする

Slide 3

Slide 3 text

What is Data Management ? Data を どうにかする → Data で どうにかする → Data Analyst Data Scientist etc ... Data Management

Slide 4

Slide 4 text

What is Data Management ? Data を どうにかする : Userの要求を満たすDataを 使えるようにする

Slide 5

Slide 5 text

What is Data Management ?

Slide 6

Slide 6 text

Data Data Analyst Data User ex.) PM Data AnalystはDataを分析して、PMなど利用者にinsightを届ける What is Data Management ? Analyze

Slide 7

Slide 7 text

prepare various data Data Userが増えるほどに、扱うDataの種類は多くなる What is Data Management ? Data Analyst Data User

Slide 8

Slide 8 text

Data A Data C Data B Data D 必要なDataをData Analystが全て準備するのは大変 What is Data Management ?

Slide 9

Slide 9 text

新しいDataが必要になるときは特に大変 Request Prepare new data Engineer, Vendors, etc. Generate data(log) What is Data Management ? Data Analyst Data User

Slide 10

Slide 10 text

Available and Sufficient Data Data Userを満足させるためには、 Dataを利用可能かつ要求を叶えられるだけ用意する必要がある What is Data Management ?

Slide 11

Slide 11 text

Available and Sufficient Data Dataを利用可能かつ十分なだけ用意すること そのためのFramework = Data Management Data Management What is Data Management ?

Slide 12

Slide 12 text

For example ● KPIを測るためにDataの発生と構造を計画する → Data Management ● 散らばったDataを一箇所に集約して分析可能にする → Data Management! ● 増加するUserに向けて簡易にData分析できる環境を用意する → Data Management!!

Slide 13

Slide 13 text

Contribution of Data Management .1 Dataの発生箇所は複数ある (Micro service化されたproduct、外部など) Data from A Data from B Data from vendor C

Slide 14

Slide 14 text

Contribution of Data Management .1 Request Require Data Generate data Import data Data Management Micro service, Vendor, etc. 必要なDataを定義し、適切な場所から収集する

Slide 15

Slide 15 text

Contribution of Data Management .2 どんなDataを、いつ、どこから収集するのかを管理する What When Where

Slide 16

Slide 16 text

Contribution of Data Management .2 結果的にどんなDataが集まっているのかを管理する Data Catalog Data Catalog

Slide 17

Slide 17 text

Contribution of Data Management .3 Request Processed data 適切に加工されたDataが役立つことはよくある Data Analyst Data User

Slide 18

Slide 18 text

Contribution of Data Management .3 Data Management Processed data Raw data 可用性を高めるため、Raw dataを加工して中間Dataを作成する

Slide 19

Slide 19 text

Contribution of Data Management .4 適切な加工と分析環境(BI tool)の用意により多数のUserに対応する Data Users Data Management Analysis by yourself BI tool

Slide 20

Slide 20 text

Element of Data Management ● Data Logistics ● Data Activation Data Managementの主要素は2つ考えられる。LogisticsとActivation

Slide 21

Slide 21 text

Element of Data Management : Data Logistics ● 補給 Supply ● 輸送 Transportation ● 整備 Maintenance Data Logisticsは3つの小要素をもつ。Dataの補給、輸送、整備

Slide 22

Slide 22 text

Element of Data Management : Data Logistics 補給 Supply Require Data Dataの補給とは、必要とされるDataを取得すること、 また、取得するためにDataを発生させることを指す Generate data Import data

Slide 23

Slide 23 text

Element of Data Management : Data Logistics 輸送 Transportation Dataの輸送とは、Dataを利用しやすい環境へ移すことを指す。

Slide 24

Slide 24 text

Element of Data Management : Data Logistics 整備 Maintenance Dataの整備とは、Dataが利用できるように保全すること、 また、利用できるように加工を施すことを指す

Slide 25

Slide 25 text

Element of Data Management : Data Activation ● 証明 Certification ● 検証 Verification Data Activationは2つの少要素をもつ。Dataの証明と検証

Slide 26

Slide 26 text

Element of Data Management : Data Activation Dataの証明とは、そのDataがどこから、どのように 発生したのかを記述して保存することを指す 証明 Certification

Slide 27

Slide 27 text

Element of Data Management : Data Activation Dataの検証とは、Dataが想定通りに取得、 輸送、加工されているかを確かめることを指す。 検証 Verification

Slide 28

Slide 28 text

Summary まとめると、Data Managementとは、 Dataの利活用を促進するために、 その前段階に行うことを規定したFrameworkである Data Analyst Data User BI tool Data Management