What is Data Management ?
Data を どうにかする →
Data で どうにかする →
Data Analyst
Data Scientist
etc ...
Data
Management
Slide 4
Slide 4 text
What is Data Management ?
Data を どうにかする :
Userの要求を満たすDataを
使えるようにする
Slide 5
Slide 5 text
What is Data Management ?
Slide 6
Slide 6 text
Data
Data Analyst
Data User
ex.) PM
Data AnalystはDataを分析して、PMなど利用者にinsightを届ける
What is Data Management ?
Analyze
Slide 7
Slide 7 text
prepare
various data
Data Userが増えるほどに、扱うDataの種類は多くなる
What is Data Management ?
Data Analyst Data User
Slide 8
Slide 8 text
Data A
Data C
Data B
Data D
必要なDataをData Analystが全て準備するのは大変
What is Data Management ?
Slide 9
Slide 9 text
新しいDataが必要になるときは特に大変
Request
Prepare
new data
Engineer,
Vendors,
etc.
Generate
data(log)
What is Data Management ?
Data Analyst Data User
Slide 10
Slide 10 text
Available and Sufficient
Data
Data Userを満足させるためには、
Dataを利用可能かつ要求を叶えられるだけ用意する必要がある
What is Data Management ?
Slide 11
Slide 11 text
Available and Sufficient
Data
Dataを利用可能かつ十分なだけ用意すること
そのためのFramework = Data Management
Data Management
What is Data Management ?
Slide 12
Slide 12 text
For example
● KPIを測るためにDataの発生と構造を計画する
→ Data Management
● 散らばったDataを一箇所に集約して分析可能にする
→ Data Management!
● 増加するUserに向けて簡易にData分析できる環境を用意する
→ Data Management!!
Slide 13
Slide 13 text
Contribution of Data Management .1
Dataの発生箇所は複数ある
(Micro service化されたproduct、外部など)
Data from A
Data from B
Data from
vendor C
Slide 14
Slide 14 text
Contribution of Data Management .1
Request
Require Data
Generate data Import data
Data Management
Micro service, Vendor, etc.
必要なDataを定義し、適切な場所から収集する
Slide 15
Slide 15 text
Contribution of Data Management .2
どんなDataを、いつ、どこから収集するのかを管理する
What
When
Where
Slide 16
Slide 16 text
Contribution of Data Management .2
結果的にどんなDataが集まっているのかを管理する
Data Catalog
Data Catalog
Slide 17
Slide 17 text
Contribution of Data Management .3
Request
Processed data
適切に加工されたDataが役立つことはよくある
Data Analyst
Data User
Slide 18
Slide 18 text
Contribution of Data Management .3
Data Management
Processed data Raw data
可用性を高めるため、Raw dataを加工して中間Dataを作成する
Slide 19
Slide 19 text
Contribution of Data Management .4
適切な加工と分析環境(BI tool)の用意により多数のUserに対応する
Data Users
Data Management
Analysis by yourself
BI tool
Slide 20
Slide 20 text
Element of Data Management
● Data Logistics
● Data Activation
Data Managementの主要素は2つ考えられる。LogisticsとActivation
Slide 21
Slide 21 text
Element of Data Management : Data Logistics
● 補給 Supply
● 輸送 Transportation
● 整備 Maintenance
Data Logisticsは3つの小要素をもつ。Dataの補給、輸送、整備
Slide 22
Slide 22 text
Element of Data Management : Data Logistics
補給 Supply
Require Data
Dataの補給とは、必要とされるDataを取得すること、
また、取得するためにDataを発生させることを指す
Generate data Import data
Slide 23
Slide 23 text
Element of Data Management : Data Logistics
輸送 Transportation
Dataの輸送とは、Dataを利用しやすい環境へ移すことを指す。
Slide 24
Slide 24 text
Element of Data Management : Data Logistics
整備 Maintenance
Dataの整備とは、Dataが利用できるように保全すること、
また、利用できるように加工を施すことを指す
Slide 25
Slide 25 text
Element of Data Management : Data Activation
● 証明 Certification
● 検証 Verification
Data Activationは2つの少要素をもつ。Dataの証明と検証
Slide 26
Slide 26 text
Element of Data Management : Data Activation
Dataの証明とは、そのDataがどこから、どのように
発生したのかを記述して保存することを指す
証明 Certification
Slide 27
Slide 27 text
Element of Data Management : Data Activation
Dataの検証とは、Dataが想定通りに取得、
輸送、加工されているかを確かめることを指す。
検証 Verification
Slide 28
Slide 28 text
Summary
まとめると、Data Managementとは、
Dataの利活用を促進するために、
その前段階に行うことを規定したFrameworkである
Data Analyst
Data User
BI tool
Data Management