Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
Data Engineering Study #3 基調講演_データ分析基盤の浸透に必要なこと
Search
Sponsored
·
Ship Features Fearlessly
Turn features on and off without deploys. Used by thousands of Ruby developers.
→
tetsuroito
September 16, 2020
Technology
5.2k
4
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
Data Engineering Study #3 基調講演_データ分析基盤の浸透に必要なこと
tetsuroito
September 16, 2020
More Decks by tetsuroito
See All by tetsuroito
白金鉱業meetup発表資料
tetsuroito
1
370
Data Engineering Study#30 LT資料
tetsuroito
2
2k
データエンジニアリングの潮流を俯瞰する
tetsuroito
1
2k
Classiが取り組んできた 機械学習の試行錯誤
tetsuroito
0
900
事業会社でのデータマネジメントのプラクティス #TechMar
tetsuroito
1
710
Data Engineering Study #9 Classiのデータ組織の歩み
tetsuroito
5
6.3k
Subscription Meetup Vol.2 Opening Talk Slide
tetsuroito
0
180
Data_Pipeline_Casual_Talk_Vol.4_for_Ready.pdf
tetsuroito
0
1.7k
Data Pipeline Casual Talk Vol.3 for Ready #DPCT
tetsuroito
0
2.2k
Other Decks in Technology
See All in Technology
“詰む”前に仕組みを作れ 〜技術の波に溺れないためのキャッチアップ術〜
takasyou
7
4.3k
Comment regagner la souveraineté de vos données tout en étant payé grâce à Nostr !
rlifchitz
0
220
MySQL & MySQL HeatWave Report - June 2026
freshdaz
0
200
自作お家AIエージェントスタックチャンFWで困っている所紹介
74th
0
120
「勝手に広まる」人気 AI エージェントを爆速で作ろう!(AWS Summit Japan 2026講演資料)
minorun365
PRO
10
2.6k
Fabricをフル活用する AI Agent Hub -製造業特化AIエージェントの設計
iotcomjpadmin
0
150
クラウドファンディング版StackChan 3体(4体)をインタラクティブな体験型作品にして展示もした話 / スタックチャンお誕生日会2026
you
PRO
0
210
製造現場での生成AIの活用、およびエージェントAIの実装のあり方、AVEVAの取り組み
iotcomjpadmin
0
180
クレデンシャル流出 ― 攻撃 3 時間 vs 復旧 10 時間。この非対称性にどう備えるか
kazzpapa3
3
620
AIをフル活用してオンコール機能のプロトタイプを2日で作った話 / Building an AI-Powered On-Call Prototype in Just Two Days
nari_ex
0
140
千葉での単身赴任からAWSをやり続け、千葉に戻ってきた話
yama3133
1
120
起点・思考・出力で分解する 〜PM業務の自動化設計〜
kazu_kichi_67
2
1.1k
Featured
See All Featured
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
28
3.5k
A designer walks into a library…
pauljervisheath
211
24k
Let's Do A Bunch of Simple Stuff to Make Websites Faster
chriscoyier
508
140k
Save Time (by Creating Custom Rails Generators)
garrettdimon
PRO
32
3.5k
Darren the Foodie - Storyboard
khoart
PRO
3
3.4k
Reality Check: Gamification 10 Years Later
codingconduct
0
2.2k
StorybookのUI Testing Handbookを読んだ
zakiyama
31
6.8k
B2B Lead Gen: Tactics, Traps & Triumph
marketingsoph
0
160
Done Done
chrislema
186
16k
The innovator’s Mindset - Leading Through an Era of Exponential Change - McGill University 2025
jdejongh
PRO
1
210
CSS Pre-Processors: Stylus, Less & Sass
bermonpainter
360
30k
Tell your own story through comics
letsgokoyo
1
980
Transcript
基調公演 データ分析基盤の浸透に必要な事 2020/9/16(Wed) @Online
• 名前:伊藤 徹郎 (@tetsuroito) • 分野:Educational Technology , Learning Analytics
• 著書:データサイエンティスト養成読本ビジネス活用編 • 運営: ◦ Data Pipeline Casual Talk ◦ Machine Learning Casual Talks ◦ Data Analyst Meetup Tokyo など 自己紹介
• 資料はWebに公開します ◦ アーカイブ動画も公開されます • 発表内容については個人の見解です ◦ 何か問い合わせなどあれば本人までお願いします • 用語・ツールの紹介は厳密ではありません
• オンライン登壇に不慣れのため、お聞苦しい部分もあるかもしれ ませんが、ご容赦ください 免責事項
• はじめに • データ分析基盤が浸透した状態とは • データ分析基盤を組織に浸透させるために必要なこと • おわりに アジェンダ
• はじめに • データ分析基盤が浸透した状態とは • データ分析基盤を組織に浸透させるために必要なこと • おわりに アジェンダ
過去のイベントで学んだこと DWHやBIツール データ収集基盤や整備
過去のイベントで学んだこと 出典:「Data Platform Guide - 事業を成長させるデータ基盤を作るには」より
• あれだけ苦労して基盤を作ったのに利用されない • 欲しいと言われていたダッシュボードも利用されていたのは最初だ け • 様々な指標を分析できるように用意したダッシュボードなのに利用 者は情報が多すぎて何を見ていいのかわからない • 誰もメンテしていなかったパイプラインを整理したら、色々な部署か
ら苦情がくる etc... データ分析基盤の関係者が必ず通る道
• あれだけ苦労して基盤を作ったのに利用されない • 欲しいと言われていたダッシュボードも利用されていたのは最初の 一週間だけ • 様々な指標を分析できるように用意したダッシュボードなのに利用 者は情報が多すぎて何を見ていいのかわからない • 誰もメンテしていなかったパイプラインを整理したら、色々な部署か
ら苦情がくる etc... データ分析基盤の関係者が必ず通る道 どうしてこんなこと になってしまうのか
• 俺の考える最強のデータ分析基盤が現場ニーズに合ってない • ビジネスバリュープロセスにおいてデータ活用が業務に組み込ま れていない • 要望は継続的なニーズではなくスポットのニーズであった • データ基盤の運用品質が低く、ユーザーが利用したい時に最新の データが連携されていない
• どこに何の情報があるのかわからない etc... データ分析基盤が使われない原因例
データ分析基盤を組織に浸透させる 銀の弾丸はない
• はじめに • データ分析基盤が浸透した状態とは • データ分析基盤を組織に浸透させるために必要なこと • おわりに アジェンダ
組織にデータ分析基盤が浸透した状態を どう定義するか?
• データが天気予報のように活用され ている状況 • ユーザーは外出時の意思決定に利 用している • 定刻にデータを生成し、必要に応じ て加工・集計・分析し、提供している 引用:ウェザーニューズ
私の考える理想状態の一つは天気予報
• データが天気予報のように活用され ている状況 • ユーザーは外出時の意思決定に利 用している • 定刻にデータを生成し、必要に応じ て加工・集計・分析し、提供している 引用:ウェザーニューズ
私の考える理想状態の一つは天気予報 天気予報のように 分析基盤やダッシュボードを 組織内のどの程度の人たちが 活用できている状態を目指すのか
天気予報に価値提供サイクル 天気予報 を見る 天気状況の 確認 時間別降水 確率を確認 振り返り 行動 傘を持つか
意思決定 天気予報が利用者に価値を与えるプロセスは下記
データ基盤における価値提供サイクル ダッシュボード を見る KPIの確認 特定セグメ ントを確認 効果検証 実行 施策立案 データ基盤が利用者に価値を与えるプロセスは下記
業務上サイクルが組み込まれていれば 利用されるようになる
• はじめに • データ分析基盤が浸透した状態とは • データ分析基盤を組織に浸透させるために必要なこと • おわりに アジェンダ
•戦略 •データマネジメント データ基盤が組織に浸透するためには が必要です
• 診断 ◦ 状況を診断し、取り組むべき課題を見極める • 基本方針 ◦ 診断で見つかった課題に対する総合的な方針を示す • 行動
◦ 基本方針を実行するための一貫した行動 戦略の構成要素
• 組織のデータ利用者数の把握 • クエリと用途の把握 • 利用の多いテーブルの傾向 • 部署別の利用状況の可視化 • 利用状況のKPI
◦ 何を持って浸透したとするか • 組織サーベイ 診断 ~今の組織のデータ利用状況は?~ 出典:「メルカリにおける分析環境整備の取り組み」より
• データ利用で価値を最大化させて いるユースケースを特定 • 成功事例を転用していく • 部署・役割によりその価値は様々な ので、応じた形で • 優先順位づけ
基本方針 ~価値を最大化させていく~ 出典:「Data Platform Guide - 事業を成長させるデータ基盤を作るには」より
• Modelで処理を共通化 • Viewで個別のユースケースへ • Viewによるツールは利用者にあっ たものに順次対応 • 品質における担保も行う 行動
~データ分析基盤でサポート~ 出典:「Data Platform Guide - 事業を成長させるデータ基盤を作るには」より
データ DAMAデータマネジメントフレームワーク データマネジメント ライフサイクル管理 データガバナンス アクティビティ 戦略 データ評 価 原則と倫
理 ポリシー スチュ ワード 文化の変革 リスク管理:セキュリティ、プライバシー、コンプライアンス メタデータ管理 データ品質管理 計画と設計 利用と強化 実装と維持 アーキテク チャ データとモ デリングと デザイン オペレー ション DWH データ統 合と相互 運用性 マスタデー タ管理 データスト レージ 参照デー タ管理 BI データサイ エンス マスタ データの 利用 データ収 益化 予測分析 ドキュメ ント コンテン ツ管理
データ DAMAデータマネジメントフレームワーク データマネジメント ライフサイクル管理 データガバナンス アクティビティ 戦略 データ評 価 原則と倫
理 ポリシー スチュ ワード 文化の変革 リスク管理:セキュリティ、プライバシー、コンプライアンス メタデータ管理 データ品質管理 計画と設計 利用と強化 実装と維持 アーキテク チャ データとモ デリングと デザイン オペレー ション DWH データ統 合と相互 運用性 マスタデー タ管理 データスト レージ 参照デー タ管理 BI データサイ エンス マスタ データの 利用 データ収 益化 予測分析 ドキュメ ント コンテン ツ管理 これまで話されてきた内容 (狭義の機能要件) 分析基盤が組織に浸透する と検討が必要になる内容 (狭義の非機能要件)
• 利用者が増加してくると多種多様なニーズ対応が必要 ◦ SoR(System of Records)からSoE(System of Engagement)へ ◦ 正しいものを正しく作る
• 開発(Dev)だけでなく、Ops(運用)の観点が重要に ◦ Data + DevOps → DataOps • 利用実態に見合った開発組織体制になっているか ◦ 予算、人員、権限、技術 (スパン・オブ・コントロール) データ分析基盤が浸透していくと
データマネジメントの詳細については • データマネジメント知識体系ガイド ◦ がっつり学びたい派におすすめ • データマネジメントが30分でわかる本 ◦ サクッと学びたい派におすすめ
• データ活用を企業戦略に組み込む • データ活用が業務フローに組み込まれる • データ基盤がきちんとマネジメントできている データ基盤が組織に浸透するには? 現場からのボトムアップだけでは限界 トップの協力が不可欠
ミンツバーグ先生の「創発戦略」に学ぶ トップ(意思決定者) 現場 方針策定 ビジョン共有 評価・目標設定 創発戦略 業務フロー提案 施策立案 オペレーション
• 店舗運営(オペレーション)は徹底的に標準化 ◦ ローカライズで差別化 • 全自動発注システム ◦ 需要予測、サプライチェーン強化 • 「データ経営」戦略の打ち出し
• 昇進要件にデータ分析を必須化 • 出店計画もA/Bテスト etc... 事例:ワークマン
本日の発表がデータ基盤を組織に浸透するように 日々努力をしている皆様の何かヒントになれば幸いです この後の事例セッションでも各社の取り組み 様々なヒントが見つかることを祈ります おわりに
ご静聴ありがとうございました Fin.